En video, entropía, la cantidad media de información representada por un símbolo en un mensaje, es una función del modelo utilizado para producir ese mensaje y puede reducirse aumentando la complejidad del modelo de modo que mejor refleja la distribución actual de los símbolos de origen en el mensaje original. Entropía es una medida de la información contenida en un mensaje, es el límite inferior para la compresión.