Video entropia, viestin symboli ilmaisemia tietoja keskimääräinen määrä on funktio käyttää viestin malli ja voidaan vähentää lisäämällä mallin monimutkaisuus, niin, että se kuvastaa paremmin alkuperäisen viestin lähde-symbolit varsinaiseen jakeluun. Entropia on toimenpiteen viestin tiedot, pakkaus alaraja.