Mitä eroa on satunnaisuutta, differtial entropia ..

[aliazmat]

Mitä eroa on satunnaisuutta, differtial entropia ja entropia korko. mitään kaveri informaatioteorian??

 

[yelvis]

[Quote = aliazmat] Mitä eroa on satunnaisuutta, differtial entropia ja entropia korko. mitään kaveri informaatioteorian?? [/quote] Hei. Tiedäthän, entropia tarkoittaa epävarmuutta ottaa bittiä yksikkö satunnaismuuttuja. Näin se riippuu jakelu (todennäköisyys) on satunnaismuuttuja, ei todellinen arvo satunnaismuuttuja. Varsinkin, todennäköisyys entropia on todennäköisyys massa-toiminto, joka on erillinen tapaus. Toisin sanoen, kun käytämme jatkuvan todennäköisyys-toiminto, joka on ero entropia. Kun se tulee entropia korko, sitä voidaan soveltaa stokastisia toiminto. Ei vain yksi stokastinen toiminnan lisäksi mutiple stokastisia toiminnot on entropia. Koska määrä toiminnot kasvaa, entropia vaihtelee. Se on määrä entropiaa.

 

[aliazmat]

::: Mitata kuinka paljon tietoa, joka voi tarttua ja vastaanotetaan todennäköisyys on erittäin vähäinen virhe kutsutaan kanavan kapasiteetti. Voit määrittää tämän toimenpiteen kanavan potentiaalia, oletetaan, että kanava kooderi saa lähde symboli joka Ts sekunnissa. Kun optimaalinen lähdekoodia, keskimääräinen koodin pituus kaikkien lähde symboleista on sama entropian määrä lähde. Jos S edustaa joukko kaiken lähde Symbolit ja entropian määrä lähde kirjoitetaan H (S), kanava kooderi saavat keskimäärin H (S) / TS tiedot bittiä sekunnissa "" "yllä linjat ovat peräisin paperin , mitä i dont ymmärtää, että entropian määrä lähde H (s) tarkoittaa tietojen yhteen lähetetään symboli tai tiedot kaikista mahdollisista lähdekoodin symbolien lähde on.

 

[yelvis]

Hei taas. Sinun on parempi viitata "Elements of tiedot teoria ". Vuonna Lause 5.4.2, minimiarvon koodia pituus per symboli on kuvattu. Näin ollen H (s) edellä voidaan ilmaista yksityiskohtaisesti samankaltaisina, H (S) = H (S1, S2, .. ., SN) / n. Näin voin sanoa, että se on hinta per yksi merkki, mutta kaikki tiedot.