P. 1
Teorija informacija

Teorija informacija

|Views: 107|Likes:
Published by pokojna_mileva

More info:

Categories:Types, School Work
Published by: pokojna_mileva on Jul 21, 2012
Copyright:Attribution Non-commercial

Availability:

Read on Scribd mobile: iPhone, iPad and Android.
download as PPT, PDF, TXT or read online from Scribd
See more
See less

03/02/2013

pdf

text

original

Uvod u teoriju informacija

Na današnjem času…

Šta je zapravo informacija?

Čime se bavi teorija informacija?
Kako meriti količinu informacija?

Teorija informacija

Informacija Signal

• Informacija je saznanje preneto kroz prostor-vreme.

• Signal je fizički nosilac informacije.

Informacija Signal

Uvod u teoriju unformacija

Detaljnije. "statistički podatak"  Znanje prikupljeno studiranjem... Druge definicije informacije:  Poruka koju je primalac prihvatio i razumeo  Podatak: činjenica na osnovu koje je moguće doneti zaključak. iskustvom ili podučavanjem  Mentalni stimulans  Značenje  Znanje  Uvid Definicije informacije Uvod u teoriju unformacija .

Detaljnije. relevantno i korisno) Definicije informacije Uvod u teoriju unformacija . kompetentno.  Denuncijacija  Vest  Saopštenje vrha partije koje se ima pročitati na svim partijskim sastancima (obično o “bezbedonosnim pitanjima”)  Predanje  Prezentacija  Ono što auditor prikupi o organizaciji (dovoljno..... .

.Detaljnije.. dim) Definicije informacije Uvod u teoriju unformacija .  Rezultat procesiranja i organizacije činjenica čime se povećava količina znanja onoga ko ih prima  Mogućnost zaključivanja o uzroku posmatranjem posledice (vatra....

uključujući tekstualni.Šta je informacija?  “Bilo kakva komunikacija ili predstava znanja u formi činjenica. podataka. kartografski. narativni ili audiovizualni”  Numerička mera smanjenja neizvesnosti nakon prelaska nekog sistema iz jednog stanja u drugo  Najkraći zapis koji treba dati Turingovoj mašini nakon čega bi ona mogla da reprodukuje datu sekvencu simbola Definicije informacije Uvod u teoriju unformacija . mišljenja na bilo kom medijumu i u bilo kom obliku. numerički. grafički.

Informacija Uvod u teoriju unformacija .Informacija • Informacija je saznanje preneto kroz prostor-vreme.

ono što saznajemo jeste istina koja nam je pre saznanja bila nedostupna  Saznanje se. u vidu informacije. tako da korisnik informacije može postati njen novi izvor Saznanje Uvod u teoriju unformacija .Šta je saznanje?  Pod rečju “saznanje” možemo smatrati postupak uklanjanja nedoumice o stvarnom stanju nekog sistema  Drugim rečima. može dalje preneti.

Uvod u teoriju informacija Na današnjem času… Šta je zapravo informacija? Čime se bavi teorija informacija? Kako meriti količinu informacija? Teorija informacija .

Teorija informacija bavi se:  Definicijom mere količine informacija  Proučavanjem izvora informacija  Proučavanjem prenosnog kanala  Analizom granica koje optimalni sistem može dostići  Konstrukcijom prenosnog sistema što boljih performansi Predmet proučavanja Uvod u teoriju unformacija .

Pored toga. teorija informacija bavi se i:  Analizom mogućnosti zaštite tajnosti informacija  Analizom mogućnosti skladištenja informacija  Analizom sistema sa više korisnika koji međusobno sarađuju ili ne sarađuju Predmet proučavanja Uvod u teoriju unformacija .

Communication Engineering & Signal Processing Claude Elwood Shannon (1916 – 2001) Američki elektroinženjer i matematičar. ali i teorije projektivanja digitalnih elektronskih kola T I . poznat kao “otac teorije informacija”.

T I ..Communication Engineering & Signal Processing Bavio se on i drugim stvarima..

Uvod u teoriju unformacija . pa se prenos informacija mora analizirati alatima teorije verovatnoće Postoji mogućnost da se prenos informacija značajno ubrza bez oštećenja..Početak teorije informacija Sve tehničke komunikacije u suštini su diskretne – teorema o uzorkovanju Izvor informacija generiše stohastički proces. bez obzira na kanal Postoji mogućnost da se kroz dati kanal prenos informacija obavi sa proizvoljno malom verovatnoćom greške – kapacitet kanala Početak..

Uvod u teoriju unformacija .Šenonov model komunikacionog sistema Smetnje IZVOR KODER IZVORA ZAŠTITNI KODER + ZAŠTITNI DEKODER DEKODER IZVORA KORISNIK Ekvivalentni izvor Kanal bez smetnji Ekvivalentni korisnik Prenosni medijum Grb teoretičara informacija...

Uvod u teoriju informacija Na današnjem času… Šta je zapravo informacija? Čime se bavi teorija informacija? Kako meriti količinu informacija? Teorija informacija .

Mera količine informacija 27. januara zagrmelo je nad Beogradom 28. PRIMER Uvod u teoriju unformacija . juna zagrmelo je nad Beogradom Manje verovatni događaj nosi veću količinu informacija.

Informacija koju pružaju dva nezavisna događaja jednaka je sumi informacija koju pruža svaki od njih pojedinačno. PRIMER Uvod u teoriju unformacija .Mera količine informacija Prvi test je sledeće nedelje. Na FTN je zabranjeno pušenje.

I(a) raste.Aksiome 1 I 2 zadovoljava sledeća definicija: I(a) = -log(P[a]) Smanjivanjem P[a].b]=P[a]*P[b]. Matematička definicija Uvod u teoriju unformacija . Verovatnoća dva nezavisna dogaĎaja je P[a.

NAT 2 Binary Digit .Baza logaritama u definiciji I(a) samo menja skalu 10 Hartley e Natural Unit .BIT Matematička definicija Uvod u teoriju unformacija .

ДИНАР Matematička definicija Uvod u teoriju unformacija .Primer: Primer: Ishod eksperimenta sa jednim novčićem nosi 1 bit informacije.

. Usvojena definicija ne vodi računa o značenju koje neka informacija ima za korisnika usled njegovih predznanja (informacija koje je uskladištio pre prijema informacije o dogaĎaju a). Definicije informacije Uvod u teoriju unformacija .Objašnjenje. ona je osnovni koncept digitalnih komunikacija. S druge strane..

Definicije informacije Uvod u teoriju unformacija .KOMENTAR Postoje i druge definicije. f(X. na primer: Fišerova informacija Varijansa nezavisnih događaja ima osobinu da se sabira.θ) predstavlja gustinu raspodele slučajne promenljive X sa nepoznatim parametrom θ koji se procenjuje.

Uvod u teoriju informacija Pauza! Predavanja: Prof. dr Vojin Šenk Animacija Branislav Popović Teorija informacija .

You're Reading a Free Preview

Download
scribd
/*********** DO NOT ALTER ANYTHING BELOW THIS LINE ! ************/ var s_code=s.t();if(s_code)document.write(s_code)//-->