Teyori enfòmasyon

konsèp debaz yo nan teyori a prezante nan karantèn yo nan ventyèm syèk la, Shannon. teyori enfòmasyon - syans nan pwosesis la nan transfere, estoke ak retwouve done nan natirèl, teknik ak sosyal sistèm yo. Nan anpil aplikasyon nan jaden syantifik tankou syans òdinatè, lengwistik, chifreman, teyori kontwòl, pwosesis imaj, jenetik, sikoloji, ekonomi, òganizasyon nan metòd pwodiksyon yo te itilize syans sa a.

Nan kondisyon modèn ak teyori enfòmasyon trè byen sere lye nan yon teyori kodaj, diskite pwoblèm ki pi komen nan soumission ant yon siyal ak yon mesaj, ak teyori a nan pwosesis siyal, kote kantizasyon a etidye ak siyal rekiperasyon ak espèk ak analiz korelasyon ladan l '.

teyori enfòmasyon konsidere konsèp nan debaz nan "enfòmasyon" pou pati ki pi kantitativman, san yo pa pran an kont valè li yo, epi pafwa san sans. Nan apwòch sa a, yon paj nan tèks pral gen apeprè menm kantite lajan an nan done detèmine pa yon kantite mirak ak senbòl, epi yo pa depann sou lefèt ke, estrikteman pale, gen enprime, menm si li se absoliman estipid ak chaotic seri kèk senbòl.

Sa a se apwòch jistifye, men se sèlman pou simulation nan sistèm kominikasyon, depi yo gen avèk presizyon transmèt enfòmasyon sou chanèl yo kominikasyon, ki ka gen nenpòt ki seri karaktè ak senbòl. Lè sa a, lè li nesesè pran an kont valè a ak siyifikasyon nan done, quantitative apwòch se akseptab. Sikonstans sa yo enpoze restriksyon sibstansyèl sou jaden an nan aplikasyon posib nan teyori sa a.

Fondamantal nan teyori enfòmasyon enplike nan konsiderasyon de pwoblèm divès kalite, ki gen ladan dirèkteman ki gen rapò ak transmisyon a ak resepsyon nan done. Konplo a kominikasyon prensipal yo, ki se konsidere kòm nan ansèyman an se jan sa a. Enfòmasyon Teyori ak Codage Li konsidere ke sa yo, se sous la nan mesaj, ki se yon mo oubyen yon mete nan mo ekri sèten lèt nan alfabè a. Sous la nan mesaj la kapab tèks nan nenpòt natirèl oswa ak lang atifisyèl, lang moun, baz done ak kèk modèl matematik, kreye yon sekans nan lèt yo. transmetè nan konvèti mesaj la nan yon siyal ki koresponn a nati fizik la nan kanal la kominikasyon - mwayen pou transmisyon siyal. Pandan pasaj la nan sa yo li se sijè a entèferans, ki prezante deformasyon nan valè a nan paramèt yo enfòmasyon. Reseptè a restaure mesaj orijinal la soti nan siyal la te resevwa defòme. Mesaj nan yon fòm redwi vini nan destinasyon an - yon moun sèten oswa yon aparèy teknik.

mesaj sous se estatistik nan lanati, dir aparans nan chak mesaj se detèmine pa yon pwobabilite sèten. teyori enfòmasyon Shannon la kwè ke si pwobabilite ki genyen pou mesaj la ki egal a inite, se sa ki, aparans li anpil epi ensètitid pa kwè ke li pa pote nenpòt ki enfòmasyon.

Youn nan pwoblèm yo enpòtan nan teyori enfòmasyon konsidere kowòdinasyon an nan kanal kominikasyon ak enfòmasyon pwopriyete yo nan sous la mesaj. Bandwidth se detèmine pa inite a nan 1 ti jan pou chak dezyèm.

Yon pwoblèm ki gen yon sistèm kominikasyon yo entèferans nan chemen an siyal vle. Shannon, malerezman, pa ban nou metòd yo espesifik pou fè fas ak sa yo. Metòd la pou retire elèv pi fasil ki repete plizyè fwa mesaj yo pa twò efikas paske li pran plis depans tan pou transmisyon maladi a nan enfòmasyon. Pi plis efikasite pèmèt itilize nan kòd ki pèmèt ou yo detekte ak erè kòrèk la nan transmisyon done.