Licencia de Creative Commons
Esta obra está bajo una licencia de Creative Commons.

domingo, 19 de septiembre de 2010

La entropia de la Informacion y la teoria de Shannon


Frente a grandes cantidades de información se genera cierta incertidumbre que es medida por la entropía, en tal sentido la teoría de la información de Shannon afirma que entre menos información haya,  mayor será su entropía, es decir que la información reduce la incertidumbre o la entropía, así que guardan una relación directa entre sí, también se puede decir que cuando recibimos información sobre un tema determinado estamos disminuyendo la ignorancia, desorden o incertidumbre de este. 

Resulta fundamental comprender que la información que proporciona un mensaje, en el proceso de transmisión, disminuirá, mas no podrá aumentar, porque si transmitimos cierta información a un destinatario equivocado, no podemos pretender que sea la misma información. 

 ¿QUE ES INFORMACION Y COMO SE MIDE?
Según la teoría de la información de Shannon, la información es en primer lugar, cualquier cosa que viaje desde una fuente a un receptor, allí de alguna forma la información transforma el estado del receptor, o en segundo lugar se refiere a  la inseguridad que desaparece en el momento de recibir una señal,   también es conveniente agregar que Shannon se interesa únicamente en definir la probabilidad de aparición de los signos, de esta manera su concepto abarca: la concepción de la información como algo cualitativo y una proporción en la que  entre más posible sea un signo mayor será la cantidad de información.  

Según Shannon la información se mide a través de la falta de incertidumbre, que pretende proporcionar un análisis cuantitativo de la información, es decir es la medida de la probabilidad de información que proporciona determinada fuente.






(Fundamentos de las Tic)
Universidad de La Salle
Tomado de: 
*APUNTES DE TRANSMISION DE DATOS: Información y entropía ,  Disponible en: http://www.it.uc3m.es/~prometeo/trdt/html/temas/tema1/t1_1.htm.

No hay comentarios:

Publicar un comentario