Pintura sobre muro; “Perplejidad es una medida utilizada en la TEORÃA DE LA INFORMACIÓN. Se define como 2 elevado a la entropÃa, o más a menudo como 2 elevado a la entropÃa cruzada. La última definición es usada frecuentemente en la comparación empÃrica de modelos probabilÃsticos”.
La perplejidad de una distribución de probabilidad discreta p se define como
donde H(p) es la entropÃa de la distribución y x varÃa entre los distintos eventos.
Asimismo se puede definir la perplejidad de una variable aleatoria X como la perplejidad de la distribución para todos los posibles valores de x.
*TERÃA DE LA INFORMACIÓN es una rama de la teorÃa matemática de la probabilidad y la estadÃstica que estudia la información y todo lo relacionado con ella: canales, compresión de datos, criptografÃa y temas relacionados.
Fue iniciada por Claude E. Shannon a través de un artÃculo publicado en el Bell System Technical Journal en 1948, titulado Una teorÃa matemática de la comunicación (texto completo en inglés).
La información es tratada como magnitud fÃsica y para caracterizar la información de una secuencia de sÃmbolos se utiliza la EntropÃa. Se parte de la idea de que los canales no son ideales, aunque muchas veces se idealicen las no linealidades, para estudiar diversos métodos para enviar información o la cantidad de información útil que se puede enviar a través de un canal.
¿¿?? mejor mÃra Puerco Radio www.myspace.com/puercoradio ahora mÃralo en ALTA CALIDAD.
Deja una respuesta