Information et entropie : un double jeu avec les probabilités
Résumé
In 1948 Shannon and Wiener introduced a new measure of information in the field of communication engineering. In order to qualify the physical dimension of information, Cybernetics took over this measure and built an analogy between information and entropy. This article compares two versions
of the analogy, in Wiener and Brillouin’s work. It suggests that the divergence arises from the dual interpretation, belief or frequency-type, of the probabilities used in the information definition. The concept of information quantity thus appears as an unstable mix of belief-type and frequency-type elements of probability.
Shannon et Wiener ont donné en 1948 une définition de la quantité d’information, en relation avec les problèmes de l’ingénierie des communications. La cybernétique s’est emparée de cette définition, en cherchant à penser la dimension physique de l’information au moyen d’une analogie entre information et entropie. L’article compare deux versions de cette analogie, chez Wiener et Brillouin, et propose de rapporter les divergences observées à l’interprétation duelle, épistémique ou fréquentiste, des probabilités mobilisées par la définition de l’information. Le concept de quantité d’information apparaît alors comme un mixte instable d’éléments épistémiques et fréquentistes.
Origine :
Fichiers produits par l'(les) auteur(s)
Loading...