Théorie de l'information

Initiée par Claude Shannon en 1948, la théorie de l’information est une modélisation mathématique, essentiellement probabiliste, des problèmes liés à la mesure de la quantité d’information contenue dans un message, au stockage efficace et fiable d’un message (compression et protection).

 La théorie de l’information établit un ensemble de critères qualitatifs et quantitatifs pour déterminer si une communication est possible ou pas sur un support et dans un contexte donnés.

L’objectif du cours,  est donc  de fournir les notions théoriques de base pour la mesure quantitative de l’information (qu’est-ce qu’un bit d’information ?,  sa représentation (comment mesurer cette information ?, Entropie conjointe et conditionnelle)  , son stockage, sa transmission, sa protection et sa dissimulation.