La théorie de l'information s'est particulièrement développée autour des années 50, en fait à partir du moment où C. Shannon a formalisé la circulation de l'information dans un modèle mathématique. On parle alors d'entropie ou de théorie statistique de l'information. Ce dernier utilisera celle-ci comme outil de traitement du signal (Shannon 1975). Nous allons rappeler brièvement les notions les plus importantes de cette théorie. Nous expliciterons ensuite le contexte d'utilisation de celle-ci en bibliométrie, qui est celui des distributions qui étudient les régularités statistiques observées dans le domaine de la production et de l'usage de l'information. Tous ces travaux ont confirmé l'existence de grandes similitudes entre les différentes distributions étudiées dans le domaine de l'information et donc l'existence de régularités et de rapports mesurables, qui autorisent de ce fait la prévision et le concept de lois. Cet article prolonge des études qui ont montré qu'il existe un lien entre distribution et entropie plus particulièrement le lien qui existe entre le principe du "moindre effort" et la forme analytique d'une distribution Zipfienne.