Entropie

Le mot entropie vient du grec "trope" qui signifie transformation ; il désigne la mesure du chaos. Il représente une mesure de l'incertitude ou du désordre ; plus un système est difficile à décrire, plus son entropie est élevée. Comme pour un assemblage donné de composants d'un système, il existe un plus grand nombre d'états désordonnés (difficiles à décrire) que d'états ordonnés, chaque perturbation a tendance à modifier l'état initial d'un système et à le conduire vers un état de plus grand désordre ; l'entropie augmente donc avec chaque perturbation. Dans un système thermodynamique subissant un processus de transformation, le changement de l'entropie peut être calculé avec précision en tant que fonction de la température et des transferts de chaleur. On peut aussi calculer les changements d'entropie des systèmes informatiques, pour lesquels il est dit qu'elle peut être définie comme le logarithme négatif du contenu de l'information. Le bruit, donc la perte d'information dans la transmission d'un message, est un indicateur de l'augmentation d'entropie.