Grundbegriffe der Informationstheorie und der Kanalcodierung

Auszug

Die Informationstheorie liefert eine mathematisch-physikalische Definition der Information und macht sie so zu einer messbaren Größe wie Spannung, Temperatur, usw. Damit wird es möglich Information in technischen Systemen quantitativ zu bestimmen und ihren Fluss zu optimieren. Ein wichtiges Anwendungsfeld der Informationstheorie ist die redundanzmindernde Quellencodierung. Als Beispiel wird in Abschnitt 7.2 die Huffman-Codierung vorgestellt. Die Kanalcodierung hingegen fügt der Nachricht gezielt Redundanz hinzu, so dass der Empfänger Übertragungsfehler erkennen oder sogar korrigieren kann. Dies kann in einfacher Wiese, wie in Abschnitt 7.3 gezeigt wird, durch die zusätzlichen Prüfzeichen des Hamming-Codes geschehen. Als CRC-Codes (Cyclic Rdundancy Check) sind sie heute aus der Datenkommunikation nicht mehr wegzudenken.