Vorlesung

Informationstheorie für Fortgeschrittene [IT-A]

English version

  • Vorlesung:

    • Prof. Dr.-Ing. J. Huber

  • Übung:

    • Azad Ravanshid, M.Sc.

  • Wahlfach im EEI-/I&K-/CE-Hauptstudium
  • Voraussetzungen:

    • Mathematik für Ingenieure, Informationstheorie

  • Organisation:

    • 2 SWS Vorlesung, 1 SWS Übung, Sommersemester

  • Zeit und Ort:

    1. Im SS 2011 findet die Vorlesung als Blockkurs (ca. 5-tägig) gegen Ende Oktober statt. Genaue Termine stehen noch nicht fest.
    2. The course is taught as a block class (approx. 5 days) at the end of October (exact date still to be announced).
  • ECTS-Information:

    • ECTS Credits: 4 (Vorlesung + Übung)

  • Vorlesungsinhalte:

    • Diese Veranstaltung baut auf den Stoff aus der Vorlesung Informationstheorie auf. Nach kurzer Wiederholung zur Einführung werden ausgewählte Kapitel der Informationstheorie eingehend behandelt. Dazu gehören wichtige theoretische Themen wie z.B. Markoff-Quellen oder Rate-Distortion Theorie, aber auch praktisch relevante Verfahren wie z.B. arithmetische Codierung (Quellenkompressionsverfahren). Einen vertieften Einblick in aktuelle Themen der Informationstheorie liefern die Kapitel ueber den "Context-Tree-Weighting Algorithmus" und die "Burrows-Wheeler Transformation". Eine ausführliche Einführung in das viel diskutierte Gebiet der Mehrantennensysteme (Multiple-Input-Multiple-Output (MIMO) Kanal) runden die Vorlesung ab.

  • Literatur:

    1. Huber, J.: Skriptum zur Vorlesung Informationstheorie. 2001.
    2. Gallager, R. G.: Information Theory and Reliable Communication, John Wiley & Sons 1968, New York.
    3. Johannesson, R.: Informationstheorie - Grundlagen der (Tele-)Kommunikation, Addison-Wesley Studentlitteratur, 1992, ISBN 3-89319-465-7.
    4. Cover T., Thomas J.: Elements of Information Theory, John Wiley and Sons, New York, 1991.
  • Allgemeine Informationen:

    • Zur Vorlesung gibt es ein Skriptum. Es wird zum Selbstkostenpreis im Sekretariat (N5.28) des Lehrstuhls verkauft. Das Buch von R. Johannesson ist ebenfalls dort erhältlich.

  • Prüfung:

    • Die Prüfung findet mündlich statt.


Advanced Topics in Information Theory

  • Lecture:

    • Prof. Dr.-Ing. J. Huber

  • Tutorial:

    • Azad Ravanshid, M.Sc.

  • Elective for EEI, I&K, CE
  • Prerequisites:

    • Mathematics for Engineers, Information Theory

  • Organisation:

    • 2 class hours per week lecture , 1 class hour per week tutorial, summer semester

  • Time and Venue:

    1. Im SS 2011 findet die Vorlesung als Blockkurs (ca. 5-tägig) gegen Ende Oktober statt. Genaue Termine stehen noch nicht fest.
    2. The course is taught as a block class (approx. 5 days) at the end of October (exact date still to be announced).
  • ECTS Information:

    • ECTS credits: 4 (Lecture + Tutorial)

  • Contents:

    • Attending this course requires the knowledge of the topics discussed in the course Information Theory. After a very short repetition selected topics of Information Theory will be covered elaborately. This includes very important theoretical aspects like Markov Sources and Rate-Distortion Theory as well as methods interesting in practice like arithmetic coding (source coding). Furthermore the listeners will gain insight in current topics of Information Theory when dealing with the Context-Tree-Weighting Algorithm and the Burrows-Wheeler Transformation. A detailed introduction into Multi-antenna systems (MIMO = Multiple In Multiple Out) concludes the course.

  • References:

    1. Huber, J.: Lecture Manuscript Information Theory. 2001.
    2. Gallager, R. G.: Information Theory and Reliable Communication, John Wiley & Sons 1968, New York.
    3. Johannesson, R.: Informationstheorie - Grundlagen der (Tele-)Kommunikation, Addison-Wesley Studentlitteratur, 1992, ISBN 3-89319-465-7. (in German)
    4. Cover T., Thomas J.: Elements of Information Theory, John Wiley and Sons, New York, 1991.
  • Additional Material:

    • An accompanying manuscript and R. Johannesson's book can be purchased in the institute's office (N5.28).

  • Exam:

    • Exams will be oral.