情報理論の要点定義・定理・計算例を単元ごとに

確率変数の不確かさを測るエントロピーと、2つの確率変数が共有する情報量を測る相互情報量から始める。次に、情報源をどこまで短く符号化できるか（情報源符号化定理、ハフマン符号）と、雑音のある通信路でどこまで確実に送れるか（通信路容量、通信路符号化定理、誤り訂正符号）を扱う。対数の底は2とし、情報量の単位はビットとする。

情報系院試の問題集・ロードマップ

東大情報理工・東京科学大・阪大の大学別に、出題マップと類題を1冊にした教材（各4,980円）。収録内容と見本を商品ページで確認できる。