Neblux 知識グラフ
情報理論の創始
情報理論の創始とは、クロード・シャノンの1948年の論文「通信の数学的理論」によって開始された画期的な知的出来事であり、情報を定量化・伝送・保存するための厳密な数学的基盤を確立した。
概要
シャノンは情報内容を確率の観点から定義した——稀なメッセージは予想されるメッセージより多くの情報を含む——そして熱力学から借用したエントロピーを情報源内の不確実性の尺度として導入した。彼の中心定理は、すべての通信チャネルには有限の容量があり、ノイズにかかわらずこの限界以下のいかなる速度でも、十分に洗練された符号化があれば信頼できる伝送が達成可能であることを証明した。
なぜ重要か
この創始出来事はまったく新しい科学分野を創造し、データ圧縮・誤り訂正符号・暗号技術・ネットワーク通信の理論的骨格を提供した——これらは現代のインターネット・携帯電話網・デジタルメディアを支える技術であり、現代規模でのデータの効率的な保存と伝送を数学的に可能にした。