タグ

ORとentropyに関するs-fengのブックマーク (2)

  • 情報量・エントロピー<OR(オペレーションズ・リサーチ)<Web教材<木暮仁

    参照:JavaScriptの計算プログラム 情報の価値は、その情報を入手したときに、入手しなかったときと比べて、どれだけ利益を得るかで決まります。それには、伝えられた情報の量と情報の内容の重要性の二面があります。このうち、ここでは量の面だけを取り扱います。 1個の硬貨が表か裏かをあてるゲームをするとき、内通者が表だと教えてくれる場合と、サイコロの目が5であることを教えてくれる場合では、後者のほうが情報量が大きいことは常識的にうなずけます。後者の情報量は前者の情報量の何倍になるのかというようなことを数学的に考えようとするのが情報理論です。 ここでは、情報理論の基的な概念である情報量とエントロピーについて説明します。なお、厳密にはこの情報量のことを選択情報量(自己エントロピー)といい、後述のエントロピーのことを平均情報量(平均エントロピー)といいます。 情報量 情報量の定義 情報理論では、「

  • 目次<オペレーションズ・リサーチ<Web教材<木暮

    オペレーションズ・リサーチ(OR:Operations Rearch)とは,応用数学の一分野で,数学的なアプローチにより経営問題の意思決定を支援する分野です。もっと単純には「合理的なものの考え方」であるといってもよいでしょう。 ORの歴史は古く,第二次世界大戦中に米英軍により開発されました。連中はいかに効果的に戦争をするかを考えたのに,当時の日軍は精神力を重視して合理的な発想をむしろ拒否する風潮でした。現在の企業経営にもその文化が残っているのではないでしょうか。 あるいは,コンピュータの発展により,なんでもコンピュータを利用したがる風潮があります。しかし,「合理的なものの考え方」をせずに,大量のデータを加工したのでは,費用がかかるだけでなく,誤った意思決定をしてしまう危険があります。 オペレーションズ・リサーチには,よく用いられるパターン(技法)があります。ここでは,初心者を対象に古典的

  • 1