福島県の定時降下物環境放射能測定結果を、Crystal Ballで判断する（その１）

モンテカルロ・シミュレーションを使って、いろんな予測をする場合、

株価や販売予測を行う手順
http://blog.goo.ne.jp/xmldtp/e/0db4704b9d0c5337c898249c8cf6d8e2

で、手順は、

●予測の元（入力）となる不確定なデータを発生させる
●不確定なデータをもちいて、予測したいデータ(出力）を導くモデルを
●予測したいデータ（出力）を設定
●シミュレーション実行
●結果の表示

と書きました。

このとき、不確定データを発生させる方法として、


・分布がわかっている
　　　その分布をもとに、乱数を発生させる
　　　（Crystal Ballでは：分布を設定する）

・分布がわからない
　　　時系列の場合　　（Crystal Ballでは：CB Predictor）
　　　そうでない場合　（Crystal Ballでは：バッチフィット、分布の推定）

と書いて、

「その分布をもとに、乱数を発生させる」のは、

Crystal Ballを使って、プロジェクトの完了日等を、シミュレーションで確率的に求める方法
http://blog.goo.ne.jp/xmldtp/e/6175dee452be73cde2687439238de76f


で、

・分布がわからない
　　　時系列の場合　　（Crystal Ballでは：CB Predictor）

については、

株価予測（時系列）シミュレーションをCrystal Ballで行うには
http://blog.goo.ne.jp/xmldtp/e/7d3d2f918cf9b442084f484a99a02c16


で書いたので、今日は、

・分布がわからない
　　　そうでない場合　（Crystal Ballでは：バッチフィット、分布の推定）

について、書きます。

---

■お題

　福島県では、「定時降下物環境放射能測定結果」というのを出しています。
　２月１２日は、
　　　セシウム１３４　98.2
　　　セシウム１３７　139
　だそうです。この値が、異常値かどうか、

　普通は、統計で調べるのですが、今日はシミュレーションをつかって、
出現率から判断しましょう。

なお、このデータは毎日出ています。
２０１１／１２／２７〜のデータを入手するため、

http://radioactivity.mext.go.jp/ja/1285/2012/02/1285_020218.pdf
http://radioactivity.mext.go.jp/ja/1285/2012/02/1285_021318.pdf

の２つを使いました。

そのままの分布だと、ぜんぜん適合しないので、対数をとり、検出できないのが０だと、
対数とれないので、最低の値よりも低い、
セシウム１３４の場合、１．４、セシウム１３７の場合１．３を使いました。

---

■「分布の適合」を使う

　「分布の適合」を使う方法を説明します。

　まず、一番左の緑の「仮定の定義」をクリック

　「分布の適合」をクリック

　「実測データの範囲」をいれるのですが、範囲を文字入力しても
　いいですけど、入力範囲の横にあるセルっぽいボタンをクリックして

範囲を選んでもいいです。

ＯＫをクリックして実行させると、

なかんじで分布と適合度合いがでます。「適用」をクリックすると

なかんじで分布が選ばれ、ＯＫをクリックすると確定します。

緑になって、乱数が発生できそうです。

そこで、今度は、結果のほうを定義します。
乱数で発生する値が、今日の観測値９８．２よりも大きかったら１、小さかったら０とします
そうすると、この平均が、１の回数、つまり９８．２より大きかった数になります。

これを実行すると

なかんじで

なかんじ・・・

平均０．０４＝４％　　
うーん、微妙・・・５％以下？

---

長くなったので、ちょっとここできります。

「ビッグデータ」の市場より、「ビッグ”じゃない”データ」の市場のほうが、大きくないか？

　「ＮＥＣ、ビッグデータ関連事業売上高を3年間で倍増に」というニュースとか、ビッグデータって、今話題ですけど、そもそも、「ビッグデータ」の市場より、「ビッグ”じゃない”データ」の市場のほうが、大きいんじゃないでしょうか？

　ビッグデータに力入れてると、意外とそっちの、大きな市場がおろそかになってしまうんじゃないかと思います。

---

　まず、そのニュース

ＮＥＣ、ビッグデータ関連事業売上高を3年間で倍増に
http://headlines.yahoo.co.jp/hl?a=20120213-00000036-reut-bus_all


ここでいう、「大量データ」が問題なんだけど、たぶん、テラ以上の単位だよね。
それを処理するということだよね。

いや、ＴＢレベルを「格納する」ってだけなら、秋葉原行って、ＴＢレベルの
ハードディスク買ってくれば済むことだし・・・
処理するという点で、ビッグデータの価値がある。
数百ＧＢｙｔｅだったら、ＲＤＢで十分だし・・・


　で、そういうＴＢレベルのデータを処理している会社って、もう何かはいっている
場合が多いわけなんですよね。テラデータにビジネスオブジェクツとか・・・
　そうなってくると、それに追加とかリプレースとか、そういう話になってくる。
　なので、新規ってわけじゃない。

　つまり、新規顧客をガンガン開拓できるわけじゃないので、
　売上的に急上昇っていうのは・・・どうなんでしょうねえ？

---

　むしろ、ビッグデータじゃない市場のほうが、大きいのかも・・・

　ひとつは、データサイズが小さく（ＧＢレベル）、まだ、統計的な解析とかをやっていない市場
　もうひとつは、(ビッグデータというと、統計処理だけど、そうでなく）統計以外の手法（シミュレーションなど）を使って、処理を行う市場。

　こっちの市場が立ち上がった場合、ビッグデータばかりに力を入れていると、出遅れる可能性は・・・ないのかな？

RUPは論文になってるけど、ICONIXって・・・

今、CiNiiで調べて、気づいた・・・

ＲＵＰは、「ラショナル統一プロセス」で検索かけると、
７件ひっかかる。


で、ICONIXは・・・
http://www.iconixsw.com
ってところしか引っかからない・・・
（まあ、このサイトは、ICONIXのサイトだけど、論文じゃない）
　そもそも、ICONIXのサイトってむしろ
http://iconixprocess.com/
　では？）

---

ＩＥＥＥは？


IEEE Xplore
http://ieeexplore.ieee.org/Xplore/guesthome.jsp

で調べてみる。
rational unified process
で引くと１３１件

ICONIXで引くと・・・２つ（＾＾；）
だけど・・ひとつはICONIXソフトウェアエンジニアリングのＣＥＯって話しだし・・
もうひとつも・・・？？

---

ICONIXって、あんまり、論文になってないのかな？

Windowsで流れるパケットを見る（tcpdumpのWindows版）

Linuxなどにおいて、マシンに流れるＩＰパケットを見るには、tcpdumpコマンドを使えば良い。
これと同じ機能を持ったフリーソフトwindumpというのがあるのだが、
使い方まで書いてあるサイトが・・・少ないように見えるので、ちょっと書いてみる。

---

■まずは、インストール

windumpを使うには、WinPcapをインストールしないといけない。
winPcapは、

http://www.winpcap.org/default.htm

にある。

ここのdownloadをクリックして（さらにもうひとつ画面があったけど、そこもdownloadをクリックして）
exeファイルをダウンロードする。

このexeファイルをクリックすると、

という画面が出て、インストールできるようになる。

以下




というかんじで、インストールする。


次に、windumpをインストール？する
windumpは、

http://www.winpcap.org/windump/default.htm

にある。

ここのdownloadをクリックして（さらにもうひとつ画面があった気がしたけど、そこもdownloadをクリックして）
exeファイルをダウンロードする。
このWinDump.exeを適当なところにおく（あとで、コマンドラインから、このプログラムをたたくので、呼びやすいところに置いておいてくれ）

---

■使い方

コマンドラインを立ち上げ、いまダウンロードしたファイルのフォルダ（ディレクトリ）にいく。

cd /tmp

その後、たんに
windump
とたたいても、何がおこっているのかわからない

まずは、どんなデバイスがつながっているかを知るために、

windump -D

というコマンドを実行し、どんなデバイスがつながっているか見る。

その後

windump -w 出力ファイル名 -i 今、上でdumpしたデバイス

というのを、実行する。

そうしたら、ブラウザをリドローするとか、なにかパケットが流れる作業をして、

ctrl-c（コントロールキーを押しながらc)

でコマンドを終了させる。
ここまでやったのが、こんなかんじ。

---

■そうすると

こんなかんじで・・・

キャプチャできてる・・けど、バイナリだから、中身はよくわかんないけど・・・

---

■tcpdumpの場合

Linuxだとtcpdumpも入っているし、 | strings　とやると、文字部分しか表示しない。
なので、出力を画面にして（-w - )

tcpdump -w - -S 1500 | strings

などとやると、画面に出てくるようである。

電子書籍を入手したりＰＤＦをＥＰＵＢにしたりするWindows上でのソフト

calibreについてのお話。

こんなかんじ

の画面なんだけど、そこの「本を入手」をクリックすると、

な感じで、検索して、本がとってこれる（フリーのなのかな？）

本を追加の場合

ＰＤＦの本なども追加でき、それを「本を変換」して、

「EPUB出力」すれば、ＥＰＵＢに変換できそう

まだやってない（インストールしたばかり）なので、全部、「できそう」というお話。


そのcalibreは、
http://calibre-ebook.com/download
からダウンロードできる（Windows版、Ｍａｃ版、Ｌｉｎｕｘ版）