メモ帳

各種メモ代わり

集計

2010-07-02 21:00:12 | Weblog
7月2日(金)のち

なぜか早く朝食が終わったが、いつもの時間に出勤。
昨日の集計の続き。
10時前業務部へ、課長と社長のところへ中間報告。

戻って、定例の会議。
12時半ころまで。

遅めの昼食後、集計と理事からの問い合わせに対する返事の下書き。

Rもメモリが少ないとばか遅くなりますね。
グループ別にしたが、やっぱり遅い!

明日は京都。

100万レコード

2010-07-02 08:29:34 | Weblog
7月1日(木)
水無月が終わり、いつの間にか文月。

1限目 院講義。
 lm 回帰を airpolutionデータで。
 どうも元気がないので、自分で考えさせようと、
 オゾンデータを渡して、分析の宿題を。

午後、卒ゼミ。
 一人はメールで欠席連絡あり、で、一人だけ。

終了後、懸案のデータの集計へ。
100万レコードとなるとやっぱり、問題が起きますね。

最初はエクセルでできるかな?と思って、集計をかけてみたが、
夕食を挟んで2時間ほど待っても音沙汰なし。
どうも途中で袋故事に入り込んだようだ。

あきらめてRへ。
これもメモリを拡張しなきゃいけないようでダウン。
(各庁法はだれかが教えてくれるのを待っておこう。)

で、エクセルで100万件からとりあえず必要なデータだけに
絞ることに。ソート、削除を繰り返し、
60万件ほどに絞るとRで読み込めるようになった。

途中、お山のyがiPADを見せびらかしにやってくる。
素人さんだと飽きてほおりだすだろうと言うので、
中古が出回るのを待っておくかな?

万歩計:
7月1日 4306歩
6月30日 6265歩