片貝孝夫の IT最前線 (Biz/Browserの普及をめざして)

Biz/Browserの黎明期からかかわって来ました。Bizを通じて日常を語ります。

USP研究所の當仲さんが10億件のデータのソートを97秒でやる実演をしました。

2012年10月11日 | おもしろソフト
10月10日から、BigDataEXPOが晴海ビッグサイトで開催されていますが、
そこで、ビッグデータ処理をシェルで行う製品を発表し、その場で、
10億件のデータ処理や、100億件のデータベース(テキストファイル)
の更新や検索処理を実演しました。

1サーバー+5パソコンのクラスタで、
10億件ソート=97秒、10億件集計=35秒、などです。
Hadoopのスピードの10倍、コスト1/10 です。
100億件のデータ(世界人口)の検索=1秒です。

そのときの発表資料がこれです。

ビッグデータを格安でハンドリングすることができます。

最新の画像もっと見る

コメントを投稿