ひしだまの変更履歴

ひしだまHPの更新履歴。
主にTRPGリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲームや音楽です。

HBase TableOutputFormatの危険性

2012-04-28 23:59:13 | PG(分散処理)

HADOOP HACKS』のHBaseの章を読んでいると、HFileOutputFormatの使い方が載っていた。
それで、先日@ueshinさんから教えていただいたTableOutputFormatの危険性について思い出したので、メモ。

自分はTableOutputFormatしか使ったことが無いが(しかもサンプルレベルのみ)、TableOutputFormatはいわゆるロールバックが出来ないから危険ということらしい。
HFileOutputFormatを使ってHFileを作り、それをHBaseへバルクロードした方がいいそうだ。

HFileOutputFormatの使い方やバルクロードの方法は『HADOOP HACKS』に載っているぞw
(Windows7マシンに切り替えてからHBaseの環境を作っていないので、自分では試してない^^;)



最新の画像もっと見る

コメントを投稿