ウィリアムのいたずらの、まちあるき、たべあるき

ウィリアムのいたずらが、街歩き、食べ物、音楽等の個人的見解を主に書くブログです(たま~にコンピューター関係も)

Don't Believe Facebook; You Only Have 150 Friends

2012-12-14 14:48:27 | Weblog
あー「ダンバー数」っていつも忘れちゃうんだよね~

メモメモ

Wikipediaのロビン・ダンバー(以下太字は、リンクしているところからの引用)に

人間にとって、平均約150人(100-230人)が「それぞれと安定した関係を維持できる個体数の認知的上限

って出ている

で、この話に関して有名なサイト

Don't Believe Facebook; You Only Have 150 Friends
http://www.npr.org/2011/06/04/136723316/dont-believe-facebook-you-only-have-150-friends


結局、ここの論文なのかしら?

Neocortex size as a constraint on group size in primates
http://www.sciencedirect.com/science/article/pii/004724849290081J

  • X
  • Facebookでシェアする
  • はてなブックマークに追加する
  • LINEでシェアする

オブジェクト・ストレージ・システムの1つ - LeoFS

2012-12-14 11:13:08 | AI・BigData
12日のクラウドストレージ研究会のメモメモ

最近は、データの保存が話題。オブジェクト・ストレージ・システムもそんな文脈で
かんがえられているけど、今回の御題は、楽天のオブジェクト・ストレージ・システム
の1つLeoFSについて



 
■LeoFS 楽天のはらさん

 v0.12.5リリース:現在検証中

1.モチベーション
  2010年2月から
    画像ファイル:どんどん増えていくんじゃないか?
      →今は動画、PDF、ログデータなども対応
  低ROI
  SPOF
  ストレージ拡張:サーバー購入からセットアップ
 Amazon S3 ファイル数伸びている
  1兆ファイル?
  →楽天も増えている
Twitter:オブジェクトストア
  →内製で作ってる。
楽天は、オープンソース

2.オブジェクト・ストレージ・システム
    CassandraはKVS
重視した点
 ユースケース
 アベイラビリティ
 パフォーマンス
 スケーラビリティ
 アドミニストレーション

実現したこと
 ハイアベイラビリティ
 リライアビリティ
 ハイコストパフォーマンス

昨年夏(ばりあという名前)
  画像ストレージとして健在
LEO FSに
  ことし7月4日にリリース
  大きな目標:会社のデータハブ
  いままでNFS→今後LEOFS
  エコシステムを築く:使いやすさ

2.Overview
 ERLANGで開発
   コンカレンシー
      かうちDBとかみてて、
 3つの機能
  ストレージ:リカバラー、キュー
  ゲートウェイ
  マネージャー
ZaBBIXとかモニタリングツールつかって監視できる
メディアプラットフォームに導入
  サーチとかまだ
  NFSよりコスト安
Inside LEOFS
 ゲートウェイ:HTTP
        →ErlangRPC
           →すとれーじくらすた
              →マネージャークラスタ

LEOFSゲートウェイ
  S3API かーぼーい?

LEOFS すとれーじ
  メタデータ:1つのオブジェクトの中に
  オブジェクトストレージ
  オブジェクトコンテナー:スタックする
  64個の大きいファイルの中に管理
 LEOFS:キーでとってこれる。追記型
 いらないファイル:コンパクション

大規模オブジェクトサポート
 キャパシティの均一化
 並列でライトできる:ネットワークIO高く

マネージャー
 監視、管理
  分散ハッシュテーブルのハッシュ値
  ノードの状態管理
  サスペンド:一時停止可能→レジューム

統合化されたストレージシステム
  ほかに入れなくても構築できる

ベンチマーク
  LeoFSのブログを作って、そこに詳細に書く予定

今後
  2ギガ:大域足りない
   ゲートウェイにセカンダリキャッシュ
しつもんは
  GitHabのメールアドレスから
Q&A なせS3-API
   使わないRESTなAPIもある
   クライアント、独自APIを使いたくなかった。
 ROMAの関係
   あちらは閲覧、セッション管理




  • X
  • Facebookでシェアする
  • はてなブックマークに追加する
  • LINEでシェアする