追記型オブジェクトストレージ「Kastor」（pre-alpha） - Blog by Sadayuki Furuhashi

暮らしカテゴリーの変更を依頼記事元:

frsyuki.hatenablog.com

72 usersがブックマークコメント

追記型オブジェクトストレージ「Kastor」（pre-alpha） - Blog by Sadayuki Furuhashi

Facebookで写真配信のために使われているストレージシステム「Haystack」に関する情報が公開されました... Facebookで写真配信のために使われているストレージシステム「Haystack」に関する情報が公開されました。（Needle in a haystack: efficient storage of billions of photos） Facebookは最初はNFSを使っていたようです。しかし写真の1枚1枚をファイルとして保存していたため、ディレクトリエントリなどのinodeメタデータの総量がキャッシュに収まらないサイズになってしまい、一つの写真を保存したり取り出したりするのにHDDのシークが複数回発生していたのがボトルネックになっていたそうです。（もしかしたら「NetAppは高すぎた」のがもっと重要だったかも知れません：Facebook、独自の写真配信ネットワーク、Haystackを完成―収益性の改善に寄与か？）シークの問題を軽減するために、profile用などの小さな写真はキ

rawwell ""Kastorの実装はできるだけコピーをしないようになっている点と、ロック･フリーで並列性が高い点が特徴です。" compactionやレプリケーションなどの重要な機能が欠けていますが、今後実装する予定はあまりなくて^^; 「こん

2009/05/29 リンク