ありがたいことに古橋さんに前回のエントリをご覧いただいたようで、大変ためになるつぶやきをされてたので、ここで引用させていただきます。 @frsyukiさん： 「分散KVS」という名前は何も考えていなくて、別に分散KVSにBigTableを含めても良くて、効率の話を問題にしていたけど、分かりにくかっただろうか…：http://bit.ly/IMFUs それはそれとして、効率について。概念的には、データモデルがmultidimentionalであることで、BigTableはアプリケーションに依存した情報をより多く知ることができる。これによって最適化をしやすくなり、効率が上がる。 例えば、Every read or write of data under a single row key is atomic を効率的に保証する、reads of short row ranges are effi

2007年の終わり頃から、ストレージの世界で「デデュープ（De-dupulication）」という技術が注目を集め始めました。デデュープとは名称から想像できるとおり、データの中から重複している部分（Dupulication）を見つけ、その部分を省くことで保存するデータを効率的に扱おう、という技術です。 Computerworld.jpの記事「大容量データ時代のバックアップ新標準「データ・デデュープ」では、次のように説明されています。 「デデュープ技術」の肝は、2つのファイルを比較して、どの部分が同じで、どの部分が異なるのか、ということを見極めることにある。これによって、同じと判断した部分はバックアップしない、つまり、無駄な重複を避けることが可能になる。 ここから分かるように、デデュープはデータ圧縮技術の1つです。これまでのデータ圧縮技術の多くはファイルごとに1つ1つ個別に圧縮を行うのが一般

Heads on: Apple’s Vision Pro delivers a glimpse of the future Yes, the cutting-edge headset is a stunning entertainment device. But beyond that, it clearly shows promise for the business world as well.

「Zetta Enterprise Cloud Storage」のアーキテクチャ。3層構造をとっている 米Zettaは米国時間2009年4月6日，Webベースの企業向けストレージ・サービス「Zetta Enterprise Cloud Storage」を発表した。プライマリ・ストレージに対するニーズが高まっている中堅・中小企業および大規模企業をターゲットとする。アクティブ・ファイルのアーカイブやホーム・ディレクトリ，オンライン配信コンテンツなど，構造化されていないデータの保存・管理に適しているという。 特徴は，必要に応じて段階的に拡張可能なモデルを採用しており，既存のITアーキテクチャと容易に統合できること。データの整合性を確保し，セキュリティとプライバシ保護の機能を備えるほか，サービス品質についても保証するとしている。 Zettaは，旧Netscape Communicationsの創業

米Amazon.comは米国時間2008年12月31日，オンライン・ストレージ・サービス「Amazon Simple Storage Service（Amazon S3）」の新機能として，データ転送料／リクエスト料をデータ要求実行者に課金できる「Requester Pays Buckets」の提供を開始した。これにより，ユーザーは外部サービスからのデータ要求で発生する費用を負担しなくて済むようになる。 Amazon S3は従量料金制を採用しており，通常の設定だとストレージ使用料／データ転送料／リクエスト料はデータを保存しているユーザーに課金する。新機能では，「バケット」と呼ぶデータの固まりごとにデータ転送料／リクエスト料をデータ取得者に課金するRequester Pays Bucketsの指定が可能となった。同機能を利用すると，他者に大量データを提供するといった場合に経済的負担が軽減される

ストレージアレイメーカーは、いつもまねばかりだ。各社ともデュアルコントローラーのモジュラー型アレイを持ち、それぞれにハイエンドのモノリシックアレイとローエンドのエントリーレベルアレイがある。どこか1社が大きな革新を打ち出すと、残る各社も追随する。 ただし、フラッシュメモリのソリッドステートドライブ（SSD）だけは例外だ。EMCはこの分野に革新をもたらしたが、他社は追随していない。 EMCは2008年1月、同社のアレイ製品「Symmetrix DMX-4」向けの「エンタープライズフラッシュドライブ」（EFD）ストレージを発表した。このSSDは、データに極めて高速でアクセスできる「階層0」ストレージを形成する。もちろん値段は高いが、確かに速い。Symmetrixファイバーチャネルドライブのショートストローキング（最も速くアクセスできたトラックにデータを書き込むだけで、ほかは無視する）で高速化を

「iPodなんて比較にならない。これならとてつもなくたくさんの楽曲を格納できる」── Oracleの創業者のひとりであり、今も製品開発に深く関与しているラリー・エリソンCEOは、同社初となるハードウェア製品を茶目っ気たっぷりに紹介した。 米国時間の9月24日、カリフォルニア州サンフランシスコで開催中の「Oracle OpenWorld San Francisco 2008」は3日目を迎え、Oracleの創業者のひとりであり、今も製品開発に深く関与しているラリー・エリソンCEOが午後のキーノートに登場した。 データベースやアプリケーションで新たなリリースがなかったこともあって、今回のOracle OpenWorldではこれまでメインホールが埋まることはなかったが、やはり役者が違うのだろうか。「重大発表あり」との予告も拍車をかけた。メインホールは1時間前から開場し、人の波はどんどんモスコーニセ

米オラクルは9月24日（米国時間）、同社初のストレージ製品「Oracle Exadata Storage Server」と、同製品とOracle Databaseサーバを組み合わせたアプライアンス製品「HP Oracle Database Machine」を発表した。ハードウェア部分はヒューレット・パッカード（HP）、ソフトウェア部分はオラクルが担当。両社が3年かけて開発したという。データウェアハウスやOLTP、データマイニング、ビジネス・インテリジェンスでの利用を想定している。 開催中の「Oracle OpenWorld San Francisco 2008」で基調講演したオラクル CEOのラリー・エリソン（Larry Ellison）氏は、「データベースとストレージ間のI/Oがシステムのボトルネックになっている」と指摘。Exadata Storage Serverは従来のシステムと比べ