FreeBSD Daily Topics 2009年12月15日≪注目≫FreeBSD UFS+Softupdateにミニジャーナリングを追加してバックグラウンドfsckを不要にする取り組み heads-up Journaled Softupdates Hybrid system current - Jeff Roberson氏およびKirk McKusick氏がFreeBSD UFS/Softupdatesに最小限のジャーナリング機能を追加することで、バッググラウンドfsckを不用にするための取り組みをしていると発表しています。2009年12月の間には9-CURRENTにコードをマージするとしており、向こう2週間の間にはソースコードを公開すると説明されています。 jeffr_tech: Journaling softupdates, SU+J jeffr_tech: What's in

日本マイクロソフト株式会社の DDK/WDK サポートチームの blog です。 Japan WDK Support Blog 終了のお知らせ こんにちは、Windows Driver Kit サポートチームです。 2019 年1 月をもちまして、弊社システム刷新の都合により、本Blog を終了いたします。... Author: jpwdkblg Date: 12/26/2018 Authenticode 署名のドライバインストールのトラブルシューティングの一例 Authenticode 署名のドライバインストールのトラブルシューティングの一例をご紹介します。... Author: jpwdkblg Date: 09/27/2018 プリンタードライバーの GPD ファイル記述に関する注意事項 今回は Universal プリンタードライバーにて記述を行う GPD ファイルの記述に関する注

本連載では、Solaris ZFS (以下 ZFS) の基本的なコンセプトやアーキテクチャから、その機能や実用・応用例を解説するという流れでZFSをご紹介させていただきます。 今回は、ZFSの基本的コンセプトとアーキテクチャの解説です。 Zの文字に込められた意味 ソースコードの複雑化と、扱うデータ量の増大に伴い、既存のファイルシステムでは管理性、拡張性、安全性、完全性、機能、性能が問題となることが多くなってきました。このような中、サン・マイクロシステムズ（以下、サン）のエンジニアチームは、まったく新しい、まるでコンピュータのメインメモリのように扱えるファイルシステムの開発を始めました。 目的は、既存のファイルシステムが抱える問題点をすべて解決し、管理が容易で、拡張性があり、安全でかつ完全性が保持され、便利な機能を持ち、高性能な、ある意味、究極のファイルシステムを作ることでした。 ZFSの「

第7回　HFS、HFS Plusの基本的概念【前編】：Undocumented Mac OS X（1/4 ページ） Mac OS XのデフォルトファイルシステムHFS Plus。今回はその基本的概念をはじめ、HFSおよびHFS Plus共通の機能を解説する。 Mac OS Xは、さまざまなファイルシステムをサポートしている。NeXT由来のUFS、旧Mac OSでメインのファイルシステムだったHFSとその拡張版HFS Plus、CD-ROMで用いられるISO9660形式や、Windowsはもちろんデジタルカメラ向けメモリカードでも用いられデファクトスタンダードとなっているFAT、さらにはWindows 2000/XPで標準的なNTFSまで扱える。 そうした中でも、Mac OS X自身をインストールできるMac OS Xネイティブのファイルシステム*といえるのが、今回と次回で紹介するHFS P

米国Sun MicrosystemsのCEO、ジョナサン・シュワルツ氏は6月6日、Appleが今秋に出荷を予定している「Mac OS X 10.5」（開発コード名：Leopard）のデフォルト・ファイルシステムに、従来のHFS+（Hierarchical File System Plus）に代わってSolarisのZFS（Zettabyte File System）が採用されると語った。しかし、Appleの動向に詳しい一部のブロガーは、この情報に懐疑的な見方を示している。 ZFSは、Sunが自社OSのSolaris用に設計した128ビットのファイルシステムで、オープンソース・ソフトウェアとしてライセンスされている。ZFSはプールド・ストレージなどの機能をサポートしており、ボリュームやパーティションなどのストレージ・パラメータに気を遣うことなく、ドライブをプラグインして簡単にストレージ・スペ

各ストレージ機器メーカーがソリッドステートディスクの出荷体制を整えつつあるためか、One Laptop Per ChildのXOやIntelのClassmateのようなLinuxベースのマシンには標準的なハードディスクが搭載されていない。現在入手可能な多様なフラッシュメモリ式ストレージデバイスのパフォーマンスを向上させるために、フラッシュデバイス専用のスケーラブルなファイルシステムLogFSがプロジェクトリーダのJörn Engel氏によって披露された。 既にLinuxユーザには、JFFS2とYAFFSという成熟した2つのフラッシュファイルシステムの選択肢がある。それなのになぜ、また新たなファイルシステムが必要なのだろうか。Engel氏がこれらの選択肢のどちらをも尊重しないのには、数々の理由がある。YAFFSについては「カーネルとの統合を本気で試みた形跡がなく」、多くの潜在的ユーザにとって

Linuxのcloseは暗にfsyncするから、ここであげられている 100000回繰り返し open 8K write close というパターンだとfsyncコストが見えちゃうので良くないんじゃないかな とのことで、そうなのか! と思ったので例によって深追いしてみました。 まず fsync(2) の実装は fs/sync.c にあります。 asmlinkage long sys_fsync(unsigned int fd) { return __do_fsync(fd, 0); } static long __do_fsync(unsigned int fd, int datasync) { struct file *file; int ret = -EBADF; file = fget(fd); if (file) { ret = do_fsync(file, datasync);

前にひらさんが、「分散OSと透過性」とか、「ファイルシステムの面白さに目覚めた」という話を書かれていたので、ファイルシステムから見た分散OSの透過性について何か書けないかなと思いながら、日記自体の更新が止まっていた。 ファイルシステムの仕事は簡単に言うと次の三つに集約できる。 名前管理 ファイル操作 領域管理 名前管理とは名前空間の管理、すなわち、ファイル名とファイルの実体の対応を管理すること。UNIXならファイル名とinodeの対応になる。ファイル操作とは、open-read-write-closeといった操作を提供すること。領域管理はファイルをどのディスクブロックに割り当てるか対応づけること。これらはローカルファイルシステムも分散ファイルシステムも同じである。 分散OSで特に重要になるのが名前管理である。名前空間をどのように構築するかには二つのアプローチがあって、Amoebaのようにシ

XFSの歴史 XFSはSilicon Graphics（以下SGI：編注）が開発したジャーナリングファイルシステムである。XFSの開発が開始された当時、SGIはすでにEFS（Extent File System）というファイルシステムを持っていた。SGIがXFSで目指したものは、次世代の拡張性を考慮した64bitファイルシステムを新規開発することだった。 XFSは、1994年後半にリリースされたIRIX 5.3（IRIX 5.3 with XFS）に初めて搭載された。1996年にIRIX 6.2がリリースされると、全SGIシステムに標準でインストールされるようになった。1999年前半にはLinuxへ移植され、GPL（GNU General Public License）の下でオープンソースとして公開された。 最初のLinux用XFSであるXFS 1.0 for Linuxは、カーネル2.4

また、fsck を使うと、 % fsck (中略) 33527 files, 581040 used, 1491171 free (17803 frags, 184171 blocks, 0.9% fragmentation) ↑これ などと表示されますが、これは「どれくらいファイルブロックが分散してしまったか」を表すものではなく、「ディスク領域を有効に使うために、どれくらいファイルブロックを分割しているか」というものを意味しています。この値が高いからと言って、パフォーマンスの低下につながるわけではありません。 http://www.jp.freebsd.org/QandA/HTML/457.html fsck で表示される fragment って一つのディスクブロック(4, 8kぐらい)をまるごと使わずにフラグメント単位(512 or 1024byteが多い)で利用している割合の表示だっ