昨日のESXiの実験ではVMWareが悪いのか試験機が悪いのかイマイチ判断がつきません。なので実際にVMWareを動かす事になる Proliant ML110G5 を使って実験しました。でも結果はやはりNG。ddでの転送試験はやはり15MB/sぐらいしかでません。ただ、同じ事を繰り返すと何故か50MB/sぐらいに上がったりします。なにか条件があるのかもしれませんが、istgtでiSCSIで実際に使ってみると2分ぐらいで終るはずのファイルコピーに4分50秒かかりました。また、Windows Storage Serverを入れてiSCSI Software Targetを使うと同じ作業に10分44秒を要しました。VMWareは仮想PCをホイホイ作れるところは良いと思うのですが、我が家で使う場合は普通にFreeBSDを走らせた方が扱いやすくパフォーマンスも段違いのようです。
てことで、気を取り直してiSCSIのベンチマーク試験です。今は自宅サーバの機能を一時的に安物ベアボーンPCに移しているので ML110G5が自由に使えます。同容量のHDDも2台ありますから、Windowsから見た時のストレージとしてiSCSIはどうなのか、iSCSIを保存するファイルシステムは何が良いのか、というところを測定してみました。
測定項目は下記の通り。
- iSCSIでWindowsにマウントして hdbench を実行。Read Write Copyを記録
- WindowsのローカルDドライブから上記ディスクに4GBのファイルをコピー
- そのファイルを同じディレクトリ上で別名コピー
で、比較の為に下記のようなものをiSCSIの保存先にしてみました。
- ZFS 1ドライブ
- 普通にzpool create tank /dev/ad0s1eで作成
- UFS
- 普通にnewfs /dev/ad0s1e としてマウントしたもの
- UFS別ドライブ
- /dev/ad0s1eと/dev/ad1s1eに2つのUFSを作り、LUN0とLUN1でWindowsから2つのドライブとしてマウントしたもの。ここだけ同一場所コピーではなく2つのドライブ間コピーになってます。
- /dev/ad0s1e
- ディスクイメージではなく、直接デバイス名を指定した場合
- ZFS ストライピング
- zpool create tank ad0s1e ad1s1e で作成
- ZFS ミラー
- zpool create tank mirror ad0s1e ad1s1e で作成
- gstripe
- gstripe label -s 131072 gs0 /dev/ad0s1e /dev/ad1s1e みたいな感じで
- ローカルディスク C:
- 参考までにお絵書き機のCドライブ。2.5インチ7200rpm 100GB
- ローカルディスク C:
- 同じくDドライブ。2.5インチ5400rpm 500GB
上記ではZFSよりUFSが悪い結果になっていますが、実はZFSで計測漏れがありまして翌日に測定すると前回より結果が20秒ほど早くなってました。一回目の測定ではZFSとUFSでそう大差なかったですし、それくらいの誤差が含まれているものとして表をご覧ください。
さて、グラフにすれば一目瞭然なのですが、そう大差ありません。不覚にも測定後に気付いたのですが、「測定に使ったドライブ(3.5インチ7200rpm 500GB)は単体で100MB/s前後の読み書き速度である」「ネットワークの帯域は1Gbpsなので100MB/sぐらいである」「同一場所コピーでは同一ネットワークで読み込みと書き込みが流れるので保存先の速度に関わらずネットワーク帯域の半分の速度しか出ない」という理由により、如何に速いファイルシステムを用いようとも結果はたいして変わらないのです(笑)。
とはいえ、幾つか興味深い結果も得られました。
- 経験的にWindowsでの同一場所コピーは読み込み/書き込みを別々に行って時間を合計したものよりも多くの時間がかかる。それを回避するためにお絵書き機では2ドライブ構成にしているが、ZFSやZFSミラーではUFS別ドライブに匹敵する結果が出ている。→物理ドライブを分ける必要が無い
- gstripeは意外と遅かった(笑)
- いずれにしてもローカルの2.5インチドライブに比べれば速い。WindowsをiSCSIブートにしちゃえばかなり快適になるのだろうなー。
うはー、なんか面白いことになりましたね。この勢いで自宅サーバを増設してiSCSIブートしたいところなのですが、残念ながらそうするにはハードディスクが760GBぐらい必要です。おうちにあるのは 160GBx2 と 500GBx2 なので、ミラーを作るにはこれで足りません。1TBx2を買ってくるか500GBx2を買ってきてRAID10みたいなのにするか、はたまた500GBを1個買ってきて raidz にするか。raidzは試したことがないけど速度はどうなのだろう?
当初は自宅サーバ仮想化計画だったのに、いつの間にかZFSプール増強計画になっています(笑)。