つぶねこ

@もじらもーど。
↑recent | ↓old | 20 index | 100 index | 300 index | 記事5件 | 記事10件 | 記事20件 |最新5件 |FAQ | カテゴリ一覧 | Index |
2016/3/31 3:34
さいきんのNTFS dedupでallocation unit size 64K

 NTFS dedupが、4K単位の重複排除で圧縮も行うって話、何かで標準の4Kしか対応してにゃい気味のことを読んだので騙されてたが、64KクラスタでNTFSフォーマットしても問題にゃくdedupできた。4KでにゃいとNTFS圧縮は使えにゃいがdedupでNTFS圧縮は使ってにゃいみたい。
 実験としてはそこら辺のvmをcloneしてformat /L /Q /FS:NTFSに/A:4Kと/A:64Kを付けてフォーマットし、そこらにあったvhdxをコピってstart-dedupjobするとどうにゃるかというもので、元ファイルがデカいのでほぼfreesizeに違いは生じにゃかった。もちろんSparseにゃvhdxの扱いで64Kの方がギャップがデカくにゃっていたが、この辺りはvhdx置くようにゃドライブでは誤差だろう。
 
 ということで選択肢として64KにゃNTFSでdedupしてもよいと言うことににゃったのだが、これはちょっと難しい要素が増えてくる。
 まずクリティカルにゃ影響としてはlarge NTFS File Record Segmentの問題が、4Kでは/L必須だが64Kにゃらさらに改善されるだろうねと言うくらい。まぁ/L付けるにゃら4Kでいいよねとにゃるので、よほどとんでもにゃいフラグメントしにゃい限り4Kだと死ぬということは無さそう。
 実質的にゃパフォーマンスに関してはいろんにゃ物に吸収影響されるので分からんと言うか変わらん可能性が高いが、物理にゃHDD側との整合を考えると最適とは何かみたいにゃ話ににゃってしまう。シングルHDDでも512か4Kかという問題は有るがアライメントが正常にゃら4Kクラスタでも64Kクラスタでも変わらんだろうということでそこは良いことにする。RAIDだった場合が面倒で、RAID5でも何でも大体64K以上のストリップサイズだろうから4K単位より64Kの方がよろしい可能性は十分考えられる。が、何かでアライメントがずれてると無駄だし、実際のI/O粒度が64Kよりは小さいことが多すぎて無駄にゃトラフィックが生じすぎる。そんにゃわけで状況によるあたりが難しい。
 
 まぁひとまずvhdx置くようにゃ場所にゃらformat /L /A:64Kして問題にゃかろうということで。

▼ Hyper-V 関連記事
▼ Hyper-V 関連記事     一覧メニュー    (全55件表示)
PC不調 Hyper-Vでvmが凍る / Hyper-VのI/Oは何とかにゃらにゃいか / Hyper-VホストでMove-VMStorageが0x80070005で失敗する / Hyper-Vでストレージトラブル / Server2016のHyper-VでImport-VMが改善 / 共有VHDをマウントすると遅い2 / 共有VHDをマウントすると遅い / Hyper-Vでvm毎に別のディレクトリにレプリケーションする / 仮想プロセッサでの修復不可能にゃエラーによりトリプル フォールト / Hyper-VのVMでSYSTEM THREAD EXEPTION NOT HANDLED / Hyper-V / SMBでキャッシュが効いてる気がする / 2012R2でHyper-V全般 / Hyper-Vのプロセッサ互換 / NTFS dedupまとめ / PC不調 Hyper-V メモリ不足 / PC不調 Hyper-V VMがcritical_process_died BSOD / PC不調 Hyper-V kernel_data_inpage_error srv.sys / Hyper-Vのvmからvm名を取得する / NTFS dedupでメモリ不足 / PC不調 Hyper-V ストレージ障害 / Hyper-V鯖におけるSMB3マルチチャンネルのNICの割り当て / VHDでRAID1は / NTFS dedupでallocation unit size 64K / NTFS dedupでメモリ不足 / NTFS dedupでファイルが削除できにゃい / NTFSでファイルレコードのサイズを増加させる / NTFS dedupで仮想ディスクのサイズを変更できませんでした / Hyper-VでvmのMAC重複を探す / Hyper-VでvmのMACが重複 / zfs on Linux on Hyper-Vでdedup / StarWindがHyper-V鯖にinst出来にゃい / Hyper-VでImport-VMがsnapshotファイルをコピーする / Hyper-Vで0x80070015エラー / Hyper-VのNIC / Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / Hyper-Vのバックアップ手段が微妙 / Hyper-Vでvmをunregister / NTFSでdedupバックアップの工夫 / VHDの最適化 / Hyper-Vの管理をHyper-V上のvmから行う / NTFSボリュームの最適化 / NTFSでdedupが柔い / StarWindの堅牢性が / Hyper-V powershellでimport / StartwindでHyper-V / Hyper-Vでvmとホスト間でやりとり / SMB MultichannelとHyper-Vとteaming / Hyper-VのDiskキャッシュが本格的にクズ / VLANとHyper-Vとteaming / 5nine V2V Easy Converter Free Edition / StarWind V2V Converter / Hyper-Vでライブマイグレーション / Ubuntu14 on Hyper-VでZFS / Hyper-Vでレプリカ / Hyper-VにUbuntu入れる
- 2016/6/20 - さいきんのNTFS dedupまとめ参照元
NTFS dedupまとめ


Index


2016/05/29 16:52 
2016/05/28 18:34 
2016/05/27 14:38 
2016/05/26 18:23 
2016/05/25 02:27 
2016/05/24 14:56 
2016/05/23 01:57 
2016/05/22 19:14 
2016/05/21 20:10 
2016/05/20 14:00 
2016/05/19 14:48 
2016/05/18 14:04 
2016/05/17 01:05 
2016/05/13 23:52 
2016/05/12 01:53 
2016/05/11 23:53 
2016/05/10 22:15 
2016/05/09 01:09 
2016/05/08 18:10 
2016/05/07 21:52 
2016/05/06 22:55 
2016/05/05 23:57 
2016/05/04 19:27 
2016/05/03 21:25 
2016/05/02 19:17 
2016/05/01 02:18 
2016/04/30 21:04 
2016/04/29 19:02 
2016/04/28 18:00 
2016/04/27 14:26 
2016/04/26 16:08 
2016/04/25 13:50 
2016/04/22 18:11 
2016/04/21 13:38 
2016/04/20 13:17 
2016/04/18 13:00 
2016/04/17 23:19 
2016/04/16 12:36 
2016/04/15 22:31 
2016/04/14 18:49 
2016/04/13 20:21 
2016/04/09 18:07 
2016/04/08 02:47 
2016/04/07 14:08 
2016/04/06 03:35 
2016/04/05 17:18 
2016/04/04 00:52 
2016/04/03 15:27 
2016/04/02 00:50 
2016/04/01 10:20 
2016/03/31 03:34 
2016/03/30 08:20 
2016/03/29 22:10 
2016/03/28 20:45 
2016/03/27 00:58 
2016/03/26 19:58 
2016/03/25 03:30 
2016/03/24 00:01 
2016/03/19 19:07 
2016/03/18 01:21 
2016/03/17 22:44 
2016/03/16 19:33 
2016/03/15 00:59 
2016/03/14 18:44 
2016/03/13 12:55 
2016/03/12 15:32 
2016/03/11 22:51 
2016/03/10 18:07 
2016/03/09 22:40 
2016/03/08 18:13 
2016/03/07 13:00 
2016/03/06 13:59 
2016/03/05 19:18 
2016/03/04 13:09 
2016/03/03 21:14 
2016/03/02 14:48 
2016/03/01 10:23 
2016/02/27 22:46 
2016/02/26 10:22 
2016/02/25 09:12 
2016/02/24 12:09 
2016/02/23 20:18 
2016/02/22 13:17 
2016/02/21 23:00 
2016/02/19 05:18 
2016/02/18 04:25 
2016/02/17 00:23 
2016/02/16 04:46 
2016/02/15 13:08 
2016/02/14 02:56 
2016/02/13 01:19 
2016/02/12 23:57 
2016/02/11 20:26 
2016/02/10 17:29 
2016/02/09 10:33 
2016/02/08 01:47 
2016/02/07 23:53 
2016/02/06 18:20 
2016/02/05 02:05 
2016/02/04 01:00 
2016/02/03 12:17 

↑recent | ↓old | 20 index | 100 index | 300 index | 記事5件 | 記事10件 | 記事20件 |最新5件 |FAQ | カテゴリ一覧 | Index |