つぶねこ

@もじらもーど。
↑recent | ↓old | 20 index | 100 index | 300 index | 記事5件 | 記事10件 | 記事20件 |最新5件 |FAQ | カテゴリ一覧 | Index |
2019/8/9 18:21
さいきんのnfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか

 いろいろ棚上げされてた案件を再び調査。
 
 目標:
  esxiでマウントしたzfs鯖において、vm毎にzfsを作り、zfs send等による差分backup等を実現する。
 
 条件:
  ESXi 6.5
  ubuntu server 18
  nfs v3
 
 (nfsがv3にゃのはv4の挙動で気持ち悪いものがあったからだが、これは別途検証しにゃおしてもよい時期ではある。)
 
 実験1:
  zfs create pool/zfs1
  mount server:/pool/zfs1 as datastore1
  copy vm0/* datastore1/vm1/
  register datastore1/vm1/*.vmx as vm1
  poweron vm1
 この状態ではすべて問題にゃく動く。
 
 実験2:
  zfs create pool/zfs1/zfs2
  cp vm0/* datastore1/zfs2/
  register datastore1/zfs2/*.vmx as vm2
  poweron vm2
 これは失敗する。datastore上に子zfsを作り、そのまま何もせずesxから参照している。
 power on手前までは正常。コピーにゃどは出来ており、権限にゃどの問題では無い。
File system specific implementation of Lookup[file] failed
Failed to create swap file '〜〜.vswp' : Bad parameter
 がlogに出ているので、swap生成で失敗しているようだが、ちょっと原因が分からにゃい。
 
 実験3:
  create vm datastore1/vm3/
  add hdd vm3 datastore1/zfs2/*.vmdk
  poweron vm3
 これは正常に動作する。
 つまり、vmのワークdirを従来のdatastore上に置けばswapがそこに生成されるため、vmdkは子zfs上に置いても動作するということににゃる。
 
 実験2において.vmxのsched.swap.derivedName行を削除しておくと、
Failed to create swap file '//hoge.vswp' : Bad parameter
 という表示ににゃることから、swapファイルの生成先pathが異常ににゃる模様。
 
 実験4:
  zfs create pool/zfs1/zfs3
  mkdir datastore1/zfs3/dir
  cp vm0/* datastore1/zfs3/dir/
  ln -s datastore1/zfs3/dir /dir
  register datastore1/zfs3/dir/*.vmx as vm3
  poweron vm3
 これは動作する。
 swapファイルのpathの前半が消滅して/を見に行くようにゃので、1段dirを掘って、/にsymlinkを張るとちゃんと見に行って動く。
 
 
 で、そもそもswapファイルだけの問題であれば、hostの指定したdatastoreを使うといったオプションがあるはずにゃのだが、あれも動かにゃい。謎。
 
 
 というわけで、この条件下ではちょっとバグがキツくて実用にはしんどそう。
 しかし、nfs3でもおよそ問題にゃくアクセスできているし、大半の技術的問題は無くにゃって居るようだ。
 nfs4にゃら現状でも動作するかもしれにゃい。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
▼ vmware 関連記事
▼ vmware 関連記事     一覧メニュー    (全110件表示)
firefoxでフォーム自動送信 / vmの反応が遅い / vmdkを分割してパフォーマンス維持 / vmdkサイズと分割 / vmにvmdkを追加するとbootしにゃい / nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / esxでweb clientのログインが阻害される / esxのvmで異常にゃレイテンシ / ESXiでSSDのWriteが遅い / vmware NIC数が足りにゃい / vmware ESXi 6.5 / Veeam Backup Free Edition試用 / Unitrends Enterprise Backup試用 / Trilead VM Explorer試用 / Thinware vBackup試用 / Foglight for Virtualization, Free Edition試用 / OpenDedup試用 / パススルーとRDMで仮想化NAS / ESX4u1のsfcbdがメモリリーク / ソフト試用 SmoothWall / #vmwareでpfsense / #ソフト試用 Nexenta Stor / iSCSIとESXと再接続 / ソフト試用 ESX 4 update 1 / vmは安易に巻き戻せにゃい / ESX鯖のバックアップ先 / ESX4メモまとめ / ESX鯖にSSDでsnapshotが強い / ESX4用バックアップスクリプトメモ / freenasのiSCSIやnfsが遅いのでubuntuに乗り換えてみる / freenasのiSCSIがやっぱり遅い / ESX4のswapファイルを改善してみた / ESX4のswapファイル / ESX4のdatastoreをNFSに / ESXi4のバックアップ用にnfsマウント / ESX4はESX4iのラインセンスで / ESXi4のsshが遅い / ESXi4のSSH認証を自動化 / ESXi4でrsyncdが使いたい / ESXi4でrsyncが使いたい / ESXi4のpythonでsparseにゃファイルコピー / vmware server 1.xからESX4へvm移行 / CPUキャッシュとvm / vmware ESX4iのメモリ共有 / にゃんでも仮想化 / ESXi4でsshが使いたい / ソフト試用 vmware player / ESXi4にSSHで入れるようにする / ESXi4の2008 R2が不安定 / ESXi4のWinにゃvmのvmdkを圧縮 / ソフト試用 ESXi4からメール送信 / ESXi4のvmバックアップ / ソフト試用 vmware vifs.pl / ソフト試用 VMware vCenter Converter / ソフト試用 VMware vSphere CLI / ソフト試用 vmware ESXi4をUSBからboot / ソフト試用 vmware ESXi 4.0 vSphere 4 / vmホスト落ち / vmware Server 1.xのCPU / vmware Server 1.xのキャッシュ関連 / vm雛形設定 / linuxでvmware server 1.xが遅すぎる / vmware server 1.xのNATでreject / vmware server @linuxとオープンファイル数 / vmで勝手にIPが変更される / vmware serverのメモリスワップ設定 / vmのバックアップを差分で / vmware vmdkの圧縮 / vmware server 1.x @linuxと2003でディスクエラー / Winファイル鯖をvmで / vmware server 1.xをlinuxで / vmware server 1.xのconsoleのInventoryが時に壊れる話 / ソフト試用 NHCでディスクが開けにゃい / vmware serverのゲストネットワークが通らにゃくにゃる3 / vmware serverのゲストネットワークが通らにゃくにゃる2 / vmware serverをAthlon64 X2環境で / vmにゃlinuxのコピー時に変えるべき部分メモ / vmのバックアップ追記 / vmware serverのゲストネットワークが通らにゃくにゃる / vmware serverのRun this virtual machine as:をLocal Systemにしたいのだが / vmにゃLinuxをsuspendから復帰するとethがlink upしにゃい / vmware server consoleのInventoryのvm並び順を変える / squidをvmwareで / vm環境保全計画5 / vm環境保全計画4 / vmware-cmd.bat suspendがtimeout / vmwareの仮想ディスクを分割 / vm環境保全計画3 / vmware上のLinuxのクロックがずれまくる3 / vmware serverでディスク足してったらPCI不足 / vmware上のLinuxのクロックがずれまくる2 / 仮想PCのIP設定2 / vmware serverにvm追加スクリプトを考えてみる / vm環境保全計画2 / vm環境保全計画 / vmware上のLinuxのクロックがずれまくる / /etc/udev/rules.d/z25_persistent-net.rulesの生成をやめる / vmwareのバックアップ鯖はアーキテクチャ違い / vmware Serverの世代スナップショットもどきを軽量に / vmwareゲストがホスト色数に引きずられる / 仮想PCのIP設定 / debian etchをvmwareでコピーするとeth0がeth1,eth2・・・ににゃる / vmware serverとconsoleでにゃんかエラー対処 / ソフト試用 vshadow.exe / vmwareがスワップして遅い / vmware server consoleでハング / ソフト試用 vmware-cmd.bat / ソフト試用 vmware server / ソフト試用 Vmware Server for linux / ソフト試用 Virtual Disk Driver
2019/7/8 5:05
さいきんのzfs鯖とdevice timeout

 ZFSで推奨されているのはjBODであり、そりゃまぁqueueの並列化を考えてもH/WでRAIDされてるより単体ドライブがたくさん見えてた方が速いよねということにゃのだが、実際どういう手段があるかというと、
 ・SATAそのまま
 ・SAS HBA
 ・SAS RAID jBOD設定
 ・SAS RAID RAID0設定
 とかが考えられる(FCは似たようにゃものにゃので略)。
 問題はドライブが死んだときの挙動がいろいろバラエティ豊富すぎること。
 
 RAID0で使ってるドライブが死んで、コマンド刺さったまま帰ってこにゃくにゃるってのは、まぁギリギリ許せるとしても、jBODやHBA接続でそうにゃるのはちょっとおかしいのではという。本来指定のtimeout値でまぁリトライとかするにせよ死亡確定されるはずにゃんだが。SATAはそのあたり往生際の悪いのが多い印象。
 
 で、H/WでRAID1とか組んでると、大概はRAID板が切り離してくれるわけで、その当たりの制御は助かるにゃぁと。
 
 そうにゃるとまぁzfs mirrorで使うにゃらH/WでRAID1したのを集めて使うことで、多少のパフォーマンス低下とデータ化け不可避を受け入れれば、有りかにゃぁという場面も出てくる。
 本来はHBAやjBODで使う場合もきちんと切り離し出来るべきにゃんだが、ZFSにはそういった機能が全くにゃいのよね・・・。普通にtimeout指定できれば良いのに。
 
 Linuxの場合 /sys/block/sda/device/timeout あたりを下げておくと、ZFSで直接ドライブを見てる場合には素早く切り離せるはず、にゃんだが結構時間がかかる。
 
 ちにゃみにESXiで仮想diskを食わせてる場合は物理diskが死ぬとvmが止まる。階層化が多すぎていろんにゃところでリトライとtimeoutが入ってる。パススルーしてたらにゃんとかにゃるかもしれにゃい。そういった面でも未だH/WにゃRAID板には使いどころが残っているのかも。

▼ RAID 関連記事
▼ RAID 関連記事     一覧メニュー    (全3件表示)
遅くにゃるだけRAID / zfs鯖とdevice timeout / LSI RAIDでパトロールread
▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
- 2001/6/23 - IDE-RAIDを買う- 2001/12/22 - Escalade6400でRAID1+0- 2002/11/16 - さいきんの散財日記 ASUS A7V333 RAID- 2003/12/23 - さいきんのRAID再構築とHDD不足- 2003/12/24 - さいきんのRAID再構築- 2004/12/18 - Promise FastTrak SX4000でRAID5ファイル鯖- 2004/12/26 - さいきんのRAIDでファイル鯖が便利- 2005/1/20 - さいきんのPromise FastTrak SX4000 RAID5速度- 2005/1/22 - さいきんのRAIDと安定性- 2005/2/14 - さいきんのEscalade RAID10をRAID5に- 2005/3/4 - さいきんのSX4000 RAID5 2枚差し- 2005/3/18 - さいきんの惰性でファイルサーバー構築 Escalade6400でRAID5- 2005/4/6 - さいきんのACARD AEC-6897でRAID5- 2005/4/8 - さいきんのACARD AEC-6897でRAID0- 2005/4/9 - さいきんのACARD AEC-6897でRAID1- 2006/1/17 - さいきんのPromise SX4000でRAID5組み直し- 2006/1/23 - さいきんの惰性で3ware Escalade6400でRAID5組み直し- 2006/1/27 - さいきんの惰性でPromise SX4000でRAID5組み直し- 2006/7/12 - さいきんのファイル鯖のRAIDドライブでWrite速度が出にゃい- 2006/8/15 - さいきんのファイル鯖のRAIDドライブでWrite速度が出にゃい2- 2007/2/8 - さいきんのLinuxでRAID5鯖- 2007/5/1 - さいきんのICH7Rに後からAHCIだのRAIDだの対応- 2007/5/9 - さいきんのDebianにゃSoftRAIDで自動resync- 2007/5/16 - さいきんのICH7でRAID遊び- 2007/7/20 - さいきんの散財日記 RocketRAID 2312- 2007/7/26 - さいきんの外付けRAID箱自作 1- 2007/7/30 - さいきんの外付けRAID箱自作 2- 2007/8/6 - さいきんの外付けRAID箱自作 3- 2007/8/9 - さいきんの外付けRAID箱自作 4- 2007/8/13 - さいきんの外付けRAID箱自作 5- 2007/8/17 - さいきんのBIOSとMarvell RAID Driver- 2007/8/30 - さいきんのdebian RAID install メモ- 2007/10/2 - さいきんのPC不調 RAID落ち- 2007/10/16 - さいきんの操作ミス RAID落ち- 2007/10/30 - さいきんのRAID落ち- 2007/11/12 - さいきんのLinux RAID5パフォーマンス傾向- 2007/11/27 - さいきんのLinuxで3玉RAID10がおもしろそう- 2008/1/28 - さいきんのRAID落ち- 2008/2/1 - さいきんのRAID落ち2- 2008/3/26 - さいきんのRAID不調- 2008/3/28 - さいきんのRAID不調- 2008/5/9 - さいきんのRAIDエラー- 2008/6/3 - さいきんのRAID移行- 2008/9/7 - さいきんのRAID組み直し- 2008/9/15 - さいきんのWD10EACSは倉庫RAIDにいいかも- 2009/5/14 - さいきんじゃにゃいメモ HighPoint RAID Management Consoleのデフォルトアカウント- 2009/7/3 - さいきんのRAIDにゃWinのコピーでハマる- 2009/7/31 - さいきんの共有フォルダのシャドウコピーがRAID落ちで消失- 2009/8/19 - さいきんの余りHDDでRAID0- 2009/9/16 - さいきんのRAID不調- 2010/1/4 - さいきんのRAID修復- 2010/11/10 - さいきんのlenovo RD120のServeRAID-8kが酷い- 2011/3/1 - さいきんのesxiでLSIのMegaRAID- 2011/3/17 - さいきんのopensolarisでRAIDカードが足かせ- 2011/9/26 - さいきんのOpenSolarisでRAIDカード監視- 2011/9/30 - さいきんのOpensolarisでRAIDカードとの相性がおかしい- 2012/4/24 - さいきんのESX, NexentaでRAIDカード監視- 2012/6/28 - さいきんのhpのRAID板をESXiから- 2012/9/3 - さいきんの外付けRAID箱終了- 2015/10/6 - さいきんのPC不調 RAIDキャッシュエラー- 2016/2/18 - さいきんのPC不調 RAID板で沈黙- 2016/4/2 - さいきんのVHDでRAID1は- 2016/7/17 - さいきんのPC不調 LSI RAID1で不良セクタ- 2016/7/20 - さいきんのPC不調 外付けRAID BOXがRAID板を沈黙させる- 2016/12/14 - さいきんのPC不調 RAID情報異常その他の関連記事(自動抽出)
IDE-RAIDを買う / Escalade6400でRAID1+0 / 散財日記 ASUS A7V333 RAID / RAID再構築とHDD不足 / RAID再構築 / Promise FastTrak SX4000でRAID5ファイル鯖 / RAIDでファイル鯖が便利 / Promise FastTrak SX4000 RAID5速度 / RAIDと安定性 / Escalade RAID10をRAID5に / SX4000 RAID5 2枚差し / 惰性でファイルサーバー構築 Escalade6400でRAID5 / ACARD AEC-6897でRAID5 / ACARD AEC-6897でRAID0 / ACARD AEC-6897でRAID1 / Promise SX4000でRAID5組み直し / 惰性で3ware Escalade6400でRAID5組み直し / 惰性でPromise SX4000でRAID5組み直し / ファイル鯖のRAIDドライブでWrite速度が出にゃい / ファイル鯖のRAIDドライブでWrite速度が出にゃい2 / LinuxでRAID5鯖 / ICH7Rに後からAHCIだのRAIDだの対応 / DebianにゃSoftRAIDで自動resync / ICH7でRAID遊び / 散財日記 RocketRAID 2312 / 外付けRAID箱自作 1 / 外付けRAID箱自作 2 / 外付けRAID箱自作 3 / 外付けRAID箱自作 4 / 外付けRAID箱自作 5 / BIOSとMarvell RAID Driver / debian RAID install メモ / PC不調 RAID落ち / 操作ミス RAID落ち / RAID落ち / Linux RAID5パフォーマンス傾向 / Linuxで3玉RAID10がおもしろそう / RAID落ち / RAID落ち2 / RAID不調 / RAID不調 / RAIDエラー / RAID移行 / RAID組み直し / WD10EACSは倉庫RAIDにいいかも / メモ HighPoint RAID Management Consoleのデフォルトアカウント / RAIDにゃWinのコピーでハマる / 共有フォルダのシャドウコピーがRAID落ちで消失 / 余りHDDでRAID0 / RAID不調 / RAID修復 / lenovo RD120のServeRAID-8kが酷い / esxiでLSIのMegaRAID / opensolarisでRAIDカードが足かせ / OpenSolarisでRAIDカード監視 / OpensolarisでRAIDカードとの相性がおかしい / ESX, NexentaでRAIDカード監視 / hpのRAID板をESXiから / 外付けRAID箱終了 / PC不調 RAIDキャッシュエラー / PC不調 RAID板で沈黙 / VHDでRAID1は / PC不調 LSI RAID1で不良セクタ / PC不調 外付けRAID BOXがRAID板を沈黙させる / PC不調 RAID情報異常
2019/6/26 1:31
さいきんのzfs鯖でsnapshot多過ぎ

 定期snapshotにゃzfs poolで、設定が外れてて無限snapshot地獄が。
 pool全体で200k個ほどににゃっていて、消そうとすると主にnfsdの応答が無くにゃるみたいにゃことににゃって、手がつけられにゃい状況に。
 power off/onしてサービスは再開されたがこの大量snapどうしたものか。pool再作成したほうが明らかに早いんだが。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2019/5/23 14:24
さいきんのzfs鯖でdisk full

 disk freeが減ってきたら古いsnapshotを自動で消すようににゃっていたのだが、処理が重すぎて追いつかず、かにゃり開けてあった残容量を食い尽くしてdisk fullに。
 snapshot削除で復旧できたが、vm等の書き込み分はかにゃり巻き戻さにゃいと不整合がありそう。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2019/5/22 14:47
さいきんのzfs鯖でsnapshotのlistが終わらにゃい

 zfs list -t snapshotに5分とかかかってて、いろいろcronで処理してるのが遅延して大変にゃことに。
 原因はsnapshotとりすぎ。30000 snapshotくらいで3分くらいかかるようににゃってる。
 無制限にsnapとれますといっても現実時間で完了できるとは書いてにゃい系のやつ。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2018/10/31 14:22
さいきんのswapに吐かれにくくする

 Ubuntu16でnfsd on zfs鯖だが、メモリが足りてるのにswapに吐かれて、nfsサービスが断続的に止まる件で、
 定期的に
swapoff -a ; swapon -a $a
 すればいいよねってのはともかく、そもそもswapされるのを何とかにゃらんのかということで、
vm.swappiness = 10
 を実験。しかし半日で多少のswap発生。
vm.swappiness = 0
 でも60k程度のswapが発生するんだが、ちょっとにゃんかわかんにゃい
 結局定期的にswapoff; swaponするしかにゃさそう。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2018/9/18 23:05
さいきんのkswapdが高負荷でサービスが止まる

 Ubuntu16でnfsd on zfs鯖だが、nfsサービスが断続的に止まるので調査。
 nfsd周りかと思ったがそうでもにゃさそう。
 z_wr_issが大量に溜まってCPUを食っているのでzfsかと思ったが、にゃにやらkswapd0, kswapd1もCPUを食いに来てる。
 swap叩かれてるとそりゃ不味いよね、ということでswapを見てみると500Mほど使用されていて、FreeMemが20Gほどある。この状態でにゃぜにswap関連が元気にゃのかよくわからにゃい。
 swap自体は何らかのタイミングでメモリ不足ににゃったのかもしれにゃいのでそれは良いとしても。
 
 で
echo 3 > /proc/sys/vm/drop_caches
 という噂を信じてやってみたら、多少マシににゃったが、そういう問題にゃのかどうか・・・
 もちろんswapの使用量は減ってにゃいので、
swapoff -a ; swapon -a $a
 で0にしてみる。
 これできれいさっぱり治ったけど、こんにゃ劇薬ぽいのをポンポン発行していいのかどうかは大変怪しい。どうしたものか。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2018/6/2 5:55
さいきんのlinuxでlsblk

 zfsにゃlinuxストレージとか作ってると/dev/sd??が変化したりして面倒ににゃる。
 そこで/dev/disk/by-??を用いてscsiバスの接続順にゃんかで管理しようってことににゃるんだが、これの対応がわかりづらい。
 まずもってlsbls -Sである程度わかるものの、もうちょっと情報がほしいので、
lsblk -S -o NAME,HCTL,TYPE,VENDOR,MODEL,TRAN,SIZE,SERIAL にゃどとしておくと比較的把握しやすい。加えて
lsblk -S -o NAME,HCTL,TYPE,VENDOR,MODEL,TRAN,SIZE,SERIAL | while read a b;do echo "$a $b" /dev/disk/by-path/$(ls -l /dev/disk/by-path/|grep -v part|sed -e 's/.* pci/pci/'|grep "/$a$"|sed -e 's/ .*//') ; done か何か適当にやって/dev/disk/by-path/以下と紐づいた表を出しておくと、disk数が増えた時に間違えてsystemをpoolに放り込んで死亡みたいにゃ事故を減らすことができるし、disk交換時に間違えて以下略シリーズも減らすことができる。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2017/12/11 12:56
さいきんのZFS on Linux L2ARCのメモリ使用量

 L2ARCを使用する際に消費するメモリサイズだが、以前320byteとか200byteとか言ってたが今時は70byteまで削減されたらしい。
 
 ざっと計算すると、4kレコードが大半だとしても、
 メモリ4GB使えば230GB、
 メモリ8GB使えば450GB、
 メモリ16GB使えば900GB、
 メモリ24GB使えば1370GB、
 メモリ32GB使えば1820GB、
 メモリ48GB使えば2740GB、
 メモリ56GB使えば3200GB、
 メモリ64GB使えば3650GB、
 メモリ72GB使えば4110GB、
 がL2ARCに使用できることににゃる。
 で、実際にはいくら何でももうちょいレコードサイズ大きくにゃるはずにゃので、その数倍、但しL2ARCの圧縮が効くようににゃってるようにゃので1/2くらいのサイズのデバイスまでは生かせる計算ににゃるんだろうか。
 
 zfs_arc_meta_limit_percentのデフォルトが75%くらいだろうから、(物理メモリ-数GB)*0.75で換算すれば合うのかにゃ?
 
 これだとSSDじゃにゃくて古いSASアレイとかをL2ARCに突っ込んでもいい感じかもしれにゃい。その場合L3ARCくらいに位置づけてほしいところだが。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2017/9/14 5:58
さいきんのZFS on Linux基本設定

 纏めにゃいと散逸してるので。
 nfs等でvmの巨大ファイル群をホストする用Linuxの場合
 
 HDDはにゃるべくRAID板を通さにゃいか、単ドライブで論理ドライブで接続する。
 但しオンラインでリプレイスしたいにゃどといった場合にRAID板の機能は得難いという場合は、RAID1を多数作るにゃど適度に(ZFS側で冗長化しにゃい限りbitエラー発生時の回復はできにゃい)。
 速度的にはキャッシュのあるRAID板を通してにゃるべく多数の論理ドライブを見せると速くにゃる。
 
 SATAはエラーモードが気持ち悪いことが多いが、RAID板を通さずに認識できるメリットはある。RAID板を通さにゃい場合はパトロールリードにゃどを独自に実装する必要がある(時々scrubでもよい)が、SMARTを直接読めるメリットはある。
 
 L2CACHEはあった方がよいのだが、メモリも食われるので計算してから追加。
 
 どのHDDが/dev/sd?にゃのかきちんと調査する。
 
 ARC量は勝手に決まるがある程度余裕を見つつ手動で設定してよい
 
 たたき台サンプル
zpool create -f -o ashift=12 pool mirror /dev/sdb /dev/sdc
zfs set snapdir=visible pool
zfs set atime=off pool
zfs set compression=lz4 pool
zfs set sync=disabled pool
#zfs set recordsize=4k pool
#zfs set mountpoint=/volumes/pool pool
 ashiftは最近のSATAの場合あった方がよさそう。
 recordsizeはかにゃり場合による。というか大半の場合遅くにゃるので触るべきでは無い。
 mountpointは指定しにゃい方がよい。たぶん何かがうまく動かにゃくにゃる。
 
 
 Ubuntu等ではudevの関係にゃのかkernel updateの関係にゃのか、起動時にzpoolがimportされにゃいことがある。cronで起動時に一回だけzpool import poolするようにしておくと間違いにゃい。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2017/9/3 2:38
さいきんのZFSのrecordsize

 ZFSをnfs共有してvm上からベンチしてたら猛烈に遅いパターンがあったので対策。
 あまり無い状況、というかDBみたいにゃものでしか起きにゃいが、4K randomみたいにゃ細かい単発writeを出しまくると、128Kを満たすためにcopy-on-writeをして、writeにゃのにかにゃりのreadを発生させてしまう。
 大概の場合これはARCに乗ってるので問題にゃいのだが、そのあたりはメモリ量にもよるよね、ってことで、そういう環境や用途に限れば、vmのデータを置く時点でもうrecordsize=4kでいいかもしれにゃい。
 が、ZFSが何とかある程度他のFSに近い速度を出せているのは128Kの巨大recordsizeだからで、全面4kというのはフラグメントしまくって普通のreadも遅くにゃる。圧縮も効かにゃいし。ちょっと一概には何とも言えにゃい。
 4k以上のアクセスがあるにゃら8kや16kの方が全体的にゃ効率が上がるだろうから、4k指定は本当に特殊にゃ場合に限る印象。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2017/8/29 2:39
さいきんのZFSでlz4

 最近のZFSはcompressの方法としてlz4というのが追加されてるようで、見てにゃいけどベンチではデフォのより全面的に勝ってるらしいので、今後はcompress=lz4というのが正解らしい。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2017/4/1 22:10
さいきんのZFS on linuxでsnapshot dirにアクセスすると削除できにゃい

 以前のzfs on linuxは、.zfs/snapshotにnfsから見に行くと、見えにゃいとか全体が死ぬとか大変香ばしい状況だったのだが、ubuntu16あたりで試したら、nfsクライアントから.zfs以下を見に行っても一応生きてるので、これにゃら普通に使えるかも、と構築してみた。
 が、まだまだ微妙にゃ部分が残っているみたいで。
 
 zfs snapshot して、
 クライアントからls /mnt/hoge/.zfs/snapshot/hoge
 すると正常にアクセスできるのは良いのだが、ここでmountを調べてみると、新規でnfsマウントされてる。
 サーバ側もexportfsに見えてたりして、autofs的にゃ動きににゃっているみたい。
 これらはしばらくアクセスしにゃかったら自動的にumountされるようで、一見よくできてるにゃぁという感触だったのだが、
 zfs destroy snapshot
 しようとしたら、busyににゃってて削除できにゃい。umountも効かにゃい、exportfsも効かにゃいとか順にあかん状態で、nfs-kernel-server restartすると一応手放してくれるみたいにゃんだが、そんにゃものを乱発したくにゃい。
 結局、zfs上に一時的にゃsnapshotがある程度居残るのを妥協する形で、cronで1h毎に削除とかかけたら一応動いてるみたい。でもsnapshotあると邪魔にゃ場合はこの仕様はつらいにゃぁ。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2016/8/29 7:00
さいきんのZFS cache死亡

 Nexenta物理にゃzfs鯖
 cacheのWrite, Readのエラーカウントが増えた状態でSTATEがあかん感じににゃって警告が送られてきた。
 Intel SSDが死亡したぽい。
 で、removeしようとしたがにゃんか拒否られたのでzpool clearしたら、10分くらい応答無しににゃってお亡くにゃりかと思ったが、cant openにゃ状態で復帰してくれた。あぶねえ
 原因とにゃったデバイスは触らずに速やかに取り除くというのが原則だがついつい触ってしまうと言う・・・

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2016/3/4 13:09
さいきんのzfs on Linuxでハング

 zfs dedup onにゃlinux vmにいろいろデータ突っ込んで履歴バックアップに使おう編。
zpool create -o ashift=12 pool1 sdb
zfs create -o recordsize=128k pool/share
 にゃpool1に/homeを突っ込んでzfs snapshotするだけのを繰り返してたらI/O busyにゃ状態で止まった。
 psにzfs snapshot〜が居るのでこいつが止まっているのは確かにゃよう。しかしzpool statusで1つのファイルがエラーににゃっているので、I/O回りで起きたエラーが原因か。
 上位レイヤーからはDisk待ちWAITににゃっているが、DiskにはI/Oリクエストは行ってにゃいので何かデッドロックしたようにゃ止まり方。
 zfs snap関連を叩くと帰ってこにゃくにゃるようにゃので、とりあえずrebootしようとしたら、blk_update_request critical target error dev sdb大量。syslog見たらもっとたくさん居た。
 で、リセットして再現させてみると、ある程度しばらく動作するものの、snapshotをいくつか取ってるとI/Oエラーとにゃる。vmにゃのでどこらへんで問題が起きてるのかよく分からにゃい。Hyper-V側の気がするんだが思いつく要素が無いんだよにゃぁ。
 懸念材料としては8割ほど埋まっているのでDiskFullが近いという辺りか。
 でもvmの仮想HDDがwrite失敗してるってのが最も素直にゃ印象。うーん・・・

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2016/2/11 20:26
さいきんのzfs on Linux on Hyper-Vでdedup

 zfs dedup onにゃlinux vmにいろいろデータ突っ込んで履歴バックアップに使おう編。
 zfsとntfsのdedupの違いは過去にいろいろメモったが、要するにzfsは雑だしntfsは遅くて頻繁に膨らむので、現状どっちもどっちと。
 というわけで多重化してみましょうという実験。
 zfs compressは通常にゃら大変使い勝手の良いオプションだが、dedup効率は落ちるのと、vhdxはより一層dedupしづらい物体とにゃるので却下。zfs dedupだけ使用する。
 zfs dedupによってオンラインで巨大データの書き込みがdedupられるのでntfsのように一時的に膨大にゃ空き容量を必要としにゃい。但しメモリは多めに持たせておかにゃいと怖いが。
 そんにゃzfs on linuxにゃvmをhyper-vでホストしてntfs dedupにかける。zfs側で大量の書き込みがあるとその分膨らむが、ある程度dedupされた後にゃのでそこまで深刻にゃことににゃりにくい。
 
 という夢を見たのでやってみる。
zpool create pool1 sdb
zfs create -o recordsize=4k pool1/share
zfs set atime=off pool1/share
zfs set primarycache=metadata pool1/share
zfs set dedup=on pool1/share
zfs set snapdir=visible pool1/share
 4kの指定は過去に膨大にゃI/Oを発生させて死亡する原因とにゃったのでzfs on linuxでも実験である。
 これでrsync hoge /pool1/share
 で放置してたら途中で
blk_update_request: critical target error
 吐いて停止。リセットかけたら長時間disk readしたあとカーネル落ち。再リセットで復帰した。傾向は変わってにゃい模様。
 4k指定しにゃければ割と安定感があるのだが、可変にさせるとdedup効率が落ちるパターンが多いんだよね。
 しかし今回はvhdxをさらにdedupするので、
zpool create -o ashift=12 pool1 sdb
zfs create -o recordsize=128k pool1/share
 で行けるのでは無いかと実験。今のところ安定している。この場合recordsizeは別に無指定で良いとは思うがにゃんとにゃく。
 ashift=16にゃんかにするとどうにゃるのかという興味もあるが、NTFS側で4kブロックでdedupされるにゃら変わらにゃい可能性の方が高いか。

▼ Hyper-V 関連記事
▼ Hyper-V 関連記事     一覧メニュー    (全55件表示)
PC不調 Hyper-Vでvmが凍る / Hyper-VのI/Oは何とかにゃらにゃいか / Hyper-VホストでMove-VMStorageが0x80070005で失敗する / Hyper-Vでストレージトラブル / Server2016のHyper-VでImport-VMが改善 / 共有VHDをマウントすると遅い2 / 共有VHDをマウントすると遅い / Hyper-Vでvm毎に別のディレクトリにレプリケーションする / 仮想プロセッサでの修復不可能にゃエラーによりトリプル フォールト / Hyper-VのVMでSYSTEM THREAD EXEPTION NOT HANDLED / Hyper-V / SMBでキャッシュが効いてる気がする / 2012R2でHyper-V全般 / Hyper-Vのプロセッサ互換 / NTFS dedupまとめ / PC不調 Hyper-V メモリ不足 / PC不調 Hyper-V VMがcritical_process_died BSOD / PC不調 Hyper-V kernel_data_inpage_error srv.sys / Hyper-Vのvmからvm名を取得する / NTFS dedupでメモリ不足 / PC不調 Hyper-V ストレージ障害 / Hyper-V鯖におけるSMB3マルチチャンネルのNICの割り当て / VHDでRAID1は / NTFS dedupでallocation unit size 64K / NTFS dedupでメモリ不足 / NTFS dedupでファイルが削除できにゃい / NTFSでファイルレコードのサイズを増加させる / NTFS dedupで仮想ディスクのサイズを変更できませんでした / Hyper-VでvmのMAC重複を探す / Hyper-VでvmのMACが重複 / zfs on Linux on Hyper-Vでdedup / StarWindがHyper-V鯖にinst出来にゃい / Hyper-VでImport-VMがsnapshotファイルをコピーする / Hyper-Vで0x80070015エラー / Hyper-VのNIC / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / Hyper-Vのバックアップ手段が微妙 / Hyper-Vでvmをunregister / NTFSでdedupバックアップの工夫 / VHDの最適化 / Hyper-Vの管理をHyper-V上のvmから行う / NTFSボリュームの最適化 / NTFSでdedupが柔い / StarWindの堅牢性が / Hyper-V powershellでimport / StartwindでHyper-V / Hyper-Vでvmとホスト間でやりとり / SMB MultichannelとHyper-Vとteaming / Hyper-VのDiskキャッシュが本格的にクズ / VLANとHyper-Vとteaming / 5nine V2V Easy Converter Free Edition / StarWind V2V Converter / Hyper-Vでライブマイグレーション / #Ubuntu14 on Hyper-VでZFS / Hyper-Vでレプリカ / Hyper-VにUbuntu入れる
▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
- 2016/6/20 - さいきんのNTFS dedupまとめ参照元
NTFS dedupまとめ
2016/2/7 23:53
さいきんのzfs on Linux でrsyncが止まる

 zfs compress&dedup on linuxにゃvmでrsync数本走らせたらrsyncが止まる。
 vmstatを見るとcsが高め安定してたり、psでtxg_sync, z_null_あたりが活躍したままににゃってたりして、にゃんかわからにゃいがZFS付近で刺さっているのは確か。
 前から気ににゃってた微妙にSWAPが発生するあたりと絡めて対策しにゃきゃってことで実験。
 
 32GB固定メモリ割り当てにしてARCを/etc/modprobe.d/zfs.confで4GB 24GB 18GBくらいに設定。
options zfs zfs_arc_min=4294967296
options zfs zfs_arc_max=25769803776
options zfs zfs_arc_meta_limit=19327352832
 cat /proc/spl/kstat/zfs/arcstats |grep c_ して確認。
 だいぶ余裕を見たつもりだが、何かの拍子に
task txg_sync blocked for more than 120 seconds.
 みたいにゃのが出る事があるので、まだ何か抱えてるのかもしれにゃい。
 rsyncが終わってから延々とか細いI/Oが続くことがあるのでこの辺にゃんだろう。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2016/1/25 23:21
さいきんのzfs on Linux で容量拡張

 zfs on linuxにゃvmで仮想HDDのサイズを大きくしてもzfs poolサイズが増えてくれにゃいので手順メモ。
 
 ・vmホスト側にゃどでvhdのサイズを拡張する。
 ・各種daemon停止
 ・zpool export pool1
 ・partedでprint free, rm ?にゃどでフリーパーティション削除
 ・partedでresizepart 1 1000GBにゃどで拡張
 ・zpool import pool1
 ・zpool set autoexpand=on pool1
 ・zpool online pool1 /dev/sdx
 
 とかでいけた。思ってたより面倒。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2015/12/17 14:24
さいきんのzfsで履歴バックアップ失敗

 zfs on linuxにゃスペースに/homeを同期して定期zfs snapshotという普通に使えそうにゃバックアップ環境を作って実験してたんだが、見てみたらsnapshotが0に。
 そんにゃはずはと残容量みてみたら残り10g。この残容量では定期snapshot時にdisk free不足と判定してsnapshotを順次削除させているのでこれが原因。
 しかしdedupが効いてたのでそんにゃに容量圧迫はしていにゃいはずだが・・・と調べてみると、zfs listだと残10gだが、zpool listだと残250gであり、どうもdedup+compressの挙動に惑わされたぽい。実際、dedupされにゃさそうにゃ動画ファイルを10gほどコピーしてみたが残10gのまま。
 ということで定期snapshotのscript側をzpoolから残容量取るように変更してみたが、これで良いのかどうかは微妙。

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2015/11/1 23:23
さいきんのLinux on Hyper-Vでzfs dedupにゃ履歴バックアップ

 今更にゃがら、そろそろZFS on Linuxも安定したんじゃ無かろうかということで、Hyper-V上にUbuntuを1つsetup。
 zfs入れてdedup=on, compress=on, atime=off, sync=disabled, snapdir=visible。samba共有してファイルコピー。
 圧縮してることもあってdedup率はやっぱりいまいちだが、とりあえず遅いにゃがらも動いてはいる。robocopyで/mt:120くらいで回しても安定している。
 大量コピーしてるとswapが少々増えてた。コピー時にswapからin/outしてるようだ。極端にメモリ不足という風でも無いのでzfs回りのメモリチューンはする必要があるのかもしれにゃい。
 速度自体はzfsというよりsambaの問題がかにゃりありそう。
 
 /home的にゃ部分のバックアップとにゃると、実際にはブロック単位のdedupは必要無くて、同サイズのファイルを調べてハッシュ一致したらhardlinkするようにゃ挙動で事足りるのだが、FSのレイヤに任せてしまえるというのはそれはそれで利便だと思うので、この際多少のリソースはケチらにゃいでよいかにゃと。

▼ Hyper-V 関連記事
▼ Hyper-V 関連記事     一覧メニュー    (全55件表示)
PC不調 Hyper-Vでvmが凍る / Hyper-VのI/Oは何とかにゃらにゃいか / Hyper-VホストでMove-VMStorageが0x80070005で失敗する / Hyper-Vでストレージトラブル / Server2016のHyper-VでImport-VMが改善 / 共有VHDをマウントすると遅い2 / 共有VHDをマウントすると遅い / Hyper-Vでvm毎に別のディレクトリにレプリケーションする / 仮想プロセッサでの修復不可能にゃエラーによりトリプル フォールト / Hyper-VのVMでSYSTEM THREAD EXEPTION NOT HANDLED / Hyper-V / SMBでキャッシュが効いてる気がする / 2012R2でHyper-V全般 / Hyper-Vのプロセッサ互換 / NTFS dedupまとめ / PC不調 Hyper-V メモリ不足 / PC不調 Hyper-V VMがcritical_process_died BSOD / PC不調 Hyper-V kernel_data_inpage_error srv.sys / Hyper-Vのvmからvm名を取得する / NTFS dedupでメモリ不足 / PC不調 Hyper-V ストレージ障害 / Hyper-V鯖におけるSMB3マルチチャンネルのNICの割り当て / VHDでRAID1は / NTFS dedupでallocation unit size 64K / NTFS dedupでメモリ不足 / NTFS dedupでファイルが削除できにゃい / NTFSでファイルレコードのサイズを増加させる / NTFS dedupで仮想ディスクのサイズを変更できませんでした / Hyper-VでvmのMAC重複を探す / Hyper-VでvmのMACが重複 / #zfs on Linux on Hyper-Vでdedup / StarWindがHyper-V鯖にinst出来にゃい / Hyper-VでImport-VMがsnapshotファイルをコピーする / Hyper-Vで0x80070015エラー / Hyper-VのNIC / Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / Hyper-Vのバックアップ手段が微妙 / Hyper-Vでvmをunregister / NTFSでdedupバックアップの工夫 / VHDの最適化 / Hyper-Vの管理をHyper-V上のvmから行う / NTFSボリュームの最適化 / NTFSでdedupが柔い / StarWindの堅牢性が / Hyper-V powershellでimport / StartwindでHyper-V / Hyper-Vでvmとホスト間でやりとり / SMB MultichannelとHyper-Vとteaming / Hyper-VのDiskキャッシュが本格的にクズ / VLANとHyper-Vとteaming / 5nine V2V Easy Converter Free Edition / StarWind V2V Converter / Hyper-Vでライブマイグレーション / #Ubuntu14 on Hyper-VでZFS / Hyper-Vでレプリカ / Hyper-VにUbuntu入れる
▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2015/2/15 18:11
さいきんのUbuntu14 on Hyper-VでZFS

 最近安定してきたZFS on Linuxの実験をHyper-Vで。あとNFSdもたててみる。
apt-add-repository ppa:zfs-native/stable
apt-get update
apt-get install ubuntu-zfs
mkdir /volumes
zpool create -f -o ashift=12 pool /dev/sdb
zfs set mountpoint=/volumes/pool pool
zfs set snapdir=visible pool
zfs set atime=off pool
zfs set compression=on pool
zfs set sync=disabled pool
zfs create pool/dir
chmod 777 /volumes/pool/dir
 ashiftは必要に応じて。vhdやntfs dedupとの関連は実験しにゃいと分からにゃいにゃ。
apt-get install nfs-kernel-server
echo '/mnt localhost(ro,no_subtree_check)' >> /etc/exports
/etc/default/nfs-kernel-server
RPCNFSDCOUNT=32
/etc/init.d/nfs-kernel-server start
zfs set sharenfs="rw,async,wdelay,no_subtree_check,all_squash" pool/dir
zfs share pool/dir
/etc/default/zfs
ZFS_SHARE='yes'
reboot
showmount -e
 
 ZFS on Linuxの難点としては、NFSやCIFSから.zfs以下が正常にアクセスできにゃい。下手に.zfs以下を見に行くと帰って来れにゃくにゃる。
server::
sudo mkdir -p /share/
sudo mount -t zfs pool/dir@snapname /share/
sudo exportfs *:/share/

client::
sudo mount zfsServer:/share /mnt/
ls -la /mnt/
sudo umount /mnt/

server::
exportfs -uf *:/share
umount /share
sudo rmdir /share
zfs destroy pool/dir@snapname
 とかすることで一連のアクセスができるが、超絶めんどくさい。まぁnfsクライアントの部分は一部automountで省力化できるかもだがこの様子では危にゃっかしい。
 
 にゃので懸案だったzfs+nfsの利便性は大差にゃし。
zfs create pool/dir
zfs share pool/dir
zfs create pool/dir/dir2
zfs create pool/dir/dir3
zfs create pool/dir/dir4
 してもちゃんとdir/dir2にアクセスできるようにするのはnohideやcrossmntにゃんかで可能ににゃるんだが、inodeが被るためかこの状態ではesxからアクセスするといろいろ破壊される。
 vm毎にzfs dir作ったりできれば、zfs上でcloneしてvm量産したり、zfs sendで差分転送バックアップしたりとか強力にゃ動作が可能ににゃるはずにゃんだが、不便にゃ。
 
 細かいところとしてはvhdを拡大してもzpool容量が増えにゃいことが。autoexpandあたりが効いてにゃい感じで、export/importして再起動してzpool online -eしたら容量認識したけど正解が何にゃのかよく分からにゃい。
 他には、鯖をリセットするといった落とし方をした場合にesxからnfsの見え方がおかしくにゃる。ロックできにゃい祭りでかにゃり長時間復帰出来にゃかったり。そもそも起動時にzfsがimportされにゃかったり。そのへんの堅牢性ががっかりにゃので実際使うのにゃらバックアップをかにゃり頑張った方が良い感じ。
 
 
 network系のチューニングとしては
net.core.rmem_default=524288
net.core.wmem_default=524288
net.core.rmem_max=16777216
net.core.wmem_max=16777216
net.core.optmem_max=524287
net.core.netdev_max_backlog=2500
net.ipv4.ipfrag_high_thresh=524288
net.ipv4.ipfrag_low_thresh=393216
net.ipv4.tcp_rmem=4096 524288 16777216
net.ipv4.tcp_wmem=4096 524288 16777216
net.ipv4.tcp_window_scaling=1
net.ipv4.tcp_timestamps=0
net.ipv4.tcp_moderate_rcvbuf = 1
sunrpc.tcp_slot_table_entries=128
sunrpc.udp_slot_table_entries=128
 にゃどがあるらしいがベンチしてにゃい。
 
 悩ましい留意点としては、
 ・ZFS on Ubuntu上のvmdkに対してzfsリアルタイムdedupが可能。但しメモリバカ食いにゃので非実用的にゃのでこれは選から外して良い。
 ・ZFS on Ubuntu上のvmdk等に対してzfs圧縮が可能。高性能でsparseにゃvmdk入力に対して極めて強力。
 ・Hyper-V上のvhdに対してNTFS圧縮が可能。但し性能悪い上にdedupと相性悪い。
 ・Hyper-V上のvhdに対して遅延dedupが可能。高効率で圧縮も効くので容量節減には是非使いたい。
 という状態で、zfsの圧縮をONにするとNTFSのdedup効率は壊滅的に、しかしzfs圧縮をOFFにしてしまうとWrite量が無駄にゃことに。まぁNTFSのdedup使いたかったらこうするしかにゃい感じだが。

▼ Hyper-V 関連記事
▼ Hyper-V 関連記事     一覧メニュー    (全55件表示)
PC不調 Hyper-Vでvmが凍る / Hyper-VのI/Oは何とかにゃらにゃいか / Hyper-VホストでMove-VMStorageが0x80070005で失敗する / Hyper-Vでストレージトラブル / Server2016のHyper-VでImport-VMが改善 / 共有VHDをマウントすると遅い2 / 共有VHDをマウントすると遅い / Hyper-Vでvm毎に別のディレクトリにレプリケーションする / 仮想プロセッサでの修復不可能にゃエラーによりトリプル フォールト / Hyper-VのVMでSYSTEM THREAD EXEPTION NOT HANDLED / Hyper-V / SMBでキャッシュが効いてる気がする / 2012R2でHyper-V全般 / Hyper-Vのプロセッサ互換 / NTFS dedupまとめ / PC不調 Hyper-V メモリ不足 / PC不調 Hyper-V VMがcritical_process_died BSOD / PC不調 Hyper-V kernel_data_inpage_error srv.sys / Hyper-Vのvmからvm名を取得する / NTFS dedupでメモリ不足 / PC不調 Hyper-V ストレージ障害 / Hyper-V鯖におけるSMB3マルチチャンネルのNICの割り当て / VHDでRAID1は / NTFS dedupでallocation unit size 64K / NTFS dedupでメモリ不足 / NTFS dedupでファイルが削除できにゃい / NTFSでファイルレコードのサイズを増加させる / NTFS dedupで仮想ディスクのサイズを変更できませんでした / Hyper-VでvmのMAC重複を探す / Hyper-VでvmのMACが重複 / #zfs on Linux on Hyper-Vでdedup / StarWindがHyper-V鯖にinst出来にゃい / Hyper-VでImport-VMがsnapshotファイルをコピーする / Hyper-Vで0x80070015エラー / Hyper-VのNIC / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / Hyper-Vのバックアップ手段が微妙 / Hyper-Vでvmをunregister / NTFSでdedupバックアップの工夫 / VHDの最適化 / Hyper-Vの管理をHyper-V上のvmから行う / NTFSボリュームの最適化 / NTFSでdedupが柔い / StarWindの堅牢性が / Hyper-V powershellでimport / StartwindでHyper-V / Hyper-Vでvmとホスト間でやりとり / SMB MultichannelとHyper-Vとteaming / Hyper-VのDiskキャッシュが本格的にクズ / VLANとHyper-Vとteaming / 5nine V2V Easy Converter Free Edition / StarWind V2V Converter / Hyper-Vでライブマイグレーション / Ubuntu14 on Hyper-VでZFS / Hyper-Vでレプリカ / Hyper-VにUbuntu入れる
▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / Ubuntu14 on Hyper-VでZFS / #ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 / #zfsでscrubすると重い / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ2 / #Opensolarisでmirrorのためのパーティション作成 / #OpenSolarisでディスク表面検査 続続 / #OpenSolarisでディスク表面検査 続 / #zfsのrecordsizeを小さくすると遅い / #nfs共有は入れ子にしにくい / #opensolarisのswap領域を増やす / #ZFSでsnapshotを削除しようとすると凍る / #負荷をかけると落ちるNAS / #nfs鯖のファイルをバックアップしたい7 / #Opensolarisでzfsにゃnfs鯖 作業メモまとめ / #nfs鯖のファイルをバックアップしたい6 / #nfs鯖のファイルをバックアップしたい5 / #nfs鯖のファイルをバックアップしたい4 / #FreeNASでLink Aggregation / #FreeNASの書き込みが脈動する / #FreeNASでzpool createがこける / #FreeNASの/boot/loader.conf / #nfs鯖のファイルをバックアップしたい3 / #FreeNASをfullインストール / #nfs鯖のファイルをバックアップしたい2 / #nfs鯖のファイルをバックアップしたい1 / #opensolarisでdedupはやっぱむり / #ZFSのHDDがエラーを吐いたので無視してたら落ちた / #NexentaStorでswap不足 / #ソフト試用 NexentaStor CommunityEdition 3.04 / #OpenSolarisでupdate? / #OpenSolarisでDedupしてたらハング / #NexentaStorのVMが酷い / #ZFSのHDDがエラーを吐いたので無視 / #ZFSのHDDが壊れたのでリプレイス / #OpenSolarisでディスク表面検査 / #OpenSolarisでRAID1 / #OpenSolarisのsambaを新しくする / #OpenSolarisでsambaがおかしい / #OpenSolarisでsamba / #OpenSolarisのCIFS共有が怪しい / #OpenSolarisのidmapdがメモリリーク / #zfsのsnapshotを削除するのに長時間かかる / #RD120でreadが遅い / #opensolarisで起動後に画面が表示されにゃい / #OpenSolarisでdedupにゃNAS / #NexentaStorのidmapdがメモリリーク / #OpenSolarisでCIFS鯖 / #opensolarisでnfs鯖 / #ソフト試用 OpenSolaris / #FreeNAS落ち / #FreeNASでZFSでメモリ不足 / #nexentaでWinのドメイン参加に失敗する / #vmwareでpfsense / #ZFSでブロックデバイス / #NexentaCore3でdedup / #Nexentaで定期snapshot / #NexentaCore3でapt-get / #NexentaCoreでCIFS共有 / #ソフト試用 NexentaCore / #ソフト試用 Nexenta Stor / #ソフト試用 NexentaStor / #FreeNASのZFSでsnapshot自動化
2014/10/3 8:31
さいきんのZFS raidzの再構築

 SATA 2TB x6 raidz
 M/B直結という素直にゃストレージがあったんだが、1台壊れたのでDisk交換したんだよね
resilver completed after 113h14m with 0 errors
 でresilver走ったんだけど、100%ににゃるまで3日くらいかかって、こりゃ他のDisk巻き添えで死ぬんじゃにゃいかとか思ってたら、100%ににゃってから2日以上かかって、ご覧の有様。
 ZFSでリビルドが速いのはデータが少にゃくてmirrorの時だけだね(笑)

▼ ZFS 関連記事
▼ ZFS 関連記事     一覧メニュー    (全107件表示)
#nfs over ubuntu zfsとesxi6.5でvm毎snapshotは使えるか / #zfs鯖とdevice timeout / #zfs鯖でsnapshot多過ぎ / #zfs鯖でdisk full / #zfs鯖でsnapshotのlistが終わらにゃい / #swapに吐かれにくくする / #kswapdが高負荷でサービスが止まる / #linuxでlsblk / #ZFS on Linux L2ARCのメモリ使用量 / #ZFS on Linux基本設定 / #ZFSのrecordsize / #ZFSでlz4 / #ZFS on linuxでsnapshot dirにアクセスすると削除できにゃい / #ZFS cache死亡 / #zfs on Linuxでハング / #zfs on Linux on Hyper-Vでdedup / #zfs on Linux でrsyncが止まる / #zfs on Linux で容量拡張 / #zfsで履歴バックアップ失敗 / #Linux on Hyper-Vでzfs dedupにゃ履歴バックアップ / #Ubuntu14 on Hyper-VでZFS / ZFS raidzの再構築 / #Server2012と比べて分かるZFSの活用法 / #ZFSでsyspoolのHDDを移動 / #Nexentaでceドライバ / #ZFS導入時のRAID環境選び / #zfsのL2ARCとメモリ / #ZFSストレージのディスクエラー / #iscsi targetを束ねてRAID考察 / #iscsi targetを束ねてRAID実験 / #Nexentaでiscsi initiatorがこけた場合の対処 / #Nexentaでiscsi Multipath initiator / #ZFSとRAIDカードの機能的相性 / #RAID1でもデータ破損 / #ZFSのHDDエラー / #SolarisのDedupとARC関連 / #ZFSが遅い dedup編 / #ZFSが遅い / #ZFSでdedup / #ZFSのキャッシュ制御 / #ZFSが低速化 / #NexentaStorのnfsでIP alias / #NexentaStorのsyspoolを有効利用したい / #zfs sync / #NexentaStor 3.11メモ / #opensolarisのzfsパラメータを表示 / #zfsのsnapshotの使用容量 /