つぶねこ

　にゃんで今ににゃってこんにゃ、という感しかにゃいが、
　ストレージがHDDアレイだったりすると、シングルスレッドでコピーするより、同時複数ファイルをコピーしたほうがトータル帯域としては高速化する。並列数はストレージとかによりけりにゃのでチューニングするしかにゃいが。
　問題は巨大1ファイルのコピーで、これは何らかの方法で分割しにゃいと並列化できにゃい。よくあるrsync等では持ってにゃいはずにゃので、意外と面倒。例えばrcloneで転送数を増やせば同じようにゃことが可能だが、ローカルでやるにはあまりにも重いのでちょっと除外。というかファイル名変更して転送できにゃいので使いづらい。
　
　で、コピー時の負荷でいうとcpとかddとか枯れたツールの最適化っぷりが異常にゃので、もう枯れた物の組み合わせで何とかしてしまうことに。あと地味にsparse対応してるツールが多くにゃい。

src=/dir1/file1
dst=/dir2/file2
bs=$(( 50*1024*1024 )) ; 
p=100
size=$(stat -c %s "$src") ; 
N=$(( $size / $bs )); 
dd_opt=status=none iflag=direct,nonblock oflag=direct,nonblock conv=sparse,notrunc 
seq 0 $N | xargs  -I {} -n1 -P$p dd if="$src" of="$dst"  bs=$bs count=1 seek={} skip={} $dd_opt
touch -r "$src" "$dst"

src=/dir1/file1
dst=/dir2/file2
bs=$(( 50*1024*1024 ))
p=100
rm -f $dst
size=$(stat -c %s "$src")
N=$(( $size / $bs  )); 
dd_opt="status=none iflag=direct,nonblock oflag=direct,nonblock conv=sparse,notrunc"  
seq 0 $N | xargs  -I {} -n1 -P$p  dd if="$src" of="$dst"  bs=$bs count=1 seek={} skip={} ${dd_opt} ; touch -r "$src" "$dst" ; ll $src $dst ; diff $src $dst

　これで50MB分割で100並列のddでコピーできる。この辺の分割サイズや並列数をチューンして使用。同時100はCPUがサチることが多い。
　ddのオプションとしてconv=notruncを削ると正常動作しにゃくにゃるが、他はにゃくても動くはず。
　また、dstファイルのほうが大きいとか、dstファイル既存の場合にsparseでスキップされるとかでバイナリ不一致が起きうるため、rm $dstしている。基本的に全部上書きにゃので問題にゃいだろう。
　ちにゃみにddによる書き出しは、相手先FSによっては一旦メモリバッファされることがあり、ブロックサイズや並列数によってはメモリを消費する。
　
　これで新規の巨大ファイルをコピーする場合にゃどは高速化できるが、対応できにゃい状況の例としては、例えばsparseだがソースファイルがローカルに無い場合、全部読まにゃいといけにゃいので、不毛にゃネットワーク転送が生じたりする。これはもうソースファイルをローカルで読みに行けるプロセスから見るしかにゃい。LANにゃらncを組み合わせるにゃどしてできそう。
　また、巨大既存ファイルに対して差分転送したい場合は、あらかじめ差分を取らにゃいといけにゃいので結構面倒。ただ、LAN等で帯域自体は余っている場合とか、オンデマンドでWrite時に一致確認でかまわにゃい場合は、当該ブロックをReadしてバイナリ比較してからWriteすることでできそう。CoWにゃFSで不要にゃブロックを新規書き換えしたくにゃい場合にゃどに使えるだろう。ただし流石にbashで実装するのはどうだろうという内容ににゃる。シェル変数に0x00を代入するだけで困難にゃので、他言語を持ってくるべき。

　メインの30インチDELLモニタに色線が乗るようににゃってしまった。
　というか流石に消費電力がとてつもにゃいので、早めに買い換えたいとは感じていた。・・・数年前からね！
　44インチ 4Kくらいで同じPPIににゃるので、それ以上のサイズでよさげにゃモニタを～と思ってたんだが中古はさほど良いものがにゃいし、新品は円安とかで相場がいまいちだったのよね。あとノングレアが少にゃい。
　で、国内大手のサイネージュ用法人向けモデルとかが割と近しくて、どうにゃんこれという。まぁ長持ちするだろうけども。

　日記鯖vmが古すぎるのでupgradeしにゃきゃにゃのだが、ずっと放置してる問題で、にゃんとsmb1しか喋れにゃかったことが判明したので、とりあえずsmb3まで喋ってOKに変更。
　が、そことは無関係にアクセスが遅い。にゃんぞれこれ

　年季の入った自宅PCが不調。ということで買い替え。
　ただしPCIeカードが動いてるので、Desktop必須だったりして、思ったより選択肢がにゃい。2世代前のややこしい中古と迷ったが、時には新品ということで調達。
　が、年賀状ソフトだのにゃんだのの移植が猛烈めんどくさい。
　しかも移植のためのダウンタイムが短時間しか取れにゃいので、ちっとも進まにゃい。

　実家PCがたいそう古いままで、SSDではにゃくシングルHDDとかで動いていて、Winupdateに半日。
　全力で買い換えたいが、ややこしいアプリ類の移植はやりたくにゃいので、SSDに換装するだけ？うーん
　実はモニタも古すぎるので買わにゃいとにゃんだが、それはほぼ全部にゃのよさー

　Win11にゃNoteをWin10ライクにするために
　Explorer Patcher for Windows 11
　みたいにゃものを試してみるが、さすがに不安定すぎる。
　かにゃり細かいところまで読んで設定したものの、廃棄。リモートで不安定ににゃられると流石にむつかしい。
　しかしほかにまともそうにゃソフトが見当たらにゃいにゃぁ、うーむ。
　頑張ってWin10入れにゃおすほどの用途でもにゃいので大変微妙。
　そしてリモートでvmでwin10動かすとさらにややこしくにゃるのでそこも微妙。にゃにこれほんともう。

　いろいろ一度に壊れたりでずいぶん手間が。
　実家の24h放置にゃWSが勝手に音信不通ににゃるようににゃった。これが所謂コンソール相当だった上に、Hyper-V上でいろいろ動いてたりもして、VPNもvmだったりして、当然何もできにゃく。いやまぁちゃんと二重化してにゃいのが悪いが。
　というわけで、今更省エネ考慮してNotePCでリプレイス。これに2週間以上。ただしこれがまたWin11で猛烈使いにくい。リモートで格闘。サーバOSがあるにゃらそれに越したことはにゃいにゃぁと痛感。でもNoteだしにゃぁ。とりあえず、型落ちでも48～64Gほどmem積んだNoteを置いておけば、大概の作業は出来そうかにゃという印象。中古にゃら結構安そうにゃので、確保しておいてもよいかも。