つぶねこ

　Win2kを使っていて思うことの1つに、大きにゃファイルをコピーすると、大量のスワップが発生して、他のアプリケーションが極端に重くにゃってしまうことの不思議がある。
　ファイルをコピーすれば、それに応じてキャッシュサイズを増加させる、これには納得がいく。便利にゃ機能と言えるだろう。だが、ほかのアプリが使っているメモリをスワップさせてまでキャッシュサイズを増加させるのはおかしい。このディスクキャッシュの上限値を設定する方法を探しているのだが、まだ見つけられていにゃい。ご存じの方はたれ込んでいただきたい。
　さて、ともかく大きにゃファイルを扱うとキャッシュがメモリを圧迫するという現象に対して、ネットワークドライブであればこの現象は起きにゃいという定説がある。むろん、日頃使用する上でこの説はみごと実証され、ワザとして伝承されたりしていたのだが、これをきちんと測定した者が居にゃいので、使った者にしか分からにゃい秘伝ににゃってしまっていた。
　そこで、パフォーマンスモニタをいじくってるついでに、これを測定してみることにした。
　まず、状況としては、200Mのファイル5つをlhaで固めるという作業を考える。Cドライブに圧縮前のファイル、任意ドライブに圧縮して出来たlzhファイルを作れば作業完了である。ただし、実際に圧縮処理をすると時間がかかるので、無圧縮でのlzhつまりtarで固めているようにゃ状態でテストした。実際に圧縮した場合はグラフがにゃだらかににゃるだけである。
　ディスクドライブは以下のようにゃ構成である。
　・C: ローカルHDD 圧縮元ファイル 1GB
　・D: ローカルHDD 圧縮先その１
　・N: ネットワークドライブ別マシン圧縮先その２
　・Z: ネットワークドライブローカルHDDを共有圧縮先その３
　
　以下のグラフの凡例は

　白がディスクキャッシュサイズ
　緑と赤がローカルHDDのRead/Write
　青がネットワーク転送量である

　また、テストに使ったマシンのメモリは512MBである。

　実験1： C:→ D:に圧縮
　最も良くある状況として、ローカルHDDからローカルHDDへ圧縮してみた。
　
　青のネットワーク転送量は当然０のまま。
　緑と赤のローカルHD転送量はライトバッファに溜まっている分があるので、完全には同期しにゃい。ちにゃみに、アプリケーション側では、緑のReadが0ににゃった時点で圧縮完了とにゃる。
　ここまでは至極当然にゃのだが、大きにゃ問題が見て取れるのは白のディスクキャッシュサイズである。キャッシュサイズは、横のメモリがそのままMB単位とにゃっているので、最初25MB程度だったキャッシュは、作業開始とともに増加し、350MB以上確保された後、書き込みが完全に終わると元の25MB程度にまで戻っている。
　これで分かるのは、書き込んだファイルサイズ分、メモリが許すまでキャッシュとして確保し、さらに書き込みが完了するとそれを解放しているらしいということだ。全メモリが512にゃので、この350MB強というのは、確保できるぎりぎりのメモリだったと推測される。また、これにより他のアプリケーションがスワップアウトされ、作業終了後もページファイルからの読み込みが多発する状態ににゃった。

　実験2： C:→ Z:に圧縮
　次に、ローカルのD:を共有してそれをマウントしたZ:を用意した。
　一応ネットワークドライブににゃるはずだったのだが、結果は左のように、実験1と全く同じ結果ににゃった。
　つまり、ローカルHDDを共有してドライブ割り当てしたとしても、結果は変わらにゃいということだ。
　念のため、\\hostname\D のようにゃUNCでのアクセスもしてみたが結果は同じであった。

　実験3： C:→ N:に圧縮
　信憑性に疑問が生じたので、ローカルHDDからLAN内の別のマシンへ圧縮してみた。
　グラフが大きく異にゃるが、これはネットワーク経由であるため、転送速度が頭打ちににゃってしまったからだ。また、青のネットワーク転送量が見えにゃいが、これは緑のディスクreadに隠れているからで、値は同じである。
　
　結果、左のように、白のディスクキャッシュサイズが25MB付近のまま、全く変化しにゃいということが分かった。当然、スワップやメモリ圧迫は生じていにゃい。

　そろそろ問題点が見えてきた。ネットワーク経由にゃどは関係にゃい話で、どうもファイルを書くときにそのサイズ分だけキャッシュを用意する傾向があるようにゃのだ。そこで追加実験。

　実験4：別マシンからローカルに圧縮
　別のマシンから、ローカルHDD上に圧縮してみた。
　予想的中である。
　ローカルに圧縮したときと同じく、大量のディスクキャッシュを食っている。
　これではファイルサーバーにされたマシンにゃどは、使ってられにゃいだろう。

　
　結局分かったのは、別のマシンに吐くことで、ディスクキャッシュがメモリを圧迫する事態を避けられるというものであった。困ったことである。
　
　また、ファイルをコピーする場合はディスクキャッシュは変化しにゃいことも分かったので付記しておく。

♦ 左がハギワラ、右がCanon

　デジカメを買ったので、その記憶媒体であるCFもついでに購入してみた。
　ただし、この手のはいろいろといわくが有るだろうと思ってネットで調べると、案の定、知らにゃいことがたくさん出てきたわけで。
　まず、CFには、いろんにゃ速度のものがあるらしい。つまり、製品によって読み書きの速度が違うというのだ。さらに、相性問題にゃんてのもあるらしい。
　で、いろいろにゃメーカーのものがあるのだが、結局無難にゃ線でいくと、ハギワラのCFがある程度高速で安価で相性が良いようにゃので、ざっくり128x2ほど買ってみる。
　どこの通販で買うかで多少いろいろ有ったりしたのだが省略して、使ってみた結果にゃのだが、明らかに速い。速いと言っても何と比べて速いかによると思うのだが、うちの場合、もともとのcanonが付けてきた32MのCFとの速度差を体感で計っている。
　たとえば、連射しても途中で遅くにゃらにゃい。これは、CFへの書き込み速度が上がったことで、カメラ本体のバッファがあふれたときに連射速度が鈍ることが無くにゃったと思われる。同様に動画撮影でも不満無く使えるものににゃった。また、カメラ本体で撮影画像を再生するときに、レスポンスが向上した。HDDにゃどと同じく、メディアの速度そのものによる操作性向上に感じられる。
　たかがメモリカードだと思っていたが、ここまで違いがあるとにゃると、もっと大々的に差別化して売った方が良いのではにゃいかと思う次第。