つぶねこ

　ESX4でnfsを使ったが意外とこれが速い。レイテンシの点では劣るはずにゃのだが、たぶんnfs鯖のキャッシュと、syncが無視されてる気がするのがデカい。にゃんというかぬるぬるとスムースに動く。
　
　あと実験がてら稼働中にLANを引っこ抜いてみたら、一応しばらくはwaitしてくれて、さらに放置し続けると落ちた。このへんのタイムアウト値は多分変更できるんだろうにゃ。
　
　速度のチューニングも兼ねて、nfsまわりの設定を変えたいのだが知識がにゃい。うーむ

　ESXi4で定期backup & リストア1分でvm復帰を目指すと、ESXホスト間で相互backupと、nfsを共有マウントという2つの方法が思いつくが、今回は2つ目で。にゃぜにゃらば、ESXiホスト間でsparseにゃファイルのコピー方法が見あたらん。SSH経由でstdin～とかやりたくにゃいんだがどうにゃんだ・・・。ここいらはESXにした方がやはりいいか。
　まぁともかく、ESXi4用にnfsdを立てる。とりあえずML115にFreeNASというベタにゃ構成でRAID5。最近ZFSが使えそうにゃFreeNASも出てきてるが怖いので触らにゃい。
　で、特に引っかかる部分はにゃくnfs共有してマウントすればdatastoreとして使える。とても便利。但し速度が出にゃい。MAX30MB/sくらいで、実質15MB/sくらい？バッファリングとかいろんにゃファクタがあるようにゃので、後日これはチューンする必要がある。
　あと懸念されたsparseファイルの扱いだが、以前のpythonスクリプトとかでも普通にコピー出来てるので問題無さそう。
　これでESX鯖が死んでも別のESX鯖でnfs上のvmを起動させればOKのはず。
　ただ欲を言えばそりゃ圧縮したり世代管理が出来るとベストにゃわけで、ZFSに期待する所にゃのだが・・・

　そろそろESXiの限界が見えてきたというか、飽きたので、ESX4をインストールしてESX4iのキーを放り込む。RCLIがどうの、といった制限があるのかもしれにゃいが、コンソールがほぼ素のLinuxにゃので事実上やり放題である。
　但しUSBメモリにはインストール出来にゃいので、では非RAIDのHDDでいいのかとか、その辺が嫌にゃ感じ。

　何のことはにゃい、普通のssh風である。

cd /.ssh/
dropbearkey -t rsa -f id_rsa
dropbearkey -f id_rsa -y |grep ssh-rsa > id_rsa.pub
scp /.ssh/id_rsa* root@remotehost:/.ssh/

　あとはremotehost側で

cd /.ssh/
cat id_rsa.pub >> authorized_keys

　すれば完了。相互に自動ログインさせるにゃらローカル側でもしておく。
　あとは
　ssh -i /.ssh/id_rsa remotehost
　で自動ログインできる。
　scpもrsyncもこれでいけるはず。

　海外からバイナリ拾ってくる。
　ある程度動く。
　結局staticでbuildした何か、を持ってくれば、結構動くんじゃにゃいのかという。
　
　で、ローカルとかssh経由は動くんだが、inetdにrsync登録してもgenerate_files phase=1で止まる。にゃんじゃこれ
　inetd.confが

rsync stream tcp nowait root /vmfs/volumes/datastore1/bin/rsync rsync --daemon --log-file=/tmp/rsync.log --config=/vmfs/volumes/datastore1/bin/rsyncd.conf -vvv

　rsyncd.confが

[test1]
path = /vmfs/volumes/datastore1/
comment = test1
use chroot = no
lock file = /tmp/rsync.lock
read only = no
uid = root
gid = root
strict modes = false

　とかにゃんだが。
　ちにゃみにuse chroot = noにしにゃいとchroot出来んと言われる。chrootが使えん模様。
　うーん、せっかくだから(?)ssh経由しにゃいrsync直通で大量送信したいんだが、ちょっとどこで止まってるのか分からにゃいにゃぁ。ていうかエラー吐かずに止まるってのはにゃんだろう？ timeoutしにゃかったのでネットの何かを待ってるのではにゃいようだし。

　海外からバイナリ拾ってくる。
　ローカルのファイル間では普通に使えてるっぽいが、あやしい。
　rsync -Sでsparseにゃファイルもコピーできてる様に見えるが、ファイルサイズがちがう(笑)
　
　で、肝心のホスト間コピーだが、ln -s sshしてあれば。
　rsync file root@remotehost:/tmp/
　とかで一応通る。にゃんか強烈に遅いけど。5MB/sて・・・・。-Sは怖くて使えにゃい。
　CPUを食ってるのでこれはsshが原因としか思えにゃい。
　で、いつものcipherにゃんかの設定を・・・コマンドラインでは出来にゃいようで。うーん

　ESXi4にpythonが入ってたので、どこまでpureで出来るか的にゃ・・・まぁどうでもいい。thinにゃvmdkファイルをにゃるべくthinにゃままでコピーしたいにゃぁという話。

#!/bin/python

import sys
import os
import stat

src_file = sys.argv[1]
dst_file = sys.argv[2]

bs = 1024 * 1024

if not os.path.isfile(src_file) :
        print "file not found :" , src_file
        sys.exit()
if not os.path.isfile(dst_file) :
        f2=open(dst_file, 'w')
        f2.close()

src_size = os.path.getsize(src_file)
src_stat = os.stat(src_file)
src_time = (src_stat[stat.ST_MTIME], src_stat[stat.ST_MTIME])

dst_size = os.path.getsize(dst_file)
dst_stat = os.stat(dst_file)
dst_time = (dst_stat[stat.ST_MTIME], dst_stat[stat.ST_MTIME])

print "src : time",src_time , "size=",src_size , " " , src_file
print "dst : time",dst_time , "size=",dst_size , " " , dst_file
print "blocksize : ", bs , "bytes"

if src_time == dst_time :
        if src_size == dst_size :
                print "skip"
                sys.exit()

f1 = open(src_file, 'r')
f2 = open(dst_file, 'w')

zero = chr(0x00)
zero_block = zero * bs

while 1:
        s = f1.read(bs)
        print f1.tell(),"/",src_size,"\r",
        if not s:
                break
        if s == zero_block :
                f2.seek( f1.tell() )
        else:
                f2.write(s)

f2.write( "a" )
f2.truncate( f1.tell() )

f1.close()
f2.close()

os.utime(dst_file, src_time)

print ""
print "done."

　うーん、実にいい加減だw
　まぁでも一応動いてる。ある程度sparseにコピー。一応、日付とサイズが同一にゃらスキップ、日付もコピー、何とにゃく途中経過も表示してる。途中経過はバッファ切らにゃいとアレだが。
　ブロックサイズはCPU如何によって減らした方が速いと思われる。にゃんかしらんが遅い。
　てことでがんばれば付属pythonで結構何でも出来そうにゃもんだがどうにゃんだろうにゃ。