Dolly+ 

   (English)

多量のノードを有する大規模なPCクラスターを構築するときに、まず悩ませられるのは、インストレーションとその後のアップデートです。これらは、たとえ自動バッチインストレーションなどの仕組みを使ってもノード数が百を超える頃から非常に大きな労力を必要とするようになります。そこで、多くの人は一台のシステムを構築した後、そのハードディスクのデッドコピーをノード台数分作成しノードに配るということをします。
いくつかのソフトウエアは、これをネットワークを介して行いますが、ノードの台数が増えるにつれてサーバボトルネックの問題が生じます。
ETH (Swiss Federal Institute of Technology)で開発された ディスク「クローニング」ソフトウエア　`dolly'は、論理的なリング結合関係をノード間につくり、コピーすべきディスクイメージをノード間で順々に送ることにより、サーバのボトルネックを回避します。
しかしながら、リング構造ではリングの中の、たった一台に問題が生じても、全体のディスククローニングが停止してしまい、最初からやりなおしとなってしまいます。
`dolly+'は`dolly'に、マルチスレッドとパイプラインによる高速化と、全ノードの中の一台のノードの異常により全体がとまらないような信頼性向上の仕組みを入れたソフトウエアです。

dolly+ は、たとえば 100BaseTX で接続されたノード４０台のコピーを、１台にコピーするのとほぼ同じ時間（たとえば２ＧＢ程度であれば５分以内）で行います。理論上では数百台規模まで同様の時間でコピーを行うことが可能です。

      オリジナルの`dolly'のホームページは ここ から(dolly のみのページはここ )

   dolly,dolly+はノードを論理的なリング構成に配置するため（実際の接続は通常のスイッチハブでつなぐなどしてかまわない）、そのリング配置や転送ファイルを指示すべき設定ファイルを dollySに与えてやる必要がある。書式（キーワード（例における青色の文字）の出現の順番、位置など）は非常に厳密である。

dolly で必要な設定ファイルの例

　

dolly+ は上記の設定例も受け付けるがその他、下記の例のようなキーワードを受け付ける。

*1:   この例では /dev/hda1がコピーされる入力ファイルで、/tmp/dev/hda1が
　　　出力ファイル名.　 '>'は dolly+ はこのファイルに変更を加えないことを示す。

*2:  この例では /data/file.gz が入力ファイルであり、出力ファイルが /data/file

      '>>' は dolly+ が各ノードで cpio, tar や　gzip を名前によって起動し、

　　tar ファイル展開や非圧縮を行うことを示す。サポートされているものは　

　　 '.tar.', '.gz', 'tar.gz','tar.Z','cpio','cpio.gz','cpio.Z' である。

*3:  この例では 入力ファイルが ./boot.tar.Z で、展開するディレクトリーが /boot.
       '>>'　で、入力ファイルが 'tar' または 'cpio'の場合、>>の左辺はディレクトリー名である

　　　必要がある。

dolly+ は Ｌinux RedHat 6.1, 6.2, 7.1, 7.2 でのみテストされているが、pthred ライブラリーを持っていれば Unix 系のシステムへの移植は比較的容易（異常時パイパス機構を除く）とおもわれます。 ソースコード(ver.0.93) .

　

２００２年３月より、dolly+は東工大松岡研究室クラスターチームと共同で開発をすすめることとなり　dolly+ の開発は以下の CVSリポジトリで管理が行われています．以下の手順で最新版を取り寄せることができます． 

cvs login (一回だけ行う)
% cvs -d :pserver:anonymous@plateau.is.titech.ac.jp:/var/lib/cvs login
CVS password: [CR] # 空文字列

checkout
% cvs -d :pserver:anonymous@plateau.is.titech.ac.jp:/var/lib/cvs checkout dolly 

CVS に基づいた開発に参加したいときは、 <takamiya@matsulab.is.titech.ac.jp> 
にアカウント名と、UNIX の /etc/passwd 様式で暗号化されたパスワードを送っ
て下さい。この場合 cvsroot は　

　:pserver:<アカウント名>@plateau.is.titech.ac.jp:/var/lib/cvs

となります。　このソフトに関心を持っていただいた方々が開かれた開発に参加してくださることを期待します。 

バイナリーコードはRedHat 6.1 で static linkにより作成されています。 ここ.からお取りください。できるだけ、CVSコードからコンパイルすることをお勧めします。

マスターホストで                % dollyS -vf  'configuration-file'

すべてのノードホストで        % dollyC -v

(% is just a OS prompt) 

　

このために　RedHat kickstart　と PXEを使用していますが、これに関するページは現在準備中です。

　

バグを発見された方は manabe@corvus.kek.jp　までメールをください。

　

dolly+ に関する情報を交換するために，以下のメーリングリストが用意されて
います． 

dolly+ ML <dolly@matsulab.is.titech.ac.jp>
dolly+ の開発について語り合うメーリングリストです。

参加方法:
<dolly-ctl@matsulab.is.titech.ac.jp>宛てのメールの本文に、

subscribe あなたの名前(E-Mailアドレスではありません)

と書いて送って下さい。折り返し確認のメールが送られて来ますので、
指示にしたがって手続きをしてください。
登録は 自動登録です。 

例:
subscribe Yasuhito TAKAMIYA

脱退方法:
<dolly-ctl@matsulab.is.titech.ac.jp>宛てのメールの本文に、
unsubscribe
end

と書いて送って下さい。 自動的にリストから削除されます。 

　

A presentation in 'Computer in High Energy Physics 2001 in Begin'