GNU/Linux >> Linux の 問題 >  >> Linux

大きなファイルを LAN 上の複数のマシンにコピーする

ビットトレント。これは、Twitter が内部でいくつかのものを展開する方法です。

http://engineering.twitter.com/2010/07/murder-fast-datacenter-code-deploys.html (ウェブ アーカイブ リンク)


UFTP についてはどうですか。マルチキャストを使用して、UDP 経由でファイルを一度に複数のクライアントに配信します。万人向けというわけではありませんし、私もその専門家ではありませんが、期待通りの効果があるように思えます.


rsync でこのデータをコピーしようとしましたか? ? 1 ギガビット以上の LAN を使用している場合、4*20 GB を超えるコピーは問題になりません。

このコピーはどのくらいの頻度で発生しますか?完了するのに数分かかっても問題ありませんか?


Linux
  1. LinuxおよびUnixでネットワーク経由で大きなファイルをすばやく転送する方法

  2. 複数のコンピューターに大規模なダウンロードを配布する方法は?

  3. Dd:複数の入力ファイル?

  1. ファイルを検索してコピーする

  2. include オプションを使用して特定のタイプのファイルのみを rsync コピーする

  3. scp を使用して複数のファイルを同時にコピーする方法

  1. ssh を介して複数のマシンでログ ファイルを追跡する

  2. 2 つのサーバー間で大量のファイルをすばやくコピーする方法

  3. 複数のホップを介して SSH トンネル経由でデータをコピーする