Let's make your CDN with RUBY

Rubyによるお手軽CDN作成のすすめLet’s make CDN withRuby 荒木靖宏 ARAKI Yasuhiro <ar@debian.org> DebianProject First of all, thanks ruby! http://wiki.debian.org/DebianGeoMirror

Self introduction Name: 荒木靖宏ARAKI, Yasuhiro Debian Project Member Ph.D student of Univ. of Tokyo Researcher of Hewlett-Packard Labs 現在求職中です。 I am seeking a JOB. CV is available http://wiki.debian.org/DebianGeoMirror

Why CDN? ftp.jp.debian.org stopped frequently Storage Trouble 結局ここ二ヶ月くらいで ftp.jp.debian.orgには下記のトラブルが起き，ハードウェア，OS 共に丸ごと入れ替わってしまいました．これ以上トラブルが起きないことを切に願っております・・・．1, サーバのハードウェアが壊れた -> 代替サーバに交換2, ストレージ(1)のディスクが壊れた -> ストレージ(1)を切り離して残りのストレージでやりくり3, ストレージ(2)のディスク x 3 が壊れた -> 予備のディスクに交換4, ストレージ(2)本体が壊れた -> 新ストレージを手配，ストレージ(2) からデータを移行 Electricity Shutdown [debian-users:45154] ftp.jp.debian.org 障害現在発生している ftp.jp.debian.orgの障害のため，みなさまにご迷惑をおかけしており申し訳ありません．現状としては，サーバを何度再起動してもすぐに落ちてしまうため，代替機を準備中です．すみませんが，もうしばらくお待ちください． fscking!!!!!

cdn.debian.net http://wiki.debian.org/DebianGeoMirror ,[object Object]

42 countries, more than 120 hosts

Weighted DNS Round-Robin,[object Object]

Pros http://wiki.debian.org/DebianGeoMirror Run without server modify You can use any server without modify. Run for simple client cf. No need“REDIRCT” ◎　gem use redirect ×　apt

gem use redirect http://wiki.debian.org/DebianGeoMirror cfardm-2:~/Downloads$ gem source -l *** CURRENT SOURCES *** http://gems.rubyforge.org/ cfardm-2:~/Downloads$ curl http://gems.rubyforge.org/ <html> <body> <h1>Welcome to the RubyGems distribution website</h1> To download the yaml index select <a href="yaml">yaml</a><br><br> To view the available gems via your browser select <a href="http://gems.rubyforge.org/gems/">gems</a><br><br> To download and install RubyGems please visit <a href="http://rubygems.rubyforge.org">rubygems</a> </html>

Cons Smart Client does not need this CDN! In some case, server rejects HTTP ping. http://wiki.debian.org/DebianGeoMirror

Programs DNS type CDN based on DNS-Balance Original Author: Yokota-san! Modify points Check HTTP response code Temporally ignore slow response server use rsynctracefile /debian/project/trace/#{tracefile} Country and Continent detection by GeoIP. http://wiki.debian.org/DebianGeoMirror

Gather surrogate candidates Same directory structure (Mandatory） Good: ftp.XX.debian.org/debian Bad: ftp.jaist.jp/pub/Linux/Debian now changed to “/debian” http://wiki.debian.org/DebianGeoMirror

LETS MAKE YOUR CDN http://wiki.debian.org/DebianGeoMirror

Prepare script ,[object Object],http://wiki.debian.org/DebianGeoMirror

Prepare configuration vi JPN_hoge_cdn_araki_net.rb $tracefile = 'hanzubon.jp' # hanzubon 2007apr5 $first_surrogate = '61.115.118.67' $surrogates = { '203.178.137.175' => '9000', # naist '150.65.7.130' => '9', # jaist } http://wiki.debian.org/DebianGeoMirror

Let’s work cdkeepd && ruby ./keepd.rb set cron */2 * * * * ruby check-surrogates.rb ruby ./dns_balance.rb or /etc/init.d/dns_balance_keepd start /etc/init.d/dns_balance start http://wiki.debian.org/DebianGeoMirror

Future work Now testing.. SSLDRbfor information sharing and remote control Tweet Apply others and Code clean Available on REQUEST! http://wiki.debian.org/DebianGeoMirror

cdn.debian.or.jpの信頼性更新頻度 2分に一度 DNS cacheは60秒 1997年2月8日の動作開始以来ノンストップです cdn.debian.or.jpはのDNSは3箇所ファイルの信頼性は他のdebianミラーと同じ md5/sha1 sumを見てaptが選別

Let's make your CDN with RUBY

Recommandé

Recommandé

Contenu connexe

Tendances

Tendances (20)

Similaire à Let's make your CDN with RUBY

Similaire à Let's make your CDN with RUBY (20)

Plus de Yasuhiro Araki, Ph.D

Plus de Yasuhiro Araki, Ph.D (20)

Dernier

Dernier (11)

Let's make your CDN with RUBY