運営/負荷対策 のバックアップ(No.4)

• バックアップ一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• 運営/負荷対策 へ行く。
  • 1 (2008-10-12 (日) 03:13:05)
  • 2 (2008-10-12 (日) 05:30:11)
  • 3 (2008-10-20 (月) 01:44:35)
  • 4 (2008-10-29 (水) 21:51:24)
  • 5 (2008-10-30 (木) 23:53:40)
  • 6 (2008-11-04 (火) 21:42:32)
  • 7 (2008-11-06 (木) 03:26:08)

負荷対策 †

　Fallout3は3プラットフォーム同時発売であり、日本語版も英語版発売からそんなに間をおかずにリリースされます。よってWikiへの負荷はかなりのものになると予想され、そのために幾らか策を準備して有ります。

目次 †

サイト構成 †

• 3つのサーバに分散*1

  Fallout3 Wiki JP　　　　　　　　　　　 　： http://wiki.fallout3.z49.org/
  閲覧専用ミラー　　　　　　　　　　　　　： http://mirror.wiki.fallout3.z49.org/
  ローカル閲覧用ファイル置き場　　　： http://mirror2.wiki.fallout3.z49.org/

• 3つのサーバの概要は次の通り
  • Fallout3 Wiki JP*2
    • Fallout3 Wiki JP本体。編集もこれに対して行う。負荷回避の為、編集許可Script経由でなければアクセスできない
    • 編集許可処理を行った場合、一定時間Wikiを編集できるようになる*3
    • 編集許可Scriptを経由しない場合、こちらにアクセスしても『閲覧用ミラー』に飛ばされる
    • 単位時間当たりに発行できる編集許可には上限値を設定して有るので注意
  • 閲覧用ミラー*4
    • Fallout3 Wiki JPのデータをHTML化し、ミラーしたもの。但し、添付ファイルは含まない*5
    • データは自動的且つ定期的*6にFallout3 Wiki JPから反映させている
    • こちらも負荷が高くなった場合は『ローカル閲覧用ファイル置き場』に飛ばされる
    • Webでの閲覧ならWikiよりこちらを利用の事。後述のローカル閲覧用ファイル置き場の方を更に推奨
    • 負荷が落ち着いた暁には廃止予定
  • ローカル閲覧用ファイル置き場*7
    • 閲覧用ミラーの内容を全て含むローカル閲覧用ファイルを置いてある
    • データは自動的且つ定期的にFallout3 Wiki JPから反映させている。更新タイミングは閲覧用ミラーと同じ
    • 閲覧だけならこちらを利用推奨(HTMLのみの場合は転送量を1/10近くに出来るので単純に10倍のアクセスに対処できる)
    • 負荷が落ち着いた暁には廃止予定

技術的メモ †

手順 †

以下は全てcronでの自動処理

1. ftpよりWikiログをローカルに保存
2. ローカルに建てたApacheサーバ上でWikiを稼動させ、dump2html.inc.phpでHTML化*8
3. 適当に書いたScriptで、HTML上のそのままでは不都合な部分を置換。また、HTMLサイズ低減を行う (素のHTMLの7割程度にダイエット)
4. UTF-8のものをEUCにコンバート(更にその8割のサイズに低減。上と合わせて、元のサイズの6割弱になる)
5. 作成したHTMLをftpでUP

お願い事項 †

• 出来る限り 『ローカル閲覧用ファイル置き場』か『閲覧用ミラー』を利用してください
• アクセスしにくい場合でもF5は厳禁です。サーバに更に負荷が掛かり、逆効果なだけです
• wget,GetHTML,WeBox等のWebサイト一括保存ソフトは使わないで下さい。サーバ負荷の原因になりアクセスしにくくなるだけです*9。こちらで提供している『ローカル閲覧用ファイル置き場』のファイルをご利用下さい