ヲチ板ミラー計画

１．ヲチ板ミラー計画とは

　この計画は「dat落ちしたスレッドを●無しで読むにはどうればいいのか？」という一つの解決策を模索した結果生まれました。

　昔からヲチ板のdat落ちしたスレはなかなかhtml化されなかったのですが、●の販売に合わせるかのように更にhtml化が遅くなりました。現在はdat落ちして1年経ってもhtml化されません。

　普通なら●を購入して過去ログを読むのかもしれませんが、ある日邪な考えが浮かんでしまいました。

　「全スレッドを定期的に保存しておけば、dat落ちしても●無しで読めるじゃないか」

　このような単純な発想によりヲチ板ミラー計画は始まりました。

２．ヲチ板ミラー計画の仕組み

　ヲチ板ミラー計画を実行する一連のツールを"2ch Logger"と名づけました。"2ch Loggeer"は現在1つのスクリプトと3つのCGIから成っています。

• 定期的に実行され、ヲチ板のスレッドのdatファイルをダウンロードするthreadgetter.pl
• datファイルからhtmlを生成するCGIのread.cgi
• タイトル検索用CGIのfind.cgi
• read.cgi、find.cgiの出力結果を転送するtrans.cgi

　実はミラー用にダウンしたdatファイルはXREA鯖に置いていません。当然です。それだけの容量が確保できないし、ミラーリングスクリプトみたいに高負荷なスクリプトなぞ恐ろしくて置けません。

　XREA鯖に置いているのは転送用CGIのtrans.cgiだけです。他のCGI、スクリプトは全てXREA鯖から追い出しています。XREA鯖にある転送用CGIのtrans.cgiは他鯖に設置されたCGIの出力結果を転送しているだけです。

２−１．threadgetter.plの仕組み

　以下の手順でヲチ板のスレッドがダウンロードされます。

• subback.htmlをダウンロードして現状のスレッドのキーを全て取得
• 新スレは全レス取得
• 更新のあったスレッドはあぼーんのチェック
• あぼーんのあったスレッドは全レス再取得
• それ以外の更新のあったスレッドは差分を取得
• subback.htmlにないスレッドはdat落ちかスレッドあぼーんのチェック
• スレッドあぼーんになったスレッドはミラーから削除
• dat落ちしたスレッドは過去ログのフラグを立て、次回からは更新のチェックから外す。

　これらを一つのサイクルとし、２０分毎に自動実行されます。

２−２．read.cgiの仕組み

　以下の手順でhtml表示します。

• threadgetter.plが実行中ならエラーを返す
• trans.cgiより送られたスレッドキーから、ミラーのスレッドを検索
• スレッドが見つかれば、dat→html変換して表示
• スレッドが見つからなければエラー表示

　2chのread.cgiと大きく違うのはオートリンクをしない点にあります。

２−３．find.cgiの仕組み

　以下の手順でタイトル検索します。

• threadgetter.plが実行中ならエラーを返す
• trans.cgiより送られた検索ワードをEUC変換（半角かなは全角に変換）
• ミラーされている全スレッド名を検索ワードと比較
• 一致したスレッドのリストを作成
• 全スレッドの比較が終了したら、リストの表示

　ただ単に検索だけを行うCGIです。

２−４．trans.cgiの仕組み

　以下の手順で別鯖にあるCGIを呼び出します。

• パラメータが渡されていない場合は、入力フォームを表示
• パラメータにより別鯖にあるread.cgi、find.cgiのいずれかを呼び出し
• 呼び出したcgiの出力結果を受け取りそのまま出力。

　trans.cgiはread.cgi/find.cgiを仲介するだけの役割です。

以上の事を図式化すると

+---------------------------------+
|            2chのログ             |
+---------------------------------+
              ↑ 取得
+---------------------------------+ 定期実行  +----------------+
|         threadgetter.pl         |    ←    | スケジューラー   |
+---------------------------------+          +----------------+
              ↓ 作成
+---------------------------------+
|          ミラー用ログ             |
+---------------------------------+
    ↑取得                ↑検索
+---------------+   +-------------+
|   read.cgi    |   |   find.cgi  |
+---------------+   +-------------+
  ↑キー ↓変換      ↑キー ↓結果
+---------------------------------+
|            trans.cgi            |
+---------------------------------+
  ↑フォーム入力     ↓ 結果表示
+---------------------------------+
|            ユーザー              |
+---------------------------------+

３．ヲチ板ミラー計画の問題点

　考えられる問題点は以下の通りです。

• ex鯖への負荷が高い
• xrea鯖への負荷が高い
• 2chの過去ログに対する戦略（●の販売）に反する

　負荷の問題はスクリプトの最適化である程度軽減できそうですが‥。これらの問題がある限りいつ計画が中止するか分りません‥

４．あぼーんの処理について

　スレッド及びレスのあぼーんが検出されると、自動的にミラーから削除されます。

４−１．レスのあぼーん

５．2ch Loggerの使い方

　使い方は二通りです。

• フォームより指定
• URLに直接パラメータを引き渡し

５−１．フォームより指定