wedata対応バージョンのSITEINFO作成用Firefox拡張機能 AutoPagerize Iteration Detector

HTMLのドキュメントから繰り返し部分をみつけてSITEINFOをつくるAutoPagerize Iteration Detectorをwedataに対応させました。AutoPagerize Iteration Detectorで作ったSITEINFOを直接wedataに反映させられるようになっています。

インストール

iterd.xpi(supports Firefox 2.0-3.0.0.*)

つかいかた

使い方はwedataに接続する部分以外以前のバージョンとかわっていませんが、ざっと紹介します。

次のページへのリンクを右クリックする

SITEINFOを作りたいページを開いて、ページの中にある次のページへのリンクを右クリックします。メニューの中にDetect iterationsという項目ができているはずなので、それを選んでください。

pageElementを候補から選ぶ

メニューを選ぶと、新しくIteration Detectorという名前のウインドウが開きます。HTMLが複雑なページだとここで少し固まってしまうのですが、数秒待つとHTMLを解析してSITEINFOの候補が表示されます。

一番左のページのpageElement Xpathは、本文の部分を意味するpageElementのXPathです。その右にあるthisPageとnextPageはそのXPathで今開いているページと次のページでそれぞれいくつの要素がマッチするかを示しています。この候補リストは適切だと思われる順で表示されています。上にあるものほどpageElementのXPathとしてたぶん正しくて下にいくほど怪しくなっていきます。

AutoPagerize Iteration Detectorではページの中にある繰り返しの単位にマッチするXPathを自動で作っています。たいていのページでは繰り返しの件数はページに表示されている情報の件数と同じです。そのため、うまく生成できているものはthisPageとnextPageの値が1ページに含まれている件数と同じになります。

pageElementを選ぶとそのpageElementのXPathにマッチする部分が水色で囲まれて視覚的にもチェックできるようになっています。

マッチしている件数や、水色で囲まれている部分をチェックしながら適切なものを選んだらsiteinfonameとURLを入力してください。siteinfonameはいま作っているSITEINFOにつける名前です。動作には直接関係ありませんがwedataで表示される名前になります。URLには作ったSITEINFOを適用するURLを正規表現で書きます。

うまく書けたらTry this ruleを押してください。このボタンを押すとSITEINFOが自分のFirefoxの中に保存されて、いま作ったSITEINFOを一時的に使えるようになります。

動作の確認

Try this ruleを押してSITEINFOを一時的に保存したら、ページをリロードして作ったSITEINFOが期待通り動くかどうか何ページか先まで進めて確認しましょう。

問題があったときは、FirefoxのメニューのTool/Iteration Detectorを開いて修正できます(Firefox3だと可能です)。削除は右クリックして出てきたメニューから可能です。

wedata API key の設定

思い通りに動くSITEINFOができあがったらwedataに保存しましょう。まずはじめにwedataのAPI keyを設定しておく必要があります。API keyはwedataにログインしたあとの画面から自分のアカウントのページhttp://wedata.net/users/(設定した名前)で表示されます。