クロールに苦労する

クロール設定画面に下記の項目がありますが、

Store Function   
Extract Function   


ここにプログラムの場所を指定すると、
クロールしたコンテンツからデータの抽出を行うことができます。

プログラムは、Databaseに格納しておきましょう。

このようになっている場合、Extract Function には WS.WS.SITEMAP_BB_PARSE と書けばOKです。