■取得対象となるファイルタイプ ●html、htm、shtml、txtファイル等静的ページ ●URL再現が可能なcgi、asp、php、jsp等の動的なページで、引数がURLに含まれるタイプのページ ●PDFファイル
■取得対象とならないファイルタイプ ●URL再現が出来ないページ(post method) ●SSL認証が必要なセキュアーページ(オプションで対応可) ●セッション管理等でURLが表示毎に変わるページは検索出来ないことがあります。