株式会社ルーターが提供する次世代クローラー「AIクローラー」のサービス紹介動画を、AIクローラーサービス紹介ページにて公開致しました。

取得したいWebサイトの構造に合わせてそれに最適化したクローラーをスクラッチで開発するという、従来の特定Webサイトへ特化したクローラーとは異なり、AIクローラーは検索エンジンのようにキーワードベースで対象データの傾向を命令するだけで、インターネット上を回遊し、クローラー自身がコンテンツの意味を理解し、求められた情報を自動選別して収集することができる新時代のクローラーです。

今回制作したサービス紹介動画では、AI関連補助金の情報を自動収集するというシナリオをベースに、下記のようなAIクローラーの特徴的な機能を分かりやすくご紹介しています。

▼AIクローラーの代表的な特徴

• 検索キーワードをベースとした、インターネット上のコンテンツ自動探索
• 各Webサイトコンテンツ上での、対象コンテンツの存在判定
• Webサイト上の本文領域の自動抽出（グローバールナビ、サイドバー、フッターなどのノイズ情報の除去）
• 対象コンテンツ領域自動推定・抽出
• 収集したビッグデータのファイル出力

詳細はAIクローラーのページよりビデオをご覧ください。同ページ上の問い合わせフォームより、AIクローラーのご利用に関するご相談もお待ちしております。