クローラーとは? |
クローラーとは検索エンジン(サーチエンジン)が検索データベースを作成するために、世界中のありとあらゆるウエブページを回収するプログラムのことです。ロボットとも呼ばれています。
全文検索型の検索エンジンでは、ウエブページの内容を検索エンジン側のデータベースに保存しておきます。そしてユーザ側からの検索要求があった時にはそのデータベースを検索して結果順位を表示しています。検索エンジンのクローラはこのデータベースの内容を修正したり充実させたりして点検するプログラムです。
クローラーはつまり、まだデータベースに収録されていないウエブページや更新されたウエブページを検知しては内容を回収し、その結果をデータベースに反映させています。
![]() |
SEO用語
![]() |


