umber

クローラー

Crawler

ホームページ制作の用語集

[]

クローラー(くろーらー)

クローラーとは、ページ情報を収集するためにWebページを巡回する検索エンジンのロボット(巡回プログラム)のことを言います。

クローラーはHTMLファイルだけでなく、画像データや動画データ、PDFやExeleなどのアプリケーション形式のファイルデータも収集しています。

多くの場合、クローラーはリンクをたどってWebページを巡回しています。GoogleではGoogle Search Console(グーグル サーチ コンソール)からクロールリクエストすることができます。

クローラーの種類

  • Googlebot(Google)
  • Bingbot(Microsoft)
  • AppleBot(Apple)
  • Baiduspider(百度※中国の検索サイト)
  • Yahoo Slurp(Yahoo!※Yahoo!Janpanを除く)

ホームページ制作に関する
お問い合わせ・ご相談

どんな些細なことでもお気軽にお尋ねください。 ホームページ制作に関するご不明点や
ご要望に誠意をもってお答えいたします。
まずは現在のご状況をお聞かせください。


PAGE
UP