初心者 の為の アフィリエイト 入門 講座2008 > インターネットSEO関連 > クローラーとは
インターネットSEO関連クローラーとは
毎月数百万円を安定的に稼ぐコツを知りたくありませんか？マスターズアフィリエイトスクール出身の
スーパーアフィリエイター中松祐太が
毎月あなたに稼ぐための戦略と戦術をお届けします！
クローラー(Crawler)とは、検索エンジンにおいてウェブ上の文章や画像などを周期的に取得し、自動的にデータベース化するプログラムの事をいいます。
クローラーの主な存在理由は、検索エンジンのデータベース、インデックス作成また、
統計調査などが挙げられます。
クローラーの動作としては、既知のHTML文書の新しいコピーを要求し、文章中に含まれるリンクを
たどって別の文章を収集するという動作を繰り返します。
その過程において新しい文章を見つけた場合はその都度データベースに登録します。
逆に既知のファイルが存在しないことを検知した時点でデータベースから削除します。
クローラーはwebサイトにおいてテキストのみを判断するため、
SEO対策を考えた場合画像などにおいてもalt属性をいれ、クローラーに認識してもらうよう
対策を講じる必要があります。
主なクローラーとして以下が挙げられます。
Googlebot (Google)
InfoSeek Sidewinder （インフォシーク）
Yahoo! Slurp (Yahoo!)
Slurp (Inktomi)
Scooter (AltaVista)
MSNBot (MSN)
Baiduspider（百度）
インターネットNinja
