Googlebotは、人間のユーザーとは違って文字どおりリンクをたどってその先にあるページにアクセスしたりはしない。リンクを中心にサイトマップの援助を得てクロール対象となるURLのリストを作成する。URLには優先度が与えられ、その優先度に従って順にクロールを開始していくのだ。
- Googlebotはリンクをたどってクロールしたりはしない、人間のユーザーとは違う -
Posted on: 海外SEO情報ブログ - SuzukiKenichi.COM
RSSフィード