検索エンジンがWebページの検索用のデータベースを作るために使う、インターネット上を巡回してWebページの情報を収集するプログラムのこと。
「検索ロボット」「クローラー」「スパイダー」と呼ばれる場合もある。
収集された情報は、検索エンジンのデータベースにインデックスされ、検索が要求された場合はデータベースの情報が検索結果ページとして表示される。そのため、各検索エンジンのロボットは定期的に巡回している。
metaタグやrobots.txtを利用して、検索ロボットのアクセスを制御したり、拒否することもできる。
読者プレゼント Canva認定エキスパート直伝『ちなみにそれ、Canvaでデキます！』を3名様にプレゼント
ネットショップ担当者フォーラム 特選記事 「サブスクリプション大賞」受賞サイトに学ぶ、ユーザーに支持される＋時代のニーズを捉えたサービスの特徴とは？
海外&国内SEO情報ウォッチ 生成AIの検索/SEO本格侵襲・グーグルの中小サイト虐待など【鈴木謙一の2024年SEO総まとめ】
単発記事 ロッテがコンテンツビジネスに参入、キャラクターの魅力を活かして日本市場で売上高100億円を狙う。事業責任者に聞いた“勝ち筋”は
【レポート】Web担当者Forumミーティング 2024 秋 大手企業の最新事例2種から学ぶ、オウンドメディアのSEOトラブル改善策
Web担人気記事ランキング 2026年卒「就職人気企業」、トップにランクインしたのは？【週間ランキング】
ここがよかった！ここがスゴイ！ 後藤真理恵の企業SNS活用事例ピックアップ “Xの後釜”ではない！ 進化著しい「Threads」を理解・活用している企業を紹介。現状がわかるクイズもあり！
百戦錬磨のSNSマネージャーが手ほどき！ 企業SNS活用の悩みに答えます 採用担当者必見！ Instagram採用成果を上げるステップとコツ、チェックリストもあり！
Facebookいいね!の多い記事
Twitterで言及の多い記事
はてなブックマーク人気記事