««レジストリ
ロボット 【robot】
検索エンジンがWebページの検索用のデータベースを作るために使う、インターネット上を巡回してWebページの情報を収集するプログラムのこと。
「検索ロボット」「クローラー」「スパイダー」と呼ばれる場合もある。
収集された情報は、検索エンジンのデータベースにインデックスされ、検索が要求された場合はデータベースの情報が検索結果ページとして表示される。そのため、各検索エンジンのロボットは定期的に巡回している。
metaタグやrobots.txtを利用して、検索ロボットのアクセスを制御したり、拒否することもできる。
この用語が使われている記事の一覧
全 202 記事中 1 ~ 20 を表示中
- 「SEOの意外な裏技」その10:robots.txtでリンクジュースの受け渡しをうっかりブロックしないために
- リンクビルディング戦略、A~Zの26か条(後編)
- これからの企業サイトにあるべきWeb戦略
- Google Ad Planner(アドプランナー)で“あのサイトのPVやUU”を調べてみよう!
- 検索エンジン視点のWebやリンクの統計データを紹介しよう(前編)
- Googleが進めているパーソナライズド検索やページ評価についてGoogleのアダム・ラズニック氏に聞いてみた
- グーグルで新しいサイトを上位表示するのにかかる時間 ほか10記事(海外&国内SEO情報)
- SEOを巡る神話 - 『検索エンジン最適化の初心者ガイド』改訂版#9-1
- SEO初心者が陥りやすい12の過ち
- link rel="canonical"によるURL正規化タグ——SEOにとって非常に重要な進歩(前編)
- 国際カンファレンスad:tech Tokyoに向けて第1回アドバイザリーボードミーティング開催
- 検索エンジンの仕組みをおさらい。クローラー対策とステータスコード
- XMLサイトマップを検索エンジンに送信するとクロールがどう変わるのかテストしてみた
- 検索エンジンの動きを制御する方法とツール - 『検索エンジン最適化の初心者ガイド』改訂版#8-1
- あらゆる現場に適応するデザインの方法論を体系化する/書評『デザインサイエンス――未来創造の“六つ”の視点』
- 2009/01/03~2009/01/09に公開されたWeb担の記事まとめ
- Webマーケはデータと仮説から。でも大組織ならではの悩みも/NECとNECソフトの場合
- 検索エンジンに嫌われる10の方法 - 逆説的SEO術
- クローキングやIPデリバリーを正当な目的で利用する場合だってあるんだ
- ウェブサイト評価の基準を決める:SEOレビューの前に準備すること
(0)

