トップページ > タグ: robots.txtの記事一覧|WEB運営者必須情報
既読記事数 0 / 0

テーマから探す(カテゴリ一覧) / キーワードから探す(タグ一覧)

「検索に出ない」は、見つかっていない・まだ取りに行かない・取れなかった・登録されなかった・別のURLが選ばれた、の5つに分けられる。Search Consoleの理由の名前から見分ける ── 未登録の理由を現象ごとに確かめる13項目(2026年11月時点)
2026年11月09日

「検索に出ない」は、見つかっていない・まだ取りに行かない・取れなかった・登録されなかった・別のURLが選ばれた、の5つに分けられる。Search Consoleの理由の名前から見分ける ── 未登録の理由を現象ごとに確かめる13項目(2026年11月時点)

「検索に出ない」は、見つかっていない・まだ取りに行かない・取れなかった・登録されなかった・別のURLが選ばれた、の5つに分けられる。Search Consoleの理由の名前を現象に当てはめ、直す人と先 ...

Anthropicが、AI学習に使わせない意思を示す機械が読める信号の認識を始めた。ClaudeBotを名指しした規則はパスごとに優先される ── robots.txtの名指し行を数えて確かめる13項目(2026年11月時点)
2026年11月07日

Anthropicが、AI学習に使わせない意思を示す機械が読める信号の認識を始めた。ClaudeBotを名指しした規則はパスごとに優先される ── robots.txtの名指し行を数えて確かめる13項目(2026年11月時点)

Anthropicは10月30日、AI学習に使わせない意思を伝える機械が読める信号の認識を始めたと書いた。ClaudeBotの名指しの規則は全体の信号より優先される。robots.txtの名指しの行を ...

Cloudflareの「Agents aren’t humans」は、代理で動くAIの課題14個を挙げ、顧客が今日使える3つの手順と、これから出る提案を分けて書いた ── 提案と出荷済みを分けて読み、担当サイトで変えることを決める13項目(2026年11月時点)
2026年11月06日

Cloudflareの「Agents aren’t humans」は、代理で動くAIの課題14個を挙げ、顧客が今日使える3つの手順と、これから出る提案を分けて書いた ── 提案と出荷済みを分けて読み、担当サイトで変えることを決める13項目(2026年11月時点)

Cloudflareは11月5日のブログで、代理で動くAIがサイトに生む課題を14個挙げ、顧客向けの3つの手順と今後の提案を並べた。両者が同じ記事に混ざるため、原文を「今日使える」「文書がある」「提案 ...

Cloudflareは、利用者の代わりに来る個人用AIエージェントを、分析の専用の区分と、エージェントごとの許可・ブロックで扱えるようにした ── 自社のログで代理の取得を分けて数え、通すかを決める13項目(2026年11月時点)
2026年11月06日

Cloudflareは、利用者の代わりに来る個人用AIエージェントを、分析の専用の区分と、エージェントごとの許可・ブロックで扱えるようにした ── 自社のログで代理の取得を分けて数え、通すかを決める13項目(2026年11月時点)

Cloudflareは11月4日、個人用AIエージェントの通信を専用の区分で見られ、エージェントごとに許可・広告のあるページでブロック・ブロックを選べるようにした。担当サイトのログで代理の取得を分けて ...

AI学習の信号をめぐる草案は、作業部会の草案が第08版、個人の草案が第00版で、どちらもまだ標準ではない。草案の状態は名前・種別・有効期限・置き換えの4か所で読める ── 話題になった草案をdatatrackerで確かめる13項目(2026年11月時点)
2026年11月04日

AI学習の信号をめぐる草案は、作業部会の草案が第08版、個人の草案が第00版で、どちらもまだ標準ではない。草案の状態は名前・種別・有効期限・置き換えの4か所で読める ── 話題になった草案をdatatrackerで確かめる13項目(2026年11月時点)

AI利用の好みを決めるIETFの草案は、作業部会の草案が第08版、個人の草案が第00版で、どちらもまだ標準ではない。名前・種別・有効期限・置き換えの4か所で状態を読み、担当サイトの資料に確認日を残す1 ...

Googleは、robots.txtでAI学習を断る共通の書き方(__usage_ai-training)に2027年の初めに対応する予定で、仕様はまだドラフト ── 担当サイトのrobots.txtでAI学習に触れる行を数えて確かめる13項目(2026年11月時点)
2026年11月02日

Googleは、robots.txtでAI学習を断る共通の書き方(__usage_ai-training)に2027年の初めに対応する予定で、仕様はまだドラフト ── 担当サイトのrobots.txtでAI学習に触れる行を数えて確かめる13項目(2026年11月時点)

Googleは10月30日、robots.txtでAI学習を断る共通の書き方に2027年の初めに対応する予定だと示した。仕様はまだドラフトで、読み始める時期は先になる。担当サイトのrobots.txt ...

Googleは利用者が作るスパムを防ぐガイドを10月26日に更新し、共有用のページは既定でnoindexにする助言を加えた ── 共有リンクのページと見張りの担当を確かめる13項目(2026年10月時点)
2026年10月28日

Googleは利用者が作るスパムを防ぐガイドを10月26日に更新し、共有用のページは既定でnoindexにする助言を加えた ── 共有リンクのページと見張りの担当を確かめる13項目(2026年10月時点)

Googleが10月26日に、利用者が作るスパムを防ぐガイドを更新した。共有や共同作業のためのページを既定で索引に入れない助言と、Search Consoleでの見張り方が加わった。共有リンクのページ ...

GoogleのURL構造の指針が挙げるURLが増える例を、筆者は6つに分けた。10月23日の更新はハイフンとアンダースコアの書き方だけ ── 担当サイトで増える形を確認する13項目(2026年10月時点)
2026年10月26日

GoogleのURL構造の指針が挙げるURLが増える例を、筆者は6つに分けた。10月23日の更新はハイフンとアンダースコアの書き方だけ ── 担当サイトで増える形を確認する13項目(2026年10月時点)

GoogleのURL構造の指針が挙げるURLが増える例(絞り込み・参照元・並び替え・セッションID・カレンダー・相対リンク)を、筆者は6つに分けた。10月23日の更新はハイフンとアンダースコアの書き方 ...

Googleの「Control what you share with Google Search」が10月21日に更新された。止める手段は7つ ── 止めたいものから選ぶ判断表で自社のページを確かめる13項目(2026年10月時点)
2026年10月23日

Googleの「Control what you share with Google Search」が10月21日に更新された。止める手段は7つ ── 止めたいものから選ぶ判断表で自社のページを確かめる13項目(2026年10月時点)

Googleは2026年10月21日、検索に出さない手段と見せ方を調整する手段を並べた文書を更新した。変更点は小さい。7つの手段を止めたいものから選ぶ判断表にし、noindexがrobots.txtで ...

XMLサイトマップの最初の1枚に必要なのはurlset・url・locの3つだけ ── 作って、置いて、送って確かめる13項目(2026年10月時点)
2026年10月19日

XMLサイトマップの最初の1枚に必要なのはurlset・url・locの3つだけ ── 作って、置いて、送って確かめる13項目(2026年10月時点)

XMLサイトマップの必須タグはurlset・url・locの3つで、ほかは任意である。作ってサイトの最上位に置き、robots.txtとSearch Consoleで知らせ、送信の翌日に検出ページ数を ...

2025/05/31
THU
00:00:00

ブラウザ・OS 最新バージョン

毎日更新:2026-11-17 調査更新済
  • Android(stable) 17
  • Chrome Android(stable) 158.0.8127.36
  • Chrome iOS(stable) 158.0.8127.35
  • Chrome(beta) 159.0.8154.6
  • Chrome(dev) 160.0.8157.0
  • Chrome(stable) 158.0.8127.37
  • Edge(stable) 157.0.4341.42
  • Firefox(stable) 160.0
  • Opera(stable) 139.0.6053.38
  • Safari iOS(stable) 27.2
  • Safari(stable) 27.2
  • iOS(stable) 27.2.1

現在の貴方のIPアドレス

216.73.216.116

このサイトで書いている人

株式会社ツクルン

株式会社ツクルン

Webアドバイジング・クリエイター
池田 南美夫
もうすぐ●●歳。ずっーと現役SE。日本にインターネットが上陸してから、ずっーと携わる。 ほんとは超アナログ人間のギター弾き、バンドマン。でも音楽活動とSE、案外似てる。