トップページ > タグ: robots.txtの記事一覧|WEB運営者必須情報
既読記事数 0 / 0

テーマから探す(カテゴリ一覧) / キーワードから探す(タグ一覧)

llms.txtの仕様で必須なのは先頭の見出し1つだけ。Googleは検索で使わないと書き、3社のクローラーの説明ページには、クローラーがllms.txtを読むという記述が見つからなかった ── 置くかを決め、置いたあとにログで確かめる13項目(2026年10月時点)
2026年10月17日

llms.txtの仕様で必須なのは先頭の見出し1つだけ。Googleは検索で使わないと書き、3社のクローラーの説明ページには、クローラーがllms.txtを読むという記述が見つからなかった ── 置くかを決め、置いたあとにログで確かめる13項目(2026年10月時点)

llms.txtの仕様で必須なのは先頭の見出し1つだけである。Googleは検索で使わないと書き、OpenAI・Anthropic・Perplexityの説明ページには、クローラーがllms.txtを ...

Cloudflareは確認済みボットを、名乗りが本物かに加えて、robots.txtと429を守り続けているかでも評価し続ける仕組みを書いた ── 自分のサイトのrobots.txtと429がボットに読める形かを確認する13項目(2026年10月時点)
2026年10月17日

Cloudflareは確認済みボットを、名乗りが本物かに加えて、robots.txtと429を守り続けているかでも評価し続ける仕組みを書いた ── 自分のサイトのrobots.txtと429がボットに読める形かを確認する13項目(2026年10月時点)

Cloudflareは2026年10月16日、確認済みボットをrobots.txtと429を守り続けているかでも評価する仕組みを書いた。評価は社内で使い始めた段階で、閾値は書かれていない。自分のサイト ...

Googleの番組は、PDFを内部でHTMLに変換して扱うと説明した ── PDFを載せている会社が、文字が取れるか・同じ中身の重複・置き場所を確かめる13項目(2026年10月時点)
2026年10月16日

Googleの番組は、PDFを内部でHTMLに変換して扱うと説明した ── PDFを載せている会社が、文字が取れるか・同じ中身の重複・置き場所を確かめる13項目(2026年10月時点)

Googleは番組で、PDFを内部でHTMLに変換して索引に載せ、順位づけも通常の文書とほぼ同じと説明した。PDFを載せる会社が、文字が取れるか、同じ中身の重複はないか、置き場所と更新を、公式文書と合 ...

サイトマップのpriorityとchangefreqはGoogleに使われず、lastmodは正確なときだけ使われる ── 自社のサイトマップの各項目を確認する14項目(2026年10月時点)
2026年10月12日

サイトマップのpriorityとchangefreqはGoogleに使われず、lastmodは正確なときだけ使われる ── 自社のサイトマップの各項目を確認する14項目(2026年10月時点)

Googleの担当者は2026年10月1日のポッドキャストで、priorityとchangefreqは外した欄で、lastmodは日付が妥当に見えるときに考慮すると話した。自社のサイトマップを数えて確 ...

Googleがクロールを緊急に減らす手順にRetry-Afterの書き方を加えた。手順そのものは新しくない ── 保守・障害の画面が返す数字を確かめる13項目(2026年10月時点)
2026年10月11日

Googleがクロールを緊急に減らす手順にRetry-Afterの書き方を加えた。手順そのものは新しくない ── 保守・障害の画面が返す数字を確かめる13項目(2026年10月時点)

Googleは2026年10月6日、クロールを緊急に減らす手順の文書にRetry-Afterの書き方を加えた。手順自体は新しくない。保守や障害の画面が200・503・429のどれを返すか、待ち時間の行 ...

Lighthouse 13.5にAIエージェント向けカタログの検査が入った。探す名前は、仕様が「前身」と呼ぶai-catalogの側だった ── 置くか置かないかを決めて確かめる14項目(2026年10月時点)
2026年10月05日

Lighthouse 13.5にAIエージェント向けカタログの検査が入った。探す名前は、仕様が「前身」と呼ぶai-catalogの側だった ── 置くか置かないかを決めて確かめる14項目(2026年10月時点)

Lighthouse 13.5にARDの検査が入った。探すのは、仕様が「前身」と呼ぶai-catalog.jsonなどの名前である。置いていなければ「対象外」と読める。置くか置かないかを決めて確かめる ...

Googleの広告用クローラーには、robots.txtの「*」の指定が効かない ── 止めたつもりのページと広告タグのあるページを突き合わせる13項目(2026年10月時点)
2026年10月04日

Googleの広告用クローラーには、robots.txtの「*」の指定が効かない ── 止めたつもりのページと広告タグのあるページを突き合わせる13項目(2026年10月時点)

AdsBot-GoogleとMediapartners-Googleには、robots.txtの「*」の指定が適用されないと公式文書に書かれている。止めたつもりのページと広告のタグを突き合わせる13項 ...

検索結果にfaviconが出る条件は、確かめやすい6つに分けられ、満たしても表示は保証されない ── 自社の設定を順に確認する14項目(2026年10月時点)
2026年10月03日

検索結果にfaviconが出る条件は、確かめやすい6つに分けられ、満たしても表示は保証されない ── 自社の設定を順に確認する14項目(2026年10月時点)

Googleの公式文書が書く条件を、確かめやすい6つに分けた。公式文書は、すべて満たしても表示は保証されないと書く。ホームページ・2つのクローラー・URLの状態を、14項目で順に確かめる。

CloudflareのPay Per Useは「申し出を受けるか決める」仕組みで、サーバー側の変更は要らない ── 判断の前にAIボットの設定と来訪を確認する13項目(2026年10月時点)
2026年10月02日

CloudflareのPay Per Useは「申し出を受けるか決める」仕組みで、サーバー側の変更は要らない ── 判断の前にAIボットの設定と来訪を確認する13項目(2026年10月時点)

CloudflareのPay Per Useが2026年9月30日にベータになりました。申し出を受けるかは運営者が決める仕組みです。判断の前に、robots.txtとCloudflareの設定、実際に ...

AI検索で引用される要因は「専門家の評価」であって「測定」ではない ── 自分のサイトで確かめられることを確認する14項目(2026年9月時点)
2026年09月22日

AI検索で引用される要因は「専門家の評価」であって「測定」ではない ── 自分のサイトで確かめられることを確認する14項目(2026年9月時点)

2026年9月公開の、130人超のSEO専門家によるAI検索の引用要因アンケートと、追加の要件は無いと明言するGoogle公式の見解を並べて確認する。専門家の主観評価であって測定ではない点を踏まえ、自 ...

2025/05/31
THU
00:00:00

ブラウザ・OS 最新バージョン

毎日更新:2026-11-17 調査更新済
  • Android(stable) 17
  • Chrome Android(stable) 158.0.8127.36
  • Chrome iOS(stable) 158.0.8127.35
  • Chrome(beta) 159.0.8154.6
  • Chrome(dev) 160.0.8157.0
  • Chrome(stable) 158.0.8127.37
  • Edge(stable) 157.0.4341.42
  • Firefox(stable) 160.0
  • Opera(stable) 139.0.6053.38
  • Safari iOS(stable) 27.2
  • Safari(stable) 27.2
  • iOS(stable) 27.2.1

現在の貴方のIPアドレス

216.73.216.116

このサイトで書いている人

株式会社ツクルン

株式会社ツクルン

Webアドバイジング・クリエイター
池田 南美夫
もうすぐ●●歳。ずっーと現役SE。日本にインターネットが上陸してから、ずっーと携わる。 ほんとは超アナログ人間のギター弾き、バンドマン。でも音楽活動とSE、案外似てる。