> For the complete documentation index, see [llms.txt](https://help.pagefly.io/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://help.pagefly.io/pagefly-help-center-japanese/pjito/optimization/robots-txt-blocking-ai-bots.md).

# robots.txtがAIボットによるページの読み取りをブロックしています

買い物客は今、ChatGPT、Claude、Perplexity、Googleに商品のおすすめを尋ねています。こうしたアシスタントがおすすめできるのは、読み取りを許可されたページだけです。PageFlyで「robots.txtがAIボットをブロックしている」と表示された場合、このガイドでその意味と対処方法を説明します。

#### 表示される内容

PageFlyダッシュボードの **Your store today** から[AEOスキャン](https://help.pagefly.io/pagefly-help-center-japanese/pjito/optimization/how-to-use-aeo-in-pagefly)を実行すると、スコアの下に次のように表示されることがあります。

> Your robots.txt is blocking some AI bots from reading this page.

自分のものではないページをスキャンした場合は、文言が少し異なります。

> This site's robots.txt is blocking some AI bots from reading this page.

AIボットが許可されている場合、この一文はまったく表示されません。メッセージが出ないのは良いことです。

#### robots.txtとは

すべてのWebサイトには `/robots.txt` というファイルがあります。これは、自動で訪れるプログラム（ボット）に対して、サイトのどの部分を読んでよいかを伝える公開の指示リストです。検索エンジンやAIアシスタントは、クロールする前にこのファイルを確認します。

Shopifyはこのファイルを自動で作成します。問題になるのは、ファイル内のルールがAIアシスタントにアクセスしないよう指示している場合だけです。

#### PageFlyがチェックするAIボット

| robots.txt内の名前    | 提供元                                                              |
| ----------------- | ---------------------------------------------------------------- |
| `GPTBot`          | OpenAI。ChatGPTのためにページを読み取ります。                                    |
| `OAI-SearchBot`   | OpenAI。ChatGPT内の検索とブラウジングを支えています。                                |
| `ClaudeBot`       | Anthropic。Claudeのためにページを読み取ります。                                  |
| `PerplexityBot`   | Perplexity。                                                      |
| `Google-Extended` | Google。AI OverviewsやGeminiなどのAIによる回答に、あなたのコンテンツを表示できるかどうかを制御します。 |
| `*`               | ワイルドカード。ここに書かれたルールは、上記すべてを含むあらゆるボットに適用されます。                      |

#### なぜ重要なのか

AEOとは、AIアシスタントに見つけてもらい、引用してもらうための取り組みです。FAQ、構造化データ、明確な見出し、仕様表の追加など、AEOのためのほかのすべての対策は、アシスタントが開くことを許可されていないページでは無駄になってしまいます。robots.txtは最初の扉です。そこが閉じていれば、その先にあるものは何も評価されません。

#### ご自身で確認する

ご自身のドメインに置き換えて、ブラウザで次のURLを開きます。

```
https://yourstore.com/robots.txt
```

プレーンテキストのファイルが表示されます。上記のボットのいずれかの名前があり、その後に `Disallow:` で始まる行が続くブロックを探してください。

次のようなブロックがあると、ChatGPTはストア全体を読み取れなくなります。

```
User-agent: GPTBot
Disallow: /
```

#### 問題がなく、対応不要なケース

Shopifyのデフォルトのrobots.txtは、カート、チェックアウト、ストア内検索の結果など、いくつかのシステム用URLをすべてのボットに対してブロックしています。これは意図的で正しい設定です。これらのページは、買い物客以外が読むためのものではありません。

そのため、カート、チェックアウト、検索のURLをスキャンしてこのメッセージが表示された場合は、修正の必要はありません。代わりに商品ページ、コレクションページ、ランディングページをスキャンしてください。

#### 修正方法

これらのルールは `robots.txt.liquid` というテーマファイルにあります。PageFlyはこのファイルを変更できないため、この通知ではワンクリック修正ではなく、このガイドへのリンクを表示しています。

> **Shopifyからの警告（PageFlyからも改めてお伝えします）：** このファイルの編集はサポート対象外のカスタマイズです。Shopifyサポートはこのファイルの編集についてサポートできません。また、誤った使い方をするとすべてのトラフィックを失う可能性があります。テーマコードの編集に不安がある場合は、開発者に依頼するか、[PageFlyサポートにお問い合わせください](https://help.pagefly.io/pagefly-help-center-japanese/hajimeni/quick-start/how-can-i-access-the-pagefly-live-chat)。robots.txtを一緒に確認します。

1. Shopify管理画面で **Online Store**（オンラインストア）> **Themes**（テーマ）に移動します。
2. 公開中のテーマを見つけ、**...** メニューを開いて **Edit code**（コードを編集）を選択します。
3. **Templates** フォルダで `robots.txt.liquid` を探します。

**ファイルがない場合：** ストアでは何もカスタマイズされておらず、robots.txtはShopifyのデフォルトのままです。Shopifyのデフォルトでは、GPTBot、ClaudeBotなどはブロックされていません。表示された内容は、ほぼ確実に上記の「問題がないケース」に当たるため、代わりに商品ページやランディングページをスキャンしてください。

**ファイルがある場合：** 誰か（多くの場合は制作会社、開発者、またはSEOアプリ）がカスタマイズしています。次に進んでください。

4. ファイルを読み、AIボットのいずれかの名前を指定しているルール、または `*` を使ってスキャンしたページをDisallowしているルールを探します。
5. そのルールを削除するか、AIアシスタントに読んでほしいページが対象外になるよう範囲を狭めます。
6. **Save**（保存）をクリックします。

SEOアプリがファイルを追加した場合は、コードではなくそのアプリ内の設定を変更してください。そうしないと、次回アプリが動作したときにルールが書き戻される可能性があります。

Shopify公式の手順：[robots.txt.liquidを編集する](https://help.shopify.com/ja/manual/promoting-marketing/seo/editing-robots-txt)

#### 修正後に行うこと

1. もう一度 `https://yourstore.com/robots.txt` を開き、ルールが削除されていることを確認します。
2. PageFlyダッシュボードに戻り、ページを再スキャンします。スキャンには短いクールダウンがあるため、ボタンがすぐに反応しない場合は少し待ってください。
3. AIボットが許可されると、メッセージは表示されなくなります。

AEOスコアは上がりませんが、それは想定どおりです。この通知は警告であり、減点ではありません。変わるのは、スコアが表しているページにアシスタントが実際にアクセスできるようになるという点です。

#### よくある質問

**ブロックを解除すれば、AIが商品をおすすめしてくれるようになりますか？**

いいえ。見ることが許可されるだけです。引用されるかどうかは、ページの内容次第です。[AEOスキャン](https://help.pagefly.io/pagefly-help-center-japanese/pjito/optimization/how-to-use-aeo-in-pagefly)を実行し、表示された検出結果に沿って改善してください。

**検索エンジンは許可し、AIはブロックしたいです。可能ですか？**

はい。ボットの名前が分かれているのはまさにそのためです。`GPTBot` をブロックしても、Googleの通常の検索クロールには影響しません。注意が必要なのは `Google-Extended` です。これはAIによる回答のみを制御するため、ブロックしても通常のGoogle検索結果から外れることはありません。

**PageFlyがrobots.txtを変更することはありますか？**

いいえ。PageFlyはスキャンの実行中にファイルを読み取るだけです。

**スキャンした競合のURLでメッセージが表示されます。**

それは競合側の設定であり、あなたが変更することはできません。それでも知っておく価値はあります。その競合のページも、AIの回答に表示されていない可能性があるからです。

**ルールを削除したのに、メッセージがまだ表示されます。**

複製テーマではなく公開中のテーマを編集したか確認し、`/robots.txt` を再読み込みして変更が公開されていることを確かめてください。1分ほど待ってから再スキャンしてください。


---

# Agent Instructions
This documentation is published with GitBook. GitBook is the documentation platform designed so that both humans and AI agents can read, navigate, and reason over technical content effectively. Learn more at gitbook.com.

## Querying This Documentation
If you need additional information that is not directly available in this page, you can query the documentation by asking a question.

Perform an HTTP GET request on the following URL with the `ask` and `goal` query parameters:

```
GET https://help.pagefly.io/pagefly-help-center-japanese/pjito/optimization/robots-txt-blocking-ai-bots.md?ask=<question>&goal=<user_goal>
```

`ask` is the immediate question: it should be specific, self-contained, and written in natural language.
`goal` is what the user is ultimately trying to achieve, the reason they need the answer. Sharing it helps GitBook give you a better, more relevant answer. A goal is most helpful when it describes the outcome the user wants rather than restating the question. For example, with `ask=how do I create an API token`, a goal like `automate deployments from our CI pipeline` lets GitBook tailor the answer to that use case.

The response will contain a direct answer to the question and relevant excerpts and sources from the documentation.

Use this mechanism when the answer is not explicitly present in the current page, you need clarification or additional context, or you want to retrieve related documentation sections.
