Claude Code・Codexでホームページを作るときに、検索とAIの回答で見落としやすい20項目を解説。スパムポリシー、AIクローラー、Search Consoleの生成AIの設定まで公式情報で整理します。
Claude CodeやCodexを使えば、ホームページは短い時間で形になります。ただ、見た目が整って動くことと、検索エンジンやAIに正しく見つけてもらえることは別の話です。弊社では、AIでホームページを作るときに、SEO(検索エンジン最適化)とAEO(AIによる回答への最適化)で見落としやすい点を20項目にまとめました。それぞれ「何が起きるか・なぜ大事か・どう確かめるか」を、2026年10月27日時点の各社の公式情報をもとに解説します。
SEOとAEO、AIで作るときに何が見落とされやすいのか
SEOは、Googleなどの検索結果に正しく載り、上位に表示されるための取り組みです。AEOは、GoogleのAIによる概要(AI Overviews)やAIモード、ChatGPT、Perplexityなどが回答を作るときに、自社のページを根拠として使ってもらうための取り組みです。Googleは2026年5月に公開した生成AI検索向けの最適化ガイドで、生成AIの機能もGoogle検索の順位づけの仕組みを使っており、SEOの基本は引き続き大切だと説明しています。AEOはSEOの延長にあると考えてよいでしょう。
AIに頼むと、デザインや文章は整います。一方、画像に残る情報、robots.txt(クローラーにどこを見てよいかを伝えるファイル)、配信サービスの設定、Search Consoleの登録といった「画面に出ない部分」は、指示しない限り確認されないことがあります。20項目は次の5つに分けています。
AIで作るときの2項目(1〜2)
1. 画像に残る情報を整理する
画像生成ツールによっては、PNGのテキスト領域やExif(画像に埋め込まれる作成情報)に、プロンプトや生成の設定が残ります。社内の検討内容が外から読めてしまうので、消しておきます。一方、AI生成を示すIPTC(写真業界の標準のメタデータ)の「DigitalSourceType」は、Googleが扱うと説明しているので残します。WebPへの変換などで、まとめて消えることもあります。C2PA(画像の来歴を証明する技術標準)の情報は、作成後に編集すると検証が通らなくなるため、編集の後に付け直します。公開する最終の画像を、メタデータを表示できるツールで開いて確かめましょう。
2. ページ同士のリンクは<a href>で作る
Googleは、href属性のない<a>要素からはリンク先を確実には取り出せないと説明し、onclickだけで移動する作りを推奨していません。見た目は普通のメニューでも、検索エンジンがほかのページへたどり着けない恐れがあります。AIに「サイト内の移動がすべて<a href>になっているか」を一覧にしてもらうと確実です。
スパムポリシーで気をつける4項目(3〜6)
3. 地域名や業種名だけを差し替えたページを量産しない
地名だけを変えたページの量産は、AIなら一瞬でできます。しかしGoogleのスパムポリシーでは、似た検索語句で上位に出すためのページは「誘導ページの不正使用」、価値の乏しいページの大量作成は「大量生成されたコンテンツの不正使用」に当たりえます。後者は「作成方法は問わず」と明記され、AIか人かは関係ありません。ページごとに、その地域での実績など固有の情報があるかを確かめます。
4. AIの「関連する質問」ごとにページを分けない
AIは、1つの質問を関連する複数の検索に分けて調べます(クエリファンアウト)。その言い回しごとにページを量産することについて、Googleの最適化ガイドは、主に順位や生成AIの回答を操作する目的なら「大量生成されたコンテンツの不正使用」に当たると明記しています。1つのページで関連する疑問にまとめて答える方が安全です。
5. スパムポリシーはAIによる回答にも適用される
Googleは2026年5月15日に、スパムポリシーがGoogle検索の生成AIの回答にも適用されることを明確にしました。AIによる概要やAIモードだけを狙った小手先の工夫も、同じ基準で判断されます。
6. 「戻る」ボタンを乗っ取るコードがないか
Googleは2026年4月13日に、「戻る」ボタンで元のページに戻れなくする行為をスパムポリシーに加え、6月15日から適用しました。原因が、組み込んだライブラリや広告の仕組みにある場合もあると説明しています。追加した部品や広告タグを含め、実際のブラウザで「戻る」を押して確かめます。
クローラーとrobots.txtで確かめる6項目(7〜12)
7. 検索用と学習用のクローラーを分けて判断する
AIの会社は、目的ごとに別のクローラー(ページを自動で読みに来るプログラム)を用意しています。OAI-SearchBot(OpenAI)、Claude-SearchBot(Anthropic)、PerplexityBotは検索用で、拒否するとAIの検索結果に載りにくくなります。GPTBot(OpenAI)やClaudeBot(Anthropic)は学習用、Google-ExtendedはGeminiの学習などへの利用を伝えるための名前です。一括で拒否すると、AI検索からの流入まで失います。
8. Google-Extendedを拒否してもGoogle検索は変わらない
Googleは、Google-Extendedが検索への掲載に影響せず、順位づけにも使われないと説明しています。AIによる概要やAIモードへの表示は、13・14で管理します。
9. Google-Extendedは回答の根拠づけにも関わる
Google-Extendedを拒否すると、Geminiの学習だけでなく、GeminiアプリやVertex AI(Googleの企業向けAI基盤)で検索結果を回答の根拠にする「グラウンディング」にも使われなくなります。
10. 個別の指定には「User-agent: *」が引き継がれない
robots.txtでクローラー名を指定したグループがあると、そのクローラーには「User-agent: *(すべて)」の指定が適用されません。RFC 9309(robots.txtの標準)とGoogleの仕様のとおりです。「*」で管理画面を拒否していても、GPTBotの個別の指定を足した途端に効かなくなるので、個別のグループにも同じ行を書きます。
11. 利用者の指示で読みに来るものは別扱い
利用者がAIに「このページを読んで」と頼んだときの読み込みについて、OpenAIはChatGPT-Userにrobots.txtが適用されない場合があるとし、PerplexityはPerplexity-Userが、GoogleはGoogle-Agentを含む利用者の指示で動く仕組みが、原則として従わないと説明しています。Anthropicは自社のボットは従うと説明しています。見せたくない情報は、パスワードなどで守ります。
12. Cloudflareのボット設定で検索まで止めていないか
Cloudflareは2026年9月15日に設定を変え、学習用を「Block」または「Block on pages with ads」にすると、Googlebot・Bingbot・Applebotの検索用の巡回まで止まるようになりました。学習だけ断るなら「Disallow AI Training」を選びます(Bingの対応は2027年初めの予定)。BlockかDisallowを選び「Bot Preference Sync」がオンだと、robots.txtの先頭に拒否の行が自動で入ります。公開中のrobots.txtをブラウザで開き、CDN(配信サービス)やWAF(不正アクセスを防ぐ仕組み)のボット対策も確かめます。
Googleの設定と表示で押さえる6項目(13〜18)
13. Search Consoleの生成AIの設定
Search Console(Googleの無料のサイト管理ツール)には、サイトをAIによる概要、AIモード、Discoverの生成AI機能に含めるかを選ぶ設定があり、2026年8月31日に全世界で使えるようになりました。除外するとこれらからの表示はなくなりますが、通常の検索の順位には使わないとGoogleは説明しています。学習を止めるのは、この設定ではなくGoogle-Extendedです。
14. nosnippetは通常の説明文も消す
nosnippetを付けると、本文がAIによる概要やAIモードの直接の材料に使われなくなります(max-snippetは量を制限)。ただし、通常の検索結果の説明文も消えたり短くなったりします。
15. 構造化データは画面の内容と一致させる
構造化データ(検索エンジン向けにページの内容を整理して伝える記述)は、画面の内容と食い違わないようにします。FAQPageのリッチリザルト(検索結果での質問の折りたたみ表示)は、2026年5月7日に表示が終わりました。なお、Googleは生成AI検索のための特別なマークアップは不要だと明記しています。
16. 著者情報にはurlかsameAsを入れる
著者を構造化データで示すときは、authorに@type(人ならPerson)と、紹介ページを指すurl(またはsameAs)を入れます。Googleは、著者を見分けるときにurlとsameAsを理解できると説明しています。
17. llms.txtはGoogle検索では使われない
AI向けにサイトの概要をまとめるllms.txtについて、Googleは2026年6月15日に、Google検索では使わず、置いても置かなくても見え方は変わらないと明記しました。ほかのサービスのために置くのは構いませんが、これでAI対策が済むわけではありません。
18. 虚偽や見返り付きのクチコミを載せない
Googleは2026年7月24日に、虚偽のクチコミや、見返りがあるのに開示していないクチコミを、ページにも構造化データにも入れないというガイドラインを加えました。実際の体験に基づかないものが対象なので、AIで作った「お客様の声」は使いません。
登録と計測の2項目(19〜20)
19. Bing Webmaster Toolsに登録し、IndexNowも入れる
Microsoftは、CopilotがWebの情報をBingの検索サービスから取得すると説明しています。Bing Webmaster Tools(Bingのサイト管理ツール)にも登録し、更新をすぐ知らせる仕組みのIndexNowも入れておきます。ただし2026年10月27日時点のIndexNowの参加先は、Bing、Yandex、Naverなどで、GoogleとOpenAIは入っていません。
20. 効果は3つの方法で測る
Search Consoleには、生成AIの機能での表示回数やページ、国などが分かるパフォーマンスレポートが2026年6月に加わり、8月31日に全世界へ広がりました。Bing Webmaster Toolsにも、Copilotなどでの引用の状況が分かる「AI Performance」が、2026年2月に公開プレビュー(試験提供)として加わっています。さらに、自社に関係する質問をAIに定期的に入力し、どのサイトが引用されるかを記録する「定点観測」も行います。
基準は変わり続ける。確認まで自動化しておく
20項目の多くに、2026年の日付が付いています。スパムポリシーの追加、FAQPageの終了、Search Consoleの新しい設定、Cloudflareの変更と、数か月で前提が大きく変わりました。
そこで弊社では、AIで定期的に一次情報(各社の公式ドキュメントや発表)を集めて基準を更新し、その基準でホームページを検証・改善するところまで自動化しておくことが大切だと考えています。Claude CodeやCodexは、作るだけでなく、公式ドキュメントの変更を読み、robots.txtや構造化データ、リンクを点検する作業も任せられます。仕組みにしておけば、追いかける手間を大きく減らせます。
よくある質問
AEOのために、SEOとは別の対策が必要ですか?
Googleは、生成AIの機能でもSEOの基本が大切で、特別なマークアップは不要だと説明しています。まずSEOの基本を整え、そのうえでクローラーやAIの設定を確かめるのが近道です。
AIの学習を断ると、AI検索に出なくなりますか?
多くの会社は検索用と学習用のクローラーを分けているので、学習用だけを拒否できます。ただし、CloudflareのBlockのように検索まで止まる設定もあるので注意します。
一度に全部確かめるのが難しい場合は?
影響の大きいものから進めます。リンクが<a href>か、robots.txtやCloudflareで検索用のクローラーを止めていないか、Search ConsoleとBing Webmaster Toolsに登録しているかを先に確かめると、大きな取りこぼしを防げます。
まとめ
AIで作ったホームページでも、画面に出ない設定しだいで、検索やAIでの見つかりやすさは大きく変わります。地名だけを変えたページや作られたクチコミのように、AIで簡単にできることほどルール違反になりやすい点にも注意が必要です。一度確認して終わりにせず、一次情報をもとに基準を更新し、点検し続ける仕組みを作っておきましょう。
参考資料
- Google 検索セントラル:Optimizing your website for generative AI features on Google Search
- Google 検索セントラル:Google ウェブ検索のスパムに関するポリシー
- Google 検索セントラル ブログ:Introducing a new spam policy for "back button hijacking"(2026年4月13日)
- Google 検索セントラル:Latest Google Search Documentation Updates
- Google 検索セントラル:クロール可能なリンク
- Google 検索セントラル:画像のメタデータ
- Google Crawling Infrastructure:Google の一般的なクローラ(Google-Extended)
- Google Crawling Infrastructure:ユーザーがトリガーするフェッチャー(Google-Agent)
- Google Crawling Infrastructure:robots.txt の仕様
- RFC 9309:Robots Exclusion Protocol
- OpenAI:Overview of OpenAI Crawlers
- Anthropic:Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity:Perplexity Crawlers
- Cloudflare:Have it both ways: stay discoverable in search while disallowing AI training(2026年9月15日)
- Cloudflare:Say it once: introducing Bot Preference Sync
- Google:New opportunities, control and insights for website owners
- Google 検索セントラル ブログ:Introducing Search Generative AI performance reports in Search Console
- Google 検索セントラル:robots メタタグ、data-nosnippet、X-Robots-Tag の設定
- Google 検索セントラル:記事(Article)の構造化データ
- Google 検索セントラル:レビュー スニペット(Review、AggregateRating)の構造化データ
- Microsoft Learn:Data, privacy, and security for web search in Microsoft Copilot and Microsoft Copilot Chat
- IndexNow:参加している検索エンジンの一覧
- Bing Webmaster Blog:Introducing AI Performance in Bing Webmaster Tools Public Preview(2026年2月10日)
