Что читают ИИ-агенты в вашем магазине Shopify: agents.md, llms.txt, /.well-known/ucp и robots.txt

Откройте /agents.md в своём магазине Shopify. Если никто не добавлял шаблон, вы увидите Markdown-файл с заголовком «Agent Instructions», которого вы не писали. Его пишет Shopify, дублирует в /llms.txt и /llms-full.txt и публикует JSON-профиль для агентов по адресу /.well-known/ucp. Шаблон темы может заменить каждый текстовый файл; для профиля Shopify такого шаблона не документирует. А robots.txt не влияет на данные о товарах, которые Shopify отправляет в ИИ-каналы. Все источники я прочитал 2 октября 2026.

Какие файлы Shopify уже отдаёт ИИ-агентам?

Shopify пишет, что каждый магазин по умолчанию отдаёт /agents.md, /llms.txt и /llms-full.txt, а профиль UCP публикуется по адресу /.well-known/ucp. Все четыре файла пишет Shopify. robots.txt остаётся стандартным файлом Shopify, пока тема не добавит robots.txt.liquid. В справке Shopify сказано, что сторонние приложения для генерации этих файлов не нужны.

URL	Что в нём	Кто пишет	Как изменить
/agents.md	Основной документ для обнаружения агентами, в формате Markdown	Shopify, на основном домене без префикса локали или Markets	templates/agents.md.liquid
/llms.txt	То же содержимое, что и в /agents.md	Shopify, как зеркало	llms.txt.liquid, а если его нет, agents.md.liquid
/llms-full.txt	То же содержимое, что и в /agents.md	Shopify, как зеркало	llms-full.txt.liquid. Порядок поиска для этого URL в документации Shopify для разработчиков не указан
/.well-known/ucp	Бизнес-профиль UCP в JSON: версии протокола, сервисы, возможности, платёжные обработчики (payment handlers)	Shopify	Шаблон темы для него не документирован на 2 октября 2026
/robots.txt	Правила для краулеров	Стандартный файл Shopify	templates/robots.txt.liquid, которого нет ни в одной теме по умолчанию

В магазинах Shopify, которые я проверил 2 октября 2026, /agents.md, /llms.txt и /.well-known/ucp все возвращали ответ. /llms.txt отдавал тот же текст, что и /agents.md, и сам об этом сообщал. Это не список ссылок в стиле llmstxt.org.

Кроме файлов, у агентов есть инструменты. С 5 августа 2026 каждая Liquid-витрина отдаёт инструменты WebMCP: браузерные агенты могут с их помощью искать по каталогу, вести корзину и переходить к чекауту, причём ничего устанавливать не нужно. Поддержка агентов пока ограничена браузерами на Chromium и работает через origin trial. С 28 сентября 2026 браузерные агенты могут также читать, обновлять и отправлять ваш чекаут через WebMCP, когда покупатель подтвердит.

Что написано в стандартном agents.md и стоит ли его заменять?

Оставьте стандартный файл Shopify, если вам нечего добавить для вашего магазина. Shopify рекомендует шаблон agents.md.liquid только для сложных задач, а после его добавления следить за актуальностью файла приходится вам. Если пишете свой, берите адреса эндпоинтов из объекта agents, чтобы они всегда оставались актуальными.

Стандартный файл сообщает агенту, где находятся профиль UCP для обнаружения сервисов и эндпоинт MCP, описывает ход покупки через агента, перечисляет поддерживаемые версии UCP и задаёт правила. Одно из правил звучит так: «Checkout requires human approval.» Там же есть маршруты для просмотра только на чтение и политики магазина. Товаров в нём нет.

Для /llms.txt Shopify ищет llms.txt.liquid, затем agents.md.liquid, а потом берёт собственный файл по умолчанию. Поэтому один agents.md.liquid меняет и /llms.txt, если у этого URL нет своего шаблона.

Шаблон обрабатывается в ограниченном контексте Liquid: существуют только request и agents, поэтому shop, collections и обычные объекты темы выводятся пустыми. Объект agents даёт название и URL магазина, URL обнаружения UCP, эндпоинт MCP по адресу /api/ucp/mcp, поддерживаемые версии UCP, валюту и URL карты сайта. Небольшой собственный файл, который сохраняет рабочие эндпоинты (заметка о магазине здесь просто заглушка):

# {{ agents.store_name }}: notes for AI agents

Store: {{ agents.store_url }}
Primary currency: {{ agents.currency }}

## Commerce Protocol (UCP)

- Discovery: {{ agents.ucp_discovery_url }}
- MCP endpoint: {{ agents.mcp_endpoint_url }}
- Supported versions: {{ agents.ucp_versions | join: ", " }}

## Store notes

- Engraved items are made to order. Give the shopper the lead time from the product page before checkout.

Sitemap: {{ agents.sitemap_url }}

Когда я проверяю такой файл, ссылки на UCP и MCP должны остаться и должны браться из объекта agents, а не из адреса, вписанного вручную. Закрытые данные я в него не добавляю: файл публичный, его получает любой агент, который запросит.

Что такое профиль UCP и что он доказывает?

По адресу /.well-known/ucp доступен бизнес-профиль магазина по Universal Commerce Protocol, публичный JSON-документ. По нему агенты находят каталог, корзину и чекаут. Он показывает, что платформа поддерживает агентов. Он не подтверждает, что какой-либо ИИ-канал продаёт ваши товары, потому что статуса по каналам в нём нет.

В журнале изменений Shopify для разработчиков от 4 сентября 2026 сказано, что профили витрин теперь объявляют версию UCP 2026-08-25, а поддерживаемые Shopify возможности не изменились. В магазинах, которые я проверил 2 октября 2026, профиль объявлял 2026-08-25 вместе с 2026-04-08 и 2026-01-23. В нём было перечислено десять возможностей (capabilities), среди них checkout, cart, order, fulfillment, discount, а также поиск и lookup по каталогу. Он указывал эндпоинт MCP по адресу /api/ucp/mcp и платёжные обработчики для Google Pay, карты и Shop Pay.

В документации Shopify для агентов процесс описан так: агент представляется, находит товары через Shopify Catalog, собирает корзину и чекаут, затем отслеживает заказ через вебхуки заказов. Для большинства агентов Checkout MCP отдаёт покупателю continue_url, и покупка завершается на чекауте вашей витрины. Завершить чекаут напрямую могут только агенты с токеном, выданным Shopify, у которого есть право на покупку.

Настройки ваших каналов находятся в админке Shopify, в Sales channels > Agentic, а не в профиле. В гайде по каналам эти настройки собраны в одной датированной таблице.

Убирает ли robots.txt мои товары из ChatGPT и Google AI Mode?

На отправку данных из Shopify он не влияет. Shopify пишет, что блокировка ИИ-краулеров в robots.txt или на сетевом уровне влияет только на обнаружение в открытом вебе и не мешает Shopify Catalog отправлять данные о товарах в активные ИИ-каналы. Доступ к Catalog включается отдельным переключателем в админке Shopify, так что два решения принимаются в двух разных местах.

В открытом вебе robots.txt по-прежнему важен. Блокировка Googlebot на страницах товаров действует на весь Google Search, а ИИ-функции Google используют только страницы, которые проиндексированы и подходят для сниппета.

Путь	Что передаётся	Ваш переключатель
Shopify Catalog	Данные о товарах из вашей админки для ИИ-каналов, которые называет Справочный центр Shopify (ChatGPT, Google AI Mode и Gemini, Microsoft Copilot, Meta), и для Shop. Прямому чекауту Google также нужны ваши товары в Merchant Center, через канал Google & YouTube или фид	Sales channels > Agentic: выключить «Allow Shopify to manage for me», открыть канал, задать Shopify Catalog access или Direct checkout, нажать Save
Открытый веб	Ваши публичные страницы, которые читают краулеры и загрузчики (fetchers)	robots.txt.liquid, ваш собственный CDN или WAF, если он у вас есть, и настройка Search generative AI в Search Console для Google
Интерфейс для агентов	agents.md, llms.txt, профиль UCP, endpoint MCP, инструменты WebMCP	Шаблоны агентов для текстовых файлов. Профиль и эндпоинты остаются за Shopify

Что Shopify говорит о переключателе Catalog:

• Отключение доступа к Shopify Catalog может занять до 7 дней и одновременно отключает прямой чекаут. Товары по-прежнему можно найти через веб-краулинг.
• Отказаться от самого Shopify Catalog нельзя. Товары остаются в нём для поиска по витрине и для Shop, а доступ Shop нельзя отключить в Sales channels > Agentic.
• Чтобы скрыть один товар из всех ИИ-каналов, включая Shop, поставьте ему статус Unlisted (на странице агентных настроек также указано метаполе seo.hidden). Тогда товар пропадёт и из поисковых систем вроде Google, из карт сайта и из поиска по онлайн-магазину.

OpenAI пишет, что данные о товарах продавцов Shopify уже есть в ChatGPT через Shopify Catalog и подавать заявку не нужно. Поэтому платить за «попадание в ChatGPT» не нужно, а присутствие в каталоге ещё не значит, что вас рекомендуют. Вопрос, оставлять ли прямой чекаут в Google AI Mode и Gemini, Copilot и Meta, решается отдельно и разобран в ситуации про прямой чекаут.

Чем управляет каждый токен ИИ-краулера?

У каждого токена своя задача. Поисковый краулер решает, могут ли ваши страницы появляться в поиске этого оператора. Токен для обучения решает, можно ли использовать ваш контент для обучения моделей. Загрузчик, запускаемый пользователем (user-triggered fetcher), действует от имени одного человека, и, по словам Google, его собственные загрузчики в основном игнорируют robots.txt. Google документирует все три вида, поэтому таблица начинается с него.

Токен или настройка	Вид	Что меняет блокировка, по словам оператора	Что она не меняет
Googlebot	Поисковый краулер Google	Google Search и все его функции, а также Images, Video, News и Discover. AI Overviews и AI Mode используют только страницы, которые проиндексированы и подходят для сниппета	Это не переключатель только для ИИ: блокировка на страницах товаров действует на весь Google Search
Storebot-Google	Краулер Google для шопинга	Все разделы Google Shopping, например вкладку Shopping	В документации Google о краулерах не сказано, какой краулер собирает данные для товарных результатов в AI Mode
Google-Extended	Токен robots.txt, а не отдельный краулер	Может ли Google использовать ваш контент для обучения моделей Gemini и для привязки ответов к источникам (grounding) в Gemini Apps и в Grounding with Google Search на Vertex AI	Включение в Google Search или ранжирование
Google-Agent	Загрузчик, запускаемый пользователем; его используют агенты в инфраструктуре Google, которые просматривают сайты и действуют по запросу пользователя	Почти ничего: Google пишет, что такие загрузчики в основном игнорируют robots.txt	Не рассчитывайте, что правило в robots.txt его остановит
OAI-AdsBot	Краулер OpenAI для рекламы	ChatGPT Ads требует, чтобы он сканировал посадочные страницы объявлений для проверки	Важно, только если вы рекламируетесь в ChatGPT
OAI-SearchBot	Краулер OpenAI	Для объявлений ChatGPT Ads на основе фида товаров он должен иметь возможность загружать URL картинок товаров	Более широкую область действия должен описывать сам OpenAI
Search Console: Search generative AI	Настройка, а не токен	Исключение сайта убирает его из AI Overviews, AI Mode и генеративных ИИ-функций в Discover. По умолчанию сайт включён	Участие в Merchant Center или Google Ads и обучение ИИ (для этого Google указывает на Google-Extended)

Другие операторы документируют собственные токены, например GPTBot, ChatGPT-User, ClaudeBot или PerplexityBot. Их страницы я для этого гайда заново не проверял, поэтому не пересказываю их. Прочитайте страницу оператора, прежде чем писать правило: случайная блокировка поискового краулера может стоить вам веб-ответов этого ассистента, а блокировать токен, который отвечает только за обучение, вполне нормально. Проверка готовности показывает, что ваш robots.txt говорит 19 токенам. Про отслеживание ChatGPT Ads читайте в ситуации про ChatGPT Ads.

Как изменить robots.txt в Shopify, не потеряв настройки по умолчанию?

Добавьте в тему templates/robots.txt.liquid, выведите стандартные группы Shopify через объект robots и после них напишите свои группы. Стандартные группы берите из объекта robots, а не вставляйте статичную копию сегодняшнего файла.

{% for group in robots.default_groups %}
  {{- group.user_agent }}

  {%- for rule in group.rules -%}
    {{ rule }}
  {%- endfor -%}

  {%- if group.sitemap != blank -%}
    {{ group.sitemap }}
  {%- endif -%}
{% endfor %}

User-agent: Google-Extended
Disallow: /

Это блокирует Google-Extended на всём сайте. Как сказано в таблице выше, это касается обучения и grounding в Gemini, но не включения в Google Search и не ранжирования. Публикуйте такое правило, только если вы решили ограничить это использование. С другими токенами работает та же схема.

robots.txt читают краулеры, которые соблюдают правила, а принудительно доступ ограничивается на уровне сети. С мая 2026 Shopify применяет более жёсткие лимиты частоты запросов к ботам и агентам на страницах витрины, самые жёсткие для запросов без подписи, и просит операторов подписывать запросы через Web Bot Auth. Если перед Shopify стоит ваш собственный прокси или CDN, его правила дополнительно ограничивают ботов. Прежде чем их ужесточать, изучите трафик Google UCP: в FAQ Google по UCP сказано, что его запросы содержат заголовок профиля UCP-Agent и User-Agent, начинающийся с Google/UCP, а проверки работоспособности идут с Google-UCP-Prober/1.0.

Нужно ли приложение для llms.txt?

Нет. Shopify уже отдаёт /llms.txt как зеркало /agents.md, и в его справке сказано, что сторонние приложения для генерации этих файлов не нужны. Google Search игнорирует llms.txt: Google пишет, что такой файл не помогает и не вредит видимости в Search, включая генеративные ИИ-функции. В Shopify платное приложение для llms.txt почти ничего не добавляет.

Google также пишет, что AI Overviews и AI Mode не требуют новых машиночитаемых файлов, текстовых файлов для ИИ или специальной разметки schema.org. Страница должна быть проиндексирована и подходить для сниппета, а сайт должен быть включён в настройку Search generative AI в Search Console. Если такое приложение у вас уже стоит, откройте /llms.txt, посмотрите, что он отдаёт сейчас, и проверьте, что ссылки на UCP и MCP на месте.

Вложите деньги в данные о товарах в админке, такие как штрихкоды, бренд и политики магазина (товары, которых нет в ИИ-шопинге), и в то, чтобы видеть заказы (ИИ-трафик в GA4, захват заказов из ИИ-каналов).

Как проверить свой магазин?

Сначала проверьте публичные файлы, затем настройки в админке. Бесплатная проверка готовности читает публичные файлы примерно за десять секунд. На остальное отвечают админка Shopify и Search Console. Ни один из этих шагов ничего не меняет в вашем магазине.

1. Запустите проверку готовности к ИИ-шопингу (AI Shopping Readiness Check). Она представляется, соблюдает ваш robots.txt, ничего не сохраняет и не выставляет оценку. Всё, что есть только в админке, возвращается как «Неясно».
2. Откройте /agents.md. Стандартный файл Shopify начинается с «Agent Instructions» и названия вашего магазина, затем объясняет эндпоинты UCP и MCP. Если у вас написано иначе, файл заменён шаблоном. В любом случае проверьте, что ссылки на UCP и MCP в нём остались.
3. Откройте /robots.txt и найдите группу, где назван поисковый краулер, например Googlebot, с Disallow: / или Disallow: /products/. В стандартном файле Shopify такой блокировки поисковых краулеров нет, значит, её кто-то добавил: в robots.txt.liquid или в вашем CDN. Узкие шаблоны с /products/, которые стандартный файл Shopify задаёт для всех краулеров, в порядке вещей.
4. В админке Shopify откройте Sales channels > Agentic. Отметьте, включён ли «Allow Shopify to manage for me», затем Catalog access и Direct checkout по каждому каналу. Открыть эту страницу может только владелец или сотрудники с правами Products > View и App and sales channel > Agentic.
5. В Search Console откройте Settings > Search generative AI и убедитесь, что сайт включён, если только вы не исключили его намеренно.

Как я проверяю это в магазине и что пока не могу показать

Я читаю файлы снаружи, затем настройки в админке без изменения значений, и отмечаю, какой ответ откуда пришёл. Результатов клиентов по ИИ-каналам мне пока показать нечего. Проверку готовности я сделал сам, она публичная. Подтверждение ниже относится к смежной работе и так и подписано.

Я разбираю robots.txt по каждому токену на реальном пути товара, а не только на /, сравниваю agents.md со стандартным файлом Shopify и убеждаюсь, что профиль отдаётся валидным JSON. Внутри я проверяю Sales channels > Agentic по каждому каналу, настройку в Search Console и правила CDN, если у магазина своя зона. В заключении факты из админки отделены от выводов, сделанных снаружи.

• Серверная перестройка измерений для headless-магазина Shopify: доля продаж, которые можно проследить до источника, выросла с 6% (39 из 612 продаж за 29 дней) до 76% (замер за день с завершённой обработкой данных, 19 августа 2026).
• Работа с фидом Merchant Center: один ID варианта Shopify проведён через Merchant Center, GA4/Ads и каталог Meta. Покрытие конверсий GA4 относительно реальных заказов выросло с 29% до 80% после выравнивания ID и серверной миграции.

Что пока не задокументировано?

Вот пробелы, которые я обнаружил 2 октября 2026: то, что я видел в работающих магазинах, но не нашёл в документации, и места, где документация молчит или противоречит себе. Я считаю их открытыми вопросами и проверяю снова каждый месяц.

• В магазинах, которые я проверил, в ответах страниц был HTTP-заголовок Link, который указывает на /.well-known/ucp с rel="ucp" и версией 2026-08-25. Страницы Shopify, где это описано, я не нашёл.
• robots.txt одного магазина начинался со строк-комментариев, которые указывают агентам на agents.md и эндпоинтам UCP. У другого магазина, на более старом собственном шаблоне, их не было. В документации Shopify для разработчиков эти строки не описаны, поэтому я не могу сказать, сохраняет ли их шаблон robots.txt.liquid.
• В документации Google о краулерах не сказано, какой краулер собирает данные для товарных результатов в AI Mode.
• Страницы Shopify расходятся в том, получают ли Google и Meta товары через Shopify Catalog или через собственные каналы продаж (Google & YouTube, Facebook and Instagram).
• Справочный центр Shopify не упоминает ни канал Perplexity, ни настройку Perplexity.

Сколько это стоит, если вы хотите, чтобы это сделал я

Проверка файлов бесплатна: запустите проверку или опишите задачу. Платная работа идёт по обычному прайс-листу, а услуга по каналам ИИ-шопинга показывает всё предложение. Если задача уже ясна, я могу сразу назвать смету на реализацию. Если сначала нужно установить причину или определить объём работ, договариваемся об отдельной диагностике.

• Technical Working Session (10 000 ₽): до 60 минут по одному вопросу, выбранному заранее, например блокировать ли Google-Extended, с короткой письменной сводкой.
• Tracking Health Check (25 000 ₽): только чтение, один магазин, один согласованный вопрос, до трёх систем и письменное заключение через два рабочих дня после стартового созвона и получения доступа. Для этой темы хороший вопрос такой: соответствует ли Sales channels > Agentic вашим намерениям и учитываются ли ИИ-заказы в ваших отчётах.
• Focused Fix (от 30 000 ₽): одно ограниченное изменение по фиксированной смете: исправление robots.txt.liquid, agents.md.liquid с сохранёнными ссылками на UCP, настройки по каналам или исключение товаров с описанными побочными эффектами для поиска.
• Custom Engineering Project (от 100 000 ₽): headless-фронтенд, который должен сам отдавать свой профиль UCP и agents.md, или интеграции агентов и MCP на базе UCP.

Если ваш магазин отдаёт стандартные файлы Shopify и никто не трогал robots.txt.liquid, на этом уровне чинить нечего, и приложение для llms.txt вам не нужно.