Как добиться, чтобы Claude вас цитировал?

Claude выбирает источники не так, как другие ассистенты. В исследовании 379 321 цитирования по 16 406 доменам на вопросы о SaaS и технологиях 64% ссылок вели на сайты брендов и компаний, 0,9% на соцсети и ни одной на Reddit. Значит, по крайней мере в этих данных, собственные страницы компании особенно важны. Прежде чем улучшать эти страницы, проверьте, может ли Claude до них добраться.

У Anthropic три отдельных краулера, у каждого свой user-agent и своя задача. Владелец сайта может задать для каждого свои правила доступа.

ClaudeBot собирает веб-контент, чтобы улучшать генеративные модели ИИ (обучение). Если его заблокировать, новые материалы сайта будут помечены как исключённые из обучающих наборов данных.

Claude-SearchBot индексирует контент, чтобы улучшать качество поисковой выдачи. Если его заблокировать, страницы не попадут в поисковый индекс, а это, по словам Anthropic, «может снизить видимость вашего сайта».

Claude-User забирает страницы, когда этого требует вопрос пользователя Claude. Если его заблокировать, Claude не сможет открыть страницу по просьбе пользователя.

Все три соблюдают robots.txt. Anthropic заявляет, что её краулеры следуют стандартным директивам robots.txt и учитывают ещё и нестандартную Crawl-delay. Это реальное отличие от Perplexity, чей краулер, работающий по запросу пользователя, как правило, игнорирует robots.txt. У Claude запрет в robots.txt действует буквально, для всех трёх краулеров.

Отсюда и полезный ход: запретить обучение — не то же самое, что исчезнуть из Claude. Если вы против обучения моделей, а не против видимости, закройте ClaudeBot и оставьте два других открытыми. Цитирования идут через поиск и запросы пользователей, а не через обучающие данные.

User-agent: ClaudeBot
Disallow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

На аудитах мы гораздо чаще видим обратное: общий Disallow, написанный ради отказа от обучения, заодно тихо отнимает все цитирования.

Чтобы проверить, правда ли краулер принадлежит Anthropic, сверьте его IP со списком на claude.com/crawling/bots.json. Адреса в списке собраны вместе, без разбивки по отдельным краулерам. Когда IP подтверждён, определите краулер по user-agent.

Claude-SearchBot заносит ваши страницы в поисковый индекс. Вопрос интереснее: в какой именно.

Когда вопросу нужна свежая информация, Claude запускает поиск и обрабатывает результаты. По документации Anthropic, «каждый ответ содержит ссылки на источники, так что вы легко можете проверить их сами». Но документация продукта нигде не называет поставщика веб-поиска. Что зафиксировано: в марте 2025 года Brave Search добавили в публичный список субподрядчиков Anthropic; в определении инструмента web_search в Claude есть параметр BraveSearchParams; в публично описанном тесте десять ссылок, которые выдал Claude, в точности совпали с поиском Brave по тем же словам. Справочный центр Anthropic отдельно отмечает, что результаты по картинкам «предоставляет Bing».

Вывод в любом случае один: поищите в Brave по запросам, в ответ на которые хотите попасть, и посмотрите, есть ли там вы. Это занимает минуту, ничего не стоит и точнее показывает, что найдёт Claude, чем ваши позиции в Google.

Прежде чем следовать советам о Claude, отличайте официальную документацию от результатов исследований и непроверенных утверждений.

Оба исследования, Otterly и Jacques с соавторами, показывают одну закономерность, и она важнее любой отдельной тактики: цитирования Claude сосредоточены. В SaaS и технологиях пятьсот доменов из 16 406 собирают 59,9% цитирований. В медицине десять организаций собирают 57,8%. Claude не распределяет цитирования по длинному хвосту, а снова и снова обращается к источникам, которые считает справочными. Именно за место в этом круге и идёт борьба. Попасть в него помогает то, что представляют собой ваши страницы, а не то, как они отформатированы.

Начинайте с ответа, держите в абзаце одну мысль, сравнения сводите в таблицы, а конкретные утверждения подкрепляйте ссылкой на источник. По имеющимся данным, Claude охотнее всего цитирует материалы, устроенные как справочник.

В наборе данных по SaaS и технологиям 64% цитирований пришлось на домены самих компаний. Поэтому документация продукта, технические характеристики, страницы с методикой и таблицы сравнения лучше всего подходят для цитирования. Но обычно они написаны как реклама, а должны читаться как справочник. Конкретно: