llms.txt

На многих сайтах лежат два файла, предназначенных не для людей: robots.txt говорит поисковым системам, какие разделы им не следует запрашивать, а sitemap.xml перечисляет все адреса. Файл llms.txt по замыслу встаёт в этот же ряд. Он должен в нескольких строках сообщить языковой модели, о чём этот сайт и где лежит важное содержимое.

Решающее отличие стоит поставить в начало: robots.txt и sitemap.xml существуют десятилетиями и действительно обрабатываются. Файл llms.txt был опубликован в сентябре 2024 года как предложение. Ни один орган по стандартизации его не утверждал, и нам неизвестно ни одно публичное обязательство крупного поставщика действительно читать этот файл. Кто представляет его как обязанность или как устоявшийся стандарт, выходит за пределы того, что доказуемо.

Устройство файла намеренно простое. Заголовок с названием компании, короткий абзац, который обычными предложениями описывает, что предлагается, и ниже разделы со ссылками на важнейшие страницы, каждая с поясняющей фразой. Пишется это в Markdown — способе записи для простых текстовых файлов. Программирования для этого не требуется.

Почему он может быть осмысленным, несмотря на неясную пользу: затраты малы, а возможный вред равен нулю. И он заставляет проделать упражнение, которое полезно в любом случае, — изложить собственное предложение ясными, короткими фразами, без рекламного словаря. Кто делает это ради файла, регулярно замечает, что те же самые фразы лучше смотрелись бы на главной странице, чем то, что стоит там сейчас.

Одним опытом мы делимся, потому что он коснулся нас самих: этот файл — отдельное место, требующее ухода. То, что там написано, стоит там неподвижно и не переносится автоматически, когда Вы меняете на сайте цены, услуги или языки. В нашем собственном файле мы нашли сведения, которые в другом месте давно были исправлены, — как раз в том файле, из которого модель стала бы цитировать. Кто его заводит, должен включить его в порядок внесения изменений.

Что касается пользы, мы сдержанны, но саму тему за этим считаем серьёзной. То, что ответы всё чаще собираются машинами, измерено, а не предположено. Только путь туда лежит через содержимое на самой странице: ясный вопрос, короткий полный ответ, число с источником. Что при этом важно, описано в записях AI Overview и Видимость в ИИ.

Для разграничения, потому что эти три файла часто путают: robots.txt регулирует доступ, sitemap.xml перечисляет адреса, llms.txt описывает содержание. Ни один не заменяет другой. И ни один из них ничего не принуждает — с технической точки зрения даже robots.txt является просьбой, которую добросовестные программы обхода соблюдают, а другие нет.

Для Вас это означает: если компания хочет такой файл, мы его заведём, он почти ничего не стоит. При этом мы говорим, что его действие не доказано, и не выдвигаем его вперёд как услугу. Вместо этого мы рекомендуем работу над самими страницами — там связь между затратами и результатом доказуема.