llms.txt: що це таке і чи потрібен він вашому сайту

Останні місяці в SEO-розсилках раз у раз зʼявляється той самий заголовок: «Додайте llms.txt, інакше ШІ вас не побачить». Звучить терміново. Насправді все спокійніше - і цікавіше.

Що це таке

llms.txt - звичайний текстовий файл у корені сайту, за адресою /llms.txt. Коротко, людською мовою і у форматі Markdown там описано: що це за сайт, хто за ним стоїть і які сторінки несуть основний зміст. Ідею запропонував Джеремі Говард восени 2024 року.

Логіка проста. Мовній моделі незручно читати звичайний сайт: меню, футер, банери, скрипти - шуму більше, ніж змісту. llms.txt дає їй шпаргалку: ось головне, ось куди дивитись.

Чим він не є

Це не robots.txt. Він нічого не забороняє й не дозволяє - доступ краулерів до сайту, як і раніше, регулює robots.txt. І це не стандарт: жоден великий пошуковик не зобовʼязувався його читати. Представники Google публічно казали, що пошук Google його не використовує.

Тому якщо вам обіцяють, що llms.txt підніме вас у Google, - це неправда. На позиції у звичайному пошуку він не впливає.

llms.txt - не кнопка «зʼявитися в ChatGPT». Це візитка, яку хтось прочитає, а хтось ні.

Навіщо він тоді

Бо коштує він пів години, а читають його не лише пошуковики. Асистенти, яким людина дала посилання на ваш сайт, агенти, що збирають інформацію для відповіді, інструменти розробників - частина з них цей файл шукає. І якщо знаходить, переказує вас точніше.

Для невеликого сайту з блогом це дешева страховка від того, що ШІ, описуючи вашу компанію, візьме текст із футера або з давно застарілої сторінки.

Що в ньому писати

• Одне-два речення про те, хто ви і що робите - так, як ви хотіли б, щоб вас переказали
• Посилання на головні сторінки з коротким описом кожної
• Контакти
• Застереження, якщо вони важливі: наприклад, що ціни на сайті - стартові, а не остаточні

І головне правило: нічого, чого немає на самому сайті. Файл, який обіцяє більше, ніж підтверджують сторінки, гірший за відсутність файлу - асистент повторить обіцянку, а людина прийде й не знайде.

Як це зроблено в нас

Наш llms.txt не лежить окремим файлом, який треба не забути оновити. Він генерується з тих самих даних, що й блог та карта сайту: вийшла нова стаття - вона зʼявилась у файлі сама. Дрібниця, але саме такі дрібниці відрізняють файл, що допомагає, від файлу, який через пів року бреше.

Чи потрібен він вам? Якщо про ваш сайт люди можуть питати ШІ - так, це найдешевше, що можна зробити. Але якщо на сайті нема нормального HTML, розмітки й зрозумілих сторінок, llms.txt цього не компенсує. Спершу фундамент, потім візитка.