Наткнулся на занятную штуку, одно время было довольно популярно делать llms.txt

Наткнулся на занятную штуку, одно время было довольно популярно делать llms.txt с инструкциями для АИ ботов которые в 98% никто не читал - тыц. Как же я, мягко сказать, "удивился" увидев как чел загоняет эти файлы в индекс ботов (прочитать подробно - здесь) и все модели (Claude, GPT, DeepSeek, Grok) в 100% случаев начали подтягивать себе этот файл.

Решение следующее:
1. Добавление AI-подсказки - разместить незаметную HTML-ссылку с атрибутом title на этот самый llms.txt, например в футере.
2. Добавить контекстные лимиты токенов - указать объемом токенов, поскольку многие модели выдают саммари вместо конкретного текста, если скармливать объемный llms.txt.
3. Создать мини-RAG эндпоинты - интеграция поисковых путей вроде /llms?query= опять же чтобы модели не перегружали свой контекстный лимит длинными текстами. ИИ-агенты начали охотно и активно отправлять туда поисковые запросы, предпочитая при этом обычный текст формату JSON.

Дальше можно или перевести почитать детально или засунуть это все в тот же фейбл и попросить реализовать уже у себя на сайтах.