Накратко
- llms.txt е предложение от 2024 г.: Markdown файл в основната директория, който дава на ИИ системите кратък преглед на Вашия сайт.
- Google посочва, че за AI Overviews и режима с ИИ не са нужни нови машинночетими файлове или текстови файлове за ИИ.
- Засега няма надеждно доказателство, че големите ИИ търсачки използват файла за препоръки.
- Създаването му струва малко и не вреди. По-важни са достъпът за роботи за обхождане, лесно четимите страници и правилно оформените структурирани данни.
Какво представлява llms.txt
Идеята е на Jeremy Howard, който я публикува през септември 2024 г. на llmstxt.org. Целта е сайтовете да предлагат на езиковите модели и ИИ агентите кратко резюме в Markdown: кои са, какво има на сайта и кои страници са важни за кои въпроси. Причината е, че при работа ИИ системите могат да обработват само ограничено количество текст наведнъж, а пълните уебстраници с менюта, скриптове и реклами са трудни за четене.
Файлът обикновено се намира на /llms.txt в основната директория, но според предложението може да бъде и в подпапка и тогава се отнася за адресите под нея. Някои сайтове предлагат допълнително llms-full.txt с целия текст. Това е разпространено допълнение, а не част от основното предложение.
Как е структуриран файлът
Предложението задава фиксиран ред. Задължителен е само първият ред:
- Заглавие от първо ниво с името на сайта или предприятието.
- Блок за цитат с кратко резюме в едно или две изречения.
- Свободни абзаци или списъци с важни указания, без допълнителни заглавия.
- Раздели със заглавия от второ ниво, всеки от които съдържа списък с връзки, по желание с кратко описание след двоеточие.
- Раздел „Optional“ за връзки, които ИИ системата може да пропусне, когато разполага с малко място.
За занаятчийска фирма това може да изглежда така:
# Muster Elektrotechnik GmbH
> Електроинсталации, фотоволтаични системи и стенни зарядни станции за частни и бизнес клиенти в Линц, Велс и околността.
Аварийно обслужване в работни дни от 7 до 18 ч. Безплатни оферти след оглед.
## Услуги
* [Фотоволтаични системи](https://www.muster-elektro.at/photovoltaik/): Проектиране, монтаж, консултации за субсидии
* [Стенна зарядна станция](https://www.muster-elektro.at/wallbox/): Инсталиране за дома и бизнеса
## Фирма
* [Контакт и работно време](https://www.muster-elektro.at/kontakt/)
## Optional
* [Често задавани въпроси](https://www.muster-elektro.at/fragen/)
Какво дава файлът и какво не дава
Тук е нужен трезв поглед. В указанията си за функциите с ИИ Google посочва, че не са необходими нови машинночетими файлове, текстови файлове за ИИ или специално маркиране, за да се появите в AI Overviews или в режима с ИИ. В прегледа на своите роботи за обхождане OpenAI описва как видимостта в търсенето на ChatGPT се управлява чрез robots.txt; llms.txt не се споменава там. Достъпът е решаващ и за Perplexity и Claude, в този случай за PerplexityBot и Claude-SearchBot.
Засега няма публично потвърдено доказателство, че ChatGPT, Gemini или Perplexity препоръчват предприятия по-често заради llms.txt. Файлът е полезен там, където ИИ агенти целенасочено извличат съдържание, например в техническа документация, в която разработчиците търсят с ИИ асистенти. За местна фирма той е по-скоро ясна визитка за машините, отколкото начин да получи повече запитвания. Какво друго е важно за споменаването в отговорите на ИИ е описано на страницата за Generative Engine Optimization.
Нашата препоръка
Създайте llms.txt, когато сайтът Ви е готов и по-важните задачи са изпълнени. Предвидете половин час за задачата, а не отделен проект. Подхождайте критично към обещанията на доставчици, които продават llms.txt като ключ към ChatGPT.
Как да създадете llms.txt
- Определете съдържанието: Име, едно или две изречения за това какво правите и къде, плюс Вашите пет до петнадесет най-важни страници.
- Напишете файла: Достатъчен е обикновен текстов редактор. Запазете файла в UTF-8 с името
llms.txt. - Качете го: Поставете файла в основната директория, така че да е достъпен на
ihre-domain.at/llms.txt. За WordPress и други системи има разширения за това. - Проверете: Отворете адреса в браузъра. Файлът трябва да се показва като текст, без вход в профил и без пренасочване към началната страница.
- Поддържайте го: Когато услугите или адресите се променят, променете и llms.txt. Остарялата информация вреди повече от липсващ файл.
Какво е по-важно от llms.txt
- robots.txt допуска OAI-SearchBot, Googlebot, Bingbot, PerplexityBot и Claude-SearchBot.
- Най-важното съдържание е в HTML, а не се появява едва след зареждането на JavaScript.
- Всяка услуга има собствена страница с ясно заглавие и посочено населено място.
- Структурираните данни по Schema.org описват предприятието, местоположението и услугите.
- Бизнес профилът в Google и каталозите съдържат същите фирмени данни като сайта.
- Актуална карта на сайта е посочена в robots.txt.
Сравнение на llms.txt и robots.txt
| robots.txt | llms.txt | |
|---|---|---|
| Цел | Определя кои роботи кои страници могат да извличат | Предоставя на системите с ИИ кратък преглед в Markdown |
| Влияние върху видимостта | Пряко: блокираните сайтове не се показват в търсенето на ChatGPT | Не е доказано |
| Разпространение | Стандарт от десетилетия, спазван от всички основни роботи | Предложение от 2024 г., доброволно |
| Необходими усилия | Няколко реда, но грешките имат сериозни последици | Половин час |
Източници
- Jeremy Howard: Файлът /llms.txt, предложение от 3 септември 2024 г.
- Google Search Central: Функциите с ИИ и Вашият сайт
- OpenAI: Преглед на роботите за обхождане на OpenAI
- Perplexity: Роботите за обхождане на Perplexity
- Anthropic: Обхожда ли Anthropic данни от интернет и как собствениците на сайтове могат да блокират робота?