Lyhyesti
- llms.txt on ehdotus vuodelta 2024: juurihakemistossa oleva Markdown-tiedosto, joka antaa tekoälyjärjestelmille nopean yleiskatsauksen verkkosivustostasi.
- Google kirjoittaa, että et tarvitse uusia koneellisesti luettavia tiedostoja tai tekoälytekstitiedostoja tekoälykatsauksiin ja tekoälytilaan.
- Tällä hetkellä ei ole luotettavaa näyttöä siitä, että suuret tekoälyhakujärjestelmät käyttävät tiedostoa suositusten antamiseen.
- Se maksaa vähän eikä aiheuta haittaa. Avoimet indeksointirobotit, helposti luettavat sivut ja puhtaat rakennetiedot ovat tärkeämpiä.
Mikä llms.txt on
Idea tulee Jeremy Howardilta, joka julkaisi sen osoitteessa llmstxt.org syyskuussa 2024. Verkkosivustojen tulisi tarjota kielimalleille ja tekoälyagenteille Markdownissa kompakti yhteenveto: keitä he ovat, mitä verkkosivustolla on ja mitkä sivut ovat tärkeitä millekin kysymykselle. Taustana on, että tekoälyjärjestelmät käsittelevät vain rajoitetun määrän tekstiä kerrallaan, kun toimivia ja täydellisiä verkkosivustoja valikoilla, skripteillä ja mainoksilla on vaikea lukea.
Tiedosto sijaitsee yleensä alla /llms.txt juurihakemistossa, mutta ehdotuksen mukaan se voi olla myös alikansiossa ja koskee sitten alla olevia osoitteita. Jotkut sivustot tarjoavat myös sellaisen llms-full.txt koko tekstin kanssa. Tämä on yleinen lisäys, ei osa ydinehdotusta.
Näin tiedosto rakentuu
Ehdotuksessa määritellään kiinteä järjestys. Vain ensimmäinen rivi on pakollinen:
- Ensimmäisen tason otsikko verkkosivuston tai yrityksen nimellä.
- Lainauslohko jossa on lyhyt yhteenveto yhdellä tai kahdella lauseella.
- Ilmaiset kappaleet tai luettelot tärkeillä tiedoilla, ilman muita otsikoita.
- Osat, joissa on toisen tason otsikot, joista jokainen sisältää luettelon linkeistä, valinnaisesti lyhyt kuvaus kaksoispisteen jälkeen.
- "Valinnainen"-osio linkeille, jotka tekoälyjärjestelmä voi jättää pois, jos sillä on rajoitetusti tilaa.
Käsityöyritykselle se voi näyttää tältä:
# Muster Elektrotechnik GmbH
> Sähköasennus, aurinkosähkö ja seinäkotelot yksityiseen ja kaupalliseen käyttöön Linzissä, Welsissä ja lähialueilla.
Päivystys arkisin klo 7-18. Ilmaiset tarjoukset katselun jälkeen.
## Palvelut
* [Valosähkö](https://www.muster-elektro.at/photovoltaik/): Suunnittelu-, kokoonpano-, rahoitusneuvonta
* [Wallbox](https://www.muster-elektro.at/wallbox/): Asennus kotiin ja yritykseen
## Yritykset
* [Yhteydenotto ja aukioloajat](https://www.muster-elektro.at/kontakt/)
## Valinnainen
* [Usein kysytyt kysymykset](https://www.muster-elektro.at/fragen/)
Mitä tiedosto tuo ja mitä se ei
Täällä kannattaa katsoa järkevästi. Google kirjoittaa tekoälyominaisuuksia koskevissa huomautuksissaan, että et tarvitse uusia koneellisesti luettavia tiedostoja, tekoälytekstitiedostoja tai erityisiä merkintöjä näkyäkseen tekoälykatsauksissa tai tekoälytilassa. Indeksointirobottien yleiskatsauksessaan OpenAI kuvaa, kuinka näkyvyyttä ChatGPT-haussa ohjataan robots.txt-tiedoston kautta. llms.txt-tiedostoa ei näy siellä. Pääsy on myös ratkaisevan tärkeää Perplexitylle ja Claudelle, täällä PerplexityBotille ja Claude-SearchBotille.
Tällä hetkellä ei ole julkisesti dokumentoitua näyttöä siitä, että ChatGPT, Gemini tai Perplexity suosittelevat yrityksiä useammin llms.txt-tiedoston takia. Tiedosto on hyödyllinen silloin, kun tekoälyagentit hakevat tiettyä sisältöä, kuten teknistä dokumentaatiota, jota kehittäjät etsivät tekoälyassistenttien avulla. Paikalliselle yritykselle se on enemmänkin siisti käyntikortti koneille kuin tie tiedusteluihin. Sivulla kuvataan, mitä muuta AI‑vastauksissa on mainittava Generatiivinen moottorin optimointi.
Suosituksemme
Luo llms.txt, kun verkkosivustosi on toiminnassa ja tärkeimmät asiat on hoidettu. Suunnittele tähän puoli tuntia, älä projektia. Sinun tulee olla kriittinen sellaisten palveluntarjoajien lupauksiin, jotka myyvät llms.txt-tiedostoa ChatGPT:n avaimena.
Näin luot llms.txt-tiedoston
- Aseta sisältö: Nimi, yhdestä kahteen virkettä, mitä teet ja missä, sekä viidestä viiteentoista tärkeintä sivuasi.
- Kirjoita tiedosto: Yksinkertainen tekstieditori riittää. Tallenna tiedosto nimellä UTF-8
llms.txt. - Lataa: Aseta tiedosto juurihakemistoon niin, että se on alla
your-domain.at/llms.txton tavoitettavissa. Tätä varten on laajennuksia WordPressissä ja muissa järjestelmissä. - Tarkista: Hae osoite selaimesta. Tiedoston tulee näkyä tekstinä ilman sisäänkirjautumista ja ilman uudelleenohjausta kotisivulle.
- Ylläpidä: Jos palvelut tai osoitteet muuttuvat, muuta myös llms.txt. Vanhentunut tieto on haitallisempaa kuin puuttuva tiedosto.
Mikä on tärkeämpää kuin llms.txt
- Robots.txt sallii OAI-SearchBotin, Googlebotin, Bingbotin, PerplexityBotin ja Claude-SearchBotin.
- Tärkein sisältö on HTML:ssä eikä JavaScriptin lataamisen jälkeen.
- Jokaisella palvelulla on oma sivu, jossa on selkeä otsikko ja sijainti.
- Schema.org:n mukaiset rakennetiedot kuvaavat yritystä, sijaintia ja palveluita.
- Google-yritysprofiili ja -hakemistot sisältävät samat yritystiedot kuin verkkosivusto.
- Nykyinen sivustokartta syötetään robots.txt-tiedostoon.
llms.txt ja robots.txt verrattuna
| robots.txt | llms.txt | |
|---|---|---|
| Tarkoitus | Säätelee, mitkä indeksointirobotit saavat käyttää mitäkin sivuja | Antaa tekoälyjärjestelmille nopean yleiskatsauksen Markdownissa |
| Vaikutus näkyvyyteen | Suora: Kukaan estetty ei näy ChatGPT-haussa | Ei dokumentoitu |
| Levitä | Vakio vuosikymmeniä, kaikkien tärkeimpien indeksointirobottien kunnioittama | Ehdotus vuodesta 2024, vapaaehtoinen |
| Vaivaa | Muutama rivi, mutta virheillä on suuret seuraukset | Puoli tuntia |
Lähteet
- Jeremy Howard: /llms.txt-tiedosto, ehdotus 3.9.2024
- Google-hakukeskus: AI‑ominaisuudet ja verkkosivustosi
- OpenAI: Yleiskatsaus OpenAI-indeksointiroboteista
- Hämmennys: Hämmennys-indeksoijat
- Antrooppinen: Indeksoiko Anthropic tietoja verkosta, ja kuinka sivustojen omistajat voivat estää indeksointirobotin?