Një matje në yappatyih.com tregon se, nga 14 shtatori deri më 13 tetor 2026, asnjë crawler i AI i njohur nga Cloudflare nuk kërkoi skedarët /llms.txt ose /llms-full.txt. Në të njëjtën periudhë, këta crawler kërkuan robots.txt 605 herë, hartën e postimeve 192 herë dhe faqen kryesore 207 herë.
I propozuar në shtator 2024, llms.txt është një skedar teksti në rrënjën e një sajti, me një përshkrim të shkurtër dhe lidhje drejt faqeve kryesore në Markdown. Synimi është t’i ndihmojë mjetet e AI ta kuptojnë shpejt përmbajtjen. Sajti e ofron që prej 1 gushtit 2026; skedari shoqërues llms-full.txt, me tekstin e plotë të postimeve, është shtuar më 29 shtator.
Autori përdori AI Crawl Control të Cloudflare dhe e rikontrolloi rezultatin edhe mëngjesin pasues. Për të verifikuar se mungesa e kërkesave nuk vinte nga filtrimi, kontrolloi kërkesat për hartën e postimeve, një skedar tjetër teksti dhe faqet e krijuara nga i njëjti Cloudflare Worker. Të gjitha shfaqeshin në matje.
Rezultati kufizohet te crawler-at që Cloudflare njeh dhe te periudha e vëzhguar: nuk përfshin domosdoshmërisht njerëzit apo mjetet e AI që qasen si shfletues të zakonshëm. Autori thekson se llms.txt nuk zëvendëson robots.txt, hartën e sajtit apo faqet HTML. Ai do ta mbajë skedarin, pasi nuk i kushton ta shërbejë dhe ofron një faqe të përmbledhur për këdo që e kërkon.
Burimi: DEV Community (Web Dev Feed) — lexoni artikullin e plotë në anglisht.
