llms.txt Açıklandı: AI Tarayıcı Dosyası Gerçekte Ne Yapar

llms.txt, alan adınızın kökünde yayınladığınız - yourdomain.com/llms.txt - ve bir yapay zeka modelinin okumasını en çok isteyeceğiniz sayfaları, her birine tek satırlık bir açıklama ekleyerek listeleyen bir Markdown dosyasıdır. Answer.AI'dan Jeremy Howard, llms.txt standardını Eylül 2024'te önerdi ve güncel spesifikasyon llmstxt.org adresinde yer alıyor. Fikrin tamamı bu: bir kural kitabı değil, derlenmiş bir okuma listesi.

Çoğu açıklama yazısının atladığı kısım şu. Hiçbir şey verilmez ve hiçbir şey engellenmez ve hiçbir büyük model sağlayıcısı - ne OpenAI, ne Anthropic, ne de Google - bir soruyu yanıtlamadan önce llms.txt'i getireceğine dair kamuoyu önünde bir taahhütte bulunmadı. Birkaç geliştirici aracı gerçekten okuyor. Başka neredeyse hiçbir şey okumuyor. Buraya GPTBot veya ClaudeBot'un yönlendirmelerinizi takip edip etmediğini merak ederek geldiyseniz, bu ayrı bir soru - bakınız yapay zeka tarayıcılarının bir bağlantıya gerçekte ne yaptığı. Bu yazı llms.txt dosyasının kendisiyle ilgili: içinde gerçekte ne var, kim okuyor, bakımının maliyeti ne ve 2026'da birini yayınlamak bir öğleden sonraya değer mi.

llms.txt Tam Olarak Nedir

Spesifikasyon iki dakikada okunacak kadar kısa. Geçerli bir dosyanın tam olarak bir zorunlu öğeye ihtiyacı var: site veya proje adınızı taşıyan bir H1. Bundan sonraki her şey isteğe bağlı ama gelenekseldir. H1'in hemen altındaki bir alıntı bloğu tek cümlelik bir özet verir. Serbest biçimli paragraflar bağlam ekleyebilir. Ardından, her biri bağlantılardan oluşan madde işaretli bir liste taşıyan H2 başlıkları gelir ve her bağlantı, içeriği hakkında bir iki nokta üst üste artı kısa bir not taşıyabilir. H2 düzeyinde "Optional" başlıklı bir bölüm, bir modelin sınırlı bağlamla çalışırken atlayabileceği ikincil malzeme için bir gelenektir.

Format, tek bir belirli sorun için tasarlandı: bir dokümantasyon sitesi çoğunlukla gezinme çerçevesi ve kenar çubuğu bağlantılarından oluşur ve ham HTML'yi okuyan bir model bunların hepsi için token harcar. Bir llms.txt dosyası bunun yerine ona temiz bir dizin verir. Bu, çoğu yazının ima ettiğinden daha dar bir iş: format, açık web için değil, dokümanlar için tasarlandı. Bunu gerçek yanıt motoru optimizasyonu çalışmasıyla tartın, bu ayrım cevabın çoğunu oluşturuyor.

llms.txt, robots.txt Değildir

Herkesin başvurduğu karşılaştırma robots.txt'tir ve bu karşılaştırma yardımcı olduğundan daha çok yanıltır.

robots.txt, RFC 9309 tarafından tek bir ana bilgisayarla sınırlandırılmıştır ve işe yaramasının nedeni, adı belirtilen tarayıcıların - Googlebot, Bingbot, aralarındaki yapay zeka tarayıcıları - herhangi bir şeyi getirmeden önce bunu kontrol etmesi ve on yıllardır süregelen bir gelenek gereği bir Disallow satırına uymasıdır. Bu da hiçbir zaman erişim vermedi - onu göz ardı eden bir ajan zaten göz ardı edecekti - ama endişelenmeye değer tarayıcılar bunu gerçekten okuyor.

Bu destek llms.txt için yok. Hiçbir şey bir modele, siteniz hakkında bir soruyu yanıtlamadan önce /llms.txt'i kontrol etmesini söylemez. Bir avuç geliştirici aracı gerçekten kontrol ediyor. Bir sohbet penceresinde bir soruyu yanıtlayan genel amaçlı bir asistanın dosyanızı aramak gibi bir zorunluluğu yok ve çoğu zahmet etmiyor. Buna "yapay zeka tarayıcı dosyası" ya da "yapay zeka için robots.txt" demek - her iki etiket de neredeyse her açıklama yazısında karşımıza çıkıyor - formatın sahip olmadığı bir zorlama mekanizmasını ima ediyor. Hiçbir zaman da olmadı.

Dosyayı Gerçekte Kim Okuyor

Benimseme gerçek. Sadece haberlerin ima ettiğinden daha dar.

Mintlify, 2024'ün sonlarında barındırdığı her site için otomatik llms.txt üretimini ekledi ve benimseme bir gecede sıçradı, çünkü Anthropic, Cursor, Stripe, Cloudflare ve Vercel'in hepsi dokümanlarını artık dosyayı varsayılan olarak üreten Mintlify, Fern veya GitBook gibi platformlar üzerinden yayınlıyor. Cursor, Windsurf, Claude Code, GitHub Copilot, Cline, Aider gibi kodlama araçları, bir dokümantasyon sitesine yönlendirildiklerinde gerçekten /llms.txt'i arıyor, çünkü o tek iş için temiz bir dizin, işlenmiş gezinmeyi kazımaktan daha iyi.

Gerçekleşmeyen kısım, çoğu yazının ima ettiği kısım. Hiçbir genel amaçlı tüketici asistanı, bir soruyu yanıtlamadan önce dosyayı kontrol ettiğini doğrulamadı ve aramaya en yakın olan insanlar bu konuda açık sözlü. Google'dan John Mueller bunu açıkça dile getirdi: yapay zeka hizmetlerinin hiçbiri bunu kullandığını söylemedi ve sunucu günlükleri çoğunun bunu talep bile etmediğini gösteriyor. Bunu keywords meta etiketiyle karşılaştırdı - yayıncıların bir zamanlar içtenlikle doldurduğu, ama arama motorlarının kandırılması kolay olduğu için sessizce okumayı bıraktığı bir alan.

Yani: kodlama araçları ve dokümantasyon platformlarından oluşan gerçek bir kitle var, ama bir alışveriş veya araştırma sorusunu yanıtlayan ChatGPT, Gemini veya Perplexity arasında doğrulanmış bir kitle yok. Sitenize gelen yapay zeka trafiği harekete geçmeye değecek kadar önemliyse, bunu kimsenin okuduğu doğrulanmamış bir dosyadan çıkarsamayın - ölçün. GA4'ün AI Assistant kanalı, o trafiğin gerçekten göründüğü yer - göründüğü günlerde - ve Elido'nun analitiği, kendi yayınladığınız bağlantılarda hangi ziyaretlerin bir asistandan geldiğini gösteriyor.

Dosya Satır Satır Neye Benziyor

İşte spesifikasyondaki kalıba yakın, minimal ve geçerli bir örnek:

# Acme Docs

> Acme is an API for parsing invoices. This file lists the pages worth reading first.

Full documentation lives at docs.example.com. Sections below are ordered by how often a new integration needs them.

- [Quickstart](https://docs.example.com/quickstart): Authentication and your first API call
- [Rate limits](https://docs.example.com/limits): Current limits and how to request an increase
- [Endpoints](https://docs.example.com/api): Full request and response schemas

Her satır bir iş yapar. H1 zorunludur; alıntı bloğunu atlamak, bir modelin tek bir bağlantıyı açmadan önce sitenin ne yaptığını tahmin etmesine yol açar. Gerçek bir dosya, bağlantıları site gezinmesine göre değil - ki bu genellikle bir ana menünün organize edilme biçiminin tam tersidir - amaca göre H2'ler altında gruplar (yukarıdaki kısaltılmış örnek, kısa tutmak için tek bir grup kullanıyor). Bir bağlantıdan sonraki iki nokta üst üste ve açıklama gerçek değeri oluşturur - sınırlı alanı olan bir modelin o URL'yi getirip getirmeyeceğine veya atlayıp atlamayacağına karar veren tek satırlık tanıtım. Spesifikasyon ayrıca tam olarak aynı ikincil malzeme için "Optional" başlıklı bir H2'ye de izin verir.

llms-full.txt Farklı Bir Hayvan

llms.txt'in tüm olduğu şey bir dizindir. llms-full.txt ise içeriğin kendisini doğrudan içine gömer: aynı sayfalar temiz Markdown'a dönüştürülür ve bazen on binlerce kelimeye ulaşan tek bir dosyada birleştirilir, böylece bir model bağlantıları tek tek takip etmek yerine bunu tek bir getirmede işleyebilir. llms.txt'i otomatik olarak üreten platformlar - Mintlify, GitBook, Fern - genellikle yanında llms-full.txt'i de üretir, çünkü işlem hattı her iki durumda da aynıdır. Birkaç yüz sayfanın altındaki bir dokümantasyon sitesi için bunu güncel tutmak makuldür. Binlerce sayfaya ulaşan bir ürün kataloğu ise faydalı olamayacak kadar büyük ve güncel tutulamayacak kadar pahalıdır.

Birini Sürdürmenin Dürüst Maliyeti

Dosyayı bir kez yayınlamak bir öğleden sonra sürer. Onu doğru tutmak, kimsenin bütçelemediği kısımdır.

Her bağlantının hâlâ çözümlenmesi, hâlâ o sayfanın güncel sürümüne işaret etmesi ve hâlâ orada gerçekte olanla eşleşmesi gerekir. Bir dokümanı yeniden adlandırın veya yeni bir API sürümü çıkarın, dosya sessizce senkronizasyondan çıkar, çünkü bu olduğunda hiçbir şey bozulmaz. Eski bir llms.txt 404 vermez - sadece bir modele güncel olmayan bilgiyi tam bir güvenle besler.

Tek bir ekibi olan bir dokümantasyon sitesi için bu bakım, doküman değişikliklerini yayınlayan aynı incelemede bir kontrol listesi maddesidir. Haftada birkaç yazı yayınlayan bir pazarlama sitesi için, derlenmiş bir dizine nelerin ait olduğuna karar vermek başlı başına bir editoryal iş haline gelir. Başka herhangi bir içerik yatırımından önce soracağınız soruyu sorun: başarı neye benziyor ve bunu nasıl bilirsiniz? Bağlantı analitiğinde gerçekten neyin ölçülmeye değer olduğu, aynı disiplini farklı bir kanala uyguluyor.

Bugün Sizi Gerçekte Ne Alıntılatır

Dosyayı bir kenara bırakın ve kanıtın gerçekte neyi desteklediğine bakın.

robots.txt yönergeleri işe yarar, çünkü adı belirtilen tarayıcılar her getirmeden önce bunları kontrol eder - OpenAI, Anthropic ve Google, hangi user-agent'ların hangi kurallara uyduğunu yayınlıyor ve bunun mekaniği bu yazıda tekrarlanmak yerine burada ele alınıyor. Temiz, hızlı, JavaScript içermeyen HTML kısmen değil tamamen okunur; içeriğini göstermek için istemci tarafı bir render gerektiren bir sayfa, metniniz hiç yüklenmeden terk edilebilir, bu da yönlendirme hijyeninin bir sayfaya nasıl davranıldığını etkilemesinin - okuyucu bir insan olsun ya da bir model olsun - başka bir nedenidir. Yapılandırılmış veri - görünür metinle eşleşen Article ve FAQPage şeması - bir alma sistemine sayfanın ne iddia ettiğine dair bir kısayol verir ve Google'ın kendi rehberliği bunu yapay zekaya özgü bir hile değil, sıradan teknik SEO olarak ele alır. Başka bir yerde bahsedilmek - incelemelerde, forumlarda, başkalarının derlemelerinde - kendi alan adınızdaki neredeyse her şeyden daha güçlü bir şekilde alıntılanmayla ilişkilidir, çünkü model yalnızca tek bir sayfayı değil, web genelinde inşa edilmiş bir itibarı tartar.

Bunların hiçbiri bir yapay zeka anı için süslenmiş yeni bir tavsiye değil. Bu, klasik arama için birine vereceğiniz aynı liste, sadece bir sıralama algoritması yerine bir alma sistemine yönelmiş. llms.txt bunların hiçbirinde görünmüyor, bu yazının bir eğitim yerine bir uyarıyla açılmasının tam nedeni de bu.

Karar: 2026'da Birini Yayınlamalı Mısınız

Peki, birini yayınlamalı mısınız? Bu, bu konunun hangi tarafında durduğunuza bağlı.

Dokümanlarınız zaten llms.txt'i ücretsiz olarak üreten bir platformda barınıyorsa, buna karşı çok az argüman var. Onu okuyan kitle - kodlama asistanları, IDE ajanları, özellikle dosyayı aramak için inşa edilmiş bir avuç dokümantasyon-bilinçli araç - tam olarak bir geliştirici ürününün istediği kitledir ve maliyet neredeyse sıfırdır, çünkü başkasının işlem hattı bunu zaten üretiyor.

Bir pazarlama sitesi, bir blog veya bir alışverişçinin genel amaçlı bir asistan aracılığıyla ulaştığı herhangi bir şeyi işletiyorsanız, birini elle hazırlamayı ertelerdim. Bakım gerçek, size gerçekten trafik gönderen asistanlar arasındaki okunurluk doğrulanmamış ve kimsenin okuduğu kanıtlanmamış bir dosyayı derlemekle geçirilen bir saat, gerçek bir kanıt izi olan şeylere harcanmamış bir saattir: taranabilir sayfalar, içeriğinizle eşleşen yapılandırılmış veri, başka yerlerde alıntılanmaktan inşa edilmiş bir itibar. Ücretsizse dosyayı yayınlayın. Bunun etrafında bir içerik stratejisi kurmayın.

Bu blogdaki yapay zeka kümesinin de sürekli vardığı yer kabaca burası: iki dakika dikkat, sıfır dakika kaygı.

Blogda İlgili Yazılar

• Yanıt motoru optimizasyonu: bir sayfayı ne alıntılatır
• AI tarayıcıları ve kısa bağlantılar: botlar gerçekte ne yapıyor
• GA4'ün AI Assistant kanalı: neyi izliyor ve neyi kaçırıyor
• URL kısaltıcılar SEO'ya zarar verir mi?
• Kısa bağlantı analitiği: neyi ölçmeye değer