llms.txt: AI Crawlerlar İçin Yeni Standart

robots.txt'in AI Çağındaki Karşılığı

Son güncelleme: Mart 2026

Web'in ilk yıllarından beri robots.txt dosyası, arama motoru botlarına "buraya gir, şuraya girme" mesajını veriyor. Ama bir düşünün: robots.txt sadece erişim izni verir. Hangi sayfanın ne anlama geldiğini, içeriğinizin nasıl yorumlanması gerektiğini, markanızın ne söylediğini anlatmaz. Bu, geleneksel arama motorları için yeterliydi — Googlebot sayfayı tarar, indeksler, kendi algoritmasıyla sıralar. Ama GEO çağında AI motorları farklı çalışıyor. ChatGPT, Claude, Perplexity gibi büyük dil modelleri (LLM), sayfanızı sadece taramıyor — anlıyor, sentezliyor ve alıntılıyor.

Bu yeni paradigmada AI motorlarına sadece "erişim izni" vermek yeterli değil. Onlara rehberlik etmeniz gerekiyor. İşte tam bu ihtiyaçtan doğan standart: llms.txt. 2024 yılında Jeremy Howard (Answer.AI kurucusu, eski Kaggle başkanı ve fast.ai yaratıcısı) tarafından önerilen bu dosya, web sitenizin AI modelleri için hazırlanmış bir "kullanım kılavuzu" işlevi görüyor.

1994 vs 2024: robots.txt 1994'te Martijn Koster tarafından önerildi. llms.txt ise 2024'te Jeremy Howard tarafından önerildi — 30 yıl arayla, aynı ihtiyaç: botlara rehberlik etmek.

Aralarındaki temel farkı şöyle özetleyebiliriz: robots.txt "Şu sayfalara erişebilirsin" derken, llms.txt "İşte sitemizin yapısı, en önemli içeriklerimiz ve seni doğru yönlendirecek bağlam bilgileri" diyor. robots.txt erişimi kontrol eder, llms.txt anlayışı yönetir. SEO ile GEO arasındaki temel farklar da tam olarak bu paradigma değişimini yansıtıyor.

llms.txt Nedir, Ne İçerir?

llms.txt, web sitenizin kök dizinine (root) yerleştirilen basit bir Markdown dosyasıdır. Amacı, LLM'lere sitenizin ne hakkında olduğunu, hangi içeriklerin önemli olduğunu ve bu içeriklere nasıl ulaşılacağını tek bir belgede anlatmaktır.

Bir llms.txt dosyasının standart yapısı şu bileşenlerden oluşur:

H1 Başlık: Sitenizin veya projenizin adı.
Blockquote Özet: Sitenizin amacını 1-2 cümlede özetler.
Detaylı Açıklama: Misyon, hedef kitle bilgisi.
H2 Bölümler ve Link Listeleri: Küratörlü link listeleri.
llms-full.txt Referansı: Genişletilmiş versiyona bağlantı.

llms.txt'nin en kritik özelliği "pre-flattened" içerik sunmasıdır. HTML karmaşasını ortadan kaldırır ve AI'ın doğrudan context window'una sığacak temiz Markdown sunar.

llms-full.txt Farkı

llms-full.txt, llms.txt'nin genişletilmiş versiyonudur. İkisi arasındaki ilişki:

llms.txt = Kitabın içindekiler sayfası + kısa bölüm özetleri
llms-full.txt = Kitabın tamamı

~200K token: Günümüz LLM'lerinin context window boyutu 100K-200K token arasında. llms-full.txt bu pencereye sığacak şekilde tasarlanmıştır.

Adım Adım Uygulama Rehberi

Adım 1: İçerik Envanteri Çıkarın

Sitenizin en değerli içeriklerini belirleyin.

Adım 2: Dosya Yapısını Oluşturun

H1 başlık, blockquote özet, H2 bölümler.

Adım 3: Dosyayı Doğru Konuma Yerleştirin

https://siteniz.com/llms.txt olarak erişilebilir olmalı.

Adım 4: llms-full.txt Oluşturun

Sayfaların içeriğini Markdown formatına dönüştürün.

Adım 5: Doğrulayın ve Test Edin

Tüm linkleri kontrol edin, ChatGPT veya Claude ile test edin.

AI Crawler Listesi ve Davranışları

GPTBot (OpenAI): ChatGPT eğitim verileri
ClaudeBot (Anthropic): Claude modelleri — llms.txt'yi resmi olarak tanıyan ilk şirket
PerplexityBot: Gerçek zamanlı web tarama, inline citation
Google-Extended: Gemini / AI Overviews
Meta-ExternalAgent: LLaMA serisi
Bytespider (ByteDance): Agresif tarama

Örnek: thegeoauthority.com llms.txt

Gerçek bir uygulama örneği olarak thegeoauthority.com'un llms.txt dosyası.

robots.txt ile Birlikte Kullanım

robots.txt AI crawlerlarına erişim izni, llms.txt içerik rehberliği sağlar. İkisi birlikte kullanılmalıdır.

Sonuç: llms.txt'yi Bugün Ekleyin

llms.txt web'in AI çağına uyum sağlamasının teknik yapı taşlarından biridir. 30 dakikada oluşturulabilir. GEO Builder gibi araçlarla süreç hızlanır.

Firmanızın AI Görünürlüğünü Test Edin

Markanız ChatGPT, Perplexity ve Gemini'de nasıl görünüyor? Ücretsiz GEO Skor Testimiz ile öğrenin.

Ücretsiz GEO Skor Testi →

Sheltron GEO Ekosistemi

Bu yazı The GEO Authority tarafından yayınlanmıştır — Türkiye'nin lider GEO bilgi platformu.

Daha fazla keşfedin:

GEO eğitimi ve sertifika → GEO Akademi
AI citation araştırmaları → First Citation
Profesyonel GEO danışmanlığı → Yapay Zeka Reklamcılığı

Sık Sorulan Sorular

llms.txt zorunlu mu?

Hayır, llms.txt şu an bir zorunluluk değil, önerilen bir standart (proposed standard) konumundadır. Hiçbir AI şirketi henüz llms.txt yoksa sitenizi taramayız demiyor. Ancak standart yaygınlaştıkça, onu uygulayan siteler AI motorlarına daha net bilgi sunarak avantaj elde edecek. robots.txt de başlangıçta opsiyoneldi.

llms.txt ile sitemap.xml arasındaki fark nedir?

sitemap.xml sitenizin tüm URL'lerini listeler — amacı arama motorlarının hiçbir sayfayı kaçırmamasını sağlamaktır. llms.txt ise küratörlü bir seçki sunar — en önemli sayfaları, bağlamlarıyla birlikte açıklar. sitemap.xml 'işte tüm sayfalarım' derken, llms.txt 'işte seni en çok ilgilendirecek sayfalarım ve ne anlama geldikleri' der.

llms.txt dosyasını ne sıklıkla güncellemeliyim?

Her yeni önemli içerik yayınladığınızda veya site yapınızda değişiklik yaptığınızda güncelleyin. En iyi pratik: ayda bir gözden geçirmek. Özellikle llms-full.txt'yi düzenli olarak yeniden oluşturmak önemlidir, çünkü eski içerik AI'ın yanıltıcı bilgi üretmesine yol açabilir.

WordPress sitem var. llms.txt'yi nasıl ekleyebilirim?

WordPress kurulum kök dizinine (genellikle public_html veya www) llms.txt dosyanızı FTP veya dosya yöneticisi ile yükleyin. Bazı SEO eklentileri gelecekte llms.txt desteği eklemeyi planlıyor. Şu an için manuel oluşturmak en güvenilir yöntemdir.

llms.txt ekledikten sonra ChatGPT hemen sitemin bilgilerini kullanmaya başlar mı?

Hayır, hemen değil. llms.txt şu an büyük AI crawlerları tarafından otomatik olarak istenmiyor. Ancak ChatGPT'nin web browsing modu ve Perplexity'nin gerçek zamanlı araması dolaylı fayda sağlar. Standart yaygınlaştıkça doğrudan faydası artacaktır.

llms.txt SEO'yu etkiler mi?

llms.txt doğrudan Google sıralamalarını etkilemez. Ancak dolaylı etkileri vardır: AI crawlerlarına daha iyi yapılandırılmış bilgi sunmak, Google AI Overviews'da ve Gemini'de daha doğru temsil edilmenize katkı sağlayabilir. llms.txt bir SEO aracı değil, bir GEO aracıdır.