llms.txt, robots.txt ve sitemap.xml Arasındaki Fark Nedir?
Web sitesinin teknik SEO altyapısı konuşulduğunda robots.txt ve sitemap.xml uzun yıllardır karşımıza çıkan iki temel dosyadır. Yapay zekâ destekli arama sistemlerinin yaygınlaşmasıyla birlikte son dönemde bu listeye llms.txt de eklendi.
Dosya isimlerinin birbirine benzemesi doğal olarak şu soruyu ortaya çıkarıyor:
llms.txt, robots.txt veya sitemap.xml'in yerine mi geçiyor?
Hayır.
Bu üç dosyanın kullanım amacı birbirinden farklıdır.
En kısa haliyle:
robots.txt tarama erişimini yönetir, sitemap.xml önemli URL'lerin keşfedilmesine yardımcı olur, llms.txt ise önemli web kaynaklarını büyük dil modellerine daha anlaşılır bir yapı içerisinde sunmayı amaçlayan önerilmiş bir formattır.
Dolayısıyla modern bir web sitesinde bu dosyaları birbirinin alternatifi olarak değil, farklı teknik ihtiyaçlara cevap veren ayrı katmanlar olarak değerlendirmek gerekir.
robots.txt, sitemap.xml ve llms.txt Arasındaki Temel Fark
Önce üç yapıyı tek cümleyle ayıralım.
robots.txt
Crawler'lara web sitesinin hangi bölümlerini tarayıp tarayamayacakları konusunda talimat vermek için kullanılır.
sitemap.xml
Arama motorlarına web sitesindeki önemli URL'leri ve bu URL'ler arasındaki içerik yapısını bildirmeye yardımcı olur.
llms.txt
Web sitesindeki önemli kaynakları ve bilgileri büyük dil modellerine daha sade ve açıklayıcı biçimde sunmayı amaçlayan yeni bir öneridir.
Bu nedenle:
robots.txt = erişim
sitemap.xml = keşif
llms.txt = bağlam ve kaynak rehberi
şeklinde düşünmek aralarındaki farkı anlamayı kolaylaştırır.
Ancak bu basitleştirilmiş açıklamanın arkasında bazı önemli teknik ayrıntılar bulunuyor.
robots.txt Nedir ve Ne İşe Yarar?
robots.txt, web sitesinin kök dizininde bulunan düz metin dosyasıdır.
Genellikle şu adreste yer alır:
https://siteadi.com/robots.txt
Arama motoru crawler'ları web sitesini ziyaret ettiğinde bu dosyadaki kuralları kontrol edebilir.
Örneğin:
User-agent: *
Disallow: /yonetim/
şeklindeki bir yapı, kurala uyan crawler'lara /yonetim/ dizinindeki URL'lerin taranmaması gerektiğini bildirir.
Google, robots.txt dosyasını crawler'ların hangi URL'lere erişebileceğini yönetmenin bir yolu olarak tanımlar.
Burada önemli bir detay vardır:
robots.txt bir URL'nin Google indeksine kesinlikle girmemesini sağlayan mekanizma değildir.
Bir sayfanın taranmasını engellemek ile indekslenmesini engellemek aynı şey değildir.
Google'ın teknik dokümantasyonunda da robots.txt ile engellenen bir URL'nin bazı koşullarda sonuçlarda URL olarak görünebileceği belirtilmektedir. İndekslemeyi engellemek için uygun durumlarda noindex gibi yöntemlerin kullanılması gerekir.
robots.txt Dosyasında Neler Bulunabilir?
Basit bir robots.txt örneği şöyle olabilir:
User-agent: *
Disallow: /admin/
Disallow: /arama/
Allow: /
Sitemap: https://siteadi.com/sitemap.xml
Burada crawler'lara belirli dizinlerle ilgili kurallar verilirken aynı zamanda sitemap'in adresi de bildirilebilir.
Bu nedenle robots.txt yalnızca bir “bot engelleme dosyası” olarak düşünülmemelidir.
Doğru kullanıldığında crawler erişiminin yönetilmesine yardımcı olan teknik bir kontrol noktasıdır.
sitemap.xml Nedir?
sitemap.xml, web sitesindeki önemli URL'ler hakkında arama motorlarına bilgi vermek için kullanılan standart yapılardan biridir.
Genellikle:
https://siteadi.com/sitemap.xml
adresinde bulunur.
Basitleştirilmiş bir sitemap kaydı şöyle görünebilir:
<url>
<loc>https://siteadi.com/ankara-web-tasarim</loc>
<lastmod>2026-08-13</lastmod>
</url>
Buradaki temel amaç Google'a:
“Web sitemde önemli olduğunu düşündüğüm URL'lerden biri budur.”
bilgisini sağlamaktır.
Google'ın resmi dokümantasyonuna göre sitemap; sayfalar, videolar ve diğer dosyalar ile bunların ilişkileri hakkında bilgi sağlayabilir ve Google'ın siteyi daha verimli taramasına yardımcı olabilir.
Sitemap Oluşturmak İndekslenme Garantisi Verir mi?
Hayır.
Bu SEO çalışmalarında sık yapılan yanlış yorumlardan biridir.
Bir URL'yi sitemap.xml içerisine eklemek:
“Google bu sayfayı kesin indeksleyecek.”
anlamına gelmez.
Google açıkça sitemap gönderiminin bir hint, yani ipucu olduğunu ve Google'ın sitemap içerisindeki URL'leri mutlaka tarayacağını veya kullanacağını garanti etmediğini belirtmektedir.
Sitemap'in görevi arama motorunun URL'yi keşfetmesini kolaylaştırmaktır.
Sayfanın indekslenmesi ve arama sonuçlarında nasıl değerlendirileceği ise çok daha fazla faktöre bağlıdır.
Dinamik Web Sitelerinde Sitemap Otomatik Oluşturulmalı
Özellikle sürekli yeni içerik eklenen web sitelerinde sitemap'in elle güncellenmesi doğru bir yöntem değildir.
Örneğin yönetici panelinden yeni bir blog yazısı yayınlandığında sistem otomatik olarak:
/sitemap-blog.xml
dosyasına ilgili URL'yi ekleyebilir.
Benzer şekilde;
ürünler,
hizmetler,
kategoriler,
blog içerikleri
için farklı sitemap dosyaları oluşturulabilir.
Büyük web sitelerinde sitemap index yapısı kullanılarak birden fazla sitemap tek bir merkezden yönetilebilir.
Profesyonel web yazılım altyapısında sitemap yönetiminin içerik sistemiyle entegre çalışması hem teknik hataları azaltır hem de yeni içeriklerin sistematik biçimde sitemap yapısına eklenmesini sağlar.
Peki llms.txt Nedir?
llms.txt, diğer ikisinden oldukça farklı bir fikre dayanır.
Önerilen format, web sitesindeki önemli kaynakların büyük dil modellerinin inference sırasında daha kolay kullanabileceği bir içerik rehberi içerisinde sunulmasını amaçlar. llms.txt projesi bunu web sitelerinin LLM'ler tarafından daha kolay kullanılabilmesi için geliştirilmiş bir öneri olarak tanımlar.
Dosyanın tipik konumu:
https://siteadi.com/llms.txt
şeklindedir.
Örneğin Blue Ajans için basitleştirilmiş bir yapı şu şekilde olabilir:
# Blue Ajans
> Ankara merkezli web tasarım, web yazılım, SEO ve dijital pazarlama ajansı.
## Hizmetler
- [Ankara Web Tasarım](https://www.blueajans.com.tr/)
- [Ankara Web Yazılım](https://www.blueajans.com.tr/ankara-web-yazilim)
- [Ankara SEO Ajansı](https://www.blueajans.com.tr/ankara-seo-ajansi)
## Önemli Rehberler
- [llms.txt Nedir? GEO ve Yapay Zekâ Görünürlüğüne Katkısı Var mı?](https://www.blueajans.com.tr/llms-txt-nedir-geoya-katkisi)
Burada dikkat edilirse herhangi bir:
Allow
veya
Disallow
talimatı bulunmaz.
Çünkü llms.txt'nin temel amacı crawler erişimini kontrol etmek değildir.
Aynı şekilde bütün web sitesi URL'lerini listelemeye de çalışmaz.
Amaç seçilmiş kaynaklara anlamlı bir bağlam kazandırmaktır.
llms.txt robots.txt Yerine Geçer mi?
Hayır.
Bu iki dosyanın görevleri tamamen farklıdır.
robots.txt bir crawler'a:
“Bu URL'ye erişebilirsin / erişmemelisin.”
gibi tarama kuralları verir.
llms.txt ise kullanan sistemlere:
“Bu web sitesini anlamak istiyorsan önemli kaynaklar bunlardır.”
yaklaşımını sunmayı amaçlar.
Dolayısıyla yapay zekâ crawler'larını kontrol etmek istiyorsanız bunun için llms.txt kullanmak teknik olarak doğru bir yöntem değildir.
Crawler'ın robots.txt kurallarını desteklemesi durumunda erişim politikası robots.txt üzerinden yönetilebilir.
llms.txt ise bir erişim kontrol mekanizması değildir.
llms.txt Sitemap Yerine Geçer mi?
Burada da cevap hayır.
Sitemap'in arkasında yıllardır kullanılan standartlaştırılmış bir arama motoru ekosistemi vardır.
Google sitemap formatlarını resmi olarak desteklemektedir ve Search Console üzerinden sitemap gönderilmesine imkan tanımaktadır.
llms.txt ise LLM'ler için geliştirilmekte olan bir öneridir.
Ayrıca sitemap genellikle mümkün olduğunca önemli URL'lerin sistematik listesini içerirken llms.txt yaklaşımında daha seçici davranmak mantıklıdır.
Örneğin bir e-ticaret sitesinde:
sitemap.xml:
10.000 ürün URL'sini içerebilir.
llms.txt:
ana kategorileri, firma dokümantasyonunu, önemli rehberleri ve markayı anlamaya yardımcı olacak temel sayfaları gösterebilir.
Bu nedenle ikisinin içerik stratejisi de birbirinden farklıdır.
llms.txt Google Tarafından Kullanılıyor mu?
Güncel durumda Google'ın bu konudaki açıklaması nettir.
Google Search, llms.txt dosyasını Google Search görünürlüğü veya sıralaması için gerekli bir dosya olarak kullanmadığını belirtmektedir.
Google'ın 2026 dokümantasyon güncellemesinde llms.txt dosyalarının sıralamalara veya görünürlüğe olumlu ya da olumsuz etkisinin olmadığı, ancak farklı servisler kullanıyorsa bu dosyanın tutulmasında sakınca bulunmadığı açıkça belirtilmiştir.
Dolayısıyla:
robots.txt → Google kullanıyor
sitemap.xml → Google kullanıyor
llms.txt → Google Search için gerekli değil
ayrımını yapmak gerekir.
Bu durum gelecekte başka LLM sistemlerinin llms.txt'yi kullanmayacağı anlamına gelmez.
Ancak bugünün SEO stratejisini hazırlarken kanıtlanmış standartlarla öneri aşamasındaki teknolojileri birbirinden ayırmak gerekir.
GEO Açısından Hangisi Daha Önemli?
Aslında GEO açısından:
“robots.txt mi, sitemap mi, llms.txt mi?”
sorusundan önce başka bir soru sorulmalıdır:
“Web sitesindeki bilgi gerçekten erişilebilir ve anlaşılabilir mi?”
Çünkü GEO yalnızca birkaç teknik dosyanın oluşturulmasından ibaret değildir.
Örneğin oldukça iyi hazırlanmış bir llms.txt dosyanız olabilir.
Ancak ana hizmet sayfanız:
JavaScript hatası nedeniyle açılmıyorsa,
mobilde içeriği göstermiyorsa,
sunucu sürekli hata veriyorsa,
robots.txt tarafından yanlışlıkla engellenmişse,
içeriğin kendisi yetersizse,
llms.txt bu sorunları çözmez.
Bu nedenle GEO'nun başlangıç noktası hâlâ sağlam bir web altyapısıdır.
GEO İçin Sağlıklı Teknik Sıralama
Ben projelerde önceliği şu şekilde değerlendirirdim:
1. Tarama erişimi
Arama motorları ve izin verdiğiniz crawler'lar gerekli içeriğe ulaşabiliyor mu?
2. İndekslenebilirlik
Google açısından indekslenmesini istediğiniz sayfalarda teknik engel bulunuyor mu?
3. Sitemap
Önemli URL'ler sistematik şekilde arama motorlarına bildiriliyor mu?
4. İçerik
Sayfa kullanıcı sorusuna gerçekten cevap veriyor mu?
5. Semantik yapı
H1, H2, H3, paragraflar, listeler ve tablolar doğru HTML yapılarıyla mı oluşturulmuş?
6. Schema.org
Sayfanın gerçek içeriğine uygun yapılandırılmış veriler bulunuyor mu?
7. Mobil erişilebilirlik
Önemli içerik mobil sürümde de ulaşılabilir mi?
8. Performans
Sunucu ve yazılım yeterince hızlı ve stabil mi?
9. llms.txt
Temel yapı sağlandıktan sonra önemli kaynakları LLM'lere sunan tamamlayıcı bir dosya oluşturulabilir.
Bu sıralama önemli çünkü GEO çalışmasını yalnızca yeni çıkan teknik kavramlara bağlamak, web sitesindeki daha temel sorunların gözden kaçmasına neden olabilir.
robots.txt Yapay Zekâ Botları İçin Kullanılabilir mi?
robots.txt dosyasının önemli kullanım alanlarından biri crawler bazında kurallar tanımlayabilmesidir.
Örneğin:
User-agent: ExampleBot
Disallow: /
gibi bir yapı belirli bir crawler için kural oluşturabilir.
Ancak burada önemli nokta şudur:
Crawler'ın robots.txt kurallarına uyması gerekir.
robots.txt teknik olarak bir güvenlik duvarı değildir.
Kötü niyetli veya kuralları dikkate almayan bir botun siteye erişimini engellemek için sunucu, WAF veya uygulama katmanında ek kontroller gerekebilir.
Dolayısıyla AI crawler yönetimi düşünülürken de robots.txt'nin görevi ile güvenlik katmanının görevini birbirine karıştırmamak gerekir.
llms.txt İçerisinde Bütün Sayfalar Olmalı mı?
Genellikle böyle bir yaklaşım gerekli değildir.
Zaten tüm önemli URL'leri makinelere sunmak için sitemap bulunmaktadır.
llms.txt'nin daha anlamlı kullanımı, LLM'e sitenin yapısı hakkında seçilmiş bir rehber sunmaktır.
Örneğin Blue Ajans için:
Ana Hizmetler
-
Web Tasarım
-
Web Yazılım
-
SEO
Teknik Rehberler
Kurumsal
gibi bir yapı daha anlamlı olabilir.
20.000 URL'yi hiçbir açıklama olmadan alt alta yazmak llms.txt'nin sunduğu bağlam avantajını azaltabilir.
Yönetici Panelinden Üç Yapı Birlikte Yönetilebilir mi?
Evet ve modern web yazılım açısından en doğru yaklaşım da budur.
Örneğin Blue Ajans tarafından geliştirilen bir yönetim panelinde yeni blog yazısı eklediğinizi düşünelim.
Yönetici şu alanları doldurur:
-
blog başlığı,
-
URL,
-
SEO title,
-
meta description,
-
içerik,
-
yazar,
-
kategori,
-
yayın tarihi,
-
güncelleme tarihi,
-
görsel,
-
ALT metni.
Sistem arka planda aynı içerikten farklı teknik çıktılar oluşturabilir.
sitemap.xml
İçerik yayına alındığında URL otomatik sitemap'e eklenebilir.
Schema.org
Blog bilgileri kullanılarak Article veya BlogPosting JSON-LD oluşturulabilir.
llms.txt
İçerik gerçekten önemli bir rehberse yönetici:
“AI kaynak listesine dahil et”
seçeneğini işaretleyebilir.
Böylece URL ve kısa açıklaması llms.txt içerisinde otomatik yayınlanabilir.
robots.txt
robots.txt ise içerik bazında değil, daha çok sistem ve crawler politikası seviyesinde merkezi olarak yönetilebilir.
Bu yaklaşım özellikle büyük web sitelerinde ciddi kolaylık sağlar.
Profesyonel web yazılım altyapısının avantajlarından biri teknik SEO işlemlerinin editörün sürekli manuel müdahalesine ihtiyaç duymadan gerçekleştirilebilmesidir.
Schema.org Bu Üç Dosyanın Neresinde?
Schema.org bunlardan birinin alternatifi değildir.
Yapılandırılmış veri doğrudan sayfanın içerisinde veya sayfayla ilişkili kod içerisinde bulunur ve içeriğin ne ifade ettiğini açıklamaya yardımcı olur.
Örneğin:
Article → Bunun bir makale olduğunu,
Organization → Bunun bir organizasyonu tanımladığını,
Product → Bunun bir ürün olduğunu,
BreadcrumbList → Sayfanın site hiyerarşisindeki yerini
anlatabilir.
Google, structured data'nın sistemlerine sayfadaki içerik hakkında makine tarafından okunabilir bilgiler sağladığını ve uygun içeriklerin belirli rich result özelliklerine uygun hale gelmesine yardımcı olabildiğini belirtmektedir.
Dolayısıyla yeni nesil web sitesinde:
robots.txt + sitemap.xml + Schema.org + semantik HTML + gerektiğinde llms.txt
birbirini tamamlayabilir.
Mobil İçerik Bu Dosyalardan Daha Önemli Olabilir
GEO çalışması yapılırken bazen dosyalara ve teknik etiketlere gereğinden fazla odaklanılıyor.
Oysa sitenin gerçek içeriği kullanıcıya doğru sunulmuyorsa teknik dosyaların sağlayabileceği fayda sınırlıdır.
Örneğin masaüstünde hizmetiniz hakkında detaylı bilgiler bulunuyor fakat mobil tasarımda bütün metin gizlenmiş durumda.
llms.txt içerisinde hizmet sayfasının URL'sini göstermek bu problemi ortadan kaldırmaz.
Google'ın teknik gereksinimlerinin temelinde de erişilebilir ve indekslenebilir gerçek içerik bulunur.
Bu nedenle modern Ankara web tasarım projelerinde önemli metinlerin:
-
gerçek HTML içerisinde bulunması,
-
mobil cihazlarda erişilebilir olması,
-
görsellerin içine hapsedilmemesi,
-
düzgün başlık yapısıyla sunulması
gereklidir.
Sunucu Performansı Teknik SEO ve GEO'yu Nasıl Etkiler?
robots.txt, sitemap.xml ve llms.txt dosyalarının ortak bir noktası vardır:
Hepsine sunucu üzerinden erişilir.
Sunucu sürekli 5xx hatası veriyorsa, bağlantılar çok yavaş cevap veriyorsa veya uygulama kararsız çalışıyorsa web sitesinin teknik kalitesi bundan etkilenir.
Bu nedenle hızlı ve stabil sunucu altyapısı yalnızca kullanıcı deneyimi açısından önemli değildir.
Crawler'ların sayfalara sağlıklı biçimde erişebilmesi açısından da web altyapısının stabil olması gerekir.
Blue Ajans web projelerinde yüksek performanslı sunucu altyapısını;
optimize edilmiş backend + cache + veritabanı optimizasyonu + frontend performansı + görsel optimizasyonu
ile birlikte değerlendirmek gerekir.
Çünkü sunucu hızının tek başına kötü yazılmış bir uygulamayı kurtarması mümkün değildir.
Peki Web Sitenizde Hangilerini Kullanmalısınız?
SEO açısından temel cevap oldukça nettir.
robots.txt:
Evet. Tarama politikalarının gerektiği şekilde yönetilmesi için.
sitemap.xml:
Özellikle çok sayfalı ve dinamik web sitelerinde kullanılması güçlü biçimde önerilir.
llms.txt:
Zorunlu değildir. Google Search açısından özel sıralama avantajı sağlamaz. Ancak LLM odaklı kaynak sunumu ve geleceğe dönük GEO altyapısı kapsamında uygun projelerde değerlendirilebilir.
Bu nedenle öncelik:
önce standartlar, sonra deneysel ve gelişmekte olan teknolojiler
olmalıdır.
Blue Ajans'ta Teknik SEO ve GEO Yaklaşımı
Blue Ajans olarak yeni nesil web projelerinde tek bir teknoloji üzerinden “SEO uyumlu” veya “AI uyumlu” etiketi kullanmak yerine bütün teknik altyapının birlikte çalışmasını önemsiyoruz.
İyi hazırlanmış bir web sitesinde;
robots.txt tarama politikalarını yönetmeli,
sitemap.xml önemli URL'lerin keşfedilmesini desteklemeli,
Schema.org içeriğin anlamını yapılandırmalı,
semantik HTML gerçek içeriği açık biçimde sunmalı,
mobil tasarım bilgi kaybına yol açmamalı,
sunucu ve yazılım hızlı çalışmalı,
llms.txt ise gerekli görüldüğünde LLM'ler için ek kaynak rehberi oluşturmalıdır.
Bu yaklaşım SEO çalışmalarını GEO'dan ayırmak yerine birbirini tamamlayan teknik ve içerik katmanları haline getirir.
Yapay zekâ destekli arama teknolojileri geliştikçe yeni dosyalar, standartlar ve yöntemler ortaya çıkabilir.
Ancak değişmeyen temel prensip aynıdır:
Web sitesindeki gerçek bilgiyi kullanıcıların ve makinelerin mümkün olduğunca açık, hızlı ve güvenilir biçimde erişebileceği şekilde sunmak.
Sıkça Sorulan Sorular
llms.txt ile robots.txt aynı şey mi?
Hayır. robots.txt crawler'ların hangi URL'lere erişebileceğini yönetir. llms.txt ise önemli web kaynaklarını LLM'lere daha düzenli biçimde sunmayı amaçlayan önerilmiş bir formattır.
llms.txt sitemap.xml yerine geçer mi?
Hayır. Sitemap, arama motorlarının önemli URL'leri keşfetmesine yardımcı olan yerleşik bir yapıdır. llms.txt farklı bir kullanım amacına sahiptir.
robots.txt bir sayfanın Google'da görünmesini engeller mi?
Her zaman değil. robots.txt esas olarak taramayı yönetir. Google, bir URL'nin robots.txt ile engellense bile bazı durumlarda URL olarak sonuçlarda görünebileceğini belirtmektedir. İndeks kontrolü için uygun indeksleme yöntemleri kullanılmalıdır.
Sitemap kullanmak zorunlu mu?
Google sitemap olmadan da URL'leri keşfedebilir. Ancak özellikle büyük, yeni veya sık güncellenen web sitelerinde sitemap önemli URL'lerin keşfedilmesine yardımcı olabilir.
Sitemap'e eklenen sayfa kesin indekslenir mi?
Hayır. Google sitemap gönderiminin bir ipucu olduğunu ve indeksleme veya tarama garantisi vermediğini belirtmektedir.
llms.txt Google için gerekli mi?
Hayır. Google Search llms.txt dosyasını özel bir SEO veya AI görünürlük gereksinimi olarak kullanmamaktadır ve dosyanın Google sıralamalarına özel olumlu veya olumsuz etkisi bulunmamaktadır.
llms.txt SEO sıralamasını artırır mı?
Google açısından böyle bir sıralama avantajı bulunmamaktadır. llms.txt farklı LLM sistemleri için kaynak rehberi olarak değerlendirilebilir ancak SEO sıralama faktörü olarak görülmemelidir.
robots.txt üzerinden AI botları engellenebilir mi?
Bir AI crawler robots.txt protokolüne uyuyorsa o crawler için özel kurallar tanımlanabilir. Ancak robots.txt bir güvenlik mekanizması değildir ve kuralları dikkate almayan botları teknik olarak durdurmaz.
llms.txt içerisinde tüm site URL'leri bulunmalı mı?
Genellikle gerekmez. Sitemap zaten URL keşfi amacıyla kullanılır. llms.txt içerisinde markayı, ana hizmetleri ve önemli bilgi kaynaklarını açıklayan seçilmiş bağlantıların kullanılması daha anlamlıdır.
GEO için llms.txt zorunlu mu?
Hayır. GEO çok daha geniş bir optimizasyon alanıdır. İçerik kalitesi, teknik SEO, semantik HTML, mobil erişilebilirlik, site performansı ve yapılandırılmış veriler gibi temel unsurlar llms.txt'den daha önceliklidir.
+90 553 939 25 83
