Sitemap Finder

Sitemap Finder, bir web sitesinin yayımladığı her XML site haritasını keşfeden bir araçtır. Site haritalarının nerede olduğunu tahmin etmek yerine, sitenin robots.txt dosyasını okur ve düzinelerce yaygın site haritası yolunu paralel olarak sınar — size her site haritası URL'sinin, türünün (indeks veya urlset), URL sayısının ve dosya boyutunun tam envanterini verir.

/sitemap.xml en yaygın konumdur, ancak birçok site bunu kullanmaz. WordPress, 5.5 sürümünden beri /wp-sitemap.xml kullanır. Yoast SEO /post-sitemap.xml, /page-sitemap.xml, /category-sitemap.xml ve daha fazlasını sunar. Shopify /sitemap_products_1.xml gibi numaralı kalıpları kullanır. Bazı yayıncılar Google Haberler için ayrı bir /news-sitemap.xml tutar. Bu araç hepsini otomatik olarak kontrol eder.

robots.txt dosyası, bir sitenin bir veya daha fazla Sitemap: yönergesi kullanarak site haritalarını bildirmesi için resmi olarak önerilen yoldur. Bulucu önce robots.txt'yi alır ve orada bildirilen her site haritasını, ayrıca yaygın yolları sınayarak bulunan ek site haritalarını listeler.

Evet. Her aday URL alınır, .gz dosyası ise açılır, XML olarak ayrıştırılır ve sitemaps.org kök öğelerine (<urlset> veya <sitemapindex>) göre doğrulanır. Yalnızca doğrulamayı geçen URL'ler Bulunan Site Haritaları olarak görünür — robots.txt'de listelenen bozuk veya yanlış yapılandırılmış URL'ler ayrı olarak uyarı olarak gösterilir.

urlset (<urlset>), sayfa URL'lerinin bir listesini içeren normal bir site haritasıdır. Site haritası indeksi (<sitemapindex>), diğer site haritalarına başvuran bir site haritasıdır — bir site tek bir site haritası için çok büyük olduğunda kullanılır. Büyük e-ticaret ve haber siteleri genellikle düzinelerce alt site haritasına işaret eden bir site haritası indeksi yayımlar.

Evet, robots.txt'de bildirildikleri sürece. Bir site tamamen özel bir yol kullanıyorsa (örneğin, /assets/xml/all-pages.xml) ve bunu robots.txt'de bildirmiyorsa, bulucu bunu tahmin etmez. Bu durumda, doğrudan URL'yi Site Haritası URL Çıkarıcımıza yapıştırın.

Evet. Tam alt alanı girin (örneğin shop.ornek.com veya blog.ornek.com) ve bulucu o alt alanın robots.txt ve site haritası yollarına bakacaktır. Her alt alan tipik olarak kök alandan bağımsız kendi site haritasını yayımlar.

Hayır. Bulucu, herkese açık dosyalara (robots.txt ve standart site haritası yolları) anonim HTTP istekleri gönderir. Hiçbir kimlik bilgisi gönderilmez ve hiçbir bildirim tetiklenmez — bu, Googlebot gibi arama motoru tarayıcılarının her gün gerçekleştirdiği faaliyetin aynısıdır.

Bazı siteler, otomatik istekler için 403 Forbidden döndüren bot önleme koruması (Cloudflare, Akamai, özel güvenlik duvarları) kullanır. Bu olduğunda bulucu hataları bildirir ve genellikle hiçbir site haritası bulunamaz. Daha sonra tekrar deneyin veya tarayıcınızda site haritalarını manuel olarak doğrulayın.

Evet, tamamen ücretsiz — hesap yok, kayıt yok ve istek başına yerleşik zaman aşımı dışında kullanım sınırı yok. SEO denetimleri, rakip araştırması ve teknik durum tespiti için ihtiyacınız kadar alan adı inceleyebilirsiniz.