Sitemap फ़ाइंडर

साइटमैप फाइंडर एक उपकरण है जो वेबसाइट द्वारा प्रकाशित प्रत्येक XML साइटमैप को खोजता है। यह अनुमान लगाने के बजाय कि साइटमैप कहां स्थित हैं, यह साइट robots.txt को पढ़ता है और समानांतर में दर्जनों सामान्य साइटमैप पथों की जांच करता है - आपको प्रत्येक साइटमैप यूआरएल, उसके प्रकार (इंडेक्स या यूआरएलसेट), यूआरएल गिनती और फ़ाइल आकार की पूरी सूची देता है।

/sitemap.xml सबसे आम स्थान है, लेकिन कई साइटें इसका उपयोग नहीं करती हैं। संस्करण 5.5 से वर्डप्रेस /wp-sitemap.xml का उपयोग करता है। Yoast SEO /post-sitemap.xml, /page-sitemap.xml, /category-sitemap.xml और बहुत कुछ को उजागर करता है। Shopify /sitemap_products_1.xml जैसे क्रमांकित पैटर्न का उपयोग करता है। कुछ प्रकाशक Google समाचार के लिए एक अलग /news-sitemap.xml रखते हैं। यह टूल उन सभी को स्वचालित रूप से जांचता है।

robots.txt फ़ाइल किसी साइट के लिए एक या अधिक साइटमैप: निर्देशों का उपयोग करके अपने साइटमैप घोषित करने का आधिकारिक रूप से अनुशंसित तरीका है। खोजक पहले robots.txt लाता है और वहां घोषित प्रत्येक साइटमैप को सूचीबद्ध करता है, साथ ही सामान्य पथों की जांच करके पाए गए किसी भी अतिरिक्त साइटमैप को सूचीबद्ध करता है।

हाँ. प्रत्येक उम्मीदवार का यूआरएल लाया जाता है, यदि यह एक .gz फ़ाइल है तो इसे डीकंप्रेस किया जाता है, XML के रूप में पार्स किया जाता है और sitemaps.org रूट तत्वों (<urlset> या <sitemapindex>) के विरुद्ध मान्य किया जाता है। केवल सत्यापन पास करने वाले यूआरएल ही "साइटमैप मिले" के रूप में दिखाई देते हैं - robots.txt में सूचीबद्ध टूटे हुए या गलत कॉन्फ़िगर किए गए यूआरएल चेतावनी के रूप में अलग से सामने आते हैं।

यूआरएलसेट (<urlset>) एक नियमित साइटमैप है जिसमें पेज यूआरएल की एक सूची होती है। साइटमैप इंडेक्स (<sitemapindex>) एक साइटमैप है जो अन्य साइटमैप को संदर्भित करता है - इसका उपयोग तब किया जाता है जब कोई साइट एकल साइटमैप के लिए बहुत बड़ी होती है। बड़ी ई-कॉमर्स और समाचार वेबसाइटें आमतौर पर एक साइटमैप इंडेक्स प्रकाशित करती हैं जो दर्जनों चाइल्ड साइटमैप की ओर इशारा करता है।

हाँ, जब तक वे robots.txt में घोषित हैं। यदि कोई साइट पूरी तरह से कस्टम पथ का उपयोग करती है (उदाहरण के लिए, /assets/xml/all-pages.xml) और इसे robots.txt में घोषित नहीं करती है, तो खोजक इसका अनुमान नहीं लगाएगा। उस स्थिति में, इसके बजाय सीधे यूआरएल को हमारे साइटमैप यूआरएल एक्सट्रैक्टर में पेस्ट करें।

हाँ. पूरा उपडोमेन दर्ज करें (उदाहरण के लिए, shop.example.com या blog.example.com) और खोजक उस उपडोमेन के robots.txt और साइटमैप पथ को देखेगा। प्रत्येक उपडोमेन आम तौर पर रूट डोमेन से स्वतंत्र अपना स्वयं का साइटमैप प्रकाशित करता है।

नहीं, खोजकर्ता सार्वजनिक रूप से उपलब्ध फ़ाइलों (robots.txt और मानक साइटमैप पथ) के लिए अनाम HTTP अनुरोध करता है। कोई क्रेडेंशियल नहीं भेजा जाता है और कोई अधिसूचना ट्रिगर नहीं की जाती है - यह वही गतिविधि है जो Googlebot जैसे खोज-इंजन क्रॉलर हर दिन करते हैं।

कुछ साइटें एंटी-बॉट सुरक्षा (क्लाउडफ्लेयर, अकामाई, कस्टम फ़ायरवॉल) का उपयोग करती हैं जो स्वचालित अनुरोधों के लिए 403 निषिद्ध लौटाती है। जब ऐसा होता है तो खोजकर्ता त्रुटियों की रिपोर्ट करेगा और अक्सर कोई साइटमैप नहीं मिलेगा। बाद में पुनः प्रयास करें, या अपने ब्राउज़र में साइटमैप को मैन्युअल रूप से सत्यापित करें।

हां, पूरी तरह से मुफ़्त - कोई खाता नहीं, कोई साइनअप नहीं और अंतर्निहित प्रति-अनुरोध टाइमआउट से परे कोई उपयोग सीमा नहीं। आप एसईओ ऑडिट, प्रतिस्पर्धी अनुसंधान और तकनीकी उचित परिश्रम के लिए जितने चाहें उतने डोमेन का निरीक्षण कर सकते हैं।