Website Crawl Audit (मिनी साइट क्रॉलर)
यह फ्री वेबसाइट क्रॉल ऑडिट एक URL से शुरू होता है, इंटरनल लिंक को फॉलो करता है और 20 सेकंड के बजट में 25 पेजों तक चेक करता है। रिपोर्ट हर पेज को उसके HTTP स्टेटस, टाइटल, डिस्क्रिप्शन और H1 स्टेटस, रीडायरेक्ट और noindex टैग के साथ दिखाती है, और इंटरनल लिंक को हाइलाइट करती है जो टूटे हुए पेजों की ओर जाते हैं। यह एक क्विक हेल्थ चेक है, पूरा क्रॉल नहीं।
Website Crawl Audit
Technical SEO
इस टूल के बारे में
एक साइट ऑडिट आमतौर पर एक क्रॉल से शुरू होता है, एक रोबोट जो लिंक से लिंक पर जाता है जैसे सर्च इंजन करता है और जो पाता है उसे रिकॉर्ड करता है। टूटे हुए पेज, रीडायरेक्ट चेन, बिना टाइटल वाले पेज और stray noindex टैग से ब्लॉक किए गए पेज सभी आसानी से दिखते हैं जब डेटा एक टेबल में हो, और ब्राउज़ करके देखना बहुत मुश्किल है।
यह मिनी क्रॉलर आपके द्वारा दर्ज किए गए एड्रेस से शुरू होता है और एक ही होस्ट पर इंटरनल लिंक को फॉलो करता है, www और non-www को एक माना जाता है। यह 25 पेजों या 20 सेकंड पर रुकता है, जो भी पहले आए, और सभी क्रॉलर के लिए robots.txt नियमों का पालन करता है। हर पेज के लिए आप स्टेटस कोड, रीडायरेक्ट हॉप, टाइटल, डिस्क्रिप्शन और H1 की मौजूदगी, और noindex सेटिंग देखते हैं। दूसरी टेबल उन इंटरनल लिंक को दिखाती है जो एरर रिटर्न करने वाले पेजों की ओर जाती हैं।
यह एक सैंपल है, पूरी सूची नहीं। बड़ी साइटों के हजारों पेज होते हैं, इसलिए रिपोर्ट स्टार्ट URL के सबसे करीब के पेज दिखाती है, जो आमतौर पर सबसे महत्वपूर्ण होते हैं। 25 क्रॉल किए गए पेजों से परे के पेजों के लिंक टेस्ट नहीं किए जाते। हर क्रॉल एक घंटे के लिए कैश किया जाता है, और टूल प्रति विज़िटर एक छोटा hourly fetch allowance शेयर करता है, इसलिए इसे सबसे महत्वपूर्ण स्टार्ट पेज पर चलाएं।
अक्सर पूछे जाने वाले सवाल
मिनी क्रॉलर कौन से पेज चेक करने के लिए चुनता है?
यह स्टार्ट पेज को पढ़ता है, इसके इंटरनल लिंक को कलेक्ट करता है, और उन्हें उसी क्रम में विज़िट करता है जिस क्रम में वे दिखाई देते हैं, फिर उन पेजों पर मिले लिंक को फॉलो करता है। मुख्य नेविगेशन और शीर्ष के पास के पेज पहले विज़िट किए जाते हैं। यह 25 पेजों पर या जब 20 सेकंड का बजट खत्म हो जाए तो रुकता है।
क्रॉल 25 पेजों से पहले क्यों रुक गया?
या तो 20 सेकंड का टाइम बजट खत्म हो गया, साइट के पास स्टार्ट पेज से लिंक के माध्यम से पहुंचने योग्य कम पेज हैं, robots.txt ने कुछ को ब्लॉक किया, या आपके कनेक्शन के लिए hourly fetch allowance खत्म हो गया। रिपोर्ट बताती है कि कौन सा कारण लागू हुआ।
रीडायरेक्ट चेन क्या है और इससे क्यों फर्क पड़ता है?
रीडायरेक्ट चेन एक URL है जो दूसरे URL पर रीडायरेक्ट करता है जो फिर से रीडायरेक्ट करता है। हर हॉप विज़िटर और क्रॉलर के लिए देरी जोड़ता है, और लंबी चेन को छोड़ दिया जा सकता है। इंटरनल लिंक को अपडेट करें ताकि वे सीधे अंतिम एड्रेस की ओर इशारा करें, और रीडायरेक्ट को एक हॉप तक रखें।
क्या यह Screaming Frog या Search Console की जगह ले सकता है?
नहीं। एक डेस्कटॉप क्रॉलर हर पेज चेक करता है, JavaScript को रेंडर करता है और पूरा डेटा एक्सपोर्ट करता है, और Search Console दिखाता है कि Google ने वास्तव में क्या क्रॉल और इंडेक्स किया। इस टूल को साइट का तेजी से पहला लुक लेने के लिए यूज करें, फिर गहराई के लिए उन्हें यूज करें। यह फ्री है और इंस्टॉल की जरूरत नहीं है।

