मुफ़्त Robots.txt चेकर

robots.txt सर्च इंजन क्रॉलर को बताता है कि वे आपकी साइट के किन हिस्सों पर जा सकते हैं — लेकिन यह पहले से इंडेक्स हुए पेज को नहीं हटाता, और ब्लॉक किया गया पेज कभी-कभी बिना कंटेंट के भी सर्च रिज़ल्ट में दिख सकता है। नीचे URL पेस्ट करें और देखें कि आपकी साइट का robots.txt उस पाथ के लिए क्या अनुमति देता है या रोकता है।