robots.txt निर्माण/नियम परीक्षक

तरीका

उपयोगकर्ता एजेंटों और पथों पर लागू सबसे लंबे मिलान नियम को इंगित करता है।

खोज इंजन कैसे क्रॉल, इंडेक्स और प्रदर्शित करते हैं

गोपनीयता

आपकी प्रविष्टियाँ केवल आपके ब्राउज़र में ही संसाधित की जाती हैं और भेजी, सहेजी या रिकॉर्ड नहीं की जाती हैं।

आप LIMIT

रोबोट क्रॉल नियंत्रण के लिए हैं, प्रमाणीकरण या डी-इंडेक्सिंग के लिए नहीं।