Ережелерді енгізіп, қажетті User-agent пен жол үшін тексеріңіз. Disallow индекстен өшіру пәрмені емес. Маңызды бетті robots.txt арқылы жаппас бұрын оның мақсатын анықтаңыз. Файлды жариялағаннан кейін нақты сайттағы жауапты тексеріңіз.
Қалай қолдануға болады
Мәтін мен файлдар браузеріңізде өңделеді. URL аудиті ашық бетті сервер арқылы жүктейді.
Нәтижені бағалау
Дайын нәтижені бастапқы дерекпен салыстырыңыз. Қате хабарламасы болса, пішімді және қажетті өрістерді тексеріңіз. Құпия деректерді мысалға қоспаңыз.