Analizator reguł robots.txt
Fetch robots.txt and test whether specific URLs are allowed or blocked for any user-agent, including wildcard and path rules. Use it to debug crawler access and verify disallow rules.
Wyniki narzędzi są generowane po angielsku.
Powiązane strony
Problem z serwerem? Zhakowana strona? Wolna witryna?
Incydenty krytyczne w 30 minut — 24 godziny na dobę, 7 dni w tygodniu.