⚙️
+20 XP
Задание
robots.txt: подробный разбор
✏️
Введите ответ
+20 XP
Директива ____ в файле robots.txt запрещает поисковикам краулить указанный раздел сайта.