Главная Обзор Помощь
Вход
hardingcenter
/
understanding-sampling
2
0
Ответвить 0
Файлы Задачи 0 Запросы на слияние 0 Вики
Ветка: master
Ветки Метки
understandin...
/
public
/
robots.txt

robots.txt 78 B
Постоянная ссылка История Исходник

12345 
  1. # www.robotstxt.org/
    2. 

  2. 

  3. # Allow crawling of all content
    4. 

  4. User-agent: *
    5. 

  5. Disallow:
    6.