Inicio Explorar Ayuda
Registro Iniciar sesión
admin
/
crawler
1
0
Fork 0
Archivos Incidencias 0 Pull Requests 0 Wiki
Árbol: 25110aaa43
Ramas Etiquetas
crawler
/
robots.txt

robots.txt 23 B
Histórico Raw

12 
  1. User-agent: *
    2. 

  2. Disallow:
    3.