Startsida Utforska Hjälp
Registrera dig Logga in
admin
/
crawler
1
0
Fork 0
Filer Ärenden 0 Pull-förfrågningar 0 Wiki
Gren: main
Grenar Taggar
crawler
/
robots.txt

robots.txt 23 B
Permalänk Historik Rå

12 
  1. User-agent: *
    2. 

  2. Disallow:
    3.