Strona główna Odkrywaj Pomoc
Zarejestruj się Zaloguj się
NetTown
/
nettown_frontend
2
0
Forkuj 0
Pliki Problemy 0 Oczekujące zmiany 0 Wiki
Drzewo: d4c363a6aa
Gałęzie Tagi
nettown_fronten...
/
static
/
robots.txt

robots.txt 63 B
Historia Czysty

123 
  1. # allow crawling everything by default
    2. 

  2. User-agent: *
    3. 

  3. Disallow:
    4.