fix(robots.txt): disallow all robots · f39998d57b - git.nibbletools.com by Gogs

Selaa lähdekoodia

fix(robots.txt): disallow all robots

crawl way too much

zyachel 3 vuotta sitten

vanhempi

7757d5b183

commit

f39998d57b

1 muutettua tiedostoa jossa 3 lisäystä ja 3 poistoa

Jaettu näkymä Näytä diff tilastot

						
							+ 3
							
							- 3
						
public/robots.txt
							 
								Näytä tiedosto
							
				@@ -1,3 +1,3 @@
			
				-user-agent: *
			
				-disallow: /img/
			
				-disallow: /contact
			
				+User-agent: *
			
				+Disallow: /
			
				+