Explorar el Código

fix(robots.txt): disallow all robots

crawl way too much
zyachel hace 3 años
padre
commit
f39998d57b
Se han modificado 1 ficheros con 3 adiciones y 3 borrados
  1. 3 3
      public/robots.txt

+ 3 - 3
public/robots.txt

@@ -1,3 +1,3 @@
-user-agent: *
-disallow: /img/
-disallow: /contact
+User-agent: *
+Disallow: /
+