Pārlūkot izejas kodu

Add robots.txt to prevent indexing of dev installations

Laurent Destailleur 12 gadi atpakaļ
vecāks
revīzija
a08735d5be
1 mainītis faili ar 6 papildinājumiem un 0 dzēšanām
  1. 6 0
      robots.txt

+ 6 - 0
robots.txt

@@ -0,0 +1,6 @@
+User-agent: *
+Disallow: /build
+Disallow: /dev
+Disallow: /doc
+Disallow: /scripts
+Disallow: /test