github.io/public/robots.txt

19 lines
342 B
Plaintext

User-agent: *
Allow: /about/
Allow: /categories/
Allow: /no/categories/
Allow: /tags/info/
Allow: /no/tags/info/
Allow: /categories/meta/
Allow: /tags/meta/
Allow: /no/categories/meta/
Allow: /no/tags/meta/
Allow: /no/about/
Allow: /series/
Allow: /no/series/
Allow: /blog/
Allow: /no/blog/
Allow: /tags/
Allow: /no/tags/
Allow: /no/
Allow: /