[Devel] robots

[Gáspár Ákos]

Javaslom, hogy ez alapértelmezetten jöjjön létre egy új projekt 
alapításakor. Létrehoztam neki egy GitLab issue-t:

https://gitlab.com/openbiomaps/web-app/issues/28

Ákos

2020. 01. 11. 11:19 keltezéssel, Bán Miklós írta:
> Sziasztok
> 
> 
> határozottan javallott az alábbi tartalommal robots.txt fájl létrehozása 
> a projektek gyökérkönyvtárában:
> 
> 
> User-agent: *
> Disallow: /
> 
> 
> Egyes esetekben komoly gondokat okozhatnak a nem kívánatos robotok...
> 
> 
> üdv, Miki
> 
> 
>