Mam plik: domena.pl/robots.txt
po wybraniu adresu z przeglądarki mam info:
Not Found
The requested URL /robots.txt was not found on this server.
Wystarczy, że zmienię nazwę robots.txt na coś innego np robots2.txt i przeglądarka bez problemu pobiera jego zawartość.
Żaden .htaccess nic nie modyfikuje a strona nie jest oparta o żaden cms, który mógłby coś mieszać.
O co tutaj chodzi ? Co może powodować blokadę robots.txt ?