Forum PHP.pl > [inne]robots.txt

Pomoc - Szukaj - Użytkownicy - Kalendarz

Pełna wersja: [inne]robots.txt - blokada robotów

marcinek37

16.09.2013, 12:44:54

Chcę zablokować dwa roboty, dając możliwość wszystkim innym na indeksację strony, czy ten kod jest dobry?

User-agent: *
Allow: /

User-agent: AhrefsBot
Disallow: /

User-agent: bingbot
Disallow: /

pedro84

16.09.2013, 13:55:48

Składnia jest ok, musisz tylko wziąć pod uwagę, że nie wszystkie boty biorą pod uwagę wpisy w pliku robots.txt.

To jest wersja lo-fi głównej zawartości. Aby zobaczyć pełną wersję z większą zawartością, obrazkami i formatowaniem proszę kliknij tutaj.