W moim skrypcie strony, ilość podstron jest dość spora... Chciałbym by tylko wybrane linki agregowały się do Google... pomyślałem, że najlepszym rozwiązaniem było by zablokować dostęp i wskazać nieliczne miejsca gdzie boty mogą wejść. Czy takie rozwiązanie jak pokazane poniżej jest poprawne?



Dodatkowo idąc takim tokiem... w jaki sposób mogę zezwolić na dostęp do strony głównej?

nie prościej zabronić dostępu do tych miejsc które chcesz chronić przed indeksacją a reszcie zostawić domyślnie allow?

Musiał bym pamiętać o każdym możliwym miejscu które chcę zablokować...