Chce wiedzieć tylko z podejścia teoretycznego jak przeszukiwać całą witrynę(własną) w celu odlezienia jakieś frazy ....

A ja pytam
Chodzi Ci o pliki baze( np mysql ) czy http

Właściwie to chodziło mi o to jak lepiej wyszukiwać ....
czy lecieć po bazie..... z tym że nie wszystkie dane mam w bazie
czy na żywca przeszukwać strony

czy tworzyć listę wyrazów (najbardziej typowych)

sam nie wiem jak się za to zabrać........

Nie ma sensu tego robic.
Lepiej przesukiwac cala baze, np MySQL, kazda komorke (ktora zawiera sensowna tresc).