Witam

Mam pytanie - napisałem klasę, która pobiera dane z jakiegoś kanału RSS i zapisuje do bazy.

Problem pojawił się w przypadku warunku niezbędnego podczas dodawania pojedynczego rekordu, a mianowicie sprawdzanie, czy dany rekord już istnieje.

W pętli pobierającej wyniki RSS przed dodaniem rekordu do bazy dałem warunek, aby sprawdzono, czy pobrany tytuł newsa znajduje się już w bazie - jeśli tak to, aby nie dodawano go po raz drugi. Metoda jest moim zdaniem nie wydajna bo przy dużej ilości takich newsów daje to np. 20 krotne użycie przeszukiwania bazy w jednej sekundzie.
Czy istnieją jakieś inne, wydajniejsze metody?

Sprawdź datę ostatniej wiadomości w bazie danych i dodawej tylko te później

Zrób CRC na permalinka do wpisów, załóż na niego indeks, będzie IMHO najszybciej. Potem sprawdzasz w jednym zapytaniu przez zwykłe WHERE.

zrobiłem tak, jak radził bim2.

Zastanawia mnie jeszcze jedna rzecz - mianowicie jeśli data rekordu RSS jest większa od obecnej daty to co należałoby zrobić? Jeśli zamienię tę datę na np. obecną lub nawet obecną pomniejszoną o godzinę to w przypadku metody napisanej przez bim2 może wystąpić problem :/ mianowicie rekordy będą dublowane aż do momentu, kiedy data rekordu będzie mniejsza od obecnej

Pamiętaj że data nie jest obowiązkowa i może jej nie być.

Dlatego oprócz daty wpisu dodawaj też URL i sprawdzaj, czy jest już wcześniej taki w bazie. Wtedy unikniesz zdublowanych wpisów bo zamiast INSERT wykonasz UPDATE (jeśli użyjesz UNIQUE, to wtedy elegancko pójdzie ON DUPLICATE).


Jeśli sprawdzasz obecną datę systemową zamiast daty wpisu, to tak.

Ale spróbuj jeszcze ze sprawdzaniem URL; nie bez powodu podałem Ci, abyś użył CRC.