Pomoc - Szukaj - Użytkownicy - Kalendarz
Pełna wersja: (za)długi czas wykonania zapytania
Forum PHP.pl > Forum > Bazy danych > MySQL
devnul
Jak w temacie. Mam zapytanie:
  1. SELECT `n`.`news_id`, `t`.`newstext_title`, `t`.`newstext_text`, `n`.`news_publish`,`p`.*
  2. FROM `news` AS `n`
  3. JOIN `newstext` AS `t` ON `n`.`news_id`=`t`.`newstext_parent`
  4. JOIN `news2cat` AS `nc` ON `n`.`news_id`=`nc`.`news2cat_news`
  5. LEFT JOIN `news2photo` AS `np` ON `np`.`news2photo_news`=`n`.`news_id`
  6. LEFT JOIN `photo` AS `p` ON `np`.`news2photo_photo`=`p`.`photo_id`
  7. WHERE `n`.`news_status`='1' AND `n`.`news_publish`<='1198155351' AND (`n`.`news_publishend`>='1198155351' OR `n`.`news_publishend`=0) AND `nc`.`news2cat_category`
  8. IN ('1', '2', '3', '4', '11', '5', '13', '8', '6', '14', '20', '7', '15', '9', '10', '16', '17', '18', '19', '12')
  9. GROUP BY `n`.`news_id`
  10. ORDER BY `n`.`news_publish` DESC LIMIT 0, 10

i wykonuje się ono w granicach 20 sekund co jest nie do przyjęcia. W tabelach news i newstext znajduje się po około 80 tysięcy rekordów w tabeli photo jest około 40 tysięcy wpisów tabela news2photo to około 50 tysięcy rekordów.
Pytanie co zrobić żeby przyspieszyć to zapytanie do jakiegoś znośnego czasu?
kitol
Założyć indeksy (jeżeli ich nie ma) na kolumny po których łaczysz oraz na kolumny które występują w klauzuli WHERE
devnul
są indeksy na wszystkich kolumnach po których łącze i wszystkich które są w WHERE (i paru innych - bo do innych zapytań potrzebowałem)
Jarod
Daj przed zapytaniem explain i zobacz co da się jeszcze zrobić.. Tu masz w skrócie napisane co każdy opis oznacza http://0day.pl/index.php/archives/12
kitol
Najlepiej wklej tu tego explaina
devnul
EXPLAIN - dużo to raczej nie daje
php programmer
Wywal wszystkie JOINY,

zamiast tego zrób na początku jedno zapytanie odpowiadające głownemu zapytaniu ale
pobierające tylko id z głównej tabeli
id zbierasz w jakiejś tabeli php-owej

potem robisz osobna zapytanie dla zapytania głównego
oraz osobne zapytanie odpowiadające kazdemu JOIN
gdzie warunkiem jest id nalezace to tych zebranych w tapeli php-owej

Wyniki kazdego JOINA zapisujesz w tablicy php-owej (oczywiście innej niż ta wyżej,
osobna taliba dla kazdego JOIN), ale w taki sposób,
że indeksami są id table głównej, dzięki czemu można się potem bezpośrednio
odwoływać do danych JOIN-owych

niedawno zastowowałem tego typu rozwiązanie i bardzo pomogło
w beznadziejnej wydawałoby się sytuacji, bo danych było tyle, że
nawet jednego JOINa nie można było dodać
devnul
rozwiązanie nie za bardzo bo za dużo tu zależności np rekord znajdujący się w tabeli news nie musi mieć pokrycia w tabeli newstext (skąd mam wiedzieć ile wyciągnąć id z news żeby trafić na 100% na 10 istniejących w tabeli newstext, bo przecierz może być teorytycznie np 1000 rekordów po koleii w news nie mających odpowiednika w newstext).

Jakieś inne pomysły?
php programmer
Wyciągasz wszystkie id z news, które spełniają warunek głównego zapytania,
brak pokrycia niczemu nie szkodzi, jeśli nie chcesz wyświetlać news bez pokrcia,
sprawdzasz w pętli (czyli złożoność obliczeniowa liniowa)

  1. <?php
  2. $count = count($TablicaNews);
  3.  
  4. for ($i=0;$i<$count;$i++)
  5. if (!isset($TablicaNewsText[$i])) unset($TablicaNews[$i]);
  6. ?>


i tu na przykład widać dlaczego indeksami tablic podrzędnych
są id z głownej elementów tabeli (bezpośrednio się odwołujemy)

PS. Swoją drogą nie warto tworzyć aż tylu powiązanych tabel,
np. wstawianie tekstu newsa do innej tabeli zamiast dać w tej samej
devnul
@php programmer: Ty chyba nie doczytałeś tego co napisałem w pierwszym poście w obu tabelach ma po około 80 tysięcy rekordów - niekoniecznie pokrywających się co oznacza wyciągnięcie 2*po 80 tysięcy id z obu tabel i sprawdzenie ich w pętli - na dość mocno obciążonym serwerze takie działanie nie przejdzie z przyzwoitą szybkością.

Rozbicie newsa na 2 tabele było mi potrzebne z pewnych względów o których pisać tutaj nie będę bo nie w tym problem, gdyby tak nie było - wierz mi że te tabele byłyby jedną.
kitol
80 tyś rekordów to nie jest dużo. Przy dobrze ustawionych indeksach powinno śmigać. Bez definicji tabel ciężko coś więcej powiedzieć (explain nie otwiera się). Czy w tabelach masz pole TEXT lub BLOB? Jeżeli tak to wydaje mi się że lepiej jest zrobić oddzielną tablicę zawierającą tylko pole TEXT i jakiś id a resztę informacji trzymać oddzielnie.
To jest wersja lo-fi głównej zawartości. Aby zobaczyć pełną wersję z większą zawartością, obrazkami i formatowaniem proszę kliknij tutaj.
Invision Power Board © 2001-2025 Invision Power Services, Inc.