Zrobiłem skrypt którzy wrzuca mi produkty do bazy , ale niestety nie wykonuje się w całości , plik csv 20 000 produktów łącznie ok 12Mb, wchodzi mi ok 50% produktów , co zrobić czy mój wsad można jakoś zoptymalizować ?
Czy podzielić ?
Proszę o pomoc

[PHP] pobierz, plaintext 
<?php
while ($result = fgetcsv ($uchwyt, 8024, ";")) {
 
$liczba_pol = count($result);
    $i=0;
    $a=1;     
   while($i < $liczba_pol){
 
 
$pole = "pole".$a++;
 
      $dat= $result[$i++];
      $datt = $result[$i++];
      $dattt = $result[$i++];
 
$query = "INSERT INTO tabela (product,cena) VALUES ('$dat','$datt')";
 
 
$query = mysql_query ($query);
}
}
?>
[PHP] pobierz, plaintext 

moze czas na skrypt ci sie skonczyl. ustaw:

[PHP] pobierz, plaintext 
<?php
set_time_limit(0);
?>
[PHP] pobierz, plaintext 

na poczatku skryptu

Niestety nie pomogło sprawdziłem , na stronie nie wyskakuje żaden błąd o przekroczonym czasie

no to sprobuj zoptymalizowac ten skrypt. 20tys zapytan do bazy pod rząd to nie jest dobry pomysl.
Tworz zapytanie, ktore dodaje np. po 20 rekordow na raz.

za pomocą jakiej funkcji to zrobić ? , skrypt musiał bym być uruchomiony 1000 razy

nie, raz.

zamiast: $query = "INSERT INTO tabela (product,cena) VALUES ('$dat','$datt')";
robisz: $query = "INSERT INTO tabela (product,cena) VALUES ('1','1'),('2','2'),....,('20','20')";

Tylko musisz sobie tak budowac to zapytanie i wykonywac dopiero gdy uzbiera sie 20 wartosci

Nie wiem czy dobrze zrozumiałem , ale raczej nie bo działa jeszcze mniej sprawnie ,co tu się kotłuje ?

[PHP] pobierz, plaintext 
<?php
$licz++;
if($licz =='21'){
 
 
$query = "INSERT INTO tabela (id,produkt,cena) VALUES ('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt'),('$dat','$datt','$datttt')";
//mysql_query("set names utf8");
 
$query = mysql_query ($query);
 
 
 
$licz='1';
}
?>
[PHP] pobierz, plaintext 

przeciez do zapytania wkladasz te same dane.

Rozwiązanie jest banalne, moze ktos inny cie na kieruje, bo ja nie mam sily

A nie możesz po prostu użyć LOAD DATA INFILE i wrzucić od razu całego pliku do bazy?

To ciekawe rozwiązanie ale dla mnie czarna magia nie wiem gdzie wpisać pola do tabel nigdy nie robiłem takiego zapytania czy ktoś może mi pomóc mi napisać to zapytanie LOAD Data

chce dodać rekordy do bazy , w pliku txt są 2 wartości oddzielone tabulatorem

cukier -TAB 35
kawa -TAB 12

Manual pomimo prób Wystapil blad w kwerendzie.

[PHP] pobierz, plaintext 
<?php
LOAD DATA [LOW_PRIORITY] [LOCAL] INFILE 'nazwa_pliku.txt' [REPLACE | IGNORE]
  INTO TABLE nazwa_tabeli
  [FIELDS
    [TERMINATED BY '\t']
    [[OPTIONALLY] ENCLOSED BY '']
    [ESCAPED BY '' ]
  ]
  [LINES TERMINATED BY '&#092;n']
  [IGNORE n LINES]
  [(nazwa_kolumny,...)]
?>
[PHP] pobierz, plaintext 

Jeśli pola masz oddzielone tabulatorem to powinno wystarczyć takie zapytanie:

[SQL] pobierz, plaintext 
LOAD DATA INFILE '/sciezka/do/pliku/nazwa_pliku.txt' INTO TABLE `nazwa_bazy`.`nazwa_tabeli`
[SQL] pobierz, plaintext 

ewentualnie będziesz potrzebował określić znaki końca linii, np:

[SQL] pobierz, plaintext 
LINES TERMINATED BY '\r\n'
[SQL] pobierz, plaintext 

Kurcze cały czas błąd i błąd ścieżka do pliku dobra nazwy tabeli i baz dobre plik txt prawa 777, hasała do bazy dobre
ktoś widzi tu jakiegoś byka ?

[PHP] pobierz, plaintext 
<?php
$query = "LOAD DATA INFILE '/home/stronak/public_html/stronka/up/plik.txt' INTO TABLE `bazadanych`.`nazwa_tabeli` LINES TERMINATED BY 'r\n' ";
 
 
$wynik = mysql_query($query);
if(!$wynik) {
echo '<br> Wystapil blad w kwerendzie.';
}
?>
[PHP] pobierz, plaintext 

jest

[SQL] pobierz, plaintext 
LINES TERMINATED BY 'r\n' ";
[SQL] pobierz, plaintext 

powinno być

[SQL] pobierz, plaintext 
LINES TERMINATED BY '\r\n' ";
[SQL] pobierz, plaintext 

oczywiście jeśli plik ma windowsowe znaki końca linii, jeśli był zapisany pod linuchem to wystarczy '\n'

no a najlepiej to by się przydał komunikat błędu:

[PHP] pobierz, plaintext 
<?php
$wynik = mysql_query($query);
if(!$wynik) {
echo '<br> Wystapil blad w kwerendzie.<br>' , mysql_error();
}
?>
[PHP] pobierz, plaintext 

Poszło dzięki , no to teraz precyzuje wsad i błąd coś z separatorem ale o co chodziii

[PHP] pobierz, plaintext 
<?php
$query = "LOAD DATA LOCAL INFILE '/sciezka/plik.txt' INTO TABLE `baza`.`tabela` FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"(a,b,c) ";
?>
[PHP] pobierz, plaintext 

i

[PHP] pobierz, plaintext 
<?php
Field separator argument is not what is expected; check the manual
?>
[PHP] pobierz, plaintext 

przy pliku txt

[PHP] pobierz, plaintext 
<?php
23,&#8217;Piotr’,'Kowalski’
43,&#8217;Łukasz’,'Podolski’
21,&#8217;Maria’,'Kuźniecowa’
?>
[PHP] pobierz, plaintext 

chłopie, co ty w Wordzie piszesz, że masz jakieś drukarskie apostrofy

[SQL] pobierz, plaintext 
OPTIONALLY ENCLOSED BY '"(a,b,c) ";
[SQL] pobierz, plaintext 

'(a,b,c)' co to jest? tutaj powinieneś podać jeden znak, taki, którym zamykasz wartość pól - w twoim przypadku apostrof jeśli dobrze widzę, choć może problemem są właśnie te apostrofy drukarskie...

Fakt skopiowałem fragment ze strony ,mam do d... monitor i nie zauważyłem , dzięki wszystko już działa , funkcja faktycznie wydajna plik wchodzi bez problemu polecam wszystkim , prawie można zamknąć temat jeszcze tylko jedna rzecz mi została kodowanie

Robbie tak wyświetlam z bazy treść kodowanie utf8 i zapisuję ją do pliku .txt a później wsadzam plik do bazy LOAD DATA LOCAL INFILE kodowanie w bazie utf8 i krzaki

Czy zapisując do pliku txt murze przekonwertować an inny format ?

A czy użyłeś wyszukiwarki wpisując frazę mysql kodowanie? Było wiele już takich tematów.

jak OpenOfice edytuje plik do wsadu kodowanie utf , wszystkie znaki są czy do funkci
DATA LOCAL INFILE trzeba jeszcze coś dodać ?

dodałem jeszcze to ale nie pomogło

[PHP] pobierz, plaintext 
<?php
mysql_query("set names utf8");
?>
[PHP] pobierz, plaintext