Witam serdecznie,
Mam problem z zaimportowaniem 70MB pliku CSV do MySQL.
Mam następujący skrypt:

[PHP] pobierz, plaintext 
$filename = "baza_ksiazek.csv";
        $handle = fopen("$filename", "r");
        $ilosc = 0;
        while (($data = fgetcsv($handle, 2000, ",")) !== FALSE) {
            $result = mysql_query("SELECT bf_id FROM cms_produkty WHERE isbn = '" . mysql_real_escape_string($data[1]) . "' LIMIT 1;", $connection);
            $ilosc_wierszy = mysql_num_rows($result);
            if ($ilosc_wierszy == 0) {
                if ($data['1'] != "") {
                    $nazwakategorii = null;
                    $nazwapodkategorii = null;
                    $idkategorii = null;
                    $idpodkategorii = null;
                    $nazwakategorii = $data['12'];
                    $nazwapodkategorii = $data['13'];
 
                    if ($nazwakategorii != "") {
                        $result2 = mysql_query("SELECT * FROM cms_kategorie WHERE nazwa = '$nazwakategorii';");
                        if (mysql_num_rows($result2) == 0) {
                            mysql_query("INSERT INTO cms_kategorie (nazwa, enable) VALUES ('$nazwakategorii', '1');");
                            $wynik = mysql_query("SELECT bf_id FROM cms_kategorie WHERE nazwa = '$nazwakategorii' ORDER by bf_id DESC LIMIT 1;;");
                            while ($wartt2 = mysql_fetch_assoc($wynik)) {
                                $idkategorii = $wartt2['bf_id'];
                            }
                        } else {
                            $wynik = mysql_query("SELECT bf_id FROM cms_kategorie WHERE nazwa = '$nazwakategorii' ORDER by bf_id DESC LIMIT 1;;");
                            while ($wartt2 = mysql_fetch_assoc($wynik)) {
                                $idkategorii = $wartt2['bf_id'];
                            }
                        }
                    }
 
                    //echo $idkategorii."<br/><br/>";
 
                    if ($nazwapodkategorii != "") {
                        $result3 = mysql_query("SELECT bf_id FROM cms_podkategorie WHERE nazwa = '$nazwapodkategorii' LIMIT 1;");
                        if (mysql_num_rows($result3) == 0) {
                            mysql_query("INSERT INTO cms_podkategorie (nazwa, enable, kategoria) VALUES ('$nazwapodkategorii', '1', '$idkategorii');");
                            //echo "INSERT INTO cms_podkategorie (nazwa, enable, kategoria) VALUES ('$nazwapodkategorii', '1', '$idkategorii');";
                            $wynik = mysql_query("SELECT bf_id FROM cms_podkategorie WHERE nazwa = '$nazwapodkategorii' ORDER by bf_id DESC LIMIT 1;;");
                            while ($wartt2 = mysql_fetch_assoc($wynik)) {
                                $idpodkategorii = $wartt2['bf_id'];
                            }
                        } else {
                            $wynik = mysql_query("SELECT bf_id FROM cms_podkategorie WHERE nazwa = '$nazwapodkategorii' ORDER by bf_id DESC LIMIT 1;;");
                            while ($wartt2 = mysql_fetch_assoc($wynik)) {
                                $idpodkategorii = $wartt2['bf_id'];
                            }
                        }
                    }
                    $save = "INSERT INTO cms_produkty (nazwa, obrazek, isbn, cena, autor, wydawca, strony, opis, rok, podatek, cena2, kategoria, grupa, typrekordu, enable) VALUES ('$data[3]', '$data[15]', '$data[1]', '$data[9]', '$data[4]', '$data[5]', '$data[6]', '$data[8]', '$data[7]', '$data[10]', '$data[11]', '$idkategorii', '$idpodkategorii', '1', '1');";
 
                    $save = iconv('ISO-8859-2', 'UTF-8', $save);
                    mysql_query("$save");
 
                }
            }
[PHP] pobierz, plaintext 

Import ma sprawdzić czy dana kategoria/podkategoria/produkt istnieją w bazie - i jeśli nie - to go dodać...
Problem w tym, że skrypt zwraca błąd: Fatal error: Out of memory (allocated 43778048) (tried to allocate 42997761 bytes) in /ksiegarnia/import.php on line 55

Czy ktoś ma może pomysł jak wybrnąć z tego problemu?

Z góry dziękuję bardzo za pomoc,
Northwest

Ustaw pole z kategorią/podkategorią jako "UNIQUE" i zaimportuj wszystko?
Wyskoczą błędy przy już istniejących wartościach.