Forum PHP.pl > [php] Problem z za dużym plikiem do importu

Pomoc - Szukaj - Użytkownicy - Kalendarz

Pełna wersja: [php] Problem z za dużym plikiem do importu

skromna85

4.04.2007, 11:12:40

Witam. spotkałam się z problemem natury technicznej... mam 120 s na wykonanie operacji, muszę zaimportować ceny w pewnej hurtowni... koło 8000-10000 linijek pliku z importem cen. Wszystko już działa tylko po przejściu koło 2000-2500 linijek skrypt się wywala... i dostaję błąd przekroczenia czasu na wykonanie skryptu [max 120s]

Idzie to jakoś obejść?

Kicok

4.04.2007, 14:46:37

1. set_time_limit" title="Zobacz w manualu PHP" target="_manual

albo

2. microtime" title="Zobacz w manualu PHP" target="_manual - za każdym przejściem pętli sprawdzasz jak długo wykonuje się już skrypt PHP. Jeśli dojdzie do 100 sekund to przy pomocy funkcji header() wywołujesz go ponownie, ale do adresu URL dodajesz zmienną określającą numer znaku, od której skrypt ma zacząć. Np jeśli w ciągu 100 sekund uda ci się przerobić 3456 linijek, to:
- zatrzymujesz pętlę
- odczytujesz pozycję kursora w pliku (ftell" title="Zobacz w manualu PHP" target="_manual)
- wstawiasz ją do URL skryptu i wysyłasz nagłówek funkcją header" title="Zobacz w manualu PHP" target="_manual
- na początku skryptu sprawdzasz, czy podano np. $_GET['zacznij_od'], jeśli tak to przesuwasz kursor w pliku do tego miejsca (fseek" title="Zobacz w manualu PHP" target="_manual)
- kontynuujesz odczytywanie danych z pliku

rojmarek

4.04.2007, 17:31:45

Cytat(skromna85 @ 4.04.2007, 10:12:40 )

plik zapisany jest lokalnie czy zdalnie? może za długo przetwarzasz dane w pewnym miejscu...?

Łukasz O.

4.04.2007, 21:47:05

jest jeszcze jedno proste wyjście - można plik podzielić na kilka mniejszych i importować pojedynczo jeden za drugim

PS. witam znajomą

skromna85

6.04.2007, 09:00:47

Właśnie podział pliku odpada koleś chce zautomatyzować cały proces... pokombinuje z pierwszymi wskazówkami

PS. witam kolegę z uczelni:)

Amorph

6.04.2007, 13:41:49

to zrob upload, potem podziel plik na mniejsze i dopiero je importuj

skromna85

6.04.2007, 23:44:45

dobra udało sie chwilo przekonać klienta do dzielenia plików już podczas ich tworzenia

To jest wersja lo-fi głównej zawartości. Aby zobaczyć pełną wersję z większą zawartością, obrazkami i formatowaniem proszę kliknij tutaj.