Witam,

Mam pewien plik na serwerze, który co minutę jest nadpisywany nowym wierszem danych ze stacji pogodowej. Muszę wybrać z tego pliku ostatni wiersz i przedstawić parę danych z wybranego ostatniego wiersza. Pytanie tylko, czy to co napisałem jest w miarę optymalne i nie będzie zbytnio zamulać strony... Plik txt waży od 300 do 550 kb, zależnie od pory dnia.

[PHP] pobierz, plaintext 
$plik = file('plik.txt');
$tmp1 = count($plik);
$ostatnia = $plik[$tmp1-1];
$spacje_out = explode(" ", $ostatnia);
$tmp2 = count($spacje_out);
[PHP] pobierz, plaintext 

Jak widać, filozofii wielkiej tu nie ma. Ostatnie dwie linijki rozdzielają mi wybrany wiersz wg spacji, między którymi zapisywane są dane do pliku. Chodzi głównie o to, czy taka forma obróbki pliku o takiej objętości jest optymalna... Dzięki z góry za opinie, pozdr.

Podejście jest jak najbardziej ok. Pasowałoby jedynie zastanowić się nad FLOCKiem jeśli odpytania są strasznie częste. Jedyna wada jaką widzę to to że ładujesz cały plik do pamięci (500kb to tak średnio w sumie). Można by było otworzyć plik, znajać jego rozmiar i jakiś mniej-więcej rozmiar średni linijki pojedynczej przesunąć wskaźnik na KONIEC - DLUGOSC_LINII i pobrać tylko ostatnią linię (z jakimś nadmiarem). Explodujesz wtedy po "\n" i bierzesz ostatni element. To tylko poprawka na pamięć. wydajnościowo w sumie może też pomóc ale trzeba by to przetestować

Ostatnią linię pliku można pobrać na kilka sposobów...

[PHP] pobierz, plaintext 
$file_name = 'file.txt';
$data = file($file_name);
// 1
$line = array_pop($data);
echo $line;
 
// 2
$line = $data[count($data)-1];
echo $line;
 
// 3
$file = escapeshellarg($file_name);
$line = `tail -n 1 $file`;
echo $line;
[PHP] pobierz, plaintext 

Sam musisz dokonać pomiarów który w Twoim wypadku będzie szybszy, choć dużych różnic bym się nie spodziewał. Btw. 550kb to sporo jak na odczyt pogody, to są zestawienia dla całego kraju?

Ok, dzięki za opinie.

To są zestawienia dla jednej stacji pogodowej na stacji narciarskiej zapisywane co minutę tak jak pisałem wyżej. W każdej linijce jest zapisywanych 28 pomiarów (oprócz daty i godziny temp., temp. odczuwalna, opad, opad 1h, wilgotność, ciśnienie, wiatr i kierunek, porywy wiatru, etc.) Dane są trzymane w postaci obecny dzień i dzień wcześniejszy. Tego niestety nie mam możliwości zmienić. Muszę bazować na tym co jest.

Co do ilości zapytań to średnio jest to około 50 użytkowników jednocześnie na stronie, odwiedzin uu około 1,5k/dzień na chwilę obecną (nie wiem jak będzie w sezonie narciarskim).

Dużo czy mało? Bo jakoś nigdy nie zwracałem na to uwagi...

Właśnie sam zrobiłem "pomiar" dla pliku 600kb:


Wrzuć pobraną linię w cache jak masz taką potrzebę, bo po co za każdym razem mielić te same dane.

Dzięki za pomiar.

W sumie co minutę są nowe dane, choć pewnie nie różnią się między sobą jakoś drastycznie. Też tak myślałem, czy nie wybierać jednej linii pogody co np. 10min i zapisywać jej gdzieś do innego pliku. I potem wyrzucać dane z tego pliku osobnym zapytaniem przy okazji sprawdzając godzinę ostatniego wpisu. Jeśli się różni o więcej niż 10min to nadpisać go nowymi danymi. Jeśli nie to pokazać dane jakie są.

Co do bardziej fachowego cachowania to niebardzo mam czas na przetrawienie tego co znalazłem w sieci. Moje PHP jest raczej średnie... A strona musi ruszyć za parę godzin:/


Ew. ustawianie ciastka na 10min. Jeśli ciastko jest to nie pobiera nowych danych i już... Takie trochę łopatologiczne rozwiązanie...


Teraz też dowiedziałem się, że dostęp do shella mam zablokowany:/

hmmm no to kiepsko. A czy masz możliwość edycji kodu zapisywania tych danych? Jeśli byś miał to oprócz normalnego dopisywania do pliku, o którym wspominałeś, mógłbyś dodać zaraz po tym zapisanie do nowego pliku (nadpisując go - tak by zawsze miał jedną linię z najnowszymi danymi) - wtedy tylko ten plik odczytujesz i po sprawie.

Jeśli nie masz takiej opcji to proponuję:

[PHP] pobierz, plaintext 
 
$maxLineSize = 12345; // dlugosc maksymalnej linii z nadkładką (1,5 razy itp.)
$size = filesize('plik.txt','r');
$file = fopen('plik.txt');
fseek($file,$size - $maxLineSize);
$line = fgets($file, $maxLineSize);
fclose($file);
$data = end(explode("\n",$file));
 
echo $data;
[PHP] pobierz, plaintext 

Albo jakoś tak

EDIT: to jedynie idea - trzeba by ją zabezpieczyć np przed tym że rozmiar pliku jest mniejszy od $maxLineSize itd. itp.