Парсер пожалуйста помогите поправить

[nikolokaputik80]

Привет !

есть парсер на пхп, вот код

PHP код:

<?php
set_time_limit(0);
$m = file("link.txt");
foreach($m as $v){
$a = file_get_contents("$v");
preg_match("~<span id=\"adv_phone_big\">(\d+)</span>~",$a,$s);
$boom[] = $s[1];
}
$filter = array_filter($boom);
file_put_contents("result.txt",implode("\n",$filter),FILE_APPEND);
?>

логика работы такая, при запуске скрипт рекурсивно переходит
по ссылкам из файла link.txt
парсит нужную мне инфу и записывает результат по концовке парсинга в текстовик result.txt

но есть большая проблема, когда в текстовике link.txt
более 50 ссылок через минуту после запуска в браузере всегда вылетает ошибка


504 Gateway Time-out
nginx/1.1.19


я уже и php.ini правил увеличивая объем памяти до 5 гб и время выполнения скрипта в вместо 60 ставил 6000000 секунд.
все ровно здыхает парсинг через минуту и ошибка

504 Gateway Time-out
nginx/1.1.19

может кто подскажет как сделать чтобы парсер работал 50 секунд к примеру записывал все что спарсит в result.txt
потом снова рестартился и продолжал с того места где последний раз была остановка, и такими порциями по 50 сек будет парсить, помогите пожалуйста внести изменения в мой парсер!

[TranceSmile]

Такие вещи кроном делают.

[proinfotech]

Лучше ajax`ом на php обработчик отправляеть запросы.
Таким способом можно контролировать состояние парсинга и осуществлять ожидания при недоступности ресурса.
Можно еще для визуализации процесса поставить progressbar.
Если нужно - могу сделать.
Пишите: vetal2525@mail.ru
Или Skype: proinfotech

[CodeNOT]

зачем крон, зачем ajax, используйте cli/fpm