Сделать Парсер на ларавел laravel с сайта youla.ru/

Цена договорная • электронные деньги
24 августа 2018, 15:51 • 4 отклика • 58 просмотров
Сделать Парсер на ларавел laravel

0.Парсер рубрик аренда/продажа квартир/комнат с сайта youla.ru/
Парсер должен быть написан на ларавел. (код обязательно с коментами) и служить основой для аналогичных 3 трех парсеров написанных после этого парсера.

1. Описание настроек
1.1. Страница настроек joxi.ru/RmzNGO3TWqbZjm
1.1.1. возможность запустить/остановить парсер сразу joxi.ru/Q2KG9dvh9n8Gk2
1.1.2. указать в настройках свои прокси для парсинга или покупные прокси, взятые по API
1.1.2.1. возможность указать в настройках количество квартир для парсинга, для одного прокси. потом прокси меняется и так по кругу
1.2. страница настроек фильтров для парсинга joxi.ru/zANG9ZvhlQqOpr
1.3. Старница с логом. лог должен быть подробный. пример joxi.ru/E2pXy5QUB5k112
1.4. страница черного списка. сюда попадают номера тел, соответствующие этому фильтру joxi.ru/ZrJG9Wvh1q7zWm
1.4.1. вид черного списка подробный. как на joxi.ru/brRG9OvhQ5bGDm

2. импорт спарсенных квартир в режиме онлайн попадает в 2 разные бд. эти настройки можно указать в коде.

3. Агоритм работы.
парсер берет первую ссылку отсюда joxi.ru/zANG9ZvhlQqOpr и парсит с учетом пауз, указанным в настройках. глубина парсинга тоже указана в настройках в сутках.
пасер собрал все квартиры за эти сутки, и парсит эту ссылку (joxi.ru/zANG9ZvhlQqOpr)за..., т к пока он парсил, могли появится новые квартиры.
как только парсеру попадается 5 дублей подряд (например) парсер переходит на следующую ссылку отсюда joxi.ru/zANG9ZvhlQqOpr. и так даеее.
Если приспособить 1000 прокси что мы покупаем, то получится сделать несколько потоков. (сколько ссылок, столько и потоков)

4. далее будет заказ на 3 аналогичных парсера

5. сразу пишите пжл,
стоимость за данный проект? срок
5.1. стоимость часа вашей работы?
5.2. когда готовы приступить?
5.3. ваше знание ларавел