Рефакторинг высоконагруженного парсера

40 000 руб. за проект • наличный расчёт, безналичный расчёт, электронные деньги
04 января 2019, 15:32 • 18 откликов • 135 просмотров
Есть нагруженный работающий геопарсер (обновление данных раз в 20 секунд на 14 айпишниках для несколько тысяч локаций, node.js/redis/mongo) + API для выдачи результатов на втором сервере, исходники для него, документация


требуется
а. раз в несколько дней api-сервер перестает отдавать данные, разобраться с причинами поломок
б. добавить еще один источник для нового типа данных, интегрировать его в структуру проекта). Задачу на парсинг готов обсуждать в личной беседе.
в. внести ряд изменений в логику обработки данных - при пропущенных данных парсера экстраполировать значения согласно предыдущим собранным данным


Прошу коротко в ответе – какие парсеры запускали или админили. Проект непростой, джуниору не разобраться. Возможна регулярная работа по этому или другим back-задачам в будущем, работы много. Готов оплачивать работу по часам, предоплата. К бюджету не привязан, качественно важнее, чем "дешево". Проект умеренно срочный, предполагаю, что около недели работы. Начать хотелось бы 100% во время "зимних каникул".