Скрипт-грабер-парсер

Web/сайты Прочее

Был(а) онлайн: 26.04.20 14:45
Umen 26 лет

1.0 Был(а) онлайн: 26.04.20 14:45

Недавно
Cкрипт на php, тот, что должен уметь следующее:

1) Трудиться по списку проксей
2) Трудиться под вебом, получать параметры способом POST и GET
3) Прикинувшись броузером (нужно уметь session id & Cookies, Ajax, желанно прием gzip) ходить сайты
сделать запрос по заданным параметрам, скачать все страницы с итогами запроса. Где-то дозволено менять кол-во отелей на страницу, где-то - невозможно.
4) Распарсить все html-и, предпочтя наименование отелей, стоимость & etc (полный алгорифм будет оговариваться для всякого сайта отдельно)
5) Отдать итоги в результат на запрос в виде зазипованного текстового файла.

Требуется перед написанием предложения познакомиться с указанными сайтами и ясно представлять как трудиться с спецтехнологиями на всем из них. Это вдалеке не полный список, легко особенно блестящие представители волнующих сайтов, следственно скрипт должен иметь типичный, положительный код для его последующего поэтапного дополнения другими сайтами и исправления в случае метаморфозы на сайтах. Каждого будет около 20 сайтов, некоторые вовсе примитивные. Так же нужно предусмотреть вариант работы скрипта в виде демона, т.е. данные на вход и выход во всех подпрограммах обязаны быть унифицированы. Заинтересован в долгосрочном верном сотрудничестве с исполнителями имеющими навык в данном направлении. Допустимо последующее написание других частей этой системы и создание веб-сайта позже удачного внедрения первого этапа.

P.S. Вообще может я заблуждаюсь в выборе инструмента для данной задачи, выслушаю все предложения.

Чтобы добавить заявку к этому заказу, нужно войти или зарегистрироваться

Мой блок

26.04.20 14:45
Umen 26