Скрипты-парсеры для сайтов 10 аэропортов №1

10 000 руб. за проект • безналичный расчёт, электронные деньги
16 марта 2017, 13:30 • 1 отклик • 26 просмотров
Необходимо разработать скрипты для сбора данных о вылетах и прибытиях самолетов в 10 аэропортах:
Код, URL, Аэропорт, Город
AAQ Anapa Anapa http://basel.aero/anapa/passengers/online-schedule/
AMS Amsterdam SchipholHaarlemmermeer, North Holland http://schiphol.nl
ARH Talagi Archangelsk http://arhaero.ru/pax/flying/online-tablo-arrivals
ATL Hartsfield Jackson Atlanta International Atlanta, Georgia http://www.atl.com/
BCN Barcelona International Barcelona http://www.aena.es/en/barcelona-airport/index.html#
BKK Suvarnabhumi Bangkok http://www.suvarnabhumiairport.com/en/4-passenger-departures
BOM Chhatrapati Shivaji International Mumbai http://www.csia.in/flightinformation/passenger-flight.aspx
CAN Guangzhou Baiyun International Guangzhou http://www.gbiac.net/hbxx/flightQuery?isArrival=false&isAll=true&recently_20_data=true
CDG Charles de Gaulle International Paris http://www.parisaeroport.fr/en/homepage
CEK Chelyabinsk Balandino Chelyabinsk http://cekport.ru/passengers/information/timetable/


Требования:


  1. Каждый скрипт должен быть разработан таким образом чтобы его можно было вызывать из консоли.

  2. Вам будет нужно сообщить нам версии по, необходимые для работы скрипта (например, python 2.7.*, BeautifulSoup 4.4.*). Скрипт будет запускаться в Docker-контейнере, поэтому, если вы знакомы с докером, то достаточно сообщить название и тэг образа из докер репозитория в котором скрипт сможет правильно работать или предоставить Dockerfile для создания такого образа.

  3. Скрипты не принимают никаких входных параметров.

  4. Выполнение скрипта не должно занимать больше 60 секунд.

  5. Там, где аэропорты предоставляют данные в форматах json, csv, xml и т. д. предпочтительней использовать их, иначе - делать парсинг html-страниц(ы) с помощью соответствующей библиотеки.

  6. Результат должен содержать как минимум информацию по рейсам, которые приземлились / должны были приземлиться за последние 4 часа и которые по расписанию должны приземлиться в течение ближайших 24 часов.

  7. Скрипт должен всегда работать с англоязычной версией сайта аэропорта при ее наличии.

  8. Результат работы каждого скрипта должен быть в виде следующей JSON-структуры:

{

"airport_id": "HKG",

"departures": [

{

"flightno": "CX828",

"codeshares": [

"TX828",

"ZX828"

],

"check_in_desks": "21 - 23",

"gate": "31",

"scheduled": "2016-10-11 07:27:00",

"estimated": "2016-10-11 07:45:00",

"actual": "2016-10-11 07:46:00",

"status": "departed"

}

],

"arrivals": [

{

"flightno": "CX829",

"codeshares": [

"TX829",

"ZX829"

],

"luggage": "11, 12, 14",

"scheduled": "2016-10-11 07:27:00",

"estimated": "2016-10-11 07:25:00",

"actual": "2016-10-11 07:26:00",

"status": "landed"

}

]

}



Где

airport_id - ID Аэропорта (согласно кодировки IATA) указан выше в списке аэропортов (трехбуквенный)

departures - массив рейсов вылетов

arrivals - массив рейсов прилетов

flightno - номер рейса

codeshares - массив совмещенных номеров рейсов (если есть)

check_in_desks - стойки регистрации (если есть)

gate - выход на посадку (если есть)

luggage - выдача багажа (если есть)

scheduled - дата/время вылета/приземления по расписанию по местному времени аэропорта в формате YYYY-mm-dd HH:MM:SS

estimated - прогнозируемые дата/время вылета/приземления (если есть) по местному времени аэропорта в формате YYYY-mm-dd HH:MM:SS

actual - фактические дата/время вылета/приземления (если есть) по местному времени аэропорта в формате YYYY-mm-dd HH:MM:SS

status - один из:

unknown - статус неизвестен

scheduled - рейс идет по расписанию

checkin - идет регистрация

boarding - идет посадка

outgate - посадка закончена

departed - рейс вылетел

expected - ожидается скорая посадка

delayed - рейс задерживается

landed - приземлился

cancelled - рейс отменен



Таблица соответствия статусов в аттаче (Flight statuses mapping). Если вы встретили какой-то другой статус, сообщите мне, я скажу как его интерпретировать и добавлю в таблицу.
Файлы