Python, парсинг, api.
Задача: Собрать информацию по всем частным домам Московской области.
Данные для сбора:
Скрипт не могу опубликовать т.к заказчик не дал разрешения.
Решение:
Скрипт проходился по страницам, собирал ссылки, а после собирал информацию с собранных ссылок. Нужно было пройтись по всем страницам, но сколько всего страниц не было известно. Но перейдя на несуществующий номер страницы - он переходил на самую первую страницу. Применил это свойства для завершения скрипта, как только все страницы будут спаршены.
Также собрал всю табличную информацию по участкам:
Данные для сбора:
- Адрес
- Цена
- Ссылка
- Все характеристики из таблицы
Скрипт не могу опубликовать т.к заказчик не дал разрешения.
Решение:
Скрипт проходился по страницам, собирал ссылки, а после собирал информацию с собранных ссылок. Нужно было пройтись по всем страницам, но сколько всего страниц не было известно. Но перейдя на несуществующий номер страницы - он переходил на самую первую страницу. Применил это свойства для завершения скрипта, как только все страницы будут спаршены.
Также собрал всю табличную информацию по участкам:
