R50 f99603fabdb682028a6b0d636d5a78a6
Python, Django, веб-разработка

Многопоточный чекер доменов в поисковой системе Yandex (Python)

Добавлено 18 июл 2018 в 19:34
Скрипт производит проверку доменов в Yandex по следующим показателям:
1) ТИЦ домена;
2) Склейка сайта с другими доменами;
3) Количество проиндексированных страниц
Возможности:
  • - проверка доменов из файла по списку;
  • - многопоточность;
  • - поддержка прокси с автоматической загрузкой из указанного url, либо файла;
  • - автоматическая проверка прокси на валидность;
  • - сохранение результатов в CSV файл;
  • - подробное логирование процесса выполнения;
  • - автоматическая генерация UserAgent для каждого запроса;
  • - для гибкой настройки служит удобный и понятный конфигурационный ini-файл.
Db7bf7ebd4