Ищем специалиста для разработки системы анализа вакансий и образовательных программ для нужд региона

Задачи специалиста:

1. Сбор данных о вакансиях:
   
   • Автоматизированная выгрузка информации о вакансиях (не менее 2 млн записей) с ведущих сайтов-агрегаторов для определенного региона за указанный период.
   • Включение ключевых данных по вакансиям: уникальный идентификатор, источник, ссылка, дата публикации, статус (актуальность), название и описание, зарплатные границы, опыт работы, данные о работодателе, график работы и тип занятости.
2. Разработка алгоритма извлечения и анализа навыков:
   
   • Создание алгоритма для автоматического выявления и категоризации широкого спектра профессиональных и мягких навыков из описаний вакансий.
   • Обеспечение возможности обновления и дообучения модели на новых данных, мониторинг производительности и логирование ключевых событий для диагностики и обеспечения прозрачности.
3. Фильтрация и обработка данных:
   
   • Отбор вакансий, релевантных определенным профессиональным направлениям.
   • Подготовка и валидация базы данных с привлечением экспертов (привлекаем сами) для обеспечения точности и актуальности информации.
4. Анализ данных рынка труда:
   
   • Проведение анализа спроса на специалистов, включая анализ зарплатных данных, требований к опыту, типы занятости и график работы.
   • Выполнение сравнительного анализа навыков и компетенций, требуемых рынком труда, и их соответствия навыкам, получаемым в ходе обучения в образовательных учреждениях.
5. Анализ образовательных программ:
   
   • Сбор и анализ данных о направлениях обучения (высшее и средне-специальное образование) по нужным отраслевым направлениям, включая направления подготовки, профессиональные компетенции и стандарты.
   • Сбор информации по плановым цифрам приема, перечню специальностей и образовательным стандартам в регионе.
6. Составление аналитического отчета:
   
   • Подготовка отчета с результатами анализа рынка труда, определение различий между предложением и спросом на навыки и компетенции, рекомендации для актуализации образовательных программ.

Требования к квалификации:

• Опыт работы с библиотеками для глубокого обучения (например, PyTorch, TensorFlow).
• Навыки интеграции с API для валидации и обработки данных.
• Опыт работы с большими массивами данных и обработкой текстов на естественном языке.
• Понимание рынка труда и анализа образовательных стандартов
• Понимание NLP (Natural Language Processing)

При отклике просьба присылать портфолио с проектами по Big Data. Бюджет указан в качестве оплаты разработчику, не за весь проект.