Занимаюсь инжинирингом данных, парсингом и анализом данных. Временами работаю над телеграм ботами и алёртами. Разбираюсь в анализе, машинном обучении и написание статей, курсовых, дипломов и диссертаций. Часто выполняю задачи, связанные sql/python/pandas/numpy/matplotlib и machine learning.
На данный момент мой стек в основном стоит из:
1. Python - Весь основной core, временами работаю с многопроцессорностью/ многопоточностью, занимаюсь парсингом, рефакторингом легаси, написание и поддержкой сервисов и тому подобное.
2. SQL - В основном работаю с PostgreSQL и временами работаю с MySQL. Имеется понимание написание .sql скриптов ( запросов), временами приходится заниматься оптимизацией, написанием функций и тому подобным.
3. Linux/Bash ( на достаточном уровне для использования в работе) - В консоли больше выполняю рутинные задачи или произвожу настройку, мониторинг сервисов systemctl/systemd и т. д.
4. Apache Airflow - В основном занимаюсь поддержкой, мониторингом и написанием дагов. Временами пишу модули для улучшения читаемости кода, увеличение производительности и улучшения общей работы всех инженеров.
5. Apache Kafka/RabbitMQ - работаю с сервисами, которые выгружают данные через очереди. В основном занимаюсь написанием, поддержкой и мониторингом консьюмеров.
6. Pentaho DI/RD/BA — Временами приходится работать с джобами, поддерживать и переносить ETL/ELT пайплайны.
7. Jira/Confluence — Получаю/завожу задачи в Jira и веду документацию в Confluence.
В целом, сталкиваюсь с различными задачами и с интересом работаю над ними и завершаю.
Считаю, что нерешаемых проблем нет, к любой задаче смогу найти подход.