DWH разработчик/аналитик

На данный момент Главный инженер по разработке.

Мои компетенции и опыт

Проектирование, разработка потоков и витрин данных. Анализ и формализация требований заказчиков, согласование модели данных, прототипирование, анализ качества данных, разбор инцидентов. Работа с технологическим стеком Hadoop (HDFS, YARN, Hive), Apache Spark, PostgreSQL, Python, Jenkins.

Консультация по предметной области (ЦКРР) бизнес-пользователей и сотрудников. Обучение новых сотрудников, замещение тимлида и лидирование по вопросам предметной области, работа с инцидентами, выполнение обязанностей локального архитектора данных.

Большой опыт работы в финтехе, знание основ банковской деятельности (продукты, риски, ПВР, МСФО) использование Jira, Confluence, QlikSense, BitBucket, Apache Airflow, Jupyter Notebook, Excel, Clickhouse, Greenplum, понимание принципов CI/CD, DWH, ETL. Достижения:

1. Успешная замена вендоров – участие в миграции данных между платформами без потерь производительности и качества. Оптимизация ETL-процессов, снижение нагрузки на Hadoop-кластер.

2. Разработка 10 новых аналитических дашбордов – создание бизнес- отчетности для QlikSense, автоматизация формирования отчетов на основе больших данных.
3. Оптимизация ETL-процессов – сокращение времени выполнения критических Spark-джоб на 30%, переработка архитектуры хранилища для увеличения скорости запросов