middle+/senior data engineer

На данный момент middle+ data engineer.

Мои компетенции и опыт

Data Engineer с опытом более 4 лет в разработке и сопровождении корпоративных хранилищ данных, ETL-процессов и аналитических систем. В настоящее время работаю с банковскими данными: проектирую и поддерживаю пайплайны обработки данных, разрабатываю аналитические витрины и решения для контроля качества данных, используемые в моделях и бизнес-аналитике.

Имею практический опыт работы с Python, SQL, PySpark, Apache Spark, Hadoop, HDFS, YARN, Apache Airflow, ClickHouse и PostgreSQL. Занимаюсь оптимизацией сложных SQL-запросов и процессов обработки больших объёмов данных, разработкой DAG, автоматизацией data quality-проверок и развитием DWH.

Занимался миграцией аналитического решения с PostgreSQL на ClickHouse без остановки сервисов, включая адаптацию, тестирование и оптимизацию запросов.

Также работаю с Apache Kafka, Debezium, Trino и Iceberg, знаком с построением потоковой загрузки данных и CDC-процессов. Использую Git и CI/CD в командной разработке.

Ориентирован на создание надёжных и масштабируемых пайплайнов, повышение качества данных, автоматизацию ручных процессов и оптимизацию производительности аналитических систем.

Резюме:
нужен доступ к резюме