ЕЯ
Евгений Я.
Мужчина, 43 года
Россия, Москва, UTC+3
Ставка
4 495,67 Р/час
вкл. НДС 5% (166.67 Р)
Специалист доступен с 16 октября 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B2
Главное о специалисте
Data Engineering: Проектирование и разработка высоконагруженных ETL/ELT-процессов, оркестрация (Airflow), оптимизация производительности.
Базы данных: Глубокие знания SQL, оптимизация сложных запросов. Опыт с MPP-системами (GreenPlum, Teradata), традиционными СУБД (Oracle, PostgreSQL, MS SQL Server) и Hadoop-экосистемой (HDFS, Hive, Impala).
Программирование: Python (разработка ETL), Java (интеграционные шины, Spring Boot), опыт с Scala-окружением (Apache Spark, Kafka).
Инструменты: Airflow, dbt, Apache Kafka, Trino, Apache Spark, Debezium, Pentaho, Talend DI.
Инфраструктура: Kubernetes, Docker, Yandex Cloud (YC), S3, опыт развертывания и миграции на container-based инфраструктуру
Сертификаты обучения: Informatica, SAS DIS, Oracle, Golden Gate
Проекты
(18 лет 4 месяца)
Интеграционные проекты в ВСК, Фора-банке, Росбанке, РН Банке, СМП Банке, Банке Зенит.
Роль
Старший дата инженер
Обязанности
Разработал и внедрил современную ETL-архитектуру на стеке GreenPlum (YC), Trino, Airflow и dbt для построения корпоративного хранилища данных.
Организовал процесс оркестрации ETL-пайплайнов с помощью Airflow, обеспечив надежность и соблюдение SLA.
Реализовал механизм потокового захвата данных (CDC) с использованием Debezium и Apache Kafka для актуальности данных в режиме, близком к реальному времени.
Оптимизировал сложные SQL-запросы и процессы в MPP-СУБД (GreenPlum), что позволило сократить время выполнения ключевых отчетов на 40%.
Работал с большими данными в объектном хранилище S3 (YC) и колоночной СУБД ClickHouse для аналитических витрин.
Участвовал в интеграционных проектах для крупнейших российских банков (Росбанк, РН Банк, Зенит, СМП Банк, Фора-банк), глубоко понимая банковскую предметную область.
Выполнил миграцию КХД и ETL-процессов с традиционных решений на современный стек, включая Apache Hadoop (HDFS, Hive, Impala).
Руководил проектом миграции всей data-инфраструктуры банка (интеграционная шина, ETL-процессы) на платформу Kubernetes.
Разрабатывал и оптимизировал ETL-процессы с использованием Talend DI и Pentaho для переноса данных между гетерогенными системами.
Имею опыт работы с Apache Spark в рамках экосистемы Hadoop для обработки больших объемов данных.
Стек специалиста на проекте
Trino, DBT, ArtemisMQ, mpp, Программное обеспечение, debezium, impala, ClickHouse, Интеграции с внешними системами, Hive, DI, Java, Teradata, ETL, Talend, Kafka, Apache Hadoop, DWH, S3, ServiceMix, HDFS, Pentaho, redhat, Apache Servicemix, Fuse, IBM WebSphere, SQL, Python, Ignite, GreenPlum, ESB, Karaf, ActiveMQ, Apache AirFlow, Spring Boot, Camunda, Kubernetes, PostgreSQL
Отрасль проекта
FinTech & Banking
Период работы
Октябрь 2016 - По настоящее время
(9 лет 1 месяц)
Развертывание и администрирование среды ETL Informatica Power Center, Data Quality
Роль
Дата/ETL инженер
Обязанности
Развернул и администрировал среду Informatica PowerCenter.
Спроектировал и реализовал более 50 высоконагруженных ETL-процессов для наполнения корпоративных хранилищ данных и витрин.
Обеспечивал контроль качества данных (Data Quality) и мониторинг выполнения ETL-задач.
Приобрел бесценный опыт в рамках проекта слияния двух банков, где отвечал за консолидацию и миграцию данных.
Стек специалиста на проекте
OLAP, Анализ данных, ETL, Мониторинг, Проектирование, Обучение, Работа с интеграциями, Консультирование
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2011 - Июнь 2016
(5 лет 3 месяца)
Разработка архитектуры витрины данных, разработка и реализация реализация ETL - процессов.
Роль
Старший специалист Управления Хранилищ и Витрин Данных
Обязанности
Разработка ETL-процессов наполнения данными ХД средствами python и СУБД Sybase и MS SQL. Оптимизация запросов к БД.
Разработка ETL-процессов наполнения данными Витрины Данных средствами IBM DS и BO DI. СУБД oracle
Оптимизация производительности системы. Реализация успешных решений в банке ММБ
Стек специалиста на проекте
SQL, Python, Oracle, DI, Базы данных, СУБД, IBM, Microsoft, Hbase, Разработка, Оптимизация ПО
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2007 - Апрель 2011
(4 года 1 месяц)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский Государственный Университет Инжененрной Экологии
Специальность
ТППТ
Завершение учебы
2004 г.