ВС
Владимир С.
Мужчина, 27 лет
Россия, Москва, UTC+3
Ставка
3 675,32 Р/час
НДС не облагается
Специалист доступен с 31 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Инженер БД
Грейд
Навыки
Отрасли
Знание языков
Английский — B1
Главное о специалисте
Senior Data Engineer с более чем 6 годами опыта в разработке и поддержке ETL-процессов, создании витрин данных и оптимизации процессов обработки данных. Специализируется на работе с большими объемами данных, интеграции и оптимизации пайплайнов с использованием Greenplum, Apache Airflow, и NiFi. Имеет опыт менторства, настройки CI/CD процессов и улучшения качества данных. Ориентирован на повышение эффективности процессов, минимизацию ошибок и тесное взаимодействие с бизнесом для реализации требований.
Проекты
(6 лет 2 месяца)
Поддержка и оптимизация процессов выгрузки кредитной истории для бюро кредитных историй
Роль
Senior Data Engineer
Обязанности
- Поддержание и доработка ETL-процессов на стеке Greenplum, Apache Airflow, NiFi (SQL-скрипты, DAG).
- Рефакторинг и оптимизация процессов расчета витрин данных.
- Доработка процессов с учетом требований аналитиков и Центрального банка.
- Настройка оповещений для оперативного реагирования на инциденты.
- Разработка Python-ноутбуков на базе Zeppelin для ручной перезагрузки кредитной истории.
- Участие в собеседованиях кандидатов и менторство.
Достижения
- Улучшил качество данных, что позволило избежать штрафов на ~1 млрд рублей.
- Сократил время расчета данных с 5 часов до 1.5–2 часов за счет перехода с SAS на Greenplum и Airflow.
- Настроил мониторинг DAG, сократив время реагирования на инциденты.
- Разработал инструменты для бизнес-пользователей, упрощающие работу с данными.
Стек специалиста на проекте
SQL, Python, ClickHouse, GreenPlum, Zeppelin, Apache AirFlow, NiFi
Отрасль проекта
FinTech & Banking
Период работы
Июль 2023 - Июль 2025
(2 года 1 месяц)
Разработка и поддержка витрин данных для банковских процессов
Роль
Senior DWH Developer/Analyst
Обязанности
- Создание и доработка витрин данных по требованиям бизнеса.
- Обработка ad-hoc запросов и устранение багов в данных.
- Разработка скриптов загрузки данных (PL/SQL, SAS DI).
- Миграция пайплайнов с SAS DIS и IBM FM на Apache Airflow.
- Реплицирование таблиц из источников в единое хранилище данных.
- Согласование изменений потоков загрузки с подрядчиками.
Достижения
- Ускорил обработку данных за счет оптимизации пайплайнов.
- Повысил качество данных в хранилище за счет автоматизации процессов.
- Обеспечил стабильную работу витрин для бизнес-пользователей.
Стек специалиста на проекте
Oracle, Pl/SQL, IBM, Apache AirFlow, SAS DI
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2022 - Июль 2023
(1 год 4 месяца)
Обеспечение качества данных в хранилищах Oracle и Teradata
Роль
Middle Data Quality Analyst
Обязанности
- Создание и валидация скриптов для проверки качества данных.
- Разработка маппингов и потоков проверок в Informatica Data Quality.
- Анализ и устранение инцидентов, связанных с качеством данных.
- Написание инструкций по решению проблем с данными.
- Консультирование коллег по вопросам качества данных.
Достижения
- Повысил надежность данных в хранилищах.
- Сократил время обнаружения и устранения ошибок в данных.
- Упростил процессы проверки качества данных для команды.
Стек специалиста на проекте
SQL, Teradata, Oracle, Informatica, Data, quality
Отрасль проекта
LifeStyle
Период работы
Май 2021 - Апрель 2022
(1 год)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Дипломы и сертификаты
Hadoop. Система для обработки больших объемов данных (Stepik) 2022 г.
рограммирование на Python (Stepik) 2022 г.
The Complete Hands-On Introduction to Apache Airflow (Udemy) 2022 г.
Образование
Высшее
Учебное заведение
Уральский федеральный университет
Специальность
Прикладной анализ данных
Завершение учебы
2021 г.
Высшее
Учебное заведение
Уральский федеральный университет
Специальность
Автоматизация технологических процессов и производств
Завершение учебы
2019 г.
Высшее
Учебное заведение
Бизнес-школа УрФУ
Специальность
Экономика и управление предприятием, Экономист
Завершение учебы
2019 г.