ДС
Дмитрий С.
Мужчина, 26 лет
Россия, Москва, UTC+3
Ставка
4 025,97 Р/час
НДС не облагается
Специалист доступен с 14 сентября 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B1
Главное о специалисте
Дмитрий — Data инженер уровня Senior из Москвы с опытом работы 4 года 1 месяц. Специализируется на проектировании и внедрении архитектуры корпоративных хранилищ данных (DWH), разработке и поддержке ETL/ELT-процессов, автоматизации обработки данных.
Ключевые навыки: Confluence, PostgreSQL, Python, Apache AirFlow, SQL, Git, Docker, GreenPlum, ClickHouse, Hadoop, Kafka, Oracle, Spark, DWH, Pandas, Linux, PySpark, Jira, Hive.
Участвовал в проектах:
- ООО «Всемайки-Н» (1 год 11 месяцев): проектирование и внедрение архитектуры DWH на базе PostgreSQL, аналитических витрин на ClickHouse; разработка и поддержка ETL/ELT-процессов; автоматизация обработки данных с применением Apache Airflow; оптимизация процессов моделирования данных с использованием dbt; внедрение комплексного контроля качества данных; настройка мониторинга процессов Airflow с помощью Grafana и Prometheus; организация CI/CD-процессов для аналитических пайплайнов.
- Институт «Мосинжпроект» (2 года 2 месяца): проектирование ETL/ELT-процессов для интеграции и трансформации данных; разработка и поддержка корпоративных DWH (Postgres); формализация, анализ и документирование бизнес-требований к системам хранения и обработки данных; внедрение внутренних стандартов обработки данных; создание и поддержка аналитических витрин, дашбордов с использованием Power BI.
Проекты
(4 года 1 месяц)
ООО Всемайки-Н
Роль
Data Engineer
Обязанности
- Проектировал и внедрял архитектуру корпоративного хранилища данных (DWH) на базе PostgreSQL, а также аналитических витрин на Clickhouse.
- Разрабатывал и поддерживал ETL/ELT-процессы для консолидации данных из различных источников (API, backend через JDBC, инкрементальный и полный режим загрузки, хранилища S3).
- Автоматизировал процессы обработки данных с применением Apache Airflow: реализовал настройку расписаний, создание пользовательских операторов и хуков; интегрировал систему оповещений и алертинга в Telegram для оперативного реагирования.
- Оптимизировал процессы моделирования данных с использованием dbt (Data Build Tool), что позволило стандартизировать и ускорить разработку.- Внедрил комплексный контроль качества данных: реализовал автоматизированные проверки с помощью great_expectations и стандартных dbt тестов.
- Настроил мониторинг процессов Airflow (кластер, задачи, DAG) с помощью Grafana и Prometheus, обеспечив прозрачность процессов.
- Организовал CI/CD-процессы для аналитических пайплайнов, что повысило стабильность развертывания и ускорило развитие архитектуры аналитики.
Стек специалиста на проекте
PostgreSQL, API, Grafana, Prometheus, Data, JDBC, ClickHouse, Аналитика, DWH, Apache AirFlow, Telegram, Backend, S3, build, DBT, tools, ELT процессы, dag, Great Expectations
Отрасль проекта
Information Security
Период работы
Октябрь 2023 - Август 2025
(1 год 11 месяцев)
Институт «Мосинжпроект»
Роль
Data Engineer
Обязанности
- Проектирование ETL/ELT-процессов для интеграции и трансформации данных из различных источников (Python, SQL, VBA).
- Разработка и поддержка корпоративных DWH (Postgres).
- Формализация, анализ и документирование бизнес-требований к системам хранения и обработки данных.
- Внедрение внутренних стандартов обработки данных и обеспечения прозрачности бизнес-показателей.
- Создание и поддержка аналитических витрин, дашбордов с использованием Power BI.
Стек специалиста на проекте
PostgreSQL, SQL, Python, Power BI, VBA, DWH, Проектирование, Работа с интеграциями, Документирование, Анализ, Построение дашбордов, данных, Поддержка, внедрение, витрины
Отрасль проекта
Information Security
Период работы
Август 2021 - Октябрь 2023
(2 года 3 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский политехнический университет, Москва
Специальность
Машиностроительный, Материаловедение и технология новых материалов
Завершение учебы
2026 г.