Дмитрий С. Data инженер, Senior

ID 30277
ДС
Дмитрий С.
Мужчина, 26 лет
Россия, Москва, UTC+3
Ставка
4 025,97 Р/час
НДС не облагается
Специалист доступен с 14 сентября 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache AirFlow
ClickHouse
Confluence
Docker
DWH
Git
GreenPlum
Hadoop
Hive
Jira
Kafka
Linux
Oracle
Pandas
PostgreSQL
PySpark
Python
Spark
SQL
Отрасли
Information Security
Знание языков
Английский — B1
Главное о специалисте
Дмитрий — Data инженер уровня Senior из Москвы с опытом работы 4 года 1 месяц. Специализируется на проектировании и внедрении архитектуры корпоративных хранилищ данных (DWH), разработке и поддержке ETL/ELT-процессов, автоматизации обработки данных. Ключевые навыки: Confluence, PostgreSQL, Python, Apache AirFlow, SQL, Git, Docker, GreenPlum, ClickHouse, Hadoop, Kafka, Oracle, Spark, DWH, Pandas, Linux, PySpark, Jira, Hive. Участвовал в проектах: - ООО «Всемайки-Н» (1 год 11 месяцев): проектирование и внедрение архитектуры DWH на базе PostgreSQL, аналитических витрин на ClickHouse; разработка и поддержка ETL/ELT-процессов; автоматизация обработки данных с применением Apache Airflow; оптимизация процессов моделирования данных с использованием dbt; внедрение комплексного контроля качества данных; настройка мониторинга процессов Airflow с помощью Grafana и Prometheus; организация CI/CD-процессов для аналитических пайплайнов. - Институт «Мосинжпроект» (2 года 2 месяца): проектирование ETL/ELT-процессов для интеграции и трансформации данных; разработка и поддержка корпоративных DWH (Postgres); формализация, анализ и документирование бизнес-требований к системам хранения и обработки данных; внедрение внутренних стандартов обработки данных; создание и поддержка аналитических витрин, дашбордов с использованием Power BI.
Проекты   (4 года 1 месяц)
ООО Всемайки-Н
Роль
Data Engineer
Обязанности
- Проектировал и внедрял архитектуру корпоративного хранилища данных (DWH) на базе PostgreSQL, а также аналитических витрин на Clickhouse. - Разрабатывал и поддерживал ETL/ELT-процессы для консолидации данных из различных источников (API, backend через JDBC, инкрементальный и полный режим загрузки, хранилища S3). - Автоматизировал процессы обработки данных с применением Apache Airflow: реализовал настройку расписаний, создание пользовательских операторов и хуков; интегрировал систему оповещений и алертинга в Telegram для оперативного реагирования. - Оптимизировал процессы моделирования данных с использованием dbt (Data Build Tool), что позволило стандартизировать и ускорить разработку.- Внедрил комплексный контроль качества данных: реализовал автоматизированные проверки с помощью great_expectations и стандартных dbt тестов. - Настроил мониторинг процессов Airflow (кластер, задачи, DAG) с помощью Grafana и Prometheus, обеспечив прозрачность процессов. - Организовал CI/CD-процессы для аналитических пайплайнов, что повысило стабильность развертывания и ускорило развитие архитектуры аналитики.
Стек специалиста на проекте
PostgreSQL, API, Grafana, Prometheus, Data, JDBC, ClickHouse, Аналитика, DWH, Apache AirFlow, Telegram, Backend, S3, build, DBT, tools, ELT процессы, dag, Great Expectations
Отрасль проекта
Information Security
Период работы
Октябрь 2023 - Август 2025  (1 год 11 месяцев)
Институт «Мосинжпроект»
Роль
Data Engineer
Обязанности
- Проектирование ETL/ELT-процессов для интеграции и трансформации данных из различных источников (Python, SQL, VBA). - Разработка и поддержка корпоративных DWH (Postgres). - Формализация, анализ и документирование бизнес-требований к системам хранения и обработки данных. - Внедрение внутренних стандартов обработки данных и обеспечения прозрачности бизнес-показателей. - Создание и поддержка аналитических витрин, дашбордов с использованием Power BI.
Стек специалиста на проекте
PostgreSQL, SQL, Python, Power BI, VBA, DWH, Проектирование, Работа с интеграциями, Документирование, Анализ, Построение дашбордов, данных, Поддержка, внедрение, витрины
Отрасль проекта
Information Security
Период работы
Август 2021 - Октябрь 2023  (2 года 3 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский политехнический университет, Москва
Специальность
Машиностроительный, Материаловедение и технология новых материалов
Завершение учебы
2026 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее

Недавно просмотренные специалисты

Information Security
ДС
Дмитрий С.
Москва
Data инженер
Senior
4 025,97 Р/час
PostgreSQL
Git
Docker
Jira
Confluence
SQL
Python
Oracle
Linux
Hive
+19

Дмитрий — Data инженер уровня Senior из Москвы с опытом работы 4 года 1 месяц. Специализируется на проектировании и внедрении архитектуры корпоративных хранилищ данных (DWH), разработке и поддержке ETL/ELT-процессов, автоматизации обработки данных. Ключевые навыки: Confluence, PostgreSQL, Python, Apache AirFlow, SQL, Git, Docker, GreenPlum, ClickHouse, Hadoop, Kafka, Oracle, Spark, DWH, Pandas, Linux, PySpark, Jira, Hive. Участвовал в проектах: - ООО «Всемайки-Н» (1 год 11 месяцев): проектирование и внедрение архитектуры DWH на базе PostgreSQL, аналитических витрин на ClickHouse; разработка и поддержка ETL/ELT-процессов; автоматизация обработки данных с применением Apache Airflow; оптимизация процессов моделирования данных с использованием dbt; внедрение комплексного контроля качества данных; настройка мониторинга процессов Airflow с помощью Grafana и Prometheus; организация CI/CD-процессов для аналитических пайплайнов. - Институт «Мосинжпроект» (2 года 2 месяца): проектирование ETL/ELT-процессов для интеграции и трансформации данных; разработка и поддержка корпоративных DWH (Postgres); формализация, анализ и документирование бизнес-требований к системам хранения и обработки данных; внедрение внутренних стандартов обработки данных; создание и поддержка аналитических витрин, дашбордов с использованием Power BI.

Подробнее
E-commerce & Retail • Government & Public Sector
ВС
Вадим С.
Москва
Java разработчик
Junior+
2 142,86 Р/час
BSS
Регрессионное тестирование
JDBS
Auto testing
Jagger
javacore
Gitlab CI
GitLab
Selenid
RESTAssures
+32

Вадим — Java-разработчик уровня Middle из Москвы. Специализируется на разработке с использованием Java и Spring Boot. Имеет опыт работы с базами данных PostgreSQL и SQL, а также с инструментами автоматизации тестирования, такими как Jenkins CI, GitLab CI и Docker. Владеет английским языком на уровне B2. Имеет опыт работы в отраслях Government & Public Sector и E-commerce & Retail. Участвовал в проектах «Экзон Групп (Гаскар интеграция)» и «Petshopru». В проекте «Экзон Групп (Гаскар интеграция)» занимал роль инженера по автоматизации тестирования, разработал фреймворк для тестировки продукта СОД, занимался автоматизацией тест-кейсов, разработкой функционала фреймворка тестировки, написанием документации и переработкой старого кода. В проекте «Petshopru» занимался анализом требований и дизайном тест-кейсов в сотрудничестве с командой QA и аналитиком, оптимизировал процессы тестирования для улучшения эффективности.

Подробнее