Егор П. Data инженер, Senior

ID 30225
ЕП
Егор П.
Мужчина, 31 год
Россия, Москва, UTC+3
Ставка
4 415,58 Р/час
НДС не облагается
Специалист доступен с 24 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Airbyte
Apache AirFlow
AWS
CI/CD
ClickHouse
DBT
Docker
ELK
Git
Gitlab CI
Grafana
GreenPlum
Iceberg
Kanban
Kubernetes
Linux
Openmetadata
PostgreSQL
PySpark
Python
S3
Saas
SQL
Trino
Yandex Cloud
Hadoop
ETL
DWH
Отрасли
FinTech & Banking
FoodTech
Social Networking
Главное о специалисте
Егор — Data инженер уровня Senior из Москвы с опытом работы 7 лет 11 месяцев. Специализируется на разработке и оптимизации инфраструктуры данных, имеет опыт работы в отраслях FoodTech, Social Networking, FinTech & Banking. Ключевые навыки: Airbyte, Apache AirFlow, AWS, CI/CD, ClickHouse, DBT, Docker, ELK, Git, GitLab CI, Grafana, GreenPlum, Iceberg, Kanban, Kubernetes, Linux, Openmetadata, PostgreSQL, PySpark, Python, S3, SaaS, SQL, Trino, Yandex Cloud, Hadoop, ETL, DWH. Опыт работы на проектах: - DWH Team Lead в проекте Data Platform Rostic’s (FoodTech), где руководил командой разработки, управлял процессами разработки, внедрения и поддержки платформы данных. - Data Engineer Team Lead в Playrix (Social Networking), где занимался разработкой и оптимизацией инфраструктуры данных отдела маркетинга на облачной инфраструктуре Amazon AWS. - DWH Architect в Seller24 (Social Networking), где разрабатывал архитектуру хранения данных в ClickHouse и оптимизировал хранение и обработку данных. - Главный инженер по разработке в Сбер (FinTech & Banking), где разрабатывал витрины данных и потоки загрузки данных. - Руководитель направления по развитию управленческой отчётности и главный специалист по развитию управленческой отчётности в Почте России (Social Networking), где организовывал и развивал структуру баз данных, автоматизировал отчётность.
Проекты   (10 лет 7 месяцев)
Brief
Роль
DWH Team Lead
Обязанности
Проект: Data Platform Rostic’s Обязанности: ● Руководство командой разработки (3 Data Engineers, DevOps) ● Управление процессами разработки, внедрения и поддержки платформы данных ● Обеспечение эффективной работы всех компонентов платформы ● Взаимодействие с системными/бизнес-аналитиками, внешними командами - поставщиками данных ● Ведение задач в Jira, проведение ежедневных Daily с командой, проведение Demo ● Kanban - подход к работе
Достижения
● Полностью перенял экспертизу по проекту у подрядчика, с нуля собрал новую команду DE ● Осуществил переход на полноценное использование dbt для трансформации данных, включая Slim CI, оркестрацию в Airflow, макросы и contribute в community dbt-greenplum адаптер ● Отказался от вендорских продуктов для EL в пользу OSS-решений (Airbyte, PySpark, K8s) ● Внедрил системы мониторинга на стеке ELK, Grafana ● Инициировал переход на инкрементальную загрузку данных с помощью CDC ● Внедрил культуру DQ и автотестирование на основе dbt test - Elementary ● Запустил корпоративный каталог данных OpenMetadata ● Запилотировал переход на DLH на базе Iceberg+Trino
Стек специалиста на проекте
Jira, Управление командой, DevOps, Grafana, Kanban, Data, ClickHouse, ELK, GreenPlum, Apache AirFlow, Yandex Cloud, S3, Gitlab CI, elementary, PySpark, DBT, Airbyte, Разработка, Управление процессами, Trino, Iceberg, Data Quality (DQ), Openmetadata
Отрасль проекта
FoodTech
Период работы
Январь 2023 - По настоящее время  (2 года 8 месяцев)
Playrix
Роль
Data Engineer Team Lead
Обязанности
Проект: Разработка и оптимизация инфраструктуры данных отдела маркетинга Обязанности: ● Выполнение задач Data Engineer/Tech Lead в отделе маркетинга на облачной инфраструктуре Amazon AWS ● Работа с СУБД AWS Redshift ● Разработка витрин данных ● Оптимизация на уровне хранения данных и написания запросов ● Рефакторинг SQL-кода ● Работа с AWS S3 как озером данных: укладка сырых данных в S3 ● Работа с Python Luigi в качестве ETL-инструмента ● Оркестрация на AirFlow ● Проведение собеседований при найме в команду ● Наставничество ● Активное внедрение новых продуктов - DBT, Airflow
Стек специалиста на проекте
SQL, Python, AWS, Data, Redshift, СУБД, AWS S3, Apache AirFlow, Amazon, Рефакторинг, S3, Наставничество, DBT, Разработка, Оркестрация, Luigi, Разработка витрин
Отрасль проекта
Social Networking
Период работы
Январь 2022 - Январь 2023  (1 год 1 месяц)
Seller24
Роль
DWH Architect
Обязанности
Проект: Разработка и оптимизация инфраструктуры данных отдела маркетинга Обязанности: ● Сбор данных с интернет-источников на Python (скраппинг, API) ● Разработка архитектуры хранения данных в Clickhouse ● Оптимизация хранения и обработки данных ● Кластеризация, партицирование, охлаждение данных в S3, тюнинг настроек СУБД
Стек специалиста на проекте
PostgreSQL, API, Python, Queue, ClickHouse, Saas, СУБД, Cloud Functions, S3, Разработка, Кластеризация, gcloud, message
Отрасль проекта
Social Networking
Период работы
Сентябрь 2021 - Январь 2022  (5 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Магистр, Национальный исследовательский университет "Высшая школа экономики", Москва,
Специальность
Департамент компьютерной инженерии, Компьютерные системы и сети
Завершение учебы
2018 г.
Дополнительное
Учебное заведение
SkillFactory
Специальность
Python для анализа данных, Автоматизация анализа данных средствами Python
Завершение учебы
2020 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+65

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее

Недавно просмотренные специалисты

BioTech, Pharma, Health care & Sports • EdTech • FinTech & Banking
ВМ
Владимир М.
Ульяновск
QA FullStack
Senior
3 896,1 Р/час
Регрессионное тестирование
ELK
IOS
UI Testing
Kanban
GraphQL
GitLab
MS Windows
documentation
UX testing
+67

Имею 4 года опыта в тестировании. 2 года занимаюсь автоматизацией тестирования на Python. Использовал Playwright + Pytest, отчеты Allure, для переменных использовал Environs, для генерации данных Mimesis, настроил ci для запуска тестов в git. Чаще всего работаю с функциональным, регрессионным, смоук, тестированием интеграций. Занимаюсь написанием тест кейсов, составлением прогонов, тестирование бэк и фронт. Имею опыт работы как с монолитными, так и с микро-сервисными высоконагруженными системами, архитектурами типа REST/SOAP. Имею навыки в JavaScript для написания скриптов postman. Писал SQL запросы для получения и изменения данных. В данный момент продолжаю изучение Python для углубления знаний.

Подробнее
Insurance • Manufacturing
АА
Арсен А.
Москва
Системный аналитик
Middle+
4 285,71 Р/час
PostgreSQL
REST
API
PHP
Jira
Confluence
BPMN
Agile
SOAP
UML
+25

Арсен — опытный IT-специалист, системный аналитик с грейдом Middle+. Имеет опыт работы в сфере разработки продуктов для страхования и финансовых услуг, а также в области бухгалтерского учёта. Арсен обладает навыками анализа бизнес-процессов, сбора и формализации требований, проектирования систем и взаимодействия сервисов. Он умеет работать с UML, BPMN, Archimate, Kafka, Jira, Confluence, Swagger, Postman, GitHub и другими инструментами. На последнем месте работы Арсен занимал должность ведущего системного аналитика. В его обязанности входило планирование проектов автоматизации, оптимизация бизнес-процессов и моделирование в нотации BPMN 2, анализ данных в СУБД/PostgreSQL, проектирование структуры API и другие задачи. За время работы на проекте Арсен запустил 4 продукта за 6 месяцев, победил в нескольких тендерах в крупнейших компаниях и снизил срок обработки заявок клиента с 14 дней до 5 дней.

Подробнее
E-commerce & Retail • Marketing, Advertising & Design
ЭХ
Эдуард Х.
Екатеринбург
Frontend разработчик
Senior
3 871,64 Р/час
HTML5
Функциональное программирование
Sass
d3
Media
HTML5/CSSS
PHP
Grunt
Redux
Gitlab CI
+111

Эдуард — опытный frontend-разработчик уровня Senior. Обладает глубокими знаниями и навыками в области разработки веб-приложений, включая JavaScript, TypeScript, React, Redux, Webpack и другие современные инструменты и технологии. Имеет опыт работы на проектах для крупных компаний из сфер электронной коммерции и розничной торговли, а также маркетинга, рекламы и дизайна. На протяжении 4 лет и 11 месяцев успешно выполнял обязанности по разработке и поддержке интерактивных форм отчётности, компонентов дизайн-системы, оптимизации скорости построения отчётов, настройке сервисов и API. Обладает навыками разработки и поддержки сайтов на WordPress, создания мобильных и адаптивных версий сайтов, SEO-оптимизации проектов. Также имеет опыт менторства и решения проблем безопасности и фронтенд-аудита.

Подробнее