Егор Ж. Data инженер, Middle

ID 29639
ЕЖ
Егор Ж.
Мужчина, 20 лет
Россия, Москва, UTC+3
Ставка
3 012,98 Р/час
НДС не облагается
Специалист доступен с 16 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle
Навыки
Agile
Apache AirFlow
Apache Kafka
Apache Superset
Bash
ClickHouse
Data
Docker
Docker Compose
DWH
ETL
Git
Great Expectations
GreenPlum
Hadoop
HDFS
Hive
JupyterNoteBook
Lightgbm
MapReduce
Matplotlib
MongoDB
MySQL
Numpy
Optuna
Pandas
Plotly
PostgreSQL
Power BI
PySpark
Python
Scikit-learn
SciPy
Scrum
Seaborn
Spark
SQL
SQLAlchemy
Validation
XGBoost
Отрасли
E-commerce & Retail
Знание языков
Английский — B1
Главное о специалисте
Data Engineer с более чем 3 годами опыта в автоматизации ETL-процессов и проектировании аналитических хранилищ данных (DWH). Специализируется на построении витрин данных (raw, ODS, data marts) с использованием Apache Airflow, Python, SQL и GreenPlum. Оптимизировал SQL-запросы, внедрил проверку качества данных (Great Expectations) и разработал архитектуру для BI-дашбордов (Power BI, Apache Superset). Имеет опыт работы с большими данными (Hadoop, Spark) и интеграции данных между PostgreSQL, GreenPlum и BI-решениями. Обладает навыками настройки DAG’ов Airflow, контейнеризации (Docker) и анализа данных с использованием Pandas, NumPy и Scikit-learn. Коммуникабелен, ориентирован на улучшение процессов и командное взаимодействие.
Проекты   (2 года 8 месяцев)
Автоматизация ETL-процессов и построение витрин данных для приложения складской инвентаризации, интеграция с BI-дашбордами (Power BI)
Роль
Data Engineer
Обязанности
- Автоматизация ETL-процессов для витрин данных (raw, ODS, data marts) с использованием Airflow, Python, SQL и GreenPlum. - Разработка архитектуры витрин данных, оптимизированной для Power BI. - Оптимизация DAG’ов Airflow (читаемость, модульность, алерты, ретрай-логика). - Перевод 20+ legacy-задач с cron на централизованную платформу Airflow. - Внедрение проверки качества данных с использованием Great Expectations. - Оптимизация SQL-запросов в PostgreSQL для крупных отчетов (CTE, партиционирование, индексы). - Поддержка и улучшение пайплайнов данных между PostgreSQL, GreenPlum и BI-решениями. - Участие в проектировании DWH на базе PostgreSQL. - Визуализация данных с использованием Apache Superset и Power BI. - Контейнеризация процессов с использованием Docker.
Достижения
- Сократил время обновления данных на 40% за счет автоматизации ETL. - Ускорил выполнение SQL-запросов с 10 минут до 30 секунд. - Улучшил производительность BI-дашбордов за счет оптимизации витрин.
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Python, Power BI, Pandas, Numpy, GreenPlum, Apache AirFlow, Plotly, Apache Superset, Great Expectations
Отрасль проекта
E-commerce & Retail
Период работы
Январь 2023 - Август 2025  (2 года 8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
МИРЭА — Российский технологический университет
Специальность
Бизнес-аналитика
Завершение учебы
2026 г.

Похожие специалисты

EdTech • Hardware
СП
Сергей П.
Санкт-Петербург
Data инженер
Lead
4 349,14 Р/час
Agile
Apache
Apache Hadoop
Apache Spark
Apache Superset
arch
arrow
Bash
C/C++
CentOS
+63

• Сильные технические и математические навыки, умение быстро осваивать инструменты и алгоритмы для работы с данными благодаря богатому и глубокому опыту сфере анализа и исследований • Приобрел успешный опыт в Data Science, начиная от научных исследований (c 2010), потом практических задач для ИТ инфраструктуры инновационного экопарка переработки отходов, и сейчас в проектировании функциональных требований к архитектуре и в сборке и разработке ML моделей и подходов для сложных аналитических систем (умного озера, СУДД, банка, телекоммуникаций) • Эксперт в языке Python (PyCharm & Jupyter) для решения задач по Data Science и для анализа данных (также есть опыт веб разработки в Django & Flask) • Работает с библиотеками, такими как Pandas (+Dask), NumPy, Matplotlib (seaborn, plotly), Statsmodels, SciPy, Scikit-learn и Keras, NTLK, PySpark • Моделировал данные для машинного обучения • Знаком с архитектурой и компонентами экосистемы Big Data, включая GreenPlum, HDFS и облачные хранилища, такие как S3 (MinIO) • Понимает особенности работы с колончатыми базами данных, особенности написания запросов и их последовательной оптимизации, влияние вида запроса на скорость работы и нагрузку на базу данных, задачи и операции, которые требуют специфического решения для колончатых баз данных • Обладает опытом работы с BI инструментами, включая Power BI, Apache Superset (эксперт), Zeppelin • Имеет опыт использования контейнеризации и оркестрации с Docker, включая CI/CD процессы в GitLab • Знаком с ETL инструментами Apache AirKow, DBT, Spark • Также владеет знанием языков программирования C, C++, Java Script, HTML, CSS • Управляет проектами и пользуется инструментами Jira, ConНuence • Обладает опытом работы в Agile среде (- Scrum, Kanban) с использованием инструментов управления проектами, таких как Jira и ConНuence Coursera. Введение в квантовые вычисления. Нейронные сети и глубокое обучение.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking • HRTech • Logistics & Transport
ДМ
Данила М.
Санкт-Петербург
Data инженер
Middle+
3 339,64 Р/час
Linux
macOS
MS Windows
Python
SQL
Apache AirFlow
Apache Superset
Docker
Git
Jinja
+30

Данила — опытный Data инженер с опытом работы более 3,5 лет. Он обладает глубокими знаниями и навыками в области работы с данными, включая Linux, macOS, MS Windows, Python, SQL, Apache AirFlow, Apache Superset, Docker, Git, Jinja, Jupyter и другие инструменты. Данила работал над несколькими проектами в таких отраслях, как eFinTech (банки, инвестиции), Toll Road (платные автодороги), MedTech (медицинские учреждения), Retail (магазины). На проектах он занимался разработкой и поддержкой витрин данных, ETL/ELT процессов, а также решением инцидентов и ad-hoc задач. Среди реализованных проектов Данилы можно выделить: - приложение инвентаризации для крупных складов; - анализ и планирование выручки и трафика платной автодороги; - система торговли на фондовых рынках; - приложение для рекомендации изображений; - систему матчинга резюме и вакансий. Профессиональные навыки: - менторство младших разработчиков; - ставил задачи в канбан; - работал с чистым SQL на уровне продвинутых запросов (оконные функции, подзапросы.); - опыт работы с UNIX-системами на уровне простых операций; - развитые коммуникативные навыки; - участие в создании ETL процессов - опыт сбора информации из Интернета путем парсинга - применял как уже обученные модели машинного обучения/глубокого обучения, так и занимался их - - - обучением самостоятельно - опыт работы с большими данными в Hadoop и Spark и в составлении сложных SQL запросов в Apache Hive - участие в проектировании и анализу DWH хранилищ - опыт работы с Apache Airflow - опыт работы с Python для анализа данных (pandas, numpy, matplotlib, seaborn)

Подробнее

Недавно просмотренные специалисты

BioTech, Pharma, Health care & Sports • FinTech & Banking • HRTech • Insurance • Marketing, Advertising & Design • Media
АЭ
Андрей Э.
Гродно
Ruby разработчик
Senior
3 746,75 Р/час
Bugsnag
HTML5
visualstudio
vcr
Gitlab CI
GraphQL
Subversion
GitLab
MS Windows
Kafka 3
+62

Back-end разработчик с опытом работы более 7 лет. В настоящее время специализируется на проектировании архитектуры, прототипировании, разработке и поддержке серверных приложений и API-интерфейсов с Ruby on Rails и другими средами Ruby. Опыт анализа данных, документирования и покрытия кода тестами (TDD/BDD), развертывания и настройки инфраструктуры (сервер, ОС, среда проекта и т. д.). Доп. инормация: Программирование промышленного контроллера ADAM5510 на основе лабораторных информационных систем и технологий Разработка ПО для микроконтроллеров семейств AVR и PIC, а так же для ПК, работа с электронными устройствами. Курсы: - Курсы в учебном центре Itibo на базе Ruby, 2014 г. - Курсы в учебном центре EPAM Systems на базе .NET, 2016 г. - Курсы по HTML/CSS на базе htmlacademy.ru - Курсы TryRuby.org, Rails for Zombies

Подробнее
FinTech & Banking • RnD
КВ
Кирилл В.
Ростов-на-Дону
QA авто
Senior
3 596,53 Р/час
Grafana
Kanban
GitLab
Postman
DevTools
k6
JSON
Elasticsearch
REST
XML
+47

Кирилл — Senior специалист в области QA авто. Имеет высшее образование по специальности «Информационные системы и технологии». Обладает опытом работы на проектах в отраслях RnD и FinTech & Banking. Участвовал в трёх проектах: - «Программа лояльности — начисление бонусов». Тестирование backend и десктопных приложений на Python. Задачи включали подготовку тестовых сценариев, написание автотестов на Python, доработку тестового фреймворка, проведение ручного и нагрузочного тестирования, использование Allure для отчётности. - «Финтех. Личный кабинет для юр. лиц и ИП». Тестирование backend. Задачи включали подготовку тест-кейсов, написание автотестов на Java, доработку тестового фреймворка, проведение функционального и регрессионного тестирования. - «Кинотеатр». Тестирование десктоп и мобильных приложений, backend. Задачи включали оценку трудозатрат на тестирование, поиск и документирование багов, написание тест-кейсов и автотестов для UI на Java.

Подробнее
GameDev • Urban technology
ЯМ
Ярослав М.
Санкт-Петербург
C# разработчик
Junior+
714,29 Р/час
PostgreSQL
RabbitMQ
Git
JavaScript
C#
MariaDB
TypeScript
ASP.NET Core
NUnit
Entity Framework
+21

В январе 2023 начал углубленно изучать основы C# и вместе с изучением основ писать пет-проект "Бронирование номеров отелей" (https://github.com/YariLAN/Room-booking-system) Дополнительный опыт: 1) Участник студенческого проекта компании "ЛАНИТ-ТЕРКОМ" Участник проектов от ЛАНИТ-ТЕРКОМА С чем работа: Проект "Цифровой офис". Разработка микросервиса DashboardService с командой (своя платформа тасок с карточками). Роль: backend-разработчик. - Писал внутреннюю трехслойную архитектуру микросервиса с использованием EF Core - Тесты с помощью AutoMoq - Написание микросервисной архитектуры через внедрение брокера сообщений RabbitMq. - Работа в команде, обсуждение задач, код-ревью Стек: C#, Web API, EF Core, PostgreSQL, Postman, Docker, AutoMoq Среди моих учебных проектов: - Система бронирования номеров отеля на ASP NET Core MVC 3.1 (ASP NET MVC + PostgreSQL) - Морской бой по сети без бд на JS (Socket.io, Express.js, Node.js) - Набор проектов на Web API (Web API, EF Core, MS SQL, RabbitMQ, Docker, Postman) - Проект с использованием паттерна CQRS + MediatR GitHub (https://github.com/YariLAN)

Подробнее