ЕЖ
Егор Ж.
Мужчина, 20 лет
Россия, Москва, UTC+3
Ставка
3 012,98 Р/час
НДС не облагается
Специалист доступен с 16 августа 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B1
Главное о специалисте
Data Engineer с более чем 3 годами опыта в автоматизации ETL-процессов и проектировании аналитических хранилищ данных (DWH). Специализируется на построении витрин данных (raw, ODS, data marts) с использованием Apache Airflow, Python, SQL и GreenPlum. Оптимизировал SQL-запросы, внедрил проверку качества данных (Great Expectations) и разработал архитектуру для BI-дашбордов (Power BI, Apache Superset). Имеет опыт работы с большими данными (Hadoop, Spark) и интеграции данных между PostgreSQL, GreenPlum и BI-решениями. Обладает навыками настройки DAG’ов Airflow, контейнеризации (Docker) и анализа данных с использованием Pandas, NumPy и Scikit-learn. Коммуникабелен, ориентирован на улучшение процессов и командное взаимодействие.
Проекты
(2 года 8 месяцев)
Автоматизация ETL-процессов и построение витрин данных для приложения складской инвентаризации, интеграция с BI-дашбордами (Power BI)
Роль
Data Engineer
Обязанности
- Автоматизация ETL-процессов для витрин данных (raw, ODS, data marts) с использованием Airflow, Python, SQL и GreenPlum.
- Разработка архитектуры витрин данных, оптимизированной для Power BI.
- Оптимизация DAG’ов Airflow (читаемость, модульность, алерты, ретрай-логика).
- Перевод 20+ legacy-задач с cron на централизованную платформу Airflow.
- Внедрение проверки качества данных с использованием Great Expectations.
- Оптимизация SQL-запросов в PostgreSQL для крупных отчетов (CTE, партиционирование, индексы).
- Поддержка и улучшение пайплайнов данных между PostgreSQL, GreenPlum и BI-решениями.
- Участие в проектировании DWH на базе PostgreSQL.
- Визуализация данных с использованием Apache Superset и Power BI.
- Контейнеризация процессов с использованием Docker.
Достижения
- Сократил время обновления данных на 40% за счет автоматизации ETL.
- Ускорил выполнение SQL-запросов с 10 минут до 30 секунд.
- Улучшил производительность BI-дашбордов за счет оптимизации витрин.
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Python, Power BI, Pandas, Numpy, GreenPlum, Apache AirFlow, Plotly, Apache Superset, Great Expectations
Отрасль проекта
E-commerce & Retail
Период работы
Январь 2023 - Август 2025
(2 года 8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
МИРЭА — Российский технологический университет
Специальность
Бизнес-аналитика
Завершение учебы
2026 г.