Михаил Р. Data инженер, Middle+

ID 26956
МР
Михаил Р.
Мужчина, 23 года
Россия, Липецк, UTC+3
Ставка
3 339,64 Р/час
вкл. НДС 5% (123.81 Р)
Специалист доступен с 18 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
Apache AirFlow
Python
SQL
Numpy
Pandas
ClickHouse
Docker
DWH
ETL
Git
Kafka
Linux
Matplotlib
PostgreSQL
Requests
Spark
JavaScript
FastAPI
Отрасли
Cloud Services
Manufacturing
Telecom
Urban technology
Знание языков
Английский — B1
Главное о специалисте
Специалист по работе с данными на всех этапах работы: разработка ТЗ и ЧТЗ, реализация DWH, построение ETL, очистка данных, разработка агрегатов и витрин данных, разработка доступа к данным через REST API.
Проекты   (4 года)
Яндекс
Роль
Data Engineer
Обязанности
● Проектирование и реализация масштабируемых ETL-процессов для обработки больших данных с использованием Python и Apache Airflow. ● Построение структуры Data Warehous (Python, Airflow). ● Разработка механизмов и алгоритмов автоматического получения, проверки, очистки, хранения, загрузки, и исследования данных. ● Рефакторинг и сопровождение кода на Python и Apache Spark для улучшения надежности и расширяемости пайплайнов данных. ● Разработка и поддержка DAG в Apache Airflow, обеспечение автоматизации, мониторинга и стабильности процессов обработки данных. ● Обеспечение контроля качества данных через автоматизированные проверки на Python и SQL. ● Настройка и использование конфигурационных файлов YAML для параметризации рабочих процессов и упрощения сопровождения. ● Работа с командной строкой Linux. ● Взаимодействие с аналитиками, инженерами, DevOps и службой поддержки для оперативного решения инцидентов и улучшения процессов. ● Работа с СУБД: ClickHouse, PostgreSQL, Trino.
Стек специалиста на проекте
SQL, Python, ETL, Apache AirFlow
Отрасль проекта
Cloud Services
Период работы
Июнь 2024 - Май 2025  (1 год)
Автоматизация данных на базе предприятия радиоэлектронного комплекса
Роль
Data Engineer
Обязанности
● Разработка и сопровождение ETL-процессов автоматизации интеграции данных из различных корпоративных систем на Python с использованием Apache Airflow. ● Создание и поддержка DAG, управление расписаниями, обеспечение прозрачности и мониторинга выполнения пайплайнов. ● Написание скриптов на Python. ● Администрирование распределённого хранения данных в HDFS и управление метаданными через Hive для поддержки аналитики. ● Автоматизация процесса валидации и трансформации данных для повышения качества и надежности данных. ● Подготовка и ведение технической документации, описание конфигураций пайплайнов в формате YAML. ● Согласование технических требований и взаимодействие с разработчиками и командами поддержки. ● Написание документации/статей ● Проектирование хранилища ● Работа с СУБД: ClickHouse, PostgreSQL, Trino
Стек специалиста на проекте
Python, ETL, Apache AirFlow
Отрасль проекта
Manufacturing
Период работы
Май 2023 - Июнь 2024  (1 год 2 месяца)
Ростелеком
Роль
Data Analyst
Обязанности
Контроль показателей трафика и работы сотрудников call-центра Предоставление различных финансовых отчетов Сбор данных путём SQL запросов Визуализация данных в виде дашбордов Прогнозирование приходов от call-центра Автоматизация отчетов в Python (библиотеки pandas, pyodbc, numpy) Коммуникация и взаимодействие с внутренними заказчиками
Стек специалиста на проекте
SQL, Python, Pandas, Numpy, Визуализация данных, сбор данных
Отрасль проекта
Telecom
Период работы
Февраль 2022 - Май 2023  (1 год 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Воронежский государственный университет, Воронеж
Специальность
Математический факультет, Математика и компьютерные науки
Завершение учебы
2023 г.
Высшее
Учебное заведение
Воронежский государственный университет, Воронеж
Специальность
Математический факультет, Системный инженер
Завершение учебы
2023 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее

Недавно просмотренные специалисты

FinTech & Banking • Telecom
ДС
Даниил С.
Москва
Администратор баз данных
Senior
3 896,1 Р/час
PostgreSQL
Elasticsearch
Jira
Confluence
SQL
Python
Bash
Kibana
Английский язык
Linux
+24

Даниил — администратор баз данных уровня Senior из Москвы. Специализируется на администрировании баз данных, имеет опыт работы с GreenPlum, PostgreSQL и другими системами управления базами данных. Владеет языками программирования Bash и Python, а также инструментами для автоматизации процессов, такими как Ansible. Имеет опыт работы в отраслях FinTech & Banking и Telecom. Участвовал в проектах «Сбер», «Т-Банк» и «МегаФон». В проекте «Сбер» выполнял роль администратора баз данных (DBA GreenPlum), занимался развёртыванием и администрированием кластеров, мониторингом и анализом производительности БД, диагностикой и устранением инцидентов, созданием бэкапов и восстановлением данных. В проекте «Т-Банк» работал инженером по мониторингу и аналитике, занимался мониторингом высоконагруженных систем, диагностикой проблем в базах данных, автоматизацией обработки инцидентов и взаимодействием с разработкой и DBA. В проекте «МегаФон» был инженером непрерывности платформ, занимался администрированием баз данных PostgreSQL, мониторингом инфраструктуры и БД, диагностикой и устранением сбоев, администрированием серверов UNIX.

Подробнее
BioTech, Pharma, Health care & Sports • E-commerce & Retail • FinTech & Banking
ВЗ
Валерия З.
Минск
Системный аналитик
Middle+
4 675,32 Р/час
Creatio
3rd
meecs
PosrgteSQL
UML
dad
zoom
Postman
Camunda
Google
+32

Системный аналитик с 4+ годами опыта работы Системный и бизнес-аналитик с более чем четырехлетним опытом работы на всех фазах проекта (предпродажа, дискавери, сопровождение разработки и поддержка) в различных доменах. Разработка вариантов реализации, совместное проектирование технических решений с архитекторами и командой разработки (микросервисная архитектура) Моделирование с помощью BPMN 2.0 и UML Документация API-интеграций с внешними интерфейсами (Swagger, Postman) Выявление и анализ требований. Документирование требований (User Stories, Use Cases) Верификация и валидация требований Подготовка спецификаций, описывающих техническую реализацию требований, включая потоки интеграции, модели данных и спецификации пользовательского интерфейса Визуализация интерфейсов системы Статическое и динамическое прототипирование Проведение интеграционного тестирования с основной платформой учета и другими приложениями Тестирование приемки функционала и выявление ошибок. Образование Магистр биомедицинских наук Профессиональные интересы Анализ и проработка интеграционных подходов, проектное управление, формализация и автоматизация процессов предприятия Домены Электронная коммерция, образование, банкинг, финтех, здравоохранение СУБД PostgreSQL Нотации моделирования BPMN, UML, ERD, DFD, Flowchart Инструменты Camunda, Figma, Draw.io, Lucidchart, Balsamiq, Miro СУБД и инструменты для работы с API Postman, Swagger, PostgreSQL, MySQL Брокеры сообщений RabbitMQ, Kafka Инструменты управления проектами Jira, Confluence, Trello, Azure DevOps Достижения Мост между бизнесом и информационными технологиями Достигнут уровень удовлетворенности заинтересованных сторон на уровне 90% относительно согласованности технических решений с бизнес-целями, измеренный через регулярные опросы обратной связи. Анализ данных и выводы Проектирование архитектурного решения Представлены действенные рекомендации на основе анализа данных, приведшие к увеличению показателей вовлеченности пользователей на 10%.

Подробнее