Антон Г. Data инженер, Senior

ID 20081
АГ
Антон Г.
Мужчина, 33 года
Россия, Магнитогорск, UTC+5
Ставка
4 090,91 Р/час
НДС не облагается
Специалист доступен с 24 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache AirFlow
Big Data
CI/CD
ClickHouse
DBT
Docker
Elasticsearch
ETL
flink
Git
GreenPlum
Hadoop
Hive
Kafka
Kubernetes
NLP
PostgreSQL
PySpark
Python
Scala
SOLID
Spark
SQL
Yandex Cloud
Знание паттернов проектирования
Нереляционные БД (NoSQL)
Объектно-ориентированное программирование (ООП)
RabbitMQ
MLflow
FastAPI
Oracle
PyTorch
Отрасли
E-commerce & Retail
FinTech & Banking
Manufacturing
Главное о специалисте
Более 6 лет в области обработки и анализа больших данных. Высшее техническое образование. Глубокие знания в проектировании ETL-процессов, разработке систем на основе Apache Spark и управлении жизненным циклом моделей машинного обучения. Опыт работы в крупных компаниях, таких как МАГНИТ и РОСНЕФТЬ, где участвовал в реализации сложных проектов, направленных на автоматизацию бизнес-процессов и оптимизацию работы с данными.
Проекты   (6 лет 10 месяцев)
Проект для Магнит
Роль
Data Engineer
Обязанности
Описание: одна из крупнейших розничных сетей в России, предлагающая широкий ассортимент продуктов и товаров повседневного спроса через свои магазины формата дискаунтеров и супермаркетов. Участие в проекте: ● Обеспечение бесперебойной работы существующих ETL-процессов и автоматизация ноутбуков и скриптов data-аналитиков в стандартизированные производственные процессы; ● Создание и поддержка витрин данных для удобного доступа аналитиков и инженеров к необходимой информации; ● Оптимизация запросов к Greenplum; ● Рефакторинг неэффективных скриптов на PySpark для улучшения скорости обработки данных; ● Разработка общекомандных стандартов и внедрение практик MLOps для автоматизации жизненного цикла моделей; ● Управление командой из 5 человек. Интересное: ● Написание backend-решения для поддержки бизнес-процесса запуска рекламных кампаний с интеграцией в существующие системы. Команда: 1 Team Lead, 5 Data Engineer.
Стек специалиста на проекте
PostgreSQL, Python, Kubernetes, Hive, ClickHouse, Hadoop, FastAPI, GreenPlum, Apache AirFlow, Yandex Cloud, MLflow, PySpark, DBT
Отрасль проекта
E-commerce & Retail
Период работы
Сентябрь 2023 - По настоящее время  (2 года)
Рекомендательная модель для системы документооборота
Роль
Data Engineer / Data Scientist
Обязанности
Описание: модель для рекомендаций исполнителей поручений в системе документооборота "Атач" Магнитогорского металлургического комбината с точностью 98%. Участие в проекте: ● Проектирование и разработка движка для поиска документов в системе "Атач", включая создание архитектуры и реализацию API с семантическими поисковыми функциями; ● Реализация пайплайнов на Airflow для загрузки данных из различных систем документооборота; ● Участие в проекте по извлечению сущностей, разработка пайплайна для классификационных моделей на основе мешка слов и тематического моделирования; ● Реализация пайплайнов подготовки сырых данных из MES-систем для анализа на кластере Hadoop с использованием ETL на Spark/Airflow и Kafka в качестве источника данных. Интересное: ● Участие в экспертных группах по проектам, связанным с использованием машинного обучения; ● Разработка системы рекомендаций для оптимизации добавления присадок в сплавы, направленной на минимизацию затрат и доводок после получения химического состава. Система не была введена в эксплуатацию по организационным причинам. Команда: 2 Data Scientist, 2 Backend dev, 1 Analyst, 1 DE/DS.
Стек специалиста на проекте
PostgreSQL, Docker, Elasticsearch, Python, Oracle, FastAPI, GreenPlum, PyTorch, Kafka, Apache AirFlow, PySpark
Отрасль проекта
Manufacturing
Период работы
Февраль 2021 - Июль 2023  (2 года 6 месяцев)
Системы больших данных
Роль
System Analyst / Data Engineer
Обязанности
Описание: 1) платформа для управления жизненным циклом модели машинного обучения и внедрения в продакшен (ВТБ банк), 2) проектирование, создание и поддержка систем обработки и хранения данных. Участие в проектах: ● Реализация ETL-процессов с использованием Apache Spark для эффективной обработки и трансформации больших объемов данных; ● Ведение процесса трансформации данных в формат, пригодный для построения моделей машинного обучения, включая очистку и агрегацию данных; ● Сбор и анализ бизнес-требований для определения ключевых показателей и требований к данным; ● Разработка технических заданий на основе собранных бизнес-требований для обеспечения четкого понимания задач; ● Проектирование архитектуры системы поддержки жизненного цикла моделей машинного обучения, включая мониторинг и обновление моделей; ● Решение конфликтов взаимодействия со смежными проектами. Команда: ~15 человек - PM, 2 BA, 1 системный архитектор, 1 архитектор решений, 3 DE , 7 Backend dev.
Стек специалиста на проекте
Python, Scala, Hive, Apache AirFlow, MLflow, PySpark
Отрасль проекта
FinTech & Banking
Период работы
Сентябрь 2019 - Декабрь 2020  (1 год 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Магнитогорский государственный технический университет им. Г.И. Носова, Магнитогорск
Специальность
Физико-математический, Прикладная математика и информатика, Бакалавриат
Завершение учебы
2015 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • EdTech • Information Security • Social Networking • Telecom
АЛ
Артем Л.
Орел
Golang разработчик
Middle+
3 506,49 Р/час
ELK
Grafana
fixture
awx
языки программирования
Gitlab CI
unit
GraphQL
Базы данных
ClickHouse
+53

Артём — опытный Golang-разработчик уровня Middle+. Обладает навыками работы с Ansible, Apache Kafka, Docker, Git, GOlang, Grpc, Linux, MongoDB, PostgreSQL, Python, RabbitMQ, Redis, REST, SQL и NoSQL. Артём работал над несколькими проектами в сферах информационной безопасности, социальных сетей и электронной коммерции. В его обязанности входило создание сервисов на основе Golang, а также участие в разработке микросервисов, настройке CI/CD, интеграции платёжных систем и тестировании кода. На последнем месте работы Артём занимался созданием VPN-сервиса, где он улучшал инструменты для учёта пользователей и лидов, реализовывал микросервис автоматической настройки WireGuard сервера и создания конфиг файлов VPN туннелей для клиентов при помощи go-ansible. Также он интегрировал RabbitMq в систему принятия платежей. В рамках другого проекта Артём расширил функционал Telegram бота, создал микросервис реферальной программы и реферальных отчислений, внедрил Redis для хранения временных состояний пользователя и переписал кодовую базу с чистого SQL на SqlAlchemy. Ещё один проект, над которым работал Артём, заключался в реализации модуля для автоматизации передачи данных между системой биллингового учёта облачного сервиса whitecloud24 и системой интернет бухгалтерии Elba Контур.

Подробнее
Marketing, Advertising & Design • RnD
НХ
Никита Х.
Уфа
Web разработчик
Middle
600 Р/час
PostgreSQL
Git
HTML
CSS
MySQL
JavaScript
Node.js
PHP
Английский язык
Linux
+30

Front-End Developer / Разработка сайтов и веб-приложений под ключ. Детально резюме здесь: https://docs.google.com/document/d/1USGrDy1rnhiJMDJX9bnlp4nqarL k7fywq9FXaG7Gzd4/edit?usp=sharing Обо мне: Являюсь Front-End Веб-разработчиком со стажем работы на реальных проектах почти 3 года. Разработка Многостраничных нагруженных сайтов. Работа с 1C-Bitrix, Wordpress. Создание самописных движков для сайтов. ---------------------------------------------------------------------------- Мои навыки и знания: HTML5, CSS3, JavaScript(ES5, ES6+), jQuery. Полное понимание принципов разработки сайтов. Разработка и натягивание на 1C-Bitrix Разработка и натягивание вёрстки на WordPress и её правильная реализация. Опыт ReactJS(Redux-RTK). Вёрстка кросс-браузерная, валидная(фиксированная и адаптивная). Верстаю из PSD, Figma, Adobe XD. БЭМ. Bootstrap 5. Flexbox. SASS / SCSS. Gulp Webpack Система контроля версий Git, GitHub. Создание простого, читабельного и продуманного кода. Реализация Pixel Perfect вёрстки.

Подробнее
E-commerce & Retail • FinTech & Banking
ВБ
Владимир Б.
Москва
ML разработчик
Middle+
3 116,88 Р/час
RabbitMQ
MVP
Celery
ClickHouse
Hadoop
Pandas
Numpy
GreenPlum
Seaborn
PyTorch
+25

Владимир — опытный ML-разработчик уровня Middle+. Обладает навыками работы с Python и библиотеками для анализа данных, такими как NumPy, Pandas, scikit-learn, CatBoost, LightGBM, Keras, PyTorch, LLM, BERT, FastText, ResNet. Также владеет инструментами для работы с большими данными: Hadoop, ClickHouse, Greenplum. Владимир имеет опыт руководства направлением по исследованию данных. На этой позиции он разработал и внедрил модель прогнозирования нагрузки на колл-центр, а также модели прогнозирования релевантных рекомендаций товаров и услуг и прогнозирования недобросовестных мошеннических действий. Кроме того, Владимир занимался подбором пороговых значений предсказания моделей на основе A/B тестирования. Также Владимир работал старшим специалистом по исследованию данных в группе машинного обучения. В этой роли он разрабатывал и внедрял модели анализа оттока клиентов, кластеризации и классификации пользователей, а также модель честного рейтинга поставщика на основе ансамбля моделей. До этого Владимир занимал позицию исследователя данных в SberData. Там он оптимизировал временные ряды для оптимизации памяти и утилизации процессоров кластеров хранилища Hadoop Yarn, разрабатывал бэкэнд для пилотов моделей кластеризации, алгоритм для входящих обращений чат-ботов, а также протокол сериализации объектов.

Подробнее
FinTech & Banking • Government & Public Sector • IoT • Logistics & Transport • Manufacturing
АК
Антон К.
Москва
QA авто
Senior
4 805,19 Р/час
Регрессионное тестирование
Информационные системы
Тест-планы
WebDriver
IOS
Selenium IDE
Разработка
Программное обеспечение
gatling
Postman
+59

Антон — опытный QA-специалист с более чем 9-летним опытом работы в сфере IT. Он обладает глубокими знаниями и навыками в области автоматизации тестирования, включая работу с инструментами Allure, API, Confluence, Cucumber, Git, IntelliJ IDEA, Jira, Maven, Postman, Rest Assured, Selenium, SoapUI, Spring, Swagger и многими другими. Антон работал над различными проектами в таких отраслях, как IoT, FinTech & Banking, Manufacturing, Government & Public Sector, Logistics & Transport. На своих проектах он выполнял широкий спектр задач, связанных с тестированием, автоматизацией, аналитикой и разработкой тестовых артефактов. Опыт Антона включает работу в командах разного размера, от небольших групп до крупных коллективов. Он способен эффективно взаимодействовать со смежными командами и обрабатывать входящие запросы.

Подробнее
E-commerce & Retail • HRTech • Logistics & Transport • Marketing, Advertising & Design
ДТ
Данила Т.
Самара
Бизнес аналитик
Middle+
3 376,62 Р/час
Управление командой
Проектирование БД
JSON API
Обучение
Axure RP
Нефункциональные требования
Бизнес-анализ
XML
Scrum
API
+42

Есть большой опыт работы на проектах связанных с внедрением BPM систем (от небольших систем до enterprise уровня), в том числе в разработке дополнительного функционала (доработок). Владею экспертными знаниями и опытом планирования в прикладных областях (логистика, тяжелая промышленность, химическая промышленность, строительство). Также участвовал в проектах по внедрению и разработке HRM систем, интранет порталов, КЭДО, СЭД, RPA. Есть опыт описания и проектирования интеграций с различными сервисами по API, в том числе 1С (УТ, УНФ, УПП и др.). Работал с нереляционными базами данных (MongoDB), понимаю структуру реляционных баз данных и микросервисную архитектуру, проектирую макеты простых интерфейсов. Участвовал в развитие проектов на всех этапах, начиная с предпроектного исследования и заканчивая вводом в эксплуатацию. Имеет навыки как бизнес, так и системного анализа. Хорошо ориентируется во многих аспектах и направлениях коммерческой деятельности. Знает основы производственной‚ транспортной и складской логистики. Есть базовые знания ООП и frontend разработки. Имеет успешный управленческий опыт. Владеет навыками эффективных переговоров с клиентами. Принимает активное участие в развитии бизнеса. Личные качества - быстрая обучаемость, коммуникабельность, умение работать в команде, порядочность, стрессоустойчивость, гибкость, ответственность, пунктуальность.

Подробнее