Рустам Г. Data инженер, Senior

ID 29659
РГ
Рустам Г.
Мужчина, 25 лет
Россия, Москва, UTC+3
Ставка
4 110,32 Р/час
вкл. НДС 5% (152.38 Р)
Специалист доступен с 16 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Python
SQL
MySQL
Oracle
PostgreSQL
ClickHouse
GreenPlum
Big Data
Hadoop
Hive
Spark
Apache AirFlow
debezium
flink
HSQLDB
Kafka
Kafka Streams
alation
Data Catalog
Selenium
Confluence
Jira
tracker
S3
mdb
anchor
Data Vault
modelio
arcadia
CI
CI/CD
Docker
Grafana
Jagger
Zabbix
Elasticsearch
Kibana
monium
DataLens
IDE
collab
DBeaver
Google
IntelliJ IDEA
Jupyter
PyCharm
Visual Studio
VS code
HDFS
Trino
Beautiful soup
MS SQL
Отрасли
E-commerce & Retail
Logistics & Transport
Telecom
Знание языков
Английский — B1
Главное о специалисте
Data Engineer c 4+ годами коммерческой практики. Участвовал в создании высоконагруженных решений для электронного документооборота органов власти, e-commerce-платформ и картографических сервисов. В портфолио — региональная система ЭДО, реактивный интернет-магазин, сервис генерации геокарт и контент-платформа для авторских публикаций. Работал с микросервисной и реактивной архитектурой, ETL-конвейерами и потоковой обработкой данных. Специализируется на построении отказоустойчивых Java-микросервисов, оптимизации SQL/NoSQL-хранилищ, интеграции с Kafka/Spark и работе с геопространственными данными.
Проекты   (4 года)
Яндекс
Роль
Data Engineer
Обязанности
Описание: Разработка и оптимизация DWH-решений для одного из крупнейших сервисов доставки еды в России. Работа с полным циклом данных — от сырых транзакций до аналитических витрин. Стадия разработки: масштабирование / поддержка. Участие в проекте: Проектирование и поддержка ETL-процессов (Airflow, Hive, Greenplum, Clickhouse, Spark, S3). Повышение эффективности использования выделенных ресурсов хранения и обработки данных (Hadoop). Моделирование данных Hnhm (Anchor + Data Vault). Cоздание инструментов мониторинга/контроля изменений и целевого состояния дашбордов (Datalens). Интеграции с внутренними инструментами (REST/SOAP/gRPC). Настройка CI/CD для аналитических инструментов (Arcadia, Tasklet) и мониторинга (Grafana, Juggler, Monium). Профилирование пайплайнов топ-отчетности (Greenplum, Hive, Clickhouse). Рефакторинг / разработка нового функционала - 40/60. Архитектурные/Фичовые задачи - 50/50. Соотношение работы менеджером/разработчиком - 10/90. Команда: 29 чел. (6 DE, 2 AB, 10 SA, 8 BI, 3 PM).
Достижения
Оптимизировал использование ресурсов хранения (сократилось потребление диска на 11%, чанков на 40%, нод на 13%). Улучшил эффективность использования ядер за счёт настройки параметров ETL, что позволило сэкономить 500 CPU-дней ежедневно. Провёл миграцию аналитических таблиц в обновлённую структуру, сохранив data lineage, благодаря чему удалось точнее распределять ресурсы между командами. Улучшил производительность пайплайна топового отчёта, ускорив его подготовку с t-2 до трех часов.
Стек специалиста на проекте
Docker, Elasticsearch, SQL, Python, Kibana, Grafana, Hive, Spark, ClickHouse, Hadoop, GreenPlum, Kafka, Apache AirFlow, CI/CD, S3, HDFS, DataLens, modelio, flink, Data Catalog, cdc, Trino, tracker, anchor, alation, datatransfer
Отрасль проекта
Logistics & Transport
Период работы
Март 2024 - По настоящее время  (1 год 6 месяцев)
МТС
Роль
Data Engineer
Обязанности
Описание: Разработка и поддержка платформы реал-тайм поставки данных для телеком-оператора. Проект включал построение ETL/ELT-пайплайнов, интеграцию с legacy-системами и обеспечение гарантированной доставки данных для бизнес-аналитики. Стадия разработки: с 0 + рефакторинг. Участие в проекте: Настройка CDC-пайплайнов с использованием Kafka + Debezium для синхронизации данных из OLTP-систем (PostgreSQL, Oracle, MySQL, MSSQL) в DWH. Проектирование и поддержка ETL-процессов (Airflow, Clickhouse, PostgreSQL). Настройка Real-Time поставки данных (Kafka-streams, KSQLDB). Организация мониторинга полноты и качества доставки данных (Grafana, Zabbix). Решение инцидентов и нештатных ситуаций для гарантированной доставки данных. Оптимизация хранения и обработки данных в ClickHouse: рефакторинг неэффективных запросов, разработка новых запросов, мониторинг и обеспечение стабильности кластера Рефакторинг / разработка нового функционала - 30/70. Архитектурные/Фичовые задачи - 50/50. Соотношение работы менеджером/разработчиком - 20/80. Команда: 18 чел. (4 DE, 3 CA, 7 Backend, 3 PM, 1 Architect).
Достижения
Единый реактивный стек позволил обслуживать карты и e-commerce с минимальным потреблением потоков; визуализация карт «на лету» с параметризацией слоёв.
Стек специалиста на проекте
PostgreSQL, MySQL, Docker, Jira, Confluence, Python, Oracle, Grafana, ClickHouse, Zabbix, Kafka, HSQLDB, Apache AirFlow, Kafka Streams, MS SQL, connect, debezium, Kafka 3
Отрасль проекта
Telecom
Период работы
Январь 2023 - Март 2024  (1 год 3 месяца)
НДА
Роль
Data Engineer
Обязанности
Описание: Оптимизация алгоритма ценообразования на основе агрегации данных о розничных продажах (электроника, бытовая техника). Интеграция и обработка данных из 1С, веб-источников и мобильных приложений для аналитики и формирования отчетности. Стадия разработки: рефакторинг / поддержка. Участие в проекте: Написание ETL пайплайнов. Сбор и агрегирование данных из различных источников (PostgreSQL, Airflow). Анализ внешних и внутренних источников данных (1C, CSV, JSON). Скрапинг данных при помощи BeautifulSoap, Selenium, API. Разработка механизмов и алгоритмов автоматического получения, парсинга, проверки, очистки и хранения информации. Проектирование базы данных (структура, индексы, хранимые процедуры) и оптимизация запросов. Разработка системы, добавление нового функционала, оптимизация существующего функционала и корректировка алгоритмов при изменении форматов внешних источников данных Рефакторинг / разработка нового функционала - 80/20. Архитектурные/Фичовые задачи - 20/80. Соотношение работы менеджером/разработчиком - 60/40. Команда: 6 чел. (2 DE, 1 CA, 1 PM, 2 Backend)
Стек специалиста на проекте
PostgreSQL, Docker, Python, Grafana, 1С, Apache AirFlow, Gitlab CI
Отрасль проекта
E-commerce & Retail
Период работы
Сентябрь 2021 - Январь 2023  (1 год 5 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Южно-Уральский государственный университет (Национальный исследовательский университет), Челябинск
Специальность
Электроника и наноэлектроника, Бакалавриат
Завершение учебы
2022 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • Marketing, Advertising & Design • Travel, Hospitality & Restaurant business
ДО
Дмитрий О.
Москва
Golang разработчик
Senior
3 766,23 Р/час
Jedis
Redmine
ELK
Grafana
Работа с интеграциями
Gin
Kanban
архитектура
GitLab
Логирование
+68

Go-разработчик с большим опытом в проектировании и создании высокопроизводительных, масштабируемых микросервисов. Специализируюсь на автоматизации инфраструктуры с использованием Terraform, Kubernetes и CI/CD, оптимизируя процессы развертывания и сокращая время настройки. Успешно интегрировал критически важные сервисы в кластеры Kubernetes, обеспечивая стабильность системы и отказоустойчивость с помощью продвинутых методов масштабирования и стратегий балансировки нагрузки. Обладаю навыками проектирования и администрирования баз данных, в частности ClickHouse, а также имею опыт внедрения безопасного взаимодействия через SSL. Увлечен улучшением производительности систем, оптимизацией инфраструктуры и обеспечением высокой доступности за счет мониторинга с Grafana, Prometheus и Elasticsearch.

Подробнее
GameDev • Social Networking
ЕТ
Елена Т.
Калининград
Android разработчик
Middle+
3 468,09 Р/час
C++
UI
Room
Compose
Media
Clean Architecture
Cloud messaging
Java Threads
databinding
Volley
+57

Елена — Android-разработчик уровня Middle+. Имеет опыт работы над проектами в сфере GameDev и Social Networking. В рамках проекта по разработке многопользовательской мобильной игры Black Russia в команде выполняла обязанности Android Developer. В зоне ответственности были поддержка и рефакторинг существующего кода, работа с дизайном и пользовательским интерфейсом, оптимизация кода. Также работала над проектом в сфере Social Networking, где занималась реализацией архитектуры MVVM, использованием Jetpack Compose и Compose Navigation, внедрением и управлением зависимостей с использованием Dagger Hilt и другими задачами. До этого в течение года и восьми месяцев разрабатывала мобильное приложение для Android, используя Java, оптимизировала пользовательский интерфейс с применением XML, создавала чистый и эффективный код с соблюдением принципов SOLID.

Подробнее
Blockchain • Cloud Services • EdTech • Logistics & Transport • Media • Realty & Constructoring • Social Networking • Travel, Hospitality & Restaurant business
ЕА
Есполов А.
Калининград
Frontend разработчик
Senior
3 853,43 Р/час
C#
ASP.NET
styledcomponents
ELK
Sass
Grafana
d3
React testing library
PHP
Redux
+73

Есполов — опытный frontend-разработчик с 15-летним опытом работы в различных проектах. Он обладает глубокими знаниями и навыками в области JavaScript, React, Redux, Clojure, Java, .NET, Node.js и других технологий. Есполов работал над проектами для компаний QVEDO, ЦИАН, Trucknet ltd, Plusmedia, «Системные технологии», OKPAY, а также участвовал в разработке сервисов для Битрикс24 и gecso.ru. В его обязанности входило создание и поддержка сервисов, разработка новых функций, оптимизация кода, онбординг и менторинг новых сотрудников. Опыт Есполова включает работу с различными фреймворками и библиотеками, такими как React Native, Next.js, MSSQL, RabbitMQ, Bash, Jenkins, Ansible, GitLab, ELK, Grafana, Rollbar, Sentry и другими. Разработчик также имеет опыт работы с высоконагруженными системами, CI/CD, Docker, Material Design, Android, TestFlight, функциональным тестированием и другими технологиями.

Подробнее