Владимир С. Data инженер, Senior

ID 22667
ВС
Владимир С.
Мужчина, 35 лет
Россия, Москва, UTC+3
Ставка
3 896,1 Р/час
НДС не облагается
Специалист доступен с 27 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Agile
Agile Project Management
Ansible
Apache AirFlow
ClickHouse
DevOps
DWH
ETL
GitHub
GitLab
Grafana
GreenPlum
Hadoop
Kanban
Kubernetes
Microsoft
Oracle
Oracle Pl/SQL
PostgreSQL
Python2
Scrum
SQL
SSIS
Zabbix
Hive
Python
Spark
Teradata
Отрасли
FinTech & Banking
Urban technology
Знание языков
Английский — C1
Главное о специалисте
Кандидат обладает более чем 10-летним опытом работы в области Data Engineering, включая опыт работы с Oracle, SQL, Python, Spark, Hadoop, Airflow, и Grafana. Участвовал в миграции DWH, оптимизации SQL-запросов и разработке ETL-процессов. Руководил командами и обеспечивал высокое качество данных.
Проекты   (16 лет)
Оптимизация и миграция корпоративного хранилища данных с Oracle на PostgreSQL (Greenplum)
Роль
Data engineer DWH
Обязанности
Проект: Миграция DWH Oracle -> PostgreSQL (Greenplum) Команда: Data engineer DWH, системный аналитик, ETL-разработчик, DevOps-инженер, проджект-менеджер. Участвовал в миграции DWH Oracle -> PostgreSQL (Greenplum), что позволило сократить время обработки данных на 20% и снизить стоимость хранения на 15%. Обеспечивал бесперебойную работу витрин данных и высокое качество данных в рамках процесса миграции. Оптимизировал SQL-запросы, что позволило снизить время отклика на 10%. Разрабатывал и поддерживал ETL-процессы с использованием Apache Airflow и SSIS. Управлял инфраструктурой и автоматизацией с помощью Ansible и Kubernetes. Использовал инструменты мониторинга и визуализации данных, такие как Zabbix и Grafana. Активно участвовал в Agile-церемониях, включая планирование спринта, подготовку и ретроспективные собрания. Работал с системами контроля версий Gitlab и GitHub. Обучал новых членов команды и проводил технические сессии для повышения квалификации.
Достижения
Внедрение PostgreSQL (Greenplum) позволило сократить затраты на хранение данных, что привело к экономии ресурсов и улучшению финансовых показателей проекта.
Стек специалиста на проекте
PostgreSQL, SQL, Agile, Python, Scrum, DevOps, Teradata, Oracle, Системный анализ, Grafana, Kubernetes, GitLab, GitHub, Kanban, Hive, Spark, ClickHouse, Hadoop, Zabbix, Ansible, GreenPlum, ETL, DWH, Microsoft, Agile Project Management, Oracle Pl/SQL, Python2, Apache AirFlow, SSIS
Отрасль проекта
FinTech & Banking
Период работы
Февраль 2023 - По настоящее время  (2 года 7 месяцев)
Разработка корпоративного DWH на базе Data Vault 2.0
Роль
Ведущий инженер по разработке / Data engineer DWH
Обязанности
Проект: Разработка корпоративного DWH на базе Data Vault 2.0 Команда: 3 разработчика, системный аналитик, проджект-менеджер, техлид. Разработка архитектуры: Повышение скорости обработки данных на 15% и ускорение аналитической отчетности на 10%. Руководство командой: Обеспечение соблюдения SLA и управление командой из 3 разработчиков. ETL-процессы: Разработка и внедрение эффективных ETL-процессов. Инструменты и технологии: Использование Airflow, PostgreSQL, MS SQL, Oracle Pl/SQL, Greenplum, Apache Airflow, SSIS, Hadoop, Ansible, Kubernetes, Gitlab, GitHub, Zabbix, Grafana, Pl/Python, Clickhouse. Методологии управления проектами: Agile, Kanban, Scrum. Участие в Agile-церемониях: Активное участие в планировании спринта, подготовке, ретроспективных собраниях.
Достижения
Повышение скорости обработки данных на 15% за счет внедрения архитектуры Data Vault 2.0. Ускорение аналитической отчетности на 10% благодаря оптимизации ETL-процессов.
Стек специалиста на проекте
PostgreSQL, SQL, Agile, Scrum, Grafana, Kubernetes, GitLab, GitHub, Kanban, ClickHouse, Hadoop, Zabbix, Ansible, GreenPlum, DWH, Microsoft, Oracle Pl/SQL, Python2, Apache AirFlow, SLA, SSIS, ETL-процессы, Data Vault 2.0
Отрасль проекта
FinTech & Banking
Период работы
Май 2022 - Февраль 2023  (10 месяцев)
Оптимизация и Развитие Личного Кабинета Налогоплательщика
Роль
Team Lead DWH
Обязанности
Проект: Оптимизация и Развитие Личного Кабинета Налогоплательщика Команда: 9 человек, включая разработчиков, инженеров по данным, QA-специалистов, DevOps-инженеров и проджект-менеджеров. Руководство командой: Обеспечивал бесперебойную работу IT-инфраструктуры и внедрение инноваций. Развитие и поддержка Личного кабинета налогоплательщика: Оптимизация системы для 1.3 млн пользователей, сокращение времени обработки запросов на 10%. Миграция хранилища данных: Переход с MS SQL на Oracle, что привело к 15% сокращению времени простоя и 10% увеличению скорости обработки данных. Разработка архитектуры Личного кабинета: Увеличение удовлетворенности пользователей на 5%. Оптимизация баз данных: Снижение среднего времени отклика запросов на 20%. Разработка и внедрение ETL-процессов: Обеспечение актуализации данных для 1.3 млн пользователей, сокращение времени обработки данных на 10%. Использование технологий: ETL, DWH, SQL, PostgreSQL, MS SQL, Oracle Pl/SQL, Greenplum, Apache Airflow, SSIS, Hadoop, Agile Project Management, Kanban, Scrum, Ansible, Kubernetes, DevOps, Gitlab, GitHub, ORACLE, Zabbix, Grafana, Pl/Python, Clickhouse. Участие в Agile-церемониях: Планирование спринтов, подготовка, ретроспективные собрания.
Достижения
Сокращение времени обработки запросов на 10% для 1.3 млн пользователей, что повысило удовлетворенность пользователей на 5%. Успешная миграция с MS SQL на Oracle, что привело к 15% сокращению времени простоя и 10% увеличению скорости обработки данных.
Стек специалиста на проекте
PostgreSQL, SQL, Scrum, Управление командой, DevOps, Oracle, Grafana, Kubernetes, GitLab, GitHub, Kanban, ClickHouse, Hadoop, Zabbix, Ansible, GreenPlum, ETL, DWH, Microsoft, Agile Project Management, Oracle Pl/SQL, Python2, Apache AirFlow, SSIS, данных
Отрасль проекта
Urban technology
Период работы
Сентябрь 2009 - Май 2022  (12 лет 9 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Дипломы и сертификаты
Разработка приложений PostgreSQL Сбер Университет 2022 г.
Работа с СУБД PostgreSQL для Администраторов АС Сбер Университет 2022 г.
Образование
Высшее
Учебное заведение
Московский гуманитарный университет, Москва Факультет экономики и управления, Экономика (магистр экономики) 2018
Специальность
Экономика (магистр экономики)
Завершение учебы
2018 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Media
ТБ
Тимур Б.
Москва
Data инженер
Senior
4 155,84 Р/час
anchor
Apache AirFlow
Apache Kafka
Apache Spark
CI/CD
ClickHouse
Data Vault
DBT
defect
Docker
+32

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+65

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • FinTech & Banking • HRTech
ВК
Владимир К.
Санкт-Петербург
Java разработчик
Middle+
3 311,69 Р/час
Grafana
Bitbucket Pipelines
брокеры сообщений
Postman
Базы данных
Lombok
системы управления версиями
Spring Cloud
Data
AOP
+49

Инженер-программист с более чем 5-летним опытом работы, специализируюсь на разработке высоконагруженных, масштабируемых и отказоустойчивых систем. Моя экспертиза охватывает микросервисную архитектуру, потоковую обработку данных, DevOps-практики, а также внедрение CI/CD процессов для обеспечения надежности и скорости поставки программных продуктов. Имею глубокие знания в использовании Apache Kafka и Kafka Streams для реализации высокопроизводительных систем обмена сообщениями и потоковой аналитики. Разрабатывал и внедрял микросервисные решения на базе Spring Boot, включая сложные системы аутентификации и авторизации с использованием Keycloak и OAuth 2.0. Мой опыт охватывает как проектирование систем с нуля, так и модернизацию существующих платформ, включая миграцию данных, оптимизацию производительности и настройку мониторинга с использованием инструментов Prometheus и Grafana. Придерживаюсь гибких методологий разработки, активно участвую в планировании и совершенствовании рабочих процессов в командах Agile и Scrum, что позволяет успешно достигать поставленных целей в срок. Языки программирования Java. Backend Spring (Boot, Data, MVC, Security, AOP, Test), Spring Cloud(Eureka, Config), JPA, Hibernate, REST, Flyway, Keycloak, Lombok, Camunda, OAuth 2.0, JUnit, Mockito, Swagger, Maven, Postman. Базы данных PostgreSQL, Redis, MongoDB. Брокеры сообщений Apache Kafka, Kafka Streams. Мониторинг Prometheus, Grafana. DevOps Docker, Docker-Compose, Kubernetes, GitHub Actions, Bitbucket Pipelines. Системы управления версиями Git, GitHub, BitBucket. Системы управления проектами Jira, Confluence. ОС Linux.

Подробнее
E-commerce & Retail • FinTech & Banking
МП
Михаил П.
Москва
Golang разработчик
Senior
4 881,01 Р/час
Travis CI
C/C++
Spark
Hive
Java
Git
API
Go
Oracle
MongoDB
+33

Михаил — опытный IT-специалист, Golang разработчик с опытом работы более трёх лет. Обладает глубокими знаниями и навыками в области программирования на различных языках, включая Golang, C/C++, Java, Python, Node.js, TypeScript, Nest.js и другие. Михаил имеет опыт работы над проектами в сферах FinTech & Banking и E-commerce & Retail. Он участвовал в разработке и поддержке информационных систем банка, создании процессинговых решений для частных банковских организаций, а также занимался разработкой внутренних корпоративных систем учёта персонала. На проектах Михаил выполнял широкий спектр задач, таких как разработка архитектуры надёжных и масштабируемых систем, обеспечение безопасности данных, оптимизация работы баз данных и механизмов обработки запросов, интеграция со сторонними сервисами и API, тестирование новых функциональностей и многое другое.

Подробнее