Владимир С. Data инженер, Senior

ID 22667
ВС
Владимир С.
Мужчина, 35 лет
Россия, Москва, UTC+3
Ставка
3 896,1 Р/час
НДС не облагается
Специалист доступен с 12 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Agile
Agile Project Management
Ansible
Apache AirFlow
ClickHouse
DevOps
DWH
ETL
GitHub
GitLab
Grafana
GreenPlum
Hadoop
Kanban
Kubernetes
Microsoft
Oracle
Oracle Pl/SQL
PostgreSQL
Python2
Scrum
SQL
SSIS
Zabbix
Hive
Python
Spark
Teradata
Отрасли
FinTech & Banking
Urban technology
Знание языков
Английский — C1
Главное о специалисте
Кандидат обладает более чем 10-летним опытом работы в области Data Engineering, включая опыт работы с Oracle, SQL, Python, Spark, Hadoop, Airflow, и Grafana. Участвовал в миграции DWH, оптимизации SQL-запросов и разработке ETL-процессов. Руководил командами и обеспечивал высокое качество данных.
Проекты   (15 лет 11 месяцев)
Оптимизация и миграция корпоративного хранилища данных с Oracle на PostgreSQL (Greenplum)
Роль
Data engineer DWH
Обязанности
Проект: Миграция DWH Oracle -> PostgreSQL (Greenplum) Команда: Data engineer DWH, системный аналитик, ETL-разработчик, DevOps-инженер, проджект-менеджер. Участвовал в миграции DWH Oracle -> PostgreSQL (Greenplum), что позволило сократить время обработки данных на 20% и снизить стоимость хранения на 15%. Обеспечивал бесперебойную работу витрин данных и высокое качество данных в рамках процесса миграции. Оптимизировал SQL-запросы, что позволило снизить время отклика на 10%. Разрабатывал и поддерживал ETL-процессы с использованием Apache Airflow и SSIS. Управлял инфраструктурой и автоматизацией с помощью Ansible и Kubernetes. Использовал инструменты мониторинга и визуализации данных, такие как Zabbix и Grafana. Активно участвовал в Agile-церемониях, включая планирование спринта, подготовку и ретроспективные собрания. Работал с системами контроля версий Gitlab и GitHub. Обучал новых членов команды и проводил технические сессии для повышения квалификации.
Достижения
Внедрение PostgreSQL (Greenplum) позволило сократить затраты на хранение данных, что привело к экономии ресурсов и улучшению финансовых показателей проекта.
Стек специалиста на проекте
Grafana, Kanban, GitLab, ClickHouse, Spark, Zabbix, Hive, Scrum, DevOps, Teradata, Oracle, Системный анализ, GitHub, Hadoop, Ansible, ETL, DWH, Agile Project Management, SSIS, Oracle Pl/SQL, SQL, Agile, Python, GreenPlum, Apache AirFlow, Microsoft, Python2, PostgreSQL, Kubernetes
Отрасль проекта
FinTech & Banking
Период работы
Февраль 2023 - По настоящее время  (2 года 6 месяцев)
Разработка корпоративного DWH на базе Data Vault 2.0
Роль
Ведущий инженер по разработке / Data engineer DWH
Обязанности
Проект: Разработка корпоративного DWH на базе Data Vault 2.0 Команда: 3 разработчика, системный аналитик, проджект-менеджер, техлид. Разработка архитектуры: Повышение скорости обработки данных на 15% и ускорение аналитической отчетности на 10%. Руководство командой: Обеспечение соблюдения SLA и управление командой из 3 разработчиков. ETL-процессы: Разработка и внедрение эффективных ETL-процессов. Инструменты и технологии: Использование Airflow, PostgreSQL, MS SQL, Oracle Pl/SQL, Greenplum, Apache Airflow, SSIS, Hadoop, Ansible, Kubernetes, Gitlab, GitHub, Zabbix, Grafana, Pl/Python, Clickhouse. Методологии управления проектами: Agile, Kanban, Scrum. Участие в Agile-церемониях: Активное участие в планировании спринта, подготовке, ретроспективных собраниях.
Достижения
Повышение скорости обработки данных на 15% за счет внедрения архитектуры Data Vault 2.0. Ускорение аналитической отчетности на 10% благодаря оптимизации ETL-процессов.
Стек специалиста на проекте
Grafana, Kanban, GitLab, ClickHouse, ETL-процессы, Zabbix, Scrum, GitHub, Hadoop, Ansible, DWH, SSIS, Oracle Pl/SQL, SLA, SQL, Agile, GreenPlum, Apache AirFlow, Microsoft, Python2, PostgreSQL, Kubernetes, Data Vault 2.0
Отрасль проекта
FinTech & Banking
Период работы
Май 2022 - Февраль 2023  (10 месяцев)
Оптимизация и Развитие Личного Кабинета Налогоплательщика
Роль
Team Lead DWH
Обязанности
Проект: Оптимизация и Развитие Личного Кабинета Налогоплательщика Команда: 9 человек, включая разработчиков, инженеров по данным, QA-специалистов, DevOps-инженеров и проджект-менеджеров. Руководство командой: Обеспечивал бесперебойную работу IT-инфраструктуры и внедрение инноваций. Развитие и поддержка Личного кабинета налогоплательщика: Оптимизация системы для 1.3 млн пользователей, сокращение времени обработки запросов на 10%. Миграция хранилища данных: Переход с MS SQL на Oracle, что привело к 15% сокращению времени простоя и 10% увеличению скорости обработки данных. Разработка архитектуры Личного кабинета: Увеличение удовлетворенности пользователей на 5%. Оптимизация баз данных: Снижение среднего времени отклика запросов на 20%. Разработка и внедрение ETL-процессов: Обеспечение актуализации данных для 1.3 млн пользователей, сокращение времени обработки данных на 10%. Использование технологий: ETL, DWH, SQL, PostgreSQL, MS SQL, Oracle Pl/SQL, Greenplum, Apache Airflow, SSIS, Hadoop, Agile Project Management, Kanban, Scrum, Ansible, Kubernetes, DevOps, Gitlab, GitHub, ORACLE, Zabbix, Grafana, Pl/Python, Clickhouse. Участие в Agile-церемониях: Планирование спринтов, подготовка, ретроспективные собрания.
Достижения
Сокращение времени обработки запросов на 10% для 1.3 млн пользователей, что повысило удовлетворенность пользователей на 5%. Успешная миграция с MS SQL на Oracle, что привело к 15% сокращению времени простоя и 10% увеличению скорости обработки данных.
Стек специалиста на проекте
Управление командой, Grafana, Kanban, GitLab, ClickHouse, Zabbix, Scrum, DevOps, Oracle, GitHub, Hadoop, Ansible, ETL, DWH, Agile Project Management, SSIS, Oracle Pl/SQL, SQL, GreenPlum, Apache AirFlow, Microsoft, Python2, данных, PostgreSQL, Kubernetes
Отрасль проекта
Urban technology
Период работы
Сентябрь 2009 - Май 2022  (12 лет 9 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Дипломы и сертификаты
Разработка приложений PostgreSQL Сбер Университет 2022 г.
Работа с СУБД PostgreSQL для Администраторов АС Сбер Университет 2022 г.
Образование
Высшее
Учебное заведение
Московский гуманитарный университет, Москва Факультет экономики и управления, Экономика (магистр экономики) 2018
Специальность
Экономика (магистр экономики)
Завершение учебы
2018 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Media
ТБ
Тимур Б.
Москва
Data инженер
Senior
4 155,84 Р/час
anchor
Apache AirFlow
Apache Kafka
Apache Spark
CI/CD
ClickHouse
Data Vault
DBT
defect
Docker
+32

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Подробнее

Недавно просмотренные специалисты

EdTech • FinTech & Banking • Logistics & Transport
ЕА
Егор А.
Минск
Java разработчик
Middle+
3 311,69 Р/час
Avro
ELK
assertj
языки программирования
AWS
GitLab
MS Windows
брокеры сообщений
IDE
core
+64

Инженер-программист с опытом работы более 3 лет Инженер-программист с более чем 3-летним опытом разработки программного обеспечения, специализирующийся на проектировании и реализации масштабируемых микросервисных и модульных архитектур. Обладаю глубокими знаниями в области разработки корпоративных приложений с использованием Java и Spring, а также опытом построения распределённых систем и интеграции с брокерами сообщений (Kafka, SQS). Имею практический опыт автоматизации бизнес-процессов на базе платформы Camunda, включая проектирование BPMN-схем, интеграцию с внешними сервисами и реализацию пользовательских обработчиков. Участвовал в проектах, связанных с электронной коммерцией, финтехом и образовательными технологиями. Использую подходы разработки через тестирование (TDD/BDD), практики парного программирования и инструменты CI/CD для повышения надёжности и поддерживаемости решений. Обладаю опытом работы с облачной инфраструктурой (AWS), системами мониторинга и логирования (OpenTelemetry, ELK). Отличаюсь высокой вовлечённостью, вниманием к деталям и эффективным взаимодействием в междисциплинарных командах. Языки программирования Java, Bash, SQL. Бэкенд Spring(Boot, Core, Web, Data, Security, Test, Cloud, Cloud Stream), Java EE (Jakarta, J2EE, JDBC, JSP), SOAP, REST, Avro, Swagger, Camunda, Jersey, Hibernate, JPA, Liquibase, JUnit, AssertJ, Mockito, Maven. Брокеры сообщений Apache Kafka. Базы данных PostgreSQL, Redis, MongoDB. Облака AWS (Step Functions, EC2, S3, SQS, RDS). DevOps ELK, Docker, Docker Compose, Kubernetes, OpenTelemetry, GitLab CI/CD, Jenkins, SonarQube. Системы управления проектами Jira, Confluence. IDE IntelliJ IDEA. Системы управления версиями Git, GitLab, GitHub. ОС Windows, Linux.

Подробнее