Владимир С. Data инженер, Senior

ID 16494
ВС
Владимир С.
Мужчина, 27 лет
Россия, Москва, UTC+3
Ставка
2 597,4 Р/час
НДС не облагается
Специалист доступен с 13 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Python
GreenPlum
Kafka
PostgreSQL
Apache AirFlow
SQL
Git
Docker
Hadoop
Oracle
Framework
SAS
DI
Informatica
Application
Confluence
Отрасли
FinTech & Banking
Знание языков
Английский — B1
Проекты   (6 лет 2 месяца)
Крупный российский банк
Роль
Senior Data Engineer
Обязанности
Основные задачи, которые приходится решать: 1) поддержание текущего процесса выгрузки кредитной истории на стеке GP+Airflow+NiFi (SQL-скрипты, ДАГи); 2) доработка процесса с учётом бизнес-требований от аналитиков и ЦБ; 3) рефакторинг и оптимизация текущего процесса расчёта витрин; 4) дежурства для оперативного реагирования на инциденты, связанные с расчётом, и на обращения пользователей. В ходе работы удалось: 1) значительно улучшить качество данных, отправляемых в бюро кредитных историй, что сэкономило банку около 1 млрд рублей потенциальных штрафов; 2) оптимизировать расчет наших DAG при переходе с SAS на GP + внутренний Airflow framework, что позволило нам сократить время расчета наших данных с 5 часов до 1,5-2 и повысить эффективность использования Greenplum; 3) поучаствовать в процессе собеседования кандидатов; 4) настроить оповещения о работе наших DAG-ов, что сократило время реагирования на инциденты; 5) создать несколько ноутов на Python с помощью внутреннего фреймворка на базе Zeppelin, которые позволили бизнес-пользователям вручную перезагружать свою кредитную историю в любой момент.
Стек специалиста на проекте
GreenPlum, Apache AirFlow, SAS, Framework
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2023 - По настоящее время  (2 года 2 месяца)
Крупный российский банк
Роль
Senior DWH Developer/Analyst
Обязанности
1) Создание новых и доработка имеющихся витрин по БТ заказчика; 2) Работа с заявками от бизнеса на ad-hoc запросы и на разбор некорректных данных/багов; 3) Создание/редактирование скриптов загрузки данных в PL/SQL и SAS DI; 4) Миграция пайплайнов из SAS DIS+IBM FM на Apache Airflow; 5) Реплицирование таблиц из источника в ЕХД; 6) Согласование ПСИ по изменению потоков загрузки подрядчиками.
Стек специалиста на проекте
DI, Apache AirFlow, SAS
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2022 - Июнь 2023  (1 год 3 месяца)
IT интегратор
Роль
Middle Data Quality Analyst
Обязанности
1) Создание и валидация скриптов проверок качества данных для Oracle и Teradata; 2) Создание маппингов и потоков проверок качества данных в Informatica Data Quality; 3) Разбор и решение инцидентов по качеству данных; 4) Разбор трактов ETL-процессов для выявления причин ошибок; 5) Работа с разными хранилищами данных; 6) Написание инструкций по работе с определенными проблемами качества данных; 7) Консультирование коллег в части решения вопросов относительно проверок качества данных в разных системах.
Стек специалиста на проекте
Oracle, Informatica
Отрасль проекта
FinTech & Banking
Период работы
Май 2021 - Апрель 2022  (1 год)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Дипломы и сертификаты
Hadoop. Система для обработки больших объёмов данных 2022 г.
Программирование на Python 2022 г.
The Complete Hands-On Introduction to Apache Airflow 2022 г.
Образование
Высшее
Учебное заведение
Уральский федеральный университет имени первого Президента России Б.Н. Ельцина
Специальность
Автоматизация технологических процессов и производств (по отраслям)
Завершение учебы
2019 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

BioTech, Pharma, Health care & Sports • FoodTech • IoT • Logistics & Transport • Manufacturing • Media
МБ
Мария Б.
Саратов
1С разработчик
Middle
3 596,88 Р/час
медицина
управляемые формы
Работа с интеграциями
производство
оперативный учет
бухгалтерия
Документооборот
нси
1С:Бухгалтерия 3.0
1С:Документооборот
+19

Мария — разработчик уровня Middle с высшим образованием по специальности «Прикладные математика и физика» (СГУ им. Чернышевского). Специализируется на разработке и доработке решений на платформе 1С. Имеет опыт работы на проектах в различных отраслях, включая IoT, Logistics & Transport, Manufacturing, BioTech, Pharma, Health care & Sports, FoodTech, Media. Участвовала в проектах по разработке и доработке решений для автоматизации бизнес-процессов, включая учёт заработной платы, документооборот, бюджетирование, отчётность. Реализовывала функционал для обмена данными между системами, автоматизацию работы системы, поддержку пользователей.

Подробнее
E-commerce & Retail • IoT
РМ
Роман М.
Санкт-Петербург
Backend разработчик
Middle
3 116,88 Р/час
Grafana
Socket.io
GraphQL
ClickHouse
MongoDB
Linux
Redis
Nginx
Kafka
Docker
+19

Кандидат ищет новую позицию в продуктовой компании с акцентом на интересные задачи и комфортное взаимодействие в команде. Ключевые компетенции: - Технологии: Node.js, Nest.js, Docker, Jenkins, Kafka, MQTT - Базы данных: PostgreSQL, MySQL, MongoDB (базовые знания) - Интеграции:API разработка, S3/CDN (VK-облако), Google Cloud, авторизация через Google - Инструменты тестирования: Jest, Playwright (юнит-тесты, интеграционные тесты) - Опыт: разработка и оптимизация микросервисной архитектуры, рефакторинг legacy-кода, проектирование и реализация сложных API, настройка CI/CD Проектный опыт: На последнем проекте кандидат занимал позицию Backend-разработчика в компании, занимающейся разработкой информационных систем для автомобильной безопасности. Основные достижения: - Перевод legacy-кода на современный стек технологий (Node.js, Nest.js) - Разработка API для новой версии мобильного приложения, включая интеграции с международными сервисами мониторинга - Проектирование микросервисной архитектуры с использованием Kafka и MQTT - Внедрение Docker и Jenkins для автоматизации сборки и деплоя, настройка Dev/Stage/Prod сред - Разработка и оптимизация базы данных с учётом высокой нагрузки (10+ миллиардов записей) Кандидат имеет опыт самостоятельной настройки CI/CD, работы с кэшированием и масштабированием приложений для высокой нагрузки, а также взаимодействия с командами на всех этапах разработки.

Подробнее