Владимир С. Data инженер, Senior

ID 16494
ВС
Владимир С.
Мужчина, 27 лет
Россия, Москва, UTC+3
Ставка
2 597,4 Р/час
НДС не облагается
Специалист доступен с 4 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Python
GreenPlum
Kafka
PostgreSQL
Apache AirFlow
SQL
Git
Docker
Hadoop
Oracle
Framework
SAS
DI
Informatica
Application
Confluence
Отрасли
FinTech & Banking
Знание языков
Английский — B1
Проекты   (6 лет 2 месяца)
Крупный российский банк
Роль
Senior Data Engineer
Обязанности
Основные задачи, которые приходится решать: 1) поддержание текущего процесса выгрузки кредитной истории на стеке GP+Airflow+NiFi (SQL-скрипты, ДАГи); 2) доработка процесса с учётом бизнес-требований от аналитиков и ЦБ; 3) рефакторинг и оптимизация текущего процесса расчёта витрин; 4) дежурства для оперативного реагирования на инциденты, связанные с расчётом, и на обращения пользователей. В ходе работы удалось: 1) значительно улучшить качество данных, отправляемых в бюро кредитных историй, что сэкономило банку около 1 млрд рублей потенциальных штрафов; 2) оптимизировать расчет наших DAG при переходе с SAS на GP + внутренний Airflow framework, что позволило нам сократить время расчета наших данных с 5 часов до 1,5-2 и повысить эффективность использования Greenplum; 3) поучаствовать в процессе собеседования кандидатов; 4) настроить оповещения о работе наших DAG-ов, что сократило время реагирования на инциденты; 5) создать несколько ноутов на Python с помощью внутреннего фреймворка на базе Zeppelin, которые позволили бизнес-пользователям вручную перезагружать свою кредитную историю в любой момент.
Стек специалиста на проекте
GreenPlum, Apache AirFlow, SAS, Framework
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2023 - По настоящее время  (2 года 2 месяца)
Крупный российский банк
Роль
Senior DWH Developer/Analyst
Обязанности
1) Создание новых и доработка имеющихся витрин по БТ заказчика; 2) Работа с заявками от бизнеса на ad-hoc запросы и на разбор некорректных данных/багов; 3) Создание/редактирование скриптов загрузки данных в PL/SQL и SAS DI; 4) Миграция пайплайнов из SAS DIS+IBM FM на Apache Airflow; 5) Реплицирование таблиц из источника в ЕХД; 6) Согласование ПСИ по изменению потоков загрузки подрядчиками.
Стек специалиста на проекте
DI, Apache AirFlow, SAS
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2022 - Июнь 2023  (1 год 3 месяца)
IT интегратор
Роль
Middle Data Quality Analyst
Обязанности
1) Создание и валидация скриптов проверок качества данных для Oracle и Teradata; 2) Создание маппингов и потоков проверок качества данных в Informatica Data Quality; 3) Разбор и решение инцидентов по качеству данных; 4) Разбор трактов ETL-процессов для выявления причин ошибок; 5) Работа с разными хранилищами данных; 6) Написание инструкций по работе с определенными проблемами качества данных; 7) Консультирование коллег в части решения вопросов относительно проверок качества данных в разных системах.
Стек специалиста на проекте
Oracle, Informatica
Отрасль проекта
FinTech & Banking
Период работы
Май 2021 - Апрель 2022  (1 год)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Дипломы и сертификаты
Hadoop. Система для обработки больших объёмов данных 2022 г.
Программирование на Python 2022 г.
The Complete Hands-On Introduction to Apache Airflow 2022 г.
Образование
Высшее
Учебное заведение
Уральский федеральный университет имени первого Президента России Б.Н. Ельцина
Специальность
Автоматизация технологических процессов и производств (по отраслям)
Завершение учебы
2019 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

IoT • Logistics & Transport • Manufacturing
ИЕ
Ирина Е.
Ульяновск
1С разработчик
Senior
3 496,97 Р/час
1С:ERP
1С:Конвертация данных
1С:Бухгалтерия 3.0
1С:ERP 2
1С:Управление производственным предприятием 1.3
1С:Управление Автотранспортом
1С:Управление холдингом
+7

Ирина — разработчик уровня Senior с опытом работы 8 лет 3 месяца. Специализируется на разработке и доработке решений на платформе «1С». Имеет опыт работы в отраслях логистики и транспорта, IoT и производства. Ключевые навыки: 1С:ERP, 1С:ERP 2, 1С:Бухгалтерия 3.0, 1С:Конвертация данных, 1С:Управление Автотранспортом, 1С:Управление производственным предприятием 1.3, 1С:Управление холдингом. Принимала участие в следующих проектах: - Транспортная отрасль (роль — ведущий разработчик): доработка и разработка по техническому заданию, создание системы выбытия транспортного средства, отчётов на СКД и печатных форм для складского учёта. - Разработка компьютерного ПО и другая деятельность в области ИТ (роль — ведущий разработчик): разработка финансового учёта, программный вывод вкладок по триггерам, реализация истории изменений. - Энергогенерирующие компании (роль — старший разработчик): бюджетирование, сопровождение и поддержка конфигурации, текущее сопровождение пользователей. - Производство автотранспортных средств, прицепов и полуприцепов (роль — ведущий и обычный разработчик): разработка финансового учёта, доработка функционала по требованию заказчика. - Производство резиновых и пластмассовых изделий (роль — разработчик): доработка типового функционала МСФО, реализация соответствия счетов БП и МСФО.

Подробнее
BioTech, Pharma, Health care & Sports • FinTech & Banking • Government & Public Sector • Insurance • Telecom
КА
Константин А.
Екатеринбург
Бизнес/системный аналитик
Senior
4 155,84 Р/час
Работа с интеграциями
Проектирование пользовательских интерфейсов
UML
Axure RP
Базы данных
Бизнес-анализ
JSON
XML
Scrum
Системный анализ
+33

Знание системного анализа, моделирования и описания процессов Опыт решения интеграционных задач (REST, SOAP, очереди сообщений) Опыт работы с брокерами сообщений/очередями Опыт использования нотаций моделирования (BPMN, UML) Опыт написания проектной, технической и пользовательской документации Опыт работы с микросервисной архитектурой Работа с процессами разработки ПО Проектирование решений на функциональном уровне, понимание принципов построения архитектуры ИТ-ландшафта Опыт работы с реляционными базами данных Опыт использования Карты пути пользователя (Customer Journey Map) Опыт работы с описанием API Умение работать с инструментами тестирования web-сервисов (Postman, Swagger) Опыт составления User Story / Use Case, User Story Map Знание SQL

Подробнее