Сергей К. Data инженер, Senior

ID 13710
СК
Сергей К.
Мужчина
Россия, Москва, UTC+3
Ставка
4 805,19 Р/час
НДС не облагается
Специалист доступен с 18 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Jira
Pandas
Python
SQL
ETL
GreenPlum
OLAP
Oracle SQL Developer
PostgreSQL
Apache AirFlow
Apache Spark
SAS
Apache Hadoop
CI/CD
DBT
DWH
Hive
ClickHouse
Kafka
Отрасли
E-commerce & Retail
FinTech & Banking
Главное о специалисте
- Senior Data Engineer имеющий опыт создания конвейеров данных, интеграции данных и хранилищ данных - Имеет большой опыт работы в финтех-компаниях - Имеет опыт разработки распределенных систем для извлечения данных из различных источников, проектирования, создания и оптимизации конвейеров ETL, создания решений по моделированию и хранению данных, а также анализа данных.
Проекты   (5 лет 9 месяцев)
NDA
Роль
Senior Data Engineer
Обязанности
Обязанности: - Разработка процесса автоматизированной отчетности для топ-менеджмента компании с нуля - Разработка процессов миграции из системы SAS в корпоративное хранилище данных на основе технологии Hadoop (Hive) и базы данных Greenplum -Автоматизация загрузки данных (Spark + Airflow + DBT) -Руководство командой из 2 человек
Стек специалиста на проекте
Python, Hive, ClickHouse, Apache Hadoop, Apache Spark, DWH, Apache AirFlow, CI/CD, SAS, DBT
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2023 - По настоящее время  (2 года 2 месяца)
X5
Роль
Big Data Engineer
Обязанности
Обязанности: - Разработка ETL-процессов на базе Greenplum. В качестве планировщика использовался SAS -Проектирование бизнес-продукта (Dash Board для отчетности по изменениям в HR
Стек специалиста на проекте
PostgreSQL, SQL, Python, Pandas, GreenPlum, ETL, Apache Spark, Apache AirFlow, SAS
Отрасль проекта
E-commerce & Retail
Период работы
Февраль 2022 - Июнь 2023  (1 год 5 месяцев)
CберБанк
Роль
Big Data Engineer
Обязанности
Обязанности: - Разработка OLAP-cubes с большим количеством измерений (более 100) -Участие в процессе миграции с базы данных Oracle на Greenplum -Поддержка аналитической команды в процессах ETL.
Стек специалиста на проекте
PostgreSQL, SQL, Python, Pandas, OLAP, GreenPlum, ETL, Oracle SQL Developer
Отрасль проекта
FinTech & Banking
Период работы
Декабрь 2020 - Февраль 2022  (1 год 3 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Юго-Западный государственный университет
Специальность
Программист
Завершение учебы
2018 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
FinTech & Banking • Media
ТБ
Тимур Б.
Москва
Data инженер
Senior
4 155,84 Р/час
anchor
Apache AirFlow
Apache Kafka
Apache Spark
CI/CD
ClickHouse
Data Vault
DBT
defect
Docker
+32

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Подробнее

Недавно просмотренные специалисты

EdTech • LifeStyle
ДИ
Данила И.
Санкт-Петербург
UX/UI дизайнер
Senior
2 207,79 Р/час
UI
AI
IOS
Web Design
Tilda
Adobe Illustrator
Notion
Android
Проектирование
Дизайн
+26

Изотов Данила — UX/UI-дизайнер, арт-директор, AI-художник, маркетолог-дизайнер с более чем девятилетним опытом разработки цифровых продуктов, брендирования, упаковки компаний и маркетинговых стратегий. Основные компетенции: ● Создание веб-сайтов, мобильных приложений, презентаций, бренд-дизайна ● Формирование UX/UI-решений с акцентом на удобство и конверсию ● Разработка и редизайн приложений для Atlas Development, Ilgiz Token, VinVentory, Minezy, T News, BetBOOM, TCS Mining ● UX-исследование в каждом проекте, аудит систем и анализ рынка перед началом работы ● Разработка корпоративных сайтов для девелоперов и крупных компаний ● Разработка B2B-продуктов для беттинга, крипто-индустрии, строительных и проектно-монтажных компаний ● Проектирование Enterprise-систем, включая многоканальные решения для недвижки и крипто-компаний ● Оптимизация пользовательских сценариев и проектирование интерактивных интерфейсов ● UX-копирайтинг для застройщиков, структурирование информации для удобного восприятия ● Разработка маркетинговых стратегий, лендингов и реферальных механик ● Работа с геймификацией, аффилиатными системами, улучшение пользовательского опыта ● Комплексное проектирование крипто-продуктов, игр, Web3-платформ, Betting & Gambling решений Ключевые достижения: ● Создание концепции с нуля для Minezy, включая разработку структуры, пользовательского пути и маркетинговых стратегий ● Оптимизированы многоканальные взаимодействия в Enterprise-платформах крипто и недвижимости ● Разработка визуальных концепций и UX-решений для проектов с локализацией на английский, китайский, корейский и арабский рынки (Ilgiz Token, Mines TON, Meta Verified, Quantumbet, LUNAR AI, LaunchHub, WeWay, BitCore) ● Повышение конверсии на ключевых этапах регистрации и транзакций ● Разработка брендбуков, логотипов и дизайн-концепций для рынка proptech (Atlas Development, Завидово, Отрадное, Формула строительства, Уральская сталь, Центр металла, UP Development)

Подробнее
Logistics & Transport
ЯН
Ярослав Н.
Санкт-Петербург
QA ручной
Middle
2 857,14 Р/час
Регрессионное тестирование
Http4s
Grafana
Kanban
TCP
MS Windows
MSA
Базы данных
Webservices
SOLID
+47

Ярослав - инженер-тестировщик с четырёхлетним опытом работы на проекте NATCAR. Занимался тестированием пользовательского интерфейса веб-приложений, сторонних API и интеграционных сервисов. Создавал и поддерживал тестовую документацию, работал с баг-трекинговой системой Jira. Результатами работы Ярослава на проекте стало: - Внедрение практики описания всех микросервисов, в том числе, создал описания для старых микросервисов; - Оптимизировал систему, что позволило избежать багов при выпуске проекта в прод, количество критических багов практически было равно 0. Обладает высоким уровнем коммуникабельности и ответственности за качество своей работы. Взаимодействовал с командой разработки, обсуждал исправления и дефекты на ежедневных встречах. Сильные стороны - Postman, SQL, Kafka, RabbitMQ.

Подробнее