Сергей К. Data инженер, Senior

ID 13710
СК
Сергей К.
Мужчина
Россия, Москва, UTC+3
Ставка
4 805,19 Р/час
НДС не облагается
Специалист доступен с 14 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Jira
Pandas
Python
SQL
ETL
GreenPlum
OLAP
Oracle SQL Developer
PostgreSQL
Apache AirFlow
Apache Spark
SAS
Apache Hadoop
CI/CD
DBT
DWH
Hive
ClickHouse
Kafka
Отрасли
E-commerce & Retail
FinTech & Banking
Главное о специалисте
- Senior Data Engineer имеющий опыт создания конвейеров данных, интеграции данных и хранилищ данных - Имеет большой опыт работы в финтех-компаниях - Имеет опыт разработки распределенных систем для извлечения данных из различных источников, проектирования, создания и оптимизации конвейеров ETL, создания решений по моделированию и хранению данных, а также анализа данных.
Проекты   (5 лет 9 месяцев)
NDA
Роль
Senior Data Engineer
Обязанности
Обязанности: - Разработка процесса автоматизированной отчетности для топ-менеджмента компании с нуля - Разработка процессов миграции из системы SAS в корпоративное хранилище данных на основе технологии Hadoop (Hive) и базы данных Greenplum -Автоматизация загрузки данных (Spark + Airflow + DBT) -Руководство командой из 2 человек
Стек специалиста на проекте
Python, Hive, ClickHouse, Apache Hadoop, Apache Spark, DWH, Apache AirFlow, CI/CD, SAS, DBT
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2023 - По настоящее время  (2 года 2 месяца)
X5
Роль
Big Data Engineer
Обязанности
Обязанности: - Разработка ETL-процессов на базе Greenplum. В качестве планировщика использовался SAS -Проектирование бизнес-продукта (Dash Board для отчетности по изменениям в HR
Стек специалиста на проекте
PostgreSQL, SQL, Python, Pandas, GreenPlum, ETL, Apache Spark, Apache AirFlow, SAS
Отрасль проекта
E-commerce & Retail
Период работы
Февраль 2022 - Июнь 2023  (1 год 5 месяцев)
CберБанк
Роль
Big Data Engineer
Обязанности
Обязанности: - Разработка OLAP-cubes с большим количеством измерений (более 100) -Участие в процессе миграции с базы данных Oracle на Greenplum -Поддержка аналитической команды в процессах ETL.
Стек специалиста на проекте
PostgreSQL, SQL, Python, Pandas, OLAP, GreenPlum, ETL, Oracle SQL Developer
Отрасль проекта
FinTech & Banking
Период работы
Декабрь 2020 - Февраль 2022  (1 год 3 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Юго-Западный государственный университет
Специальность
Программист
Завершение учебы
2018 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
FinTech & Banking • Media
ТБ
Тимур Б.
Москва
Data инженер
Senior
4 155,84 Р/час
anchor
Apache AirFlow
Apache Kafka
Apache Spark
CI/CD
ClickHouse
Data Vault
DBT
defect
Docker
+32

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Подробнее

Недавно просмотренные специалисты

Cloud Services • FinTech & Banking • Realty & Constructoring
АБ
Анна Б.
Москва
Системный аналитик
Middle+
3 636,36 Р/час
.Net 4.0
Работа с интеграциями
UML
Kanban
Postman
Базы данных
XML/XSD
XSD
JSON
REST
+44

● Сбор, документирование, анализ, трассировка, требований (US, UC) ● Опыт написания документации: БТ, ФТ, АС ● Знания и навыки работы с бизнес требованиями и с нефункциональными требованиями ● Умение формировать требования к административному разделу системы ● Опыт разработки инструкции и руководства пользователя ● Опыт написания технических спецификаций на интеграцию ● Навык проработки детальных сценариев взаимодействия пользователя и системы, взаимодействия frontend и backend ● Опыт проектирования и построения интеграций между различными системами ● Опыт проектирования систем с микросервисной архитектурой ● Участие в разработке систем с нуля ● Опыт проектирования БД ● Опыт проектирования сервисных взаимодействий, в том числе с использованием корпоративных сервисных шин ● Опыт проектирования мобильных приложений ● Опыт работы с API-документацией сторонних систем ● Опыт описания бизнес-процессов с помощью BPMN 2.0 ● Умение составлять ER-диаграммы ● Опыт работы над data-intensive системами/приложениями ● Умение составлять программы и методики проведения испытаний ● Отладка работы МП (анализ логов и локализация ошибки) ● Опыт моделирования данных на реальных проектах ● Опыт работы в системах ITSM, знание основ ITIL ● Навыки составления концептуальных моделей данных ● Знания об использовании брокеров сообщений и умение проектировать с Kafka, RabbitMQ и т.д. ● Участвовал в разработке Incident/Problem Management систем (или Helpdesk) ● Знания основ HTML-верстки, знания компонентов веб-страниц ● Опыт программирования, написания скриптов (на любом языке) ● Понимание как устроены облачные хранилища ● Опыт подготовки дорожных карт реализации проекта или его отдельного компонента/этапа ● Первичная декомпозиция работ проекта (до старта работ, на стадии оценки/пресейла) ● Опыт самостоятельной работы над проектом

Подробнее
E-commerce & Retail • FinTech & Banking
ДП
Дарья П.
Минск
UX/UI дизайнер
Middle
2 847,53 Р/час
Figma
Web Design
Adobe Illustrator
Adobe Photoshop
Tilda
UI/UX
User Flow
Adobe After Effects
+8

Ответственный и коммуникабельный UI/UX дизайнер с четырьмя годами опыта и разнообразным набором навыков, включая проектирование пользовательских интерфейсов, исследование пользователей, прототипирование и создание интерактивных макетов. - Глубокое понимание принципов UX-дизайна, психологии пользовательского поведения и современных трендов цифрового дизайна. - Умение работать с аналитикой и проводить юзабилити-тестирования для оптимизации пользовательского опыта. - Опыт разработки дизайн-систем и адаптивных интерфейсов, а также взаимодействия с заказчиками и командой разработки. - Владение инструментами для создания анимации и интерактивных прототипов, что позволяет создавать «невидимый дизайн», максимально интуитивный для пользователей. Ссылка на портфолио: https://flame-zucchini-9a0.notion.site/187d5f3e0a2a803f8fbae4424c0b0494

Подробнее