Алексей Б. Data инженер, Middle+

ID 13686
АБ
Алексей Б.
Мужчина, 26 лет
Россия, Самара, UTC+4
Ставка
3 496,97 Р/час
вкл. НДС 20% (466.67 Р)
Специалист доступен с 4 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
Apache AirFlow
Apache NiFi
Apache Spark
DWH
Hadoop
Kafka
MongoDB
MSSQL
PostgreSQL
Python
S3
Scala
Amazon S3
ETL
Работа с интеграциями
Разработка
разработка системы
Data Warehouse
Отрасли
Insurance
RnD
Знание языков
Английский — B2
Проекты   (4 года 10 месяцев)
Оптимизация обработки данных убытков; Мониторинг и анализ страховых рисков
Роль
Data Engineer
Обязанности
Разработка пайплайна данных на Apache Spark; Использование Scala для написания кода; Интеграция с Amazon S3 для хранения и доступа к данным; Использование Apache Airflow для автоматизации процесса ETL; Разработка системы с использованием Apache Spark для обработки данных о рисках; Использование Python для написания кода; Интеграция с Amazon S3 для хранения и доступа к данным; Создание пайплайна данных с помощью Apache Airflow.
Стек специалиста на проекте
Python, Scala, Hadoop, Amazon S3, ETL, Apache Spark, Kafka, Apache AirFlow, S3, Работа с интеграциями, разработка системы, Разработка
Отрасль проекта
Insurance
Период работы
Сентябрь 2021 - По настоящее время  (3 года 11 месяцев)
Построение ETL на Apache NIFI (https://docusketch.com); Построение Data Warehouse на Microsoft SQL Server (https://qwm.co.il/)
Роль
Data Engineer
Обязанности
Поддержка и развитие Data Warehouse на PostgresSQL, MSSQL в соответствии с Кимболом; Построение ETL процессов на Apache NIFI.
Стек специалиста на проекте
PostgreSQL, Python, MongoDB, ETL, Apache AirFlow, Apache NiFi, MSSQL, Data Warehouse
Отрасль проекта
RnD
Период работы
Октябрь 2020 - Сентябрь 2021  (1 год)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Самарский государственный экономический университет, Самара
Специальность
Прикладная информатика, Искусственный интеллект и большие данные
Завершение учебы
2023 г.
Высшее
Учебное заведение
Самарский государственный экономический университет, Самара
Специальность
Прикладная информатика, Прикладная информатика в электронной экономике
Завершение учебы
2021 г.

Похожие специалисты

FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

BioTech, Pharma, Health care & Sports • Cloud Services • FinTech & Banking • Information Security • Telecom
ЮГ
Юрий Г.
Москва
Python разработчик
Lead
3 724,98 Р/час
PostgreSQL
Apache Kafka
Git
Docker
SQL
Python
Управление командой
MongoDB
Kubernetes
ClickHouse
+18

Опытный Python-разработчик, team lead. Специализируется на асинхронном программировании и микросервисной архитектуре. Работал с фреймворками Flask, Django, FastAPI. Умеет работать с базами данных PostgreSQL, MongoDB, MySQL. Имеет опыт работы с Docker, Kubernetes, Git. Внедрял Prometheus и Grafana. Участвовал в разработке DLP-системы InfoWatch Traffic Monitor: ускорил работу системы на 40%, внедрив многопроцессную обработку и оптимизировав кеширование; внедрил Prometheus + Grafana, что позволило сократить время обнаружения инцидентов на 50%; разработал систему анализатора аудиофайлов с интеграцией ML-модели для транскрибации. Руководил командой из 5 разработчиков. Разработал личный кабинет пациента для телемедицинской платформы SmartMed, снизив цену записи на приём в 5 раз. Спроектировал и разработал микросервис записи к врачам и оплаты. В Лаборатории Касперского руководил разработкой системы Transparent Deal — системы проверки контрагентов на конфликт интересов. Разработал микросервис проверки физлиц, сократив инциденты на 17%. Перевёл брокер сообщений с Erlang на Kafka, что повысило отказоустойчивость системы. Работал над приложением для автоматического формирования финансовой отчётности (IFRS 17) в KPMG: разработал бэкенд на Flask, улучшив производительность генерации отчётов; интегрировал TypeScript (Angular) для фронтенда; внедрил TDD, что увеличило покрытие кода тестами на 80%. Создал систему автоматического парсинга, обработки и транскрибации аудио/видео в SberTech: разработал пайплайн для сбора и обработки аудиоданных; применил Selenium, WebRTC VAD, ASR, Spleeter.

Подробнее