Алексей И. Data инженер, Middle+

ID 24847
АИ
Алексей И.
Мужчина
Россия, Краснодар, UTC+3
Ставка
3 506,49 Р/час
НДС не облагается
Специалист доступен с 18 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
DBT
DWH
ETL
Git
HDFS
Hive
HP
Java
Linux
Oracle Pl/SQL
Python
QlikView
Spark
SQL
Fast Report
MS SQL
Отрасли
Hardware
Manufacturing
Telecom
Главное о специалисте
IT-специалист с 11-летним опытом работы в сфере баз данных и программирования. Мои сильные стороны - способность быстро погружаться в быстро погрузиться в проект, понять, как работает система, и найти ошибки в процессе тестирования. Мне нравится решать сложные вопросы, изучать новые технологии и работать с данными. Я не боюсь брать на себя инициативу и решать проблемы, за которые никто не берется. Как инженер по данным я стараюсь увидеть смысл данных и работать на основе этого. Я уделяю много внимания концептуальным моментам процесса ETL. Я просто люблю свою работу.
Проекты   (10 лет 11 месяцев)
DOM.RF (DOMRF.COM)
Роль
Data Engineer/ETL DEVELOPER
Обязанности
Обязанности: - Разработка ETL-процесса для Datawarehouse на Oracle с использованием dbt и Python. Стек: - Python, dbt, Oracle, Linux, MSSQL, Git Достижения: - Загрузка новых данных в большую таблицу (1 млрд строк) была оптимизирована с 2 часов до 30 секунд.
Стек специалиста на проекте
Git, Python, Oracle, Linux, MS SQL, DBT, ДО, ETL ELT
Отрасль проекта
Manufacturing
Период работы
Июнь 2024 - По настоящее время  (1 год 3 месяца)
IBS (IBS.RU)
Роль
Data Engineer/ETL DEVELOPER
Обязанности
Обязанности: - Разработка ETL-процесса для данных с использованием Ab Initio и Spark, создание и развитие DataWarehouse - Процесс ETL был переведен с SQL на технологии Big Data (Ab Initio и Spark). - Работа в качестве Dev Lead для 5 разработчиков. Помогал коллегам исследовать новые области и функциональность Стек: - Java, Spark, Hive, HDFS, Ab Initio, Linux, MSSQL, QlikView, Git Достижения: - Процесс ETL был перенесен с SQL на технологии BigData (AbInitio и Spark), этот процесс миграции позволил увеличить объем обработки данных в 3 раза. - Нанято и обучено 10 разработчиков - Выявлены и исправлены концептуальные ошибки во фреймворке загрузки данных и в производстве
Стек специалиста на проекте
Git, Java, SQL, Linux, Hive, Spark, QlikView, ETL, Big Data, HDFS, MS SQL, Anini
Отрасль проекта
Manufacturing
Период работы
Март 2020 - Июнь 2024  (4 года 4 месяца)
NEXIGN (NEXIGN.COM)
Роль
SQL DEVELOPER
Обязанности
Обязанности: - Конфигурирование системы отчетности для клиентов с помощью Oracle и PL/SQL - Создание отчетов из системы BSS и разработка карт данных с помощью OLAP кубов. - Работал с клиентами на объектах за рубежом Стек: - SQL, Oracle PL/SQL, Fast Report, Git Достижения: - Обработано более 50 карт данных - Миграция биллинговой системы 2 крупнейших операторов связи - Проведены приемочные испытания 2 проектов с руководителями отделов бухгалтерии, маркетинга, продаж
Стек специалиста на проекте
Git, SQL, Oracle, OLAP, Pl/SQL, Oracle Pl/SQL, Fast Report, BSS
Отрасль проекта
Hardware
Период работы
Сентябрь 2018 - Март 2020  (1 год 7 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
КАЗАНЬ, РОССИЯ
Специальность
МАГИСТР ИНФОРМАТИКИ
Завершение учебы
2009 г.
Дополнительное
Учебное заведение
LUXOFT (LUXOFT.COM)
Специальность
DATA WAREHOUSE FUNDAMENTALS COURSE
Завершение учебы
2021 г.
Дополнительное
Учебное заведение
COURSERA.ORG
Специальность
MICROSOFT AZURE COURSE DP-203
Завершение учебы
2022 г.
Дополнительное
Учебное заведение
NEWPROLAB.COM
Специальность
APACHE SPARK AND SCALA FOR DATA ENGINEERING
Завершение учебы
2023 г.

Похожие специалисты

FinTech & Banking • Media
ТБ
Тимур Б.
Москва
Data инженер
Senior
4 155,84 Р/час
anchor
Apache AirFlow
Apache Kafka
Apache Spark
CI/CD
ClickHouse
Data Vault
DBT
defect
Docker
+32

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Подробнее
E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

FinTech & Banking • Manufacturing
КХ
Кирилл Х.
Белгород
Java разработчик
Middle
2 857,14 Р/час
PostgreSQL
Git
SQL
Oracle
Spring Boot
Maven
GitLab
Apache
VBA
Kafka
+14

Java-разработчик с опытом работы на проектах в сфере FinTech более 2х лет. Специализация: - Spring Boot; - SQL; - Liquibase; - Apache Kafka; - Maven; - Git; - GitLab; - Criteria API/Specification; - Java 11. Опыт работы: - Проект «Разработка сервиса SBERCONNECT» (отрасль — FinTech & Banking). Роль — разработчик Java. Выполненные работы: оптимизация и написание запросов PostgreSQL с помощью SQL и Criteria API, разработка Spring Boot приложения, интеграция с другими сервисами по REST API, написание скриптов для Liquibase, доработка UI с помощью HTML и Thymeleaf. - Работы на МРСК Урал, Сибур, РусАгро, Магнит, НЛМК (отрасль — Manufacturing). Роль — разработчик ABAP. Выполненные работы: знание предметной области IS-U, HCM, MM, WF, GRC, SD, работа с отчётами, выгрузка данных в формате MS Word/Excel/PDF, объектно-ориентированное программирование, использование BAPI и BADI.

Подробнее