Алексей И. Data инженер, Middle+

ID 24847
АИ
Алексей И.
Мужчина
Россия, Краснодар, UTC+3
Ставка
3 506,49 Р/час
НДС не облагается
Специалист доступен с 3 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
DBT
DWH
ETL
fastreport
Git
HDFS
Hive
HP
Java
Linux
MSSQL
Oracle Pl/SQL
Python
QlikView
Spark
SQL
Отрасли
Hardware
Manufacturing
Telecom
Главное о специалисте
IT-специалист с 11-летним опытом работы в сфере баз данных и программирования. Мои сильные стороны - способность быстро погружаться в быстро погрузиться в проект, понять, как работает система, и найти ошибки в процессе тестирования. Мне нравится решать сложные вопросы, изучать новые технологии и работать с данными. Я не боюсь брать на себя инициативу и решать проблемы, за которые никто не берется. Как инженер по данным я стараюсь увидеть смысл данных и работать на основе этого. Я уделяю много внимания концептуальным моментам процесса ETL. Я просто люблю свою работу.
Проекты   (10 лет 10 месяцев)
DOM.RF (DOMRF.COM)
Роль
Data Engineer/ETL DEVELOPER
Обязанности
Обязанности: - Разработка ETL-процесса для Datawarehouse на Oracle с использованием dbt и Python. Стек: - Python, dbt, Oracle, Linux, MSSQL, Git Достижения: - Загрузка новых данных в большую таблицу (1 млрд строк) была оптимизирована с 2 часов до 30 секунд.
Стек специалиста на проекте
Git, Python, Oracle, Linux, MSSQL, DBT, ДО, ETL ELT
Отрасль проекта
Manufacturing
Период работы
Июнь 2024 - По настоящее время  (1 год 2 месяца)
IBS (IBS.RU)
Роль
Data Engineer/ETL DEVELOPER
Обязанности
Обязанности: - Разработка ETL-процесса для данных с использованием Ab Initio и Spark, создание и развитие DataWarehouse - Процесс ETL был переведен с SQL на технологии Big Data (Ab Initio и Spark). - Работа в качестве Dev Lead для 5 разработчиков. Помогал коллегам исследовать новые области и функциональность Стек: - Java, Spark, Hive, HDFS, Ab Initio, Linux, MSSQL, QlikView, Git Достижения: - Процесс ETL был перенесен с SQL на технологии BigData (AbInitio и Spark), этот процесс миграции позволил увеличить объем обработки данных в 3 раза. - Нанято и обучено 10 разработчиков - Выявлены и исправлены концептуальные ошибки во фреймворке загрузки данных и в производстве
Стек специалиста на проекте
Git, Java, SQL, Linux, Hive, Spark, QlikView, ETL, Big Data, HDFS, MSSQL, Anini
Отрасль проекта
Manufacturing
Период работы
Март 2020 - Июнь 2024  (4 года 4 месяца)
NEXIGN (NEXIGN.COM)
Роль
SQL DEVELOPER
Обязанности
Обязанности: - Конфигурирование системы отчетности для клиентов с помощью Oracle и PL/SQL - Создание отчетов из системы BSS и разработка карт данных с помощью OLAP кубов. - Работал с клиентами на объектах за рубежом Стек: - SQL, Oracle PL/SQL, Fast Report, Git Достижения: - Обработано более 50 карт данных - Миграция биллинговой системы 2 крупнейших операторов связи - Проведены приемочные испытания 2 проектов с руководителями отделов бухгалтерии, маркетинга, продаж
Стек специалиста на проекте
Git, SQL, Oracle, OLAP, Pl/SQL, Oracle Pl/SQL, Fast Report, BSS
Отрасль проекта
Hardware
Период работы
Сентябрь 2018 - Март 2020  (1 год 7 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
КАЗАНЬ, РОССИЯ
Специальность
МАГИСТР ИНФОРМАТИКИ
Завершение учебы
2009 г.
Дополнительное
Учебное заведение
LUXOFT (LUXOFT.COM)
Специальность
DATA WAREHOUSE FUNDAMENTALS COURSE
Завершение учебы
2021 г.
Дополнительное
Учебное заведение
COURSERA.ORG
Специальность
MICROSOFT AZURE COURSE DP-203
Завершение учебы
2022 г.
Дополнительное
Учебное заведение
NEWPROLAB.COM
Специальность
APACHE SPARK AND SCALA FOR DATA ENGINEERING
Завершение учебы
2023 г.

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • FinTech & Banking
ЕЩ
Евгений Щ.
Ростов-на-Дону
Python разработчик
Senior
4 155,84 Р/час
HTML5
Работа с интеграциями
Elastic Search
AWS
Разработка
Django Rest
SOLID
SQLAlchemy
Elasticsearch
REST
+52

Евгений, Senior Python-разработчик Евгений — опытный специалист в области разработки на Python. Он обладает глубокими знаниями и навыками работы с различными технологиями и инструментами, такими как Django, PostgreSQL, SQL, Django Rest, FastAPI, Bootstrap, JQuery, CSS3, HTML5, Docker, Docker Compose, Git, Git Flow, Gunicorn, Nginx, Pytest, Unit testing, AWS, DigitalOcean, Linode, MongoDB, MySQL, RabbitMQ, Redis, SQLAlchemy, SQLite, Celery, DRY, Scrum, SOLID, Kafka, Rabbit, Elastic Search, Elasticsearch, Django-test, DRF, Asyncio, DevOps. В портфолио Евгения есть проекты из разных отраслей: e-commerce & retail и fintech & banking. На каждом проекте он выполнял широкий спектр задач, включая разработку, тестирование, интеграцию с другими сервисами и системами, работу с базами данных и микросервисами. Опыт работы Евгения включает участие в проектах по разработке CRM системы интернет-магазина, системы мониторинга событий безопасности, обратной связи в мобильном приложении крупной сети продуктовых магазинов и административной консоли для банковских систем.

Подробнее
IoT • Manufacturing
ДК
Данила К.
Омск
Java разработчик
Middle+
3 116,88 Р/час
r2dbc
GitLab
Spring Data
Spring MVC
Flyway
REST
Java
Scrum
Git
Oracle
+35

Java-разработчик с опытом работы на проектах в сферах IoT и Manufacturing. На проекте по разработке сервиса-календаря для планирования встреч интегрировал Keycloak для создания учётных записей пользователей, работал с Kafka для обмена сообщениями между сервисами, разработал сервис уведомлений с помощью Kafka и Webflux. Реализовал генерацию уведомлений по SMTP. В рамках проекта по созданию автоматизированной системы управления сетью разработал внутренний сервис на Spring Boot и Hibernate, реализовал визуализацию данных с использованием Chart.js, функционал вычисления коррелированных уведомлений путём построения графа между элементами топологии. Участвовал в работе над системой управления производственными процессами: разрабатывал бэкенд-сервисы на Spring Boot, настраивал асинхронную обработку данных с использованием RabbitMQ, интеграцию с внешней системой по REST API. Ускорил работу СУБД путём оптимизации индексирования, реализовал шаблонную генерацию отчётов.

Подробнее