Алексей К. Data инженер, Senior

ID 16877
АК
Алексей К.
Мужчина
Сербия, Белград, UTC+1
Ставка
4 110,32 Р/час
вкл. НДС 5% (152.38 Р)
Специалист доступен с 7 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
CI
cloud
Composer
core
CSS
Dataflow
ETL
Flask
Framework7
Git
GitHub Actions
glue
Groovy
HDFS
Hive
HTML
Java
JavaScript
Jenkins
Jira
JQuery
language
Linux
Lumen
macOS
MapReduce
Machine learning
MS Windows
oozie
orchestration
Pandas
PivotalTracker
platform
PostgreSQL
programming
Project management
Psycopg2
PyQT
QT
Scala
Scripting
Sklearn
Spark
SQL
SQLAlchemy
TeamCity
tkinter
Tox
TypeScript
VCS
Yarn
Базы данных
app
Cloud Functions
Google Cloud Platform
IAM
Nginx
Pub/Sub
Аналитика
данных
Проектирование
Разработка
Kubernetes
Node.js
Salesforce
SAP
Scheduler
SSO
Storage
Alembic
Apache Superset
Docker
flaskappbuilder
Google
Google API
JDBC
RDS
suite
Superset
миграции
репозиторий
системы контроля
API
CLI
Python3
REST API
uDeploy
PySpark
Python2
Программное обеспечение
Sparx
SVN
Исследование
Мониторинг
Поддержка пользователей
OAuth 2.0
Отрасли
E-commerce & Retail
EdTech
RnD
Знание языков
Английский — B2
Главное о специалисте
Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.
Проекты   (9 лет 8 месяцев)
Customer360.
Роль
Data инженер
Обязанности
Обязанности: 1.Предоставление данных для аналитики. 2.Разработка и сопровождение групп DAG Airflow для преобразования данных, включая сшивание данных. Достижения: 1. Разработал и спроектировал Metadag Airflow DAG, который автоматизирует и повышает уровень понимания процессов в нашей команде C360. Metadag организует все ежедневные процессы dags, которые есть в компании. 2. Перенес множество устаревших конвейеров Hadoop/Hive в Cloud Composer (Airflow). 3. Выполнил общую миграцию из локальных в облачные сервисы. Стек: Airflow (Composer), BigQuery, Google Cloud Platform, Cloud Functions, Cloud IAM, Pub/Sub, Dataproc, App Engine, Spark (SQL, RDD), Hive, Hadoop (MapReduce, HDFS), Jenkins, GitHub Actions, TeamCity, Python, Java, Groovy.
Стек специалиста на проекте
MapReduce, Разработка, app, Spark, Groovy, BigQuery, Hive, Google Cloud Platform, Java, Nginx, Composer, Hadoop, Проектирование, Cloud Functions, cloud, IAM, HDFS, Pub/Sub, SQL, Python, TeamCity, GitHub Actions, Аналитика, Apache AirFlow, Jenkins
Отрасль проекта
RnD
Период работы
Февраль 2023 - По настоящее время  (2 года 6 месяцев)
Крупнейшая компания товаров для дома. Разработка программного обеспечения для бухгалтерского учета для одного из крупнейших розничных продавцов товаров для дома.
Роль
Data инженер
Обязанности
Обязанности: 1. Разработка и создание приложения на Node.JS, интегрированного с решениями SAP и SalesForce. 2. Разработка пользовательской структуры БД, необходимой для учета и системы двойной записи. Стек: Node.JS, TypeScript/Javascript, Google Cloud Platform (Cloud Run, Kubernetes, Cloud Functions, Scheduler, Pub/Sub, Cloud SQL, Storage, IAM), SSO, Python.
Стек специалиста на проекте
JavaScript, Node.js, SQL, Python, SAP, Kubernetes, TypeScript, Базы данных, Cloud Functions, Scheduler, Storage, SSO, Google Cloud Platform, Salesforce, IAM, Pub/Sub, Разработка
Отрасль проекта
E-commerce & Retail
Период работы
Июнь 2022 - Январь 2023  (8 месяцев)
Customer360.
Роль
Data инженер
Обязанности
Обязанности: 1.Предоставление данных для аналитики. 2.Разработка и сопровождение групп DAG Airflow для преобразования данных, включая сшивание данных. Стек: Airflow (Composer), BigQuery, Google Cloud Platform, Cloud Functions, Cloud IAM, Pub/Sub, Dataproc, App Engine, Spark (SQL, RDD), Hive, Hadoop (MapReduce, HDFS), Jenkins, GitHub Actions, TeamCity, Python, Java, Groovy.
Стек специалиста на проекте
MapReduce, Разработка, app, Spark, Groovy, BigQuery, Hive, Google Cloud Platform, Java, Nginx, Composer, Hadoop, Проектирование, Cloud Functions, cloud, IAM, HDFS, Pub/Sub, SQL, Python, TeamCity, GitHub Actions, Аналитика, Apache AirFlow, данных, Jenkins
Отрасль проекта
RnD
Период работы
Август 2020 - Май 2022  (1 год 10 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Образование
Высшее
Учебное заведение
Санкт-Петербургский государственный электротехнический университет имени В. И. Ленина
Специальность
Компьютерные науки и технологии, компьютерная безопасность
Завершение учебы
2017 г.

Похожие специалисты

AI & Robotics • E-commerce & Retail • FinTech & Banking • Manufacturing
АП
Александр П.
Минск
Data инженер
Senior
4 935,06 Р/час
Data Analysis
Keras
language
Machine learning
Matplotlib
Numpy
OOP
Pandas
programming
Python
+65

Александр — опытный специалист в области Data Engineering с более чем 13-летним опытом работы на различных проектах. Он обладает глубокими знаниями и навыками в таких областях, как машинное обучение, анализ данных, программирование на Python и работа с большими данными. В своей работе Александр участвовал в разработке сервисов для быстрого поиска информации по Confluence компании, решения для оптимизации продаж в электронной коммерции с помощью умного поиска и умных рекомендаций, а также в научно-исследовательском проекте по обнаружению объектов на моментальных снимках физических процессов. Кроме того, он работал над многофункциональным приложением для инженеров, которое использует данные промышленного производства для расчёта оставшегося жизненного цикла устройства и вероятности отказа оборудования. Александр также имеет опыт работы в качестве разработчика клиентской части, где он занимался созданием конструктора бизнес-рассылок, дизайном и прототипом рекламных писем. Больше всего ему нравилось заниматься исследованиями пользовательского опыта, UX-анализом продуктов и проведением интервью с пользователями. Я ML-инженер с более чем двухлетним опытом. В IT, в целом, 10+ лет. До Data Science занимался Front-End разработкой в EPAM Systems. Обладаю успешным опытом как разработки ML-приложений на Python, так и всестороннего анализа данных.

Подробнее
LifeStyle
ГР
Гатауллин Р.
Казань
Data инженер
Senior
5 844,15 Р/час
DevOps
Docker
Flask
GitLab
GitLab CI/CD
metabase
ГОСТ
Управление командой
Apache AirFlow
PostgreSQL
+61

- Data Engineer с опытом работы с распределенными системами обработки данных более 9 лет; - Глубокие знания проектирования, внедрения и сопровождения ETL-процессов с нуля; - Практический опыт управления командой и управления продуктом; - Кандидат наук (= PhD в России) в области компьютерных наук. Опытный инженер данных Создал платформу данных с нуля. Из языков программирования — преимущественно Python, преимущественно SQL, Sparks, Scala. из облачных сервисов AWS — создание некоторой инфраструктуры, GCP — 5 мес. опыта. Инструменты управления — Docker-Master of Docker, Kubernetes — создает инфраструктуру воздушного потока. Базы данных: PostgreSQL, Redis-как брокер сообщений, Из отраслей-маркетинг, продажи, финтех Опыт работы в НЛП, ML-знает концепцию, работал руководителем группы, также работал специалистом по данным в Data Analyst.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее

Недавно просмотренные специалисты

EdTech • FinTech & Banking • LifeStyle
ЕП
Екатерина П.
Санкт-Петербург
Бизнес/системный аналитик
Senior
3 506,49 Р/час
Wireframes
UML
брокеры сообщений
Postman
Use case diagram
Базы данных
diagram
Бизнес-анализ
JSON
REST
+40

Системный аналитик с опытом 5 лет в банковских и проектах b2c и b2b. Работала на проектах полного цикла - от сбора и трассировки требований до выпуска в прод. Проводила детальный бизнес и системный анализ, проектировала архитектуру проекта, проектировала базу данных и API контракты, учитывая особенности пагинации и фильтрации, что сократило нагрузку на клиентскую часть. Участвовала в редизайне всех компонентов проекта от бизнес-части и анализа UX дизайна до участия в разделении монолита на микросервисы. Самая технически сложная и интересная задача: Одной из самых сложных задач было проведение глубокого и детального анализа существующей системы перед стартом ее рефакторинга. На проекте СберМобайла, сайта “Подключи” предназначен для сотрудников по регистрации сим-карт. Для успешного проектирования новой системы необходимо было понять текущее состояние и логику работы существующей системы. Однако устаревшая документация, датированная 2017 годом, не давала полного представления о работе системы. Это создавало сложности в понимании бизнес- и технической логики, что затрудняло дальнейшую разработку и проектирование новой архитектуры. Совместно с backend-разработчиком я провела анализ кода проекта и изучила логи, чтобы восстановить полное понимание системы. На основе полученных данных я составила новую документацию, включая BPMN диаграмму для описания бизнес-логики, sequence диаграмму для технической части и подробное описание API. Затем, выделив функционал для микросервисов, я спроектировала архитектуру будущего проекта, создав верхнеуровневое описание (HLD) и диаграммы C4 для каждого микросервиса. Реализация данной задачи позволила улучшить понимание системы и упростить процесс разработки. Новая архитектура на основе микросервисов обеспечила гибкость и масштабируемость, что, в свою очередь, ускорило внедрение новых функций. Это положительно сказалось на бизнес-процессах, увеличив количество продаж в следующем после запуска квартале на 25%. Куда хочется развиваться

Подробнее
E-commerce & Retail
АМ
Айдар М.
Бишкек
QA авто
Senior
3 211,19 Р/час
GitLab
watcher
Postman
HTTP
REST
Java
Git
API
Rest Assured
Selenium
+33

Имеет более 4х лет опыта в тестировании ПО. Начинал в компании Svetofor, где занимался ручным тестированием, проверял функциональность, проводил регрессионные тесты и тестировал систему на различных устройствах. Активно участвовал в планировании тестирования, создании тест-кейсов и тесно сотрудничал с разработчиками. В компании Elcom сосредоточился на автоматизации тестирования. Разработал автотесты для веб-приложений и API, что значительно ускорило процесс тестирования и повысило качество продукта. Автоматизация улучшила стабильность релизов и сократила количество дефектов на 30%. Внедрил инструменты автоматизации с нуля, настроил систему уведомлений о результатах автотестов, что позволило оперативно реагировать на сбои и минимизировать время простоя. Занимался менторством и адаптировал 4 новичков, что позволило ускорить их включение в работу и повысить продуктивность команды. Также активно взаимодействовал с заказчиками для уточнения требований и улучшения процесса тестирования.

Подробнее