АК
Алексей К.
Мужчина
Сербия, Белград, UTC+1
Ставка
4 000 Р/час
НДС не облагается
Специалист доступен с 9 октября 2024 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B2
Главное о специалисте
Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech.
В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей.
Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.
Проекты
(8 лет 11 месяцев)
Customer360.
Роль
Data инженер
Обязанности
Обязанности:
1.Предоставление данных для аналитики.
2.Разработка и сопровождение групп DAG Airflow для преобразования данных, включая сшивание данных.
Достижения:
1. Разработал и спроектировал Metadag Airflow DAG, который автоматизирует и повышает уровень понимания процессов в нашей команде C360. Metadag организует все ежедневные процессы dags, которые есть в компании.
2. Перенес множество устаревших конвейеров Hadoop/Hive в Cloud Composer (Airflow).
3. Выполнил общую миграцию из локальных в облачные сервисы.
Стек: Airflow (Composer), BigQuery, Google Cloud Platform, Cloud Functions, Cloud IAM, Pub/Sub, Dataproc, App Engine, Spark (SQL, RDD), Hive, Hadoop (MapReduce, HDFS), Jenkins, GitHub Actions, TeamCity, Python, Java, Groovy.
Стек специалиста на проекте
MapReduce, Разработка, app, Spark, Groovy, BigQuery, Hive, Google Cloud Platform, Java, Nginx, Composer, Hadoop, Проектирование, Cloud Functions, cloud, IAM, HDFS, Pub/Sub, SQL, Python, TeamCity, Jenkins, GitHub Actions, Аналитика, Apache AirFlow, процессов
Отрасль проекта
RnD
Период работы
Февраль 2023 - По настоящее время
(1 год 9 месяцев)
Крупнейшая компания товаров для дома. Разработка программного обеспечения для бухгалтерского учета для одного из крупнейших розничных продавцов товаров для дома.
Роль
Data инженер
Обязанности
Обязанности:
1. Разработка и создание приложения на Node.JS, интегрированного с решениями SAP и SalesForce.
2. Разработка пользовательской структуры БД, необходимой для учета и системы двойной записи.
Стек: Node.JS, TypeScript/Javascript, Google Cloud Platform (Cloud Run, Kubernetes, Cloud Functions, Scheduler, Pub/Sub, Cloud SQL, Storage, IAM), SSO, Python.
Стек специалиста на проекте
JavaScript, Разработка, Kubernetes, Базы данных, Scheduler, Google Cloud Platform, SAP, Salesforce, Cloud Functions, Storage, IAM, Pub/Sub, SSO, SQL, Python, TypeScript, Node.js
Отрасль проекта
E-commerce & Retail
Период работы
Июнь 2022 - Январь 2023
(8 месяцев)
Customer360.
Роль
Data инженер
Обязанности
Обязанности:
1.Предоставление данных для аналитики.
2.Разработка и сопровождение групп DAG Airflow для преобразования данных, включая сшивание данных.
Стек: Airflow (Composer), BigQuery, Google Cloud Platform, Cloud Functions, Cloud IAM, Pub/Sub, Dataproc, App Engine, Spark (SQL, RDD), Hive, Hadoop (MapReduce, HDFS), Jenkins, GitHub Actions, TeamCity, Python, Java, Groovy.
Стек специалиста на проекте
MapReduce, Разработка, app, Spark, Groovy, BigQuery, Hive, Google Cloud Platform, Java, Nginx, Composer, Hadoop, Проектирование, Cloud Functions, cloud, IAM, HDFS, Pub/Sub, SQL, Python, TeamCity, Jenkins, GitHub Actions, Аналитика, Apache AirFlow, процессов, данных
Отрасль проекта
RnD
Период работы
Август 2020 - Май 2022
(1 год 10 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Образование
Высшее
Учебное заведение
Санкт-Петербургский государственный электротехнический университет имени В. И. Ленина
Специальность
Компьютерные науки и технологии, компьютерная безопасность
Завершение учебы
2017 г.