ИИ
Игорь И.
Мужчина
Россия, Санкт-Петербург, UTC+3
Ставка
4 625 Р/час
НДС не облагается
Специалист доступен с 3 октября 2024 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Главное о специалисте
Есть опыт работы со следующими технологиями: Arena data Hadoop, Greenplum(arenadata), yandex cloud, scala, spark, airflow, powerBI, PostgreSQL, Hive, Hdfs, Python, scala, Kafka Streams, Reddis, Mongo, Atlas, Ni-Fi. Также есть опыт руководства командой.
Проекты
(8 лет 11 месяцев)
Разработка программного обеспечения на проекте InPlan
Роль
Data engineer Lead
Обязанности
Обязанности:
Разработка и оптимизация алгоритмов на spark
Проведение code review
Проведение пилота использования разрабатываемого продукта в
связке со стэком arenadata
Стек специалиста на проекте
arenadata, Spark, Data, Scala, Hadoop, Yandex Cloud, GreenPlum, Apache AirFlow
Отрасль проекта
LifeStyle
Период работы
Февраль 2023 - Август 2024
(1 год 7 месяцев)
Разработка программного обеспечения
Роль
Head of data department
Обязанности
Руководитель сервисной группы дата-инженеров. Мы отвечали за
платформу данных, используемую отделами BI, ML, финансов, маркетинга и логистики. Моими основными обязанностями были: поиск нужных людей с
нужным набором навыков, создание архитектуры СХД, добавление
управления данными, определение приоритетности задач команды, проведение тендеров.
Стек специалиста на проекте
Jedis, NiFi, atlas, Spark, Hive, MongoDB, Scala, Hadoop, HDFS, Kafka Streams, PySpark, Python, PowerBI, Apache AirFlow, PostgreSQL
Отрасль проекта
LifeStyle
Период работы
Апрель 2022 - Февраль 2024
(1 год 11 месяцев)
NDA
Роль
Lead data engineer
Обязанности
Разработка и поддержка микросервисного приложения публикации- подписки, широко используемого рядом команд заказчика.
Обязанности:
● Выполнение POC
● Тестирование и настройка производительности.
● Документация
● Ведущая оффшорная команда
● Создание кластера Spark Kubernetes.
Достижения:
● Разработанный и интегрированный модуль проверки
работоспособности.
● Создана команда морских инженеров для независимой работы.
● Выполнены контрольные проверки по сбору и обработке метрик
времени выполнения из заданий Spark.
● Создал форк Spark из исходных кодов с поддержкой Kubernetes и
развернул его в Kubernetes вместе с Airflow.
Стек специалиста на проекте
Kubernetes, Spark, Scala, Kafka, Cassandra, HDFS, Java 11, Spring
Отрасль проекта
LifeStyle
Период работы
Сентябрь 2020 - Апрель 2022
(1 год 8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет