Николай Н. Data инженер, Middle+
ID 17036
НН
Николай Н.
Мужчина
Германия, Арнсберг, UTC+2
Ставка
4 110,32 Р/час
вкл. НДС 5% (152.38 Р)
Специалист доступен с 3 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Проекты
(6 лет 5 месяцев)
Интеграция новых потоков данных
Роль
Дата инженер
Обязанности
Работал в команде, которая занималась интеграцией новых потоков данных. В ходе работы интегрировали 4 новых источника
Обязанности:
- отслеживание и реагирование на инцинденты
- Интеграция с различными источниками данных (API,SFTP,другие базы данных), преобразование данных а также форматов данных и загрузка в кхд
- Оптимизация и доработка существующих процессов.
- Написание документации.
- Построение витрин данных.
Стек специалиста на проекте
PostgreSQL, Git, API, SQL, Python, Oracle, GitHub, Hadoop, Базы данных, DWH, Azure DevOps, Azure, Написание документации, Работа с интеграциями, ELT процессы, datalake
Отрасль проекта
Travel, Hospitality & Restaurant business
Период работы
Июнь 2023 - По настоящее время
(2 года 2 месяца)
Оптимизация обработки данных
Роль
Дата инженер
Обязанности
Работал на проекте, целью которого было увеличить объемы обрабатываемых данных (получилось достичь результата в 100гб в сутки)
Обязанности:
- Написание документации
- Разработка ETL потоков
- Разработка полноценного Pipeline(Greenplum/Hadoop/Spark)
- CI/CD, настройка деплоймента среды для оркестрации Airflow DAG's
- участие в код ревью
Стек специалиста на проекте
API, Oracle, GitHub, Spark, Azure DevOps, Code Review, Apache AirFlow, Pipelines, CI/CD, datalake, ETL ELT
Отрасль проекта
RnD
Период работы
Сентябрь 2021 - Июнь 2023
(1 год 10 месяцев)
Проект внедрения нового модуля для Teradata DWH
Роль
Дата Инженер
Обязанности
Расширил параметры оптимизации проектных затрат, что способствовало снижению расходов и снизило показатель time-to-market
Внедрил архивирование в Hadoop, освободив 2 терабайта хранилища базы данных
Разработал процедуры архивирования в Hadoop, освободив 2 терабайта хранилища базы данных благодаря эффективному управлению архивированием основных таблиц
Поддержал качество данных на уровне 98%+, согласовав вычисления исторических данных с выходами системы для повышения эффективности
Стек специалиста на проекте
Git, Confluence, SQL, Teradata, Hadoop, Базы данных, GreenPlum
Отрасль проекта
E-commerce & Retail
Период работы
Март 2019 - Сентябрь 2021
(2 года 7 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
МГТУ им Баумана
Специальность
Автономные информационные и управляющие системы
Завершение учебы
2008 г.