Николай Н. Data инженер, Middle+

ID 17036
НН
Николай Н.
Мужчина
Германия, Арнсберг, UTC+2
Ставка
4 110,32 Р/час
вкл. НДС 5% (152.38 Р)
Специалист доступен с 21 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
Apache AirFlow
AWS
Azure
Cassandra
Data Lake
Databricks
Docker
DWH
ETL
Git
GreenPlum
Hadoop
Hbase
Hive
Oracle
Pipelines
Pl/SQL
platform
PostgreSQL
Python
SQL
Teradata
Моделирование данных
API
Базы данных
ETL-процессы
Работа с интеграциями
Написание документации
CI/CD
ClickHouse
FastAPI
Code Review
GitLab
Spark
Confluence
ANSI
Bitbucket
Azure DevOps
ELT процессы
datalake
GitHub
ETL ELT
Отрасли
E-commerce & Retail
RnD
Travel, Hospitality & Restaurant business
Проекты   (6 лет 6 месяцев)
Интеграция новых потоков данных
Роль
Дата инженер
Обязанности
Работал в команде, которая занималась интеграцией новых потоков данных. В ходе работы интегрировали 4 новых источника Обязанности: - отслеживание и реагирование на инцинденты - Интеграция с различными источниками данных (API,SFTP,другие базы данных), преобразование данных а также форматов данных и загрузка в кхд - Оптимизация и доработка существующих процессов. - Написание документации. - Построение витрин данных.
Стек специалиста на проекте
PostgreSQL, Git, API, SQL, Python, Oracle, GitHub, Hadoop, Базы данных, DWH, Azure DevOps, Azure, Написание документации, Работа с интеграциями, ELT процессы, datalake
Отрасль проекта
Travel, Hospitality & Restaurant business
Период работы
Июнь 2023 - По настоящее время  (2 года 3 месяца)
Оптимизация обработки данных
Роль
Дата инженер
Обязанности
Работал на проекте, целью которого было увеличить объемы обрабатываемых данных (получилось достичь результата в 100гб в сутки) Обязанности: - Написание документации - Разработка ETL потоков - Разработка полноценного Pipeline(Greenplum/Hadoop/Spark) - CI/CD, настройка деплоймента среды для оркестрации Airflow DAG's - участие в код ревью
Стек специалиста на проекте
API, Oracle, GitHub, Spark, Azure DevOps, Code Review, Apache AirFlow, Pipelines, CI/CD, datalake, ETL ELT
Отрасль проекта
RnD
Период работы
Сентябрь 2021 - Июнь 2023  (1 год 10 месяцев)
Проект внедрения нового модуля для Teradata DWH
Роль
Дата Инженер
Обязанности
Расширил параметры оптимизации проектных затрат, что способствовало снижению расходов и снизило показатель time-to-market Внедрил архивирование в Hadoop, освободив 2 терабайта хранилища базы данных Разработал процедуры архивирования в Hadoop, освободив 2 терабайта хранилища базы данных благодаря эффективному управлению архивированием основных таблиц Поддержал качество данных на уровне 98%+, согласовав вычисления исторических данных с выходами системы для повышения эффективности
Стек специалиста на проекте
Git, Confluence, SQL, Teradata, Hadoop, Базы данных, GreenPlum
Отрасль проекта
E-commerce & Retail
Период работы
Март 2019 - Сентябрь 2021  (2 года 7 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
МГТУ им Баумана
Специальность
Автономные информационные и управляющие системы
Завершение учебы
2008 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее
E-commerce & Retail • IoT • Telecom
АБ
Андрей Б.
Минск
Data инженер
Senior
4 155,84 Р/час
DevOps
DWH
ETL ELT
Pl/SQL
Python
SQL
Моделирование
облачные сервисы
Оптимизация запросов
Разработка
+55

Андрей — Data инженер уровня Senior из Минска, Беларусь. Специализируется на разработке и оптимизации аналитических платформ и хранилищ данных (DWH). Имеет опыт работы с ETL/ELT-процессами, облачными сервисами AWS, инструментами Apache Airflow, Apache Kafka, Apache Spark, а также с базами данных PostgreSQL, MySQL, Oracle и Snowflake. Участвовал в проектах для отраслей E-commerce & Retail, IoT и Telecom. Среди проектов — разработка аналитической платформы для розничной сети, интеграция данных из CRM, ERP и POS-систем, автоматизация обновления данных и улучшение доступа к аналитике через BI-панели. Также занимался разработкой DWH для IT-компании, преобразованием сырых данных из Data Lake и их интеграцией в DWH для решения ML-задач. Обладает навыками работы с системами контроля версий Git, GitLab, Bitbucket, а также опытом настройки CI/CD-конвейеров. Создавал техническую документацию и сотрудничал с командами аналитиков для согласования решений по обработке данных.

Подробнее

Недавно просмотренные специалисты

BioTech, Pharma, Health care & Sports • FinTech & Banking • Realty & Constructoring
ОВ
Олег В.
Гродно
Data инженер
Senior
4 196,36 Р/час
PostgreSQL
MySQL
Jira
Python
Oracle
Linux
IntelliJ IDEA
MariaDB
Informatica
Java 8-11
+26

Разработчик с 20+ лет опыта работы в разработке программного обеспечения. Большой опыт работы с базами данных, в том числе с настройкой производительности SQL. Опыт работы на всех этапах жизненного цикла разработки программного обеспечения: создание идеи и развитие, разработка, тестирование, внедрение в производство и поддержка; 21-летний опыт разработки Oracle (9i, 10g, 11g), включающий в себя: - логический и физический дизайн базы данных, распределение памяти, разбиение, сегменты таблиц и индексов, роли и привилегии; - настройка производительности SQL, индексация, распараллеливание, объяснение планов, подсказки, статистика; - глубокие знания в логическому и физическом моделировании данных с использованием методов нормализации; - программирование ETL-процессов с использованием PL/SQL, Informatica; - программирование PL/SQL, хранимые процедуры, функции, пакеты, триггеры, типы; - программирование с использованием динамического SQL и PL/SQL; - работа с Oracle: разработка приложений с использованием Oracle Forms; разработка отчетов и визуализация данных с использованием Oracle Reports, Oracle Graphics и Oracle BI Publisher; - разработка приложений с использованием HTML/XML/CSS/XSLT; Манипулирование, очистка и обработка данных с использованием SQL. Анализ необработанных данных, подведение итогов и выработка рекомендаций. Проектирование, разработка и внедрение новой функциональности. Разработка приложений с использованием Java Core, Java Spring Boot, ORM Hibernate. Дополнительная информация: - Сильные аналитические способности, самомотивация, способность адаптироваться к новой среде.

Подробнее