ИЕ
Илья Е.
Мужчина, 40 лет
Россия, Москва, UTC+3
Ставка
3 766,23 Р/час
НДС не облагается
Специалист доступен с 4 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B1
Главное о специалисте
Data-инженер с опытом работы более 11 лет.
Разрабатывал внутренние микросервисы для взаимодействия с элементами CRM, обеспечивая интеграцию со сторонними API. Создавал механизмы интеграции с внешними системами и API для обмена данными. Внедрял функционал для сбора данных, предварительной фильтрации и последующей визуализации и анализа с помощью ELK. Работал со стеком технологий: Java 11, Maven, Git, Spring Boot, Hibernate ORM, PostgreSQL, Kafka, Docker, ELK Stack (Elasticsearch, Logstash, Kibana).
Участвовал в разработке и поддержке внутреннего инструмента маршрутизации данных. Реализовывал Dags на AirFlow для внутренних batch-процессов, взаимодействовал с NiFi через callback. Обогащал данные на основе открытого API ФИАС (КЛАДР) с последующей записью информации в PostgreSQL и построением витрин в ClickHouse. Создавал юнит-тесты c использованием SpringBootTest и TestContainers.
Занимался разработкой механизма выявления аномальных ситуаций в потоковых данных. Отслеживал состояние служб и микросервисов с использованием Zabbix, Prometheus с последующей визуализацией в Grafana. Собирал данные с использованием стека EFK (Elasticsearch, Fluentd, Kibana) на основе открытого API IP2Location, IP Vigilante.
Проекты
(11 лет 3 месяца)
Разработка и поддержка внутреннего инструмента маршрутизации данных
Роль
Data инженер
Обязанности
- Реализация Dags на AirFlow для внутренних batch-процессов с использованием следующих операторов: BashOperator, PythonOperator, HTTPOperator, SqlOperator, Sensor
- Реализация взаимодействия AirFlow с NiFi через callback (AirFlow – планировщик, NiFi – бэкэнд инструмент)
- Обогащение данных на основе открытого API ФИАС (КЛАДР) с последующей записью информации в PostgreSQL и построением витрин в ClickHouse
- Разработка и рефакторинг кода внутренней low-code платформы
- Создание юнит-тестов c использованием SpringBootTest и TestContainers
- Участие в планировании задач и оценке времени на выполнение в рамках Agile-процесса.
Стек специалиста на проекте
PostgreSQL, Git, API, Spring Boot, Spark, ClickHouse, Java 11, TestContainers, Apache AirFlow, Spring Boot Test, Callbacks, NiFi
Отрасль проекта
FinTech & Banking
Период работы
Январь 2024 - Декабрь 2024
(1 год)
Разработка внутренних микросервисов для взаимодействия с элементами CRM
Роль
Data инженер
Обязанности
Задачи:
- Разработка микросервисов
- Обеспечение интеграции микросервисов со сторонними API
- Разработка механизмов интеграции с внешними системами и API для обмена данными
- Документирование разработанных решений для удобства поддержки
- Уточнение требований бизнес-пользователей
- Реализация функционала для сбора данных, предварительной фильтрации и последующей визу-ализации и анализа с помощью ELK.
Стек: Java 11, Maven, Git, Spring Boot, Hibernate ORM, PostgreSQL, Kafka, Docker, ELK Stack (Elas-ticsearch, Logstash, Kibana)
Стек специалиста на проекте
PostgreSQL, Git, Docker, Elasticsearch, API, Kibana, Spring Boot, Maven, Hibernate ORM, Microservices, Kafka, Java 11, Logstash, ELK Stack
Отрасль проекта
FinTech & Banking
Период работы
Март 2023 - Декабрь 2023
(10 месяцев)
Разработка механизма выявления аномальных ситуаций в потоковых данных
Роль
Разработчик ПО
Обязанности
- Отслеживание состояния служб и микросервисов с использованием Zabbix, Prometheus (написа-ние выражений на PromQL выражения) с последующей визуализацией в Grafana
- Реализация сбора данных с использованием стека EFK (Elasticsearch, Fluentd, Kibana) на основе открытого API IP2Location, IP Vigilante
- Построение AdHoc запросов (Spark, Hadoop), где данные находились в виде Parquet-файлов
- Создание вложенных запросов ElasticSearch
Стек специалиста на проекте
Elasticsearch, Grafana, Prometheus, Spark, Hadoop, Zabbix
Отрасль проекта
Manufacturing
Период работы
Октябрь 2018 - Март 2023
(4 года 6 месяцев)
Формат работы
Тип занятости
Фулл-тайм, Парт-тайм (20 ч/день)
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Государственный университет (ОрелГТУ)
Специальность
«Факультет прикладной информатики, Инженер»
Завершение учебы
2013 г.