Каталог специалистов

Data-инженер с опытом работы более 11 лет. Разрабатывал внутренние микросервисы для взаимодействия с элементами CRM, обеспечивая интеграцию со сторонними API. Создавал механизмы интеграции с внешними системами и API для обмена данными. Внедрял функционал для сбора данных, предварительной фильтрации и последующей визуализации и анализа с помощью ELK. Работал со стеком технологий: Java 11, Maven, Git, Spring Boot, Hibernate ORM, PostgreSQL, Kafka, Docker, ELK Stack (Elasticsearch, Logstash, Kibana). Участвовал в разработке и поддержке внутреннего инструмента маршрутизации данных. Реализовывал Dags на AirFlow для внутренних batch-процессов, взаимодействовал с NiFi через callback. Обогащал данные на основе открытого API ФИАС (КЛАДР) с последующей записью информации в PostgreSQL и построением витрин в ClickHouse. Создавал юнит-тесты c использованием SpringBootTest и TestContainers. Занимался разработкой механизма выявления аномальных ситуаций в потоковых данных. Отслеживал состояние служб и микросервисов с использованием Zabbix, Prometheus с последующей визуализацией в Grafana. Собирал данные с использованием стека EFK (Elasticsearch, Fluentd, Kibana) на основе открытого API IP2Location, IP Vigilante.