ТБ
Тимур Б.
Мужчина, 28 лет
Россия, Москва, UTC+3
Ставка
4 155,84 Р/час
НДС не облагается
Специалист доступен с 12 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Проф. сообщества
Знание языков
Русский — C2
Главное о специалисте
Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах».
Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark.
Опыт работы на проектах:
- Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст.
- Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata.
Построение и развитие банковского DWH на Oracle
Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive)
Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов)
Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus
Проект по транскрибации нескольких миллионов роликов с помощью ML
Проекты
(4 года 2 месяца)
Mediascope
Роль
Data Engineer
Обязанности
- Разработал и оптимизировал ETL-пайплайны для обработки рекламных данных (клики, Яндекс.Метрика, IoT-датчики) на Spark, сократив время обработки на 30%
- Реализовал унифицированную систему конфигурации Aiflow DAG’ов с помощью преобразования Excel -> JSON -> Airflow config, что снизило время сборки пайплайнов аналитиками на 40%
- Реализовал загрузку данных в Data Lake с интеграцией Kafka и Spark Streaming обеспечив ежедневную обработку до 3+ ТБ данных и последующую доставку и обработку витрин в Clickhouse
- Внедрил систему алертинга и мониторинга кластера, а также тестирование Data Quality с помощью Grafana и Prometheus, сократив время реагирования на инцидент с дней до часов/минут
- Интегрировал ML-модель Whisper для транскрибации рекламных видео в текст, автоматизировав процесс обработки 50к+ видео/сутки и снизив ресурсы компании на ручную обработку роликов
Стек специалиста на проекте
Docker, Python, Grafana, Kubernetes, Spark, ClickHouse, Hadoop, Kafka, Hbase, Apache AirFlow, NiFi, Whisper, DBT
Отрасль проекта
Media
Период работы
Январь 2023 - По настоящее время
(2 года 7 месяцев)
Ингосстрах Банк
Роль
Data Engineer
Обязанности
Работа на финтех проекте
- Реализовал клиентский Web-сервис с интерактивными отчётами по банковским продуктами на основе собранных в Oracle датасетов, полностью автоматизировал процесс доставки данных до клиентов, сократив время обработки обращений с дней до секунд.
- Унифицировал и очистил данные со всех неупорядоченных источников, сократив время на получение необходимых отчетов на 90%
- Работа с командной строкой Linux
- Работы с Greenplum, знакомство с Teradata
- Умение читать и писать конфигурационные файлы в YAML-формате.
Стек специалиста на проекте
Python, Oracle, Pl/SQL, R, DBT, defect
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2021 - Январь 2023
(1 год 8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Дипломы и сертификаты
инженер 2019 г.
Образование
Высшее
Учебное заведение
Филиал Северо-Кавказского федерального университета, Пятигорск
Специальность
Управление и информатика в технических системах (инженер)
Завершение учебы
2019 г.