АС
Анатолий С.
Мужчина, 27 лет
Россия, Санкт-Петербург, UTC+3
Ставка
2 883,11 Р/час
НДС не облагается
Специалист доступен с 1 августа 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data аналитик
Грейд
Навыки
Отрасли
Знание языков
Английский — B1
Главное о специалисте
Data Engineer с опытом построения масштабируемых ETL/ELT пайплайнов, создания хранилищ данных (Data Vault, Kimball), интеграции с внешними источниками и оптимизации аналитических запросов. Уверенно работает с ClickHouse, PostgreSQL, Airflow, dbt, Python. Имеет опыт построения аналитических витрин, графов связей и оценки рисков. Системный подход, глубокий интерес к архитектуре данных и операционным системам.
Проекты
(4 года 2 месяца)
Аналитическая платформа для анализа государственных закупок
Роль
Data Engineer
Обязанности
- Разработка и поддержка масштабируемых ETL/ELT пайплайнов (перенос данных из PostgreSQL в ClickHouse, объём до 500 GB/сутки)
- Переписывание устаревших скриптов на многопоточную обработку с использованием ThreadPoolExecutor
- Настройка DAG-ов в Airflow: SLA, алерты, мониторинг
- Проектирование хранилища данных по методологии Data Vault 2.0 и создание интерфейсного слоя в ClickHouse
- Интеграция с внешними API и СУБД: загрузка данных из JSON, CSV, XML, Parquet, PostgreSQL, MySQL, Oracle, MS SQL
- Внедрение автоматических проверок качества данных через dbt и кастомные Python-скрипты
- Оптимизация сложных аналитических SQL-запросов с использованием CTE, оконных функций, агрегаций
- Поддержка и развитие архитектуры пайплайнов, включая тестирование и документацию
Достижения
- Ускорение выполнения задач в 3–5 раз за счёт многопоточности
- Повышение стабильности пайплайнов и прозрачности процессов обработки данных
- Снижение количества ошибок в данных благодаря автоматическим проверкам
- Повышение гибкости архитектуры за счёт использования Data Vault
- Успешная интеграция с более чем 6 внешними источниками данных
Стек специалиста на проекте
PostgreSQL, Docker, Python, Linux, ClickHouse, Apache AirFlow, DBT
Отрасль проекта
LifeStyle
Период работы
Август 2023 - Июль 2025
(2 года)
BI-аналитика и построение витрин для внутренних продуктов
Роль
Аналитик данных
Обязанности
- Написание аналитических SQL-запросов к PostgreSQL и ClickHouse, включая сложные конструкции: CTE, оконные функции, агрегации, фильтрация по бизнес-логике
- Построение витрин данных (data marts) под задачи отчётности, графов связей и BI
- Сопровождение метрик: расчёты, проверка корректности агрегирования, соответствие бизнес-логике
- Выгрузка и нормализация данных из внешних источников: CSV, JSON, XML, Parquet
- Формирование таблиц для фронтенда и продуктовой аналитики
- Оптимизация старых аналитических скриптов: перенос вычислений на уровень СУБД, сокращение времени выполнения
- Интеграция с внешними сервисами через API
- Построение графов связей между организациями, оценка рисков на основе транзакционных данных
Достижения
- Сокращение времени выполнения аналитических скриптов до 60%
- Повышение точности отчётности и соответствия бизнес-логике
- Увеличение охвата данных за счёт интеграции с внешними источниками
- Успешная реализация графовой модели связей, применяемой в риск-оценке
- Повышение качества продуктовой аналитики и визуализации данных
Стек специалиста на проекте
API, ClickHouse, Pandas, ostgresql
Отрасль проекта
LifeStyle
Период работы
Июнь 2021 - Июль 2023
(2 года 2 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Санкт-Петербургский государственный морской технический университет
Специальность
Финансы инноваций
Завершение учебы
2024 г.
Высшее
Учебное заведение
Государственный институт экономики, финансов, права и технологий
Специальность
Финансы и кредит
Завершение учебы
2022 г.