СТ
Сергей Т.
Мужчина, 20 лет
Россия, Москва, UTC+3
Ставка
3 596,53 Р/час
вкл. НДС 5% (133.33 Р)
Специалист доступен с 12 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Главное о специалисте
Data Engineer с 3-летним опытом работы и 4-летним стажем в IT.
Начинал как веб-разработчик на Python/Django/Rest.
За это время я успел поработать в 4 компаниях, получив разносторонний опыт в проектировании баз данных, разработке ETL/ELT пайплайнов, управлении и трансформации данных.
Привык разбираться в сложных задачах и находить эффективные решения.
Я постоянно стремлюсь расширять свои знания и навыки, слежу за новыми тенденциями в области Data Engineering.
Умею находить информацию, систематизировать ее и применять на практике.
Буду рад достичь новых высот в этой сфере и внести вклад в развитие компании.
Проекты
(3 года 4 месяца)
SberTech
Роль
Data Engineer
Обязанности
- Работал внутри Hadoop системы с HDFS, Hive, Hue - загрузка, извлечение, обработка данных и использованием самописных скриптов и фреймворков на Python с применением Spark, Pandas, Requests;
- Работал с потоками извлечения данных и последующей загрузки внутрь основного хранилища на HDFS. Писал им конфигурации, обновлял под INIT и инкрементальную сверки;
- Принимал участие в написании фреймворка, который создает директорию с дистрибутивом, содержащим конфигурационные файлы для дальнейшей раскатки потоков, отвечающих за выгрузку данных с Postgre Кластеров внутрь HDFS, с возможностью подключения не только новых реплик, но так же изменения уже существующих;
- Занимался созданием реплик основного источника и их сопровождением.
Стек специалиста на проекте
Python, Hive, Spark, Pandas, Requests, HDFS, hue
Отрасль проекта
FinTech & Banking
Период работы
Март 2025 - По настоящее время
(5 месяцев)
Альфа-Банк (Россия)
Роль
Старший Инженер
Обязанности
- Обеспечивал стабильность и надежность ETL-пайплайнов, оперативно отслеживая и устраняя сбои в Airflow и IPC Informatica;
- Проводил анализ первопричин проблем в ETL-процессах, разрабатывал и внедрял решения для их предотвращения;
- Управлял учетными записями, правами доступа и данными сотрудников банка в базах данных Oracle и GreenPlum, обеспечивая соответствие требованиям безопасности и нормативным требованиям;
- Оптимизировал Airflow DAG-и и отдельные задачи (Tasks), работая с запросами данных для повышения производительности и снижения времени выполнения;
- Принимал участие в процессе миграции с Oracle на GreenPlum и с IPC Informatica на Airflow, адаптируя и оптимизируя существующие ETL-процессы под новую инфраструктуру;
- Разрабатывал и поддерживал витрины данных в DWH.
Стек специалиста на проекте
Oracle, Informatica, Spark, GreenPlum, Apache AirFlow, IPC
Отрасль проекта
FinTech & Banking
Период работы
Декабрь 2024 - Март 2025
(4 месяца)
Brealit
Роль
Разработчик SQL
Обязанности
- Разрабатывал веб-сервисы для заказчиков в производственной сфере, используя созданные базы данных (PostgreSQL, MySQL) для хранения и обработки информации;
- Разрабатывал интуитивно понятный веб-интерфейс для взаимодействия с базами данных, включая отображение данных, настройку видимости информации, реализацию сортировки, добавление кнопок взаимодействия, форм для заполнения таблиц и связей между таблицами;
- Участвовал в ETL/ELT процессах в DWH на ClickHouse, используя Airflow DAGs и SQL-запросы для построения витрин данных;
- Самостоятельно изучил и освоил SQL Диалект Компании (с неполной документацией), что значительно повысило мои навыки самостоятельного обучения и решения проблем;
- Разработал веб-сервис с базой данных для Газпрома, обеспечивая возможность интеграции с DWH и построения аналитических отчетов;
- Разрабатывал DWH для компаний заказчиков.
Стек специалиста на проекте
PostgreSQL, MySQL, XML, JavaScript, PHP, SQL, ClickHouse, Apache AirFlow
Отрасль проекта
Urban technology
Период работы
Май 2024 - Декабрь 2024
(8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский политехнический университет
Специальность
Информационные технологии, Автоматизированные системы обработки информации и управления (инженер)
Завершение учебы
2027 г.