Владислав К. Инженер БД, Middle+

ID 30295
ВК
Владислав К.
Мужчина, 20 лет
Беларусь, Гомель, UTC+3
Ставка
3 311,69 Р/час
НДС не облагается
Специалист доступен с 10 октября 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Инженер БД
Грейд
Middle+
Навыки
Apache AirFlow
Apache Spark
BI
C#
cloud
Cloud Functions
compute
Data
Data Vault
DevOps
Docker
Docker Compose
ER
Git
GitHub
GitLab
IAM
Kubernetes
Microsoft
Numpy
Object
Pandas
PostgreSQL
Power BI
proc
PySpark
Python
service
SQL
Storage
T-SQL
Virtual Machines
Yandex Cloud
Big Data
datalake
DWH
Hadoop
HDFS
Hive
S3
Trino
Отрасли
E-commerce & Retail
FinTech & Banking
Проекты   (2 года 7 месяцев)
ИНФРАСТРУКТУРА УПРАВЛЕНИЯ БАНКОВСКОЙ АНАЛИТИКОЙ
Роль
Data-инженер
Обязанности
Разработка, развертывание и мониторинг модульных DAG'ов в Airflow для оркестрации пайплайнов; Взаимодействие с DevOps-инженерами по вопросам развертывания и мониторинга приложений в Kubernetes; Разработка оптимизированных SQL-запросов для анализа больших наборов данных, обеспечение точности, корректности и соответствия бизнес-требованиям; Оптимизация SSIS-пакетов, минимизация времени выполнения за счет настройки индексов и параметров потоков данных; Разработка адаптеров для интеграции внешних API и внутренних систем, обеспечивающая унифицированный доступ к данным в корпоративной экосистеме; Поддержка стандартов кодирования T-SQL и проведение ревью скриптов коллег для повышения качества кода; Разработка Python-скриптов для эффективной конвертации данных между форматами; Совершенствование механизмов передачи данных в рамках ETL, повышающее скорость трансформации и загрузки в аналитические хранилища; Разработка динамически генерируемых DAG’ов в Airflow c использованием Python; Разработка CI/CD-пайплайнов с использованием GitLab; Настройка логирования и мониторинга выполнения PySpark-джобов для обнаружения узких мест; Профилирование и оптимизация Python-кода в ETL-заданиях; Разработка ETL-скриптов на PySpark для извлечения, обработки и загрузки данных из MS SQL и PostgreSQL в целевое хранилище; Реализация процедур резервного копирования и восстановления пакетов ETL для обеспечения отказоустойчивости; Контейнеризация приложений с помощью Docker и Docker Compose; Отслеживание финансовых метрик и разработка мер по минимизации рисков; Проведение код-ревью Python-кода и SQL-запросов; Документация SQL-решений и правил написания запросов.
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Python, Power BI, Kubernetes, GitLab, Hadoop, Pandas, Numpy, Apache Spark, T-SQL, DWH, Microsoft, Docker Compose, Apache AirFlow, S3, PySpark
Отрасль проекта
FinTech & Banking
Период работы
Июль 2024 - По настоящее время  (1 год 4 месяца)
СИСТЕМА ОНЛАЙН-ТОРГОВЛИ
Роль
Data-инженер
Обязанности
Оптимизация SQL-запросов и структуры таблиц в PostgreSQL для обеспечения высокой производительности OLTP-операций; Создание хранимых процедур (скриптов) в PostgreSQL; Проектирование и реализация ETL-процессов на PySpark (Hadoop, S3, Trino) для трансформации данных в аналитическом хранилище; Разработка и оптимизация DAG'ов в Apache Airflow для оркестрации пайплайнов обработки данных о заказах и клиентах; Контейнеризация приложений с помощью Docker и Docker Compose; Разработка и поддержка сложных SQL-запросов и триггеров в PostgreSQL; Реализация PySpark-джобов для преобразования форматов файлов перед архивированием; Разработка Python-скриптов для извлечения данных из REST API сторонних сервисов; Мониторинг и управление выполнением DAG в Apache Airflow для обеспечения стабильности и своевременности процессов; Адаптировал и запускал PySpark-джобы в управляемых кластерах Yandex Data Proc, обеспечивая эффективную обработку больших объемов данных о заказах и клиентской активности; Настройка конвертации XML в форматы для аналитической обработки; Разработка интерфейсов взаимодействия между C#-модулями и SQL-серверами для безопасной и эффективной работы; Разработка unit-тестов с использованием Python и фреймворка PyTest для ETL-компонентов; Внедрял стандарты работы с данными на платформе, обеспечивая их каталогизацию, документирование и соответствие внутренним регламентам; Создавал и внедрял систему мониторинга для оперативного отслеживания состояния витрин данных, гарантируя их качество и своевременное обновление.
Стек специалиста на проекте
PostgreSQL, Docker, C#, SQL, Python, GitHub, Hive, Data, Hadoop, Pandas, Numpy, Object, Apache Spark, Big Data, DWH, Storage, Docker Compose, Apache AirFlow, Yandex Cloud, S3, HDFS, PySpark, cloud, datalake, Trino, proc, compute, service
Отрасль проекта
E-commerce & Retail
Период работы
Апрель 2023 - Июль 2024  (1 год 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет

Похожие специалисты

AgroTech • Cloud Services • Travel, Hospitality & Restaurant business
МП
Максим П.
Минск
Инженер БД
Middle+
4 545,45 Р/час
Apache AirFlow
Apache Hadoop
apache hive
Apache NiFi
Apache Spark
athena
AWS
Bash scripting
Bitbucket
ClickHouse
+54

Дата Инженер баз данных с опытом работы более 5 лет. Квалифицированный специалист с обширным опытом работы в области проектирования, разработки и оптимизации решений для обработки и хранения данных. Уверенно использую широкий стек технологий, включая Java, Python, SQL, Apache Airflow, Hadoop, HDFS, Hive, Yandex Cloud и AWS, для реализации сложных проектов и автоматизации процессов. Обладаю навыками разработки и управления крупномасштабными системами, такими как DWH и Data Lake, а также оптимизацией ETL/ELT-процессов для повышения производительности. Внимательно слежу за последними тенденциями в отрасли, что позволяет внедрять инновационные решения для достижения наилучших результатов. Стремлюсь развивать свои компетенции и вносить значительный вклад в реализацию стратегических целей команды и компании.

Подробнее
E-commerce & Retail • Manufacturing • Telecom
АЛ
Андрей Л.
Москва
Инженер БД
Senior
4 285,71 Р/час
anchor
Ansible
Apache
Apache AirFlow
Apache Spark
Avro
Azure
Bash
Big Data
cdc
+64

Андрей — инженер баз данных уровня Senior из Москвы с опытом работы в сферах Telecom, Manufacturing и E-commerce & Retail. Специализируется на проектировании и оптимизации хранилищ данных, работе с Big Data и ETL-процессами. Владеет широким спектром технологий и инструментов, включая Apache AirFlow, Apache Spark, Hadoop, PostgreSQL, Oracle, Microsoft SQL Server, ClickHouse, Greenplum и другие. Имеет опыт работы на следующих проектах: - МегаФон: миграция корпоративного хранилища данных, проектирование многоуровневой архитектуры DWH, внедрение практик DataOps. - Тера Интегро: разработка и оптимизация распределённых DWH, создание алерт-систем на базе Zabbix, потоковая обработка данных. - НЛМК: миграция данных, оптимизация PostgreSQL, поддержка проектов и разрешение инцидентов, разработка ETL-процессов. - IQVIA: разработка и оптимизация хранилищ данных, стриминговая обработка данных, моделирование данных, обработка больших данных с использованием Apache Spark.

Подробнее
E-commerce & Retail • Media
НШ
Наталья Ш.
Минск
Инженер БД
Middle+
4 415,58 Р/час
Python
SQL
Apache
Matplotlib
Seaborn
Superset
YANDEX DATALENS
Numpy
Pandas
axure
+42

BI-разработчик / Дата аналитик с 4+ годами опыта. Чтобы сделать проект высокого уровня, я ориентируюсь на результат, а не на процесс. Благодаря такому подходу я декомпозирую сложные, длительные задачи на короткие спринты. Я готова выслушать требования, задать вопросы и предложить свои идеи по их улучшению. Языки программирования Python, SQL. BI и визуализация данных Apache Superset, Yandex DataLens, Matplotlib, Seaborn. Data Science Pandas, Numpy. Облачные технологии Azure(Data Factory, Data Lake, Synapse, Cosmos DB, DataBricks, SQL Azure, etc.), GCP(Compute Engine, BigQuery, BigTable, Cloud Functions, Cloud Storage, etc). Data Modeling Dimensional Modeling (Star схема, Snowflake схема), Entity-Relationship (ER) Modeling, Data Vault Modeling, Нормализация / Денормализация. Базы данных PostgreSQL, MySQL, Clickhouse, Redis. Маркетинг Google Analytics, Yandex Metrics. Системы контроля версий Git, Github, Bitbucket. Домены Электронная коммерция, Музыкальный магазин Достижения SQL оптимизация Проведены проверки кода SQL для обеспечения соблюдения стандартов кодирования и выявления возможностей оптимизации, что привело к снижению скорости кода SQL на 20 % и повышению удобства сопровождения рабочих процессов обработки данных. Оптимизация дашбордов Интегрирование расширенных средств визуализации, такие как тепловые карты, древовидные карты и расширенные диаграммы, в информационные панели для выявления скрытых тенденций и закономерностей в данных, что позволяет принимать решения и повысить операционную эффективность на 20%.

Подробнее

Недавно просмотренные специалисты

Отрасли не указаны
ЕЖ
Евгений Ж.
Старый Крым
PHP разработчик
Senior
3 184,74 Р/час
RabbitMQ
HTML
CSS
Docker
Laravel
Nginx
Symfony
XDebug
SSE
Bootstrap
+17

— Отличные знания версии PHP 7.4 — Опыт на laravel 2 года — СУБД MySQL - 2,5 года — Git - 3,5 лет — Опыт unit тестирования - 1,5 лет — Опыт с SOA - 3,5 лет — Опыт работы в команде Всю свою карьеру в коммерческой разработке работал удалённо, сначала как помощник опытного программиста, далее в полноценных командах с распределением ролей (backend, frontend, designer, PM, techlead, temlead, devops). Более 3 лет работы вел разработку в составе команд от 5 до 30 человек, с разделением на небольшие группы по 2-5 backend с teamlead + frontend разработчики и PM. Имею опыт работы по спринтам, проектированию технических решений, проведения ретроспектив, прогнозирования сроков выполнения задач, совместных мозговых штурмов при решении технически сложных проблем, перевода бизнес ТЗ в техническое, внедрения новых технологии в проект и расширения стека, рефакторинга и оптимизации кодовой базы с учетом общей стратегии команды.

Подробнее