Каталог специалистов направления Разработка и ИТ

Максим — DWH-разработчик уровня Middle из Москвы. Опыт работы: - Data engineer в Сбербанке (FinTech & Banking). Занимался проектированием и разработкой процессов преобразования данных (ETL) для DWH, работал с MPP Greenplum, оптимизировал SQL-запросы. - Data Engineer в GlowByte Consulting (E-commerce & Retail). Выполнял задачи по проектированию и разработке ETL-процессов для DWH. - Product Manager (IIoT) в Schuler Pressen GmbH Представительство в РФ (Hardware). Участвовал в разработке СУБД ORACLE PL/SQL для промышленного оборудования, занимался установкой и настройкой PostgreSQL и ClickHouse. Реализовал крупный инвестиционный проект, участвовал в проекте «Промышленный интернет вещей (IIoT)» и реализовал проект по оснащению IIoT промышленного металлообрабатывающего оборудования.

Администратор баз данных с более чем 14 годами опыта в администрировании, интеграции и оптимизации высоконагруженных кластеров баз данных. Специализируется на Greenplum, Oracle (10g/11g/12c), RAC, Standby, а также на автоматизации процессов с использованием Python, Ansible, Bash и Terraform. Имеет опыт работы с MPP-архитектурами, Hadoop, Cassandra и AWS. Руководил проектами по внедрению хранилищ данных, созданию DevOps-процессов и интеграционных тестов. Ориентирован на обеспечение отказоустойчивости, оптимизацию производительности и разработку масштабируемых решений

Data-инженер с опытом работы более 3 лет в разработке ETL-процессов и аналитических хранилищ данных. Специализируется на создании и оптимизации ETL-пайплайнов, разработке аналитической отчетности и интеграции данных с использованием Python, Spark, Airflow, Greenplum, PostgreSQL и других инструментов. Имеет опыт миграции хранилищ, настройки CI/CD и работы с большими объемами данных. Обладает навыками автоматизации процессов, аналитическим мышлением и стремлением к созданию эффективных решений. Коммуникабелен, ответственен и ориентирован на результат. Технические компетенции: Разработка и оптимизация ETL-пайплайнов с использованием Python, PySpark, Airflow, Dbt. Создание и поддержка аналитических хранилищ данных (Greenplum, PostgreSQL, Arenadata DB). Интеграция данных с использованием REST API, Kafka, ClickHouse, SFTP. Парсинг данных из открытых источников (requests, selenium, aiohttp). Визуализация данных в Apache Superset и Datalens. Настройка CI/CD процессов для автоматизации развертывания. Разработка хранимых процедур (PL/pgSQL) и скриптов на Bash. Оптимизация производительности хранилищ и ETL-процессов. Формирование архитектурных решений для миграции данных. Оптимизация произвожительности MPP (Greenplum, Snowflake, Teradata) Работа с большими объемами данных и их обработка (pandas, NumPy, SQL).

Data Engineering: Проектирование и разработка высоконагруженных ETL/ELT-процессов, оркестрация (Airflow), оптимизация производительности. Базы данных: Глубокие знания SQL, оптимизация сложных запросов. Опыт с MPP-системами (GreenPlum, Teradata), традиционными СУБД (Oracle, PostgreSQL, MS SQL Server) и Hadoop-экосистемой (HDFS, Hive, Impala). Программирование: Python (разработка ETL), Java (интеграционные шины, Spring Boot), опыт с Scala-окружением (Apache Spark, Kafka). Инструменты: Airflow, dbt, Apache Kafka, Trino, Apache Spark, Debezium, Pentaho, Talend DI. Инфраструктура: Kubernetes, Docker, Yandex Cloud (YC), S3, опыт развертывания и миграции на container-based инфраструктуру Сертификаты обучения: Informatica, SAS DIS, Oracle, Golden Gate

Глубокие знания хранилищ данных и архитектуры приложений. Опыт выполнения сложных задач по миграции данных, как локально, так и в облачных платформах. Управление данными, обеспечение качества данных, DevOps, SRE и поддержка данных в локальных и облачных платформах. Профессиональные навыки в наиболее популярных технологиях взаимодействия, включая SOA, событийную архитектуру, брокеры сообщений, веб-сервисы и микросервисы. Обладаю хорошими навыками презентации и общения, умею эффективно переводить задачи между бизнесом и техническими командами.