Василий З. Инженер БД, Senior

Data Engineer с более чем 5 годами опыта в разработке ETL-процессов, создании и поддержке витрин данных, а также автоматизации процессов обработки данных. Специализируется на интеграции данных из различных источников, проектировании хранилищ данных и оптимизации пайплайнов с использованием Airflow, PySpark, и dbt. Имеет опыт управления удаленными командами, обеспечения качества данных и построения аналитических отчетов. Ориентирована на повышение эффективности процессов, улучшение качества данных и тесное взаимодействие с бизнесом для реализации требований.

Инженер данных полного цикла с опытом проектирования, построения и поддержки корпоративных DWH, ETL-процессов и BI-отчётности. Участвовал в проектах на базе Clickhouse, Postgres, Oracle, MS SQL и SAP BI. Внедрил более 500 DAG-процессов в Apache Airflow, организовал мониторинг через Grafana, интегрировал API-данные в хранилище. Ориентирован на результат, предпочитает гибкий подход к инструментам и бизнес-задачам.

Андрей — инженер баз данных уровня Senior из Москвы с опытом работы в сферах Telecom, Manufacturing и E-commerce & Retail. Специализируется на проектировании и оптимизации хранилищ данных, работе с Big Data и ETL-процессами. Владеет широким спектром технологий и инструментов, включая Apache AirFlow, Apache Spark, Hadoop, PostgreSQL, Oracle, Microsoft SQL Server, ClickHouse, Greenplum и другие. Имеет опыт работы на следующих проектах: - МегаФон: миграция корпоративного хранилища данных, проектирование многоуровневой архитектуры DWH, внедрение практик DataOps. - Тера Интегро: разработка и оптимизация распределённых DWH, создание алерт-систем на базе Zabbix, потоковая обработка данных. - НЛМК: миграция данных, оптимизация PostgreSQL, поддержка проектов и разрешение инцидентов, разработка ETL-процессов. - IQVIA: разработка и оптимизация хранилищ данных, стриминговая обработка данных, моделирование данных, обработка больших данных с использованием Apache Spark.

Дата Инженер баз данных с опытом работы более 5 лет. Квалифицированный специалист с обширным опытом работы в области проектирования, разработки и оптимизации решений для обработки и хранения данных. Уверенно использую широкий стек технологий, включая Java, Python, SQL, Apache Airflow, Hadoop, HDFS, Hive, Yandex Cloud и AWS, для реализации сложных проектов и автоматизации процессов. Обладаю навыками разработки и управления крупномасштабными системами, такими как DWH и Data Lake, а также оптимизацией ETL/ELT-процессов для повышения производительности. Внимательно слежу за последними тенденциями в отрасли, что позволяет внедрять инновационные решения для достижения наилучших результатов. Стремлюсь развивать свои компетенции и вносить значительный вклад в реализацию стратегических целей команды и компании.

Senior Data Engineer с более чем 6 годами опыта в разработке и поддержке ETL-процессов, создании витрин данных и оптимизации процессов обработки данных. Специализируется на работе с большими объемами данных, интеграции и оптимизации пайплайнов с использованием Greenplum, Apache Airflow, и NiFi. Имеет опыт менторства, настройки CI/CD процессов и улучшения качества данных. Ориентирован на повышение эффективности процессов, минимизацию ошибок и тесное взаимодействие с бизнесом для реализации требований.

В работе нравятся математические задачи, стратегический подход и планирование. Большая часть опыта связана с разработкой финтех проектов (фонды, инвестиции). Также участвовал в разработке мессенджеров с повышенной системой безопасности, health care/sport приложений.

Широкий опыт в выявлении и сборе требований, документирование требований в Use case, User story и классическом формате; Знание SQL на уровне оконных функций, оптимизации времени исполнения; Проектирование промежуточных слоев DWH для эффективной загрузки данных и реализации DQ; Валидирование качества данных, выявление систематических проблем источников перед использованием; Использование нотации UML для моделирования БД (ЛМД, ФМД, пакеты данных, диаграммы развертывания и т.д.); Использование BPMN и IDEF для описания бизнес-процессов; Составление CJM; Знание классических методов ML; Умение вести переговоры с заказчиком. Проведение демонстрацией разработанного функционала и приемо-сдаточных испытаний. Также имеется опыт в ручном тестировании.

Есть опыт работы с Postman и есть основные знания ITIL. Информация о кандидате из его резюме: - быстро адаптируюсь и готов постоянно развиваться - в Retail Rocket формировал инструкции по установке JS скриптов или API запросов, затем проверял установленные скрипты или пришедшие к нам API запросы и давал обратную связь разработчикам - писал инструкции и проверял настройки DNS, а именно DKIM и DMARC. Проверял дизайны писем для транзакционных и триггерных рассылок. - SQL применяю для поиска данных в таблицах и создания новых таблиц - через debugging в режиме резработчика искал ошибки в скриптах - знаю базовые команды для работы с терминалом (BASH) - создавал инструкции и дополнял базы знаний через Notion, Google Docs. - использовал Figmu для создания базовых дизайнов UI - грамотная письменная и разговорная речь и соблюдение культуры делового общения (читаю книжки на эту тему) - аттестат ФСФР 1 серии - English C1, есть сертификат Персональные качества: - Внимательность была нужна при проверке скриптов и переменных в них - Стрессоустойчивость (при одновременном появлении разнотипных задач, когда всем нужен ответ) - Способность к обучению, готовность к самосовершенствованию и саморазвитию (Сейчас прохожу курс по UX/UI и созданию приложений на ноу коде) - Системность, умение работать в режиме многозадачности, контролировать выполнение задач различной сложности без микро-менеджмента со стороны руководителя. - Дружелюбие, тактичность, умение чувствовать и уважать личные границы Всегда готов к дополнительном обучению под практические задачи компании. Между релевантным опытом кандидат занимал данные должности: продавец-консультант, представитель банка, создание сайта интернет магазина, специалист по продажам банковских продуктов.