Каталог специалистов направления Разработка и ИТ

Data Engineer с более чем 7 годами опыта в разработке ETL-процессов, аналитических витрин и интеграций данных. Специализируется на автоматизации пайплайнов данных с использованием Apache Airflow, Apache NiFi, dbt и других инструментов. Имеет опыт работы с MPP-базами (Greenplum, Snowflake, Teradata), большими данными (Hadoop, Kafka) и BI-инструментами (Datalens, Power BI, Looker). Разрабатывал решения для классификации контента с использованием ML-моделей (CatBoost) и LLM, а также интеграции с 1С, Salesforce и Zendesk. Руководил командами, оптимизировал процессы миграции данных и обеспечивал контроль качества данных. Обладает навыками построения дашбордов, оптимизации производительности баз данных и разработки методологий валидации данных.

Data Engineer с более чем 7 годами опыта в разработке ETL-процессов, аналитических витрин и интеграций данных. Специализируется на автоматизации пайплайнов данных с использованием Apache Airflow, Apache NiFi, dbt и других инструментов. Имеет опыт работы с MPP-базами (Greenplum, Snowflake, Teradata), большими данными (Hadoop, Kafka) и BI-инструментами (Datalens, Power BI, Looker). Разрабатывал решения для классификации контента с использованием ML-моделей (CatBoost) и LLM, а также интеграции с 1С, Salesforce и Zendesk. Руководил командами, оптимизировал процессы миграции данных и обеспечивал контроль качества данных. Обладает навыками построения дашбордов, оптимизации производительности баз данных и разработки методологий валидации данных. Технические компетенции Разработка и миграция ETL-процессов (Airflow, NiFi, dbt, Informatica Power Center). Построение аналитических витрин для BI-решений (Datalens, Power BI, Looker, Superset). Интеграция данных из внешних источников (API, веб-сайты, облачные хранилища, 1С). Оптимизация производительности MPP-баз (Greenplum, Snowflake, Teradata). Разработка и обучение ML-моделей для классификации контента (CatBoost, LLM). Настройка мониторинга и контроля качества данных. Автоматизация миграции данных и очистка данных. Работа с большими данными (Hadoop, Kafka, Ytsaurus). Разработка дашбордов и визуализация данных. Руководство командами и постановка задач разработчикам.

Я опытный специалист в области работы с данными, обладающий более чем 10-тилетним опытом в качестве Data Engineer и Data Architect. Мой опыт охватывает весь спектр задач, связанных с проектированием, разработкой и администрированием специализированных систем обработки данных, в том числе проектирование архитектуры баз данных, оптимизацию производительности, а также внедрение современных решений для управления данными и их анализом. Я управлял и участвовал в множестве проектов, где использовал широкий набор технологий, включая языки программирования, такие как Python, Java и SQL, а также работал с различными базами данных, среди которых PostgreSQL, Oracle и greenplum. Мой опыт работы охватывает различные отрасли, включая ритейл, банковские услуги и автоматизацию бизнес-процессов. Я принимал активное участие в разработке хранилищ данных, ETL-процессов и аналитических платформ, что позволило мне развить навыки в проектировании и оптимизации высоконагруженных систем. Командная работа и эффективное управление проектами — это не только сильные стороны, но и те аспекты, на которые я уделяю особое внимание. Я привык работать в условиях Agile и Scrum, понимая важность взаимодействия и поддержки коллег. Вместе с тем, я проявляю инициативу в обучении и развитии команды, делясь накопленным опытом и знаниями.