Вакансия в архиве Data инженер

- Высшее/неполное высшее профессиональное образование; - Релевантный опыт работы не менее 3 лет; - Опыт работы на проектах по построению / оптимизации корпоративных хранилищ данных; - Имеющийся практический опыт работы с информационными системами хранения и обработки данных, реализованными на платформах Oracle и PostgreSQL; - Опыт успешной разработки процессов импорта данных из внешних источников; - Профессиональное владение языками программирования - Python; - Компетентность в работе с SQL (включая языки процедурных расширений PL/SQL и PL/pgSQL); - Умения составлять и эффективно оптимизировать запросы высокой сложности в СУБД Oracle и PostgreSQL, анализировать планы исполнения запросов, уверенно применять окна и рекурсию; - Реальный опыт работы с инструментами ETL на открытом ПО (такими как Apache NiFi, Apache Airflow); - Глубокое понимание основ построения корпоративных хранилищ данных; - Навыки повышения эффективности работы хранилищ данных путем их оптимизации; - Применяемый опыт подготовки аналитических запросов и разработки отчетности на основе данных хранилища; - Обладание знаниями современных инструментов и методик разработки баз данных. Стек: СУБД: Oracle, PostgreSQL, SQL; ETL: Apache NiFi, Apache Airflow; Python; ПО: Git.

- Знание банковских бизнес-процессов.

- Проектирование и реализация элементов баз данных (таблиц, витрин и других объектов) в системах Oracle и PostgreSQL; - Написание процедур для вычисления показателей и формирования витрин данных; - Проведение работ по разработке, анализу и улучшению существующего программного кода; - Организация и сопровождение потоков обработки и процедуры загрузки данных из сторонних систем в хранилище данных на платформах Oracle и PostgreSQL; - Повышение производительности хранилищ данных и содействие в создании аналитических запросов; - Автоматизация и управление процессами ETL с использованием инструментов Apache NiFi и Apache Airflow; - Извлечение необходимых данных из различных внешних систем и последующий их анализ; - Проверка достоверности и целостности загружаемых данных; - Создание проверок качества данных, как технического характера, так и ориентированных на бизнес-задачи, обеспечение контроля полноты и точности данных; - Очистка данных хранилища от дубликатов и исправление выявленных ошибок; - Формирование стратегии хранения и эффективного использования данных в хранилище; - Установка и поддержание бесперебойной связи и обмена информацией между разными информационными системами.