Проект в архиве Data инженер
72018
Подбор по данному проекту завершён.
Посмотрите наш каталог актуальных запросов, найдите подходящие и предложите ваших специалистов.
Банки и финансы
Data инженер
Middle+
Senior
Ставка в час
Кол-во специалистов
1
Длительность проекта
бессрочно
Объем участия в проекте
Высокая нагрузка
~160 ч/мес
Формат взаимодействия
Удаленно
Требуемая локация специалиста
Россия
Доступность специалиста
по МСК
Требуемое гражданство специалиста
РФ
О клиенте
Отрасль
Банки и финансы
Обязательные требования
- Знание языков программирования: SQL, Python;
- Знание технологического стека: Apache Spark, Hadoop/S3/S3-like, Apache Airflow, Parquet/ORC;
- Понимание ETL;
- Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON;
- Навыки системного анализа, тестирования;
- Базовое знание работы с РСУБД, Kafka;
- Умение читать код (чтобы понимать как данные из одного места транслируются в другое).
Дополнительные требования
- Знание Apache Iceberg будет плюсом.
Задачи на проекте
- Сопровождение и анализ существующих процессов загрузки;
- Разбор технических контролей качества данных;
- Тестирование и установка доработок в продуктивный контур.
Этапы отбора
1. Рассмотрение резюме (2-3 дня);
2. Техническое интервью (1 час, с камерой, с компьютера);
3. Собеседование с командой (1 час) + проверка анкеты СБ (3-5 рабочих дней).
Описание проекта и команды
Банк.
Требуется инженер сопровождения (профиль больше дата-инженера/SRE-инженера).
Самые критичные требования:
SQL, Spark, Hadoop, Airflow/oozie, понимание ETL, умение читать код (чтобы понимать как данные из одного места транслируются в другое).
Кандидатам с опытом разработки наименее интересны задачи сопровождения, поэтому дополнительно стоит отметить, что команда занимается задачами сопровождения дата продуктов.
Обязательные требования
- Знание языков программирования: SQL, Python;
- Знание технологического стека: Apache Spark, Hadoop/S3/S3-like, Apache Airflow, Parquet/ORC;
- Понимание ETL;
- Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON;
- Навыки системного анализа, тестирования;
- Базовое знание работы с РСУБД, Kafka;
- Умение читать код (чтобы понимать как данные из одного места транслируются в другое).
