Кирилл Н. Data инженер, Middle+
ID 9681
КН
Кирилл Н.
Мужчина, 29 лет
Россия, Ростов-на-Дону, UTC+3
Ставка
3 896,1 Р/час
НДС не облагается
Специалист доступен с 4 июля 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B2
Главное о специалисте
Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail.
На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow.
Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql.
В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др.
Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet.
На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.
Проекты
(6 лет 4 месяца)
Проект по миграции песочницы, реинтеграция источников
Роль
Data-инженер
Обязанности
Крупный банк, проект по миграции песочницы, реинтеграция источников
Задачи:
1. Сбор требований по разработке
2. Интеграция новых источников (Oracle, ClickHouse)
3. Построение Data-Pipeline (препроцессинг Spark+s3)
4. Разработка моделей DBT
5. Разработка тестов / DQ
6. Написание документации / s2t
7. Оптимизация сложных аналитических запросов GreenPlum / PostgreSQL
Стек:
Greenplum + PXF, S3,Spark. MongoDB, Postgres, Kafka, Spark, Flyway, GitLab / GitlabCI, Vault, Grafana, Python, Kubernetes, Airflow, DBT, Yandex Cloud Console, Bash, PowerShell
Стек специалиста на проекте
console, DBT, Grafana, Gitlab CI, GitLab, Data Quality (DQ), ClickHouse, PowerShell, Spark, Flyway, Bash, Oracle, MongoDB, Kafka, S3, Vault, Python, GreenPlum, Apache AirFlow, pxf, PostgreSQL, Yandex Cloud, Kubernetes
Отрасль проекта
FinTech & Banking
Период работы
Декабрь 2024 - По настоящее время
(8 месяцев)
Крупный ритейлер строительных материалов
Роль
Data-инженер
Обязанности
Задачи:
1. Интеграция реляционных/не реляционных источников, разработка s2t,
2. Cоздание архитектурной схемы промежуточного слоя хранения для управлением событиями
3. Разработка и оркестрация Data-пайплайнов (Airflow+NIFI)
4. Настройка мониторинга и алертинга (легаси + новых пайплайнов) по интеграции в платформу данных (data vault 2.0).
5. Разработка data quality для промежуточного слоя хранения и ods слоя в DWH,
6. Нормализация, очистка, дедубликация легаси, построение мартов для BI отчетов, участие в разборе инцидентов
Команда: разработчики, аналитики и тестировщики продукта
Стек: MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault
Стек специалиста на проекте
PostgreSQL, SQL, Python, MongoDB, Jenkins, Grafana, Kubernetes, GitHub, ELK, GreenPlum, Kafka, Vault, Apache AirFlow, S3, NiFi
Отрасль проекта
E-commerce & Retail
Период работы
Ноябрь 2023 - Декабрь 2024
(1 год 2 месяца)
Digital-аудит
Роль
Data инженер
Обязанности
Функции:
1. Обработка больших объемов информации (Hadoop, HDFS, Hive, Spark, Yarn, K8S)
2. ad-hoc аналитика
3. Анализ больших данных (поиск выбросов, аномалий и отклонений)
4. Разработка Data-пайплайнов
5. Разработка Data — мартов
6. Организация data quality
7. Data management (meta, s2t)
8. ИФТ/ПСИ
Используемые инструменты:
Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow
Стек специалиста на проекте
PostgreSQL, Python, Bash, Power BI, Hive, Hadoop, Pandas, Atlassian, GreenPlum, Jupyter, Apache AirFlow, Superset, PySpark, hue, s2t, adhoc
Отрасль проекта
FinTech & Banking
Период работы
Январь 2023 - Ноябрь 2023
(11 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Дипломы и сертификаты
https://go.startexam.com/casberbank/Report/21e1fcb3-b20e-455b-88dc-07969f7f2b4b?dateTime=2023-03-20%2C%2018-16 2022 г.
Образование
Высшее
Учебное заведение
ДГТУ «Приборостроение и техническое регулирование»
Специальность
инженер
Завершение учебы
2017 г.
Высшее
Учебное заведение
ДГТУ «Приборостроение и техническое регулирование»
Специальность
Магистр
Завершение учебы
2019 г.
Дополнительное
Учебное заведение
Нетология
Специальность
Профессиональная переподготовка, Python разработчик
Завершение учебы
2022 г.