Денис К. Data инженер, Middle+

ID 18343
ДК
Денис К.
Мужчина
Россия, Москва, UTC+3
Ставка
3 896,1 Р/час
НДС не облагается
Специалист доступен с 4 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle+
Навыки
Agile
Atlassian
Bash
Big Data
Computer Vision
Confluence
Docker
ETL
Git
Hadoop
Hbase
hue
Jira
Linux
office
PostgreSQL
PySpark
Python
Scala
Spark
SQL
Анализ данных
Базы данных
Работа с базами данных
cloud
Yandex
Отрасли
FinTech & Banking
Проекты   (3 года 6 месяцев)
Проект: Сбер
Роль
Data Engineer / Аналитик DWH
Обязанности
Достижения: лидировал несколько больших проектов миграции, проводил код ревью Описание проекта: Команда отвечает за данные выписок и справок: 2 петабайта данных, топ5 приложение по активности клиентов в банке, MAU - 40 млн Состав Команды: 4 дата инженера, тестировщик, разработчики Задачи: — Общение с бизнес-заказчиком. Работа с такими банковскими продуктами, как: дебетовые карты, кредитные карты, кредиты, акции — Анализ атрибутивного состава витрин источника — Формирование требование к витринам (Hadoop, Hbase) — Формирование логики расчета для витрин — Написание прототипов витрин(PySpark, Scala, SQL) — Сопровождение витрин(Ozzie, airflow) — Тестирование разработанных витрин — Опыт работы с NRT (Spark Streaming) — Создание документации к разработанным витринам(Confluence, jira) Стек: PySpark, Scala, SQLHadoop, Hbase
Стек специалиста на проекте
Jira, Confluence, SQL, Scala, Yandex, Hadoop, Code Review, Hbase, Testing, Apache AirFlow, PySpark, cloud, MAU, Spark Streaming, oozie
Отрасль проекта
FinTech & Banking
Период работы
Март 2023 - Ноябрь 2024  (1 год 9 месяцев)
Проект:Финансовая корпорация Открытие
Роль
Data инженер
Обязанности
Описание проекта: Разработка программного обеспечения Задачи: - Подготовка данных, предварительный анализ по запросу аудиторов в рамках проводимых аудиторских проверок - Реализация ad-hoc задач в рамках деятельности отдела внутреннего аудита - Обработка и анализ больших объемов данных при помощи Python (Pandas, mathplotlib, Pytorch, scikit-learn) - Работа с БД (Hadoop, GreenPlum, Oracle, HUE), написание запросов различной сложности - Выдвижение, проверка и защита гипотез, полученных в результате анализа данных - Организация аудиторских проверок - Формирование гипотез о критических потерях в бизнес процессах компании - Реализация процессов регулярных выгрузок в Airflow - Реализация простых web сервисов на Flask, Plotly Dash - Изучение и внедрение новых фреймворков для автоматизации работы отдела внутреннего аудита Стек: Hadoop, GreenPlum, Oracle, HUE
Стек специалиста на проекте
Python, Oracle, Hadoop, Pandas, Matplotlib, Scikit-learn, GreenPlum, PyTorch, Flask, Web, Apache AirFlow, Plotly, dash, hue
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2022 - Март 2023  (10 месяцев)
Проект:Сбер
Роль
Аналитик
Обязанности
Описание проекта: Разработка программного обеспечения Задачи: - Обработка и анализ больших объемов данных при помощи Python (Pandas, mathplotlib, Pytorch, scikit-learn) - Работа с БД (Hadoop, GreenPlum, PySpark, HUE, Oracle), написание сложных запросов - Выдвижение, проверка и защита гипотез, полученных в результате анализа данных - Организация аудиторских проверок - Формирование гипотез о критических потерях в бизнес процессах компании Стек: Python, Pandas Hadoop, GreenPlum, PySpark, HUE, Oracle
Стек специалиста на проекте
Python, Oracle, Hadoop, Pandas, Базы данных, Matplotlib, Scikit-learn, GreenPlum, PyTorch, PySpark, hue
Отрасль проекта
FinTech & Banking
Период работы
Июнь 2021 - Июнь 2022  (1 год 1 месяц)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский авиационный институт (национальный исследовательский университет)
Специальность
Факультет системы управления, информатики и электроэнергетики, Информатика и вычислительная техника (магистр техники и технологии)
Завершение учебы
2021 г.
Дополнительное
Учебное заведение
Stepik
Специальность
Bioinformatics Institute, Программирование на Python
Завершение учебы
2020 г.
Дополнительное
Учебное заведение
Продвинутый Python
Специальность
МАИ
Завершение учебы
2021 г.

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее

Недавно просмотренные специалисты