Александр К. Data инженер, Senior

ID 28378
АК
Александр К.
Мужчина, 29 лет
Россия, Москва, UTC+3
Ставка
4 155,84 Р/час
НДС не облагается
Специалист доступен с 14 октября 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache AirFlow
BI
Big Data
ClickHouse
Data Analysis
DBT
Docker
DWH
ETL
Grafana
GreenPlum
Hadoop
Kafka
Kubernetes
Linux
PostgreSQL
Prometheus
Python
S3
Spark
SQL
Superset
TeamCity
Сбор и анализ требований
Hive
HDFS
mpp
YAML
Отрасли
FinTech & Banking
Government & Public Sector
Проекты   (6 лет 7 месяцев)
IT_One
Роль
Senior Data Engineer
Обязанности
- Собрал, провел пилот и запустил хранилище данных на архитектуре Data Lakehouse с целью организации надёжной и эффективной аналитической отчётности в интересах заказчика. - Установил контакты с разными группами заинтересованных лиц, собирал и анализировал бизнес-, функциональные и нефункцинальные требования, собрал концептуальную логическую и физическую модели данных. - Организовал автоматизацию ETL-пайплайнов на Airflow, поставку данных из источников через Kafka, - Cпроектировал и контролировал сборку витрин данных на стеке S3 + Hive + Spark + Iceberg + Clickhouse + Superset, реализовав лямбда-архитектуру. - Занимался код-ревью команды. - Wiki в Confluence, трекинг в Jiга.
Стек специалиста на проекте
Jira, Confluence, SQL, Python, Linux, Hive, YAML, Spark, ClickHouse, Hadoop, Data Lake, GreenPlum, ETL, Kafka, Apache AirFlow, S3, HDFS, Superset, Iceberg
Отрасль проекта
Government & Public Sector
Период работы
Ноябрь 2023 - По настоящее время  (2 года)
ТЕХНОЛОГИИ ОТРАСЛЕВОЙ ТРАНСФОРМАЦИИ
Роль
Senior Data Engineer
Обязанности
- Построил сквозную аналитику по корпоративным продуктам Сбера для оценки эффективности рекламных кампаний. Реализованные задачи: - Руководил процессами по миграции с Teradata. - Провёл полный реинжиниринг КХД. - Руководил внедрением и обучением разработчиков Airflow. - Автоматизировал ЕТL процесс сборки витрин данных по розничным и корпоративным продуктам в аналитической песочнице на PySpark (Airflow + python + spark). - Благодаря обновлению в витринах исторических данных увеличил кол-во успешных сделок по продуктам. - Сократил время выполнения запросов от 5 до 20 раз и уменьшил кол-во строк кода в 5 раз. - Настроил проверку качества данных, внедрив проверки на уровне процедур Greenplum. Каждый день присылается отчет об отклонениях и задержках в загрузке данных на почту. - Увеличил скорость принятия решений и взаимодействия между командами, разработав документацию и UML схемы по витринам данных в Confluence. - Оптимизировал хранение исторических данных, высвободив 300 Тб дискового пространства. - Разработал новый порядок проведения ПСИ и вывода в продакшн. Рабочий процесс: 1. Работаем по спринтам (Сберджайл) 2. wiki в Confluence, трекинг в Jiга 3. Данные храним в Greenplum
Стек специалиста на проекте
Jira, Confluence, SQL, Python, UML, Teradata, Bitbucket, Linux, Jenkins, YAML, Spark, Hadoop, GreenPlum, Wiki, DWH, Apache AirFlow, HDFS, PySpark
Отрасль проекта
FinTech & Banking
Период работы
Апрель 2019 - Ноябрь 2023  (4 года 8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Национальный исследовательский университет «Высшая школа экономики», Москва
Специальность
Факультет компьютерных наук, Прикладная математика и информатика
Завершение учебы
2021 г.

Похожие специалисты

AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+67

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
E-commerce & Retail • FinTech & Banking
ДЧ
Даниил Ч.
Сочи
Data инженер
Senior
4 007,57 Р/час
Apache AirFlow
Apache NiFi
Apache Spark
Bash
Big Data
CI/CD
ClickHouse
clickstream
Data
DBT
+38

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Подробнее

Недавно просмотренные специалисты

Blockchain • FinTech & Banking
КО
Карина О.
Москва
Системный аналитик
Middle+
2 954,3 Р/час
PostgreSQL
Git
MySQL
Java
SQL
BPMN
Scrum
Системный анализ
Swagger
Kafka
+14

Карина — системный аналитик уровня Middle+ из Москвы. Специализируется на системном анализе в отраслях Blockchain и FinTech & Banking. Ключевые навыки включают постановку задач разработчикам, работу с микросервисной архитектурой, Agile Project Management, Scrum, SQL (MySQL, PostgreSQL), а также знание языков программирования Java и инструментов Swagger, Git. Имеет опыт работы в роли ведущего системного аналитика в IT-компании, где занималась разработкой платформы цифровых финансовых активов на блокчейн-платформе А-токен. В обязанности входили сбор и нормализация требований, моделирование и описание бизнес-процессов, проектирование под микросервисную архитектуру, ведение интеграций и проектирование таблиц БД. Ранее работала системным аналитиком в «Совкомбанк Технологии», где участвовала в разработке и развитии сайта банка и личного кабинета. Занималась проектированием интеграций с внутренними системами, участвовала в редизайне разделов и лендингов, внедрила логику для кредитного калькулятора и раздела отзывов, подключила оплату кредитов через СПБ.

Подробнее
E-commerce & Retail • Hardware • Manufacturing
АС
Анатолий С.
Москва
Бизнес аналитик
Senior
3 965,39 Р/час
Работа с базами данных
Информационные системы
Redmine
business studio
Сбор и анализ требований
Таможенное оформление
Работа с интеграциями
1С:Управление торговлей
Анализ
+49

Анатолий — опытный бизнес-аналитик с более чем 13-летним опытом работы в различных отраслях, таких как производство, электронная коммерция и ритейл. Он обладает глубокими знаниями и навыками в области бизнес-процессов, моделирования, документирования, разработки и анализа требований. Анатолий работал над проектами для компаний из разных отраслей, включая производство, электронную коммерцию и ритейл, где он занимался описанием и формализацией бизнес-процессов в Business Studio, сбором требований, аудитом существующих процессов, разработкой гипотез по оптимизации и защитой их перед руководством. Также он руководил проектами по оптимизации процедур, поиску новых контрагентов и логистических маршрутов. Кроме того, Анатолий имеет опыт работы с MES-системами, организации новых логистических каналов, планирования производства, работы с заказами клиентов и управления логистическими службами зарубежных представительств компаний.

Подробнее