Кантемир Ш. Data инженер, Senior

ID 23301
КШ
Кантемир Ш.
Мужчина
Россия, Нальчик, UTC+3
Ставка
3 506,49 Р/час
НДС не облагается
Специалист доступен с 4 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache AirFlow
Apache Hadoop
Apache Kafka
Apache Spark
API
Atlassian
BigQuery
ClickHouse
FastAPI
Framework
Git
Google
GreenPlum
Jira
Linux
MongoDB
MS Windows
Pandas
PL/pgSQL
PostgreSQL
PySpark
Python
Spark
SQL
SQLAlchemy
streaming
structured
Vertica
Разработка
системы версионного контроля
СУБД
Отрасли
E-commerce & Retail
FinTech & Banking
Logistics & Transport
Проекты   (5 лет 10 месяцев)
Финтех. Под NDA
Роль
Data engineer | Инженер данных
Обязанности
● Поддержка, оптимизация и рефакторинг существующей кодовой базы. ● Подготовка и согласование требований к новому функционалу. ● Анализ и подготовка необходимой инфраструктуры. ● Разработка, тестирование и внедрение нового функционала. ● Мониторинг качества данных. ● Подготовка необходимой документации и использование систем CI/CD для развертывания нового функционала.
Стек специалиста на проекте
PostgreSQL, Git, Python, Bash, GitLab, BigQuery, Базы данных, Testing, Мониторинг, CI/CD, Рефакторинг, Разработка, анализ, elt, appscript
Отрасль проекта
FinTech & Banking
Период работы
Май 2024 - По настоящее время  (1 год 3 месяца)
Проектирование и разработка хранилища данных DWH. Под NDA
Роль
Инженер данных | Разработчик баз данных
Обязанности
Описание проекта: Разработка корпоративного хранилища данных на базе СУБД Vertica. Обязанности/Задачи: ● Анализ текущей инфраструктуры. Проведение аудита существующих баз данных, источников данных. ● Подготовка требований (функциональные, нефункциональные, пользовательские), согласование требований с заказчиком. ● Выбор модели данных, проектирование хранилища, подготовка инфраструктуры. ● Изучение структуры исходных данных, определение ключевых метрик и показателей для загрузки. ● Подготовка ETL скриптов, отладка на тестовом стенде. ● Инициализация и запуск процессов сбора данных. ● Анализ данных и подготовка скриптов качества данных для мониторинга постигаемых данных. ● Анализ узких мест в процессах, настройка параллельных заданий и управление ресурсами. ● Подготовка необходимых технических и пользовательских дашбордов.
Стек специалиста на проекте
Разработка, structured, Spark, SQLAlchemy, Анализ данных, Bitbucket, MongoDB, Apache, Аудит, Проектирование, ETL, Kafka, Apache Hadoop, Проектирование ИС, СУБД, DWH, Vertica, Мониторинг, PySpark, Python, GreenPlum, elt, Apache AirFlow, ANSI, PostgreSQL, streaming, Построение дашбордов
Отрасль проекта
Logistics & Transport
Период работы
Июнь 2024 - Декабрь 2024  (7 месяцев)
Продуктовая разработка. Под NDA
Роль
Разработчик баз данных | Инженер данных
Обязанности
Описание проекта: Миграция данных с аналитической базы в транзакционную для оптимизации редактирования данных. Обязанности/Задачи: ● Анализ текущей инфраструктуры. Проведение аудита существующей базы данных, включая инвентаризацию всех объектов (процедур, функций, представлений, таблиц). ● Оценка зависимости между объектами и их критичности для бизнес-процессов. ● Разработка плана миграции с указанием приоритетов и сроков. ● Выбор и настройка инструментов для автоматизации миграции. ● Развертывание тестовой среды для проверки миграции. ● Проведение тестов на небольших объемах данных. ● Перенос таблиц, индексов и связей. ● Миграция хранимых процедур, функций и представлений с учетом синтаксических различий. ● Проведение тестирования для проверки корректности миграции. ● Сравнение результатов с исходной системой для выявления расхождений.
Стек специалиста на проекте
PostgreSQL, Python, Bitbucket, BigQuery, Базы данных, Testing, Аудит, Разработка, elt, Инвентаризация
Отрасль проекта
E-commerce & Retail
Период работы
Февраль 2024 - Май 2024  (4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Кабардино-Балкарский государственный университет им. Х.М. Бербекова
Специальность
Факультет информатики и управления. Автоматизированные системы обработки информации и управления
Завершение учебы
2012 г.

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
Insurance • Marketing, Advertising & Design
НМ
Николай М.
Гродно
Data инженер
Senior
4 046,49 Р/час
Java
Python
Pl/SQL
SQL
T-SQL
PL/pgSQL
IBM
JavaScript
Object
Pascal
+53

Разработчик с 17-летним опытом работы в разработке программного обеспечения. Большой опыт работы с Oracle PL/SQL, MS SQL, настройкой производительности SQL, концепциями хранилищ данных и ETL, 3 года опыта в Java, 4 года в Delphi. Опыт работы на всех этапах жизненного цикла разработки программного обеспечения 11-летний опыт разработки Oracle (9i, 10g, 11g), включающий в себя: логический и физический дизайн базы данных, распределение памяти, разбиение, сегменты таблиц и индексов, роли и привилегии; настройка производительности SQL, индексация, распараллеливание, объяснение планов, подсказки, статистика; опыт работы во всех аспектах хранилища данных, отчетности BI, ETL и всех этапах жизненного цикла разработки хранилища данных; большой опыт в Kalido DIW; глубокие знания в логическому и физическом моделировании данных с использованием методов нормализации; программирование PL/SQL, хранимые процедуры, функции, пакеты, триггеры, типы; программирование с использованием динамического SQL и PL/SQL; программирование ETL-процессов с использованием PL/SQL, T-SQL; работа с Oracle: разработка приложений с использованием Oracle Forms; разработка отчетов и визуализация данных с использованием Oracle Reports, Oracle Graphics и Oracle BI Publisher; разработка приложений с использованием HTML/XML/CSS/XSLT; Манипулирование, очистка и обработка данных с использованием SQL. Анализ необработанных данных, подведение итогов и выработка рекомендаций. Проектирование, разработка и внедрение новой функциональности. Проектирование, разработка отчетов и визуализация данных с использованием Cognos.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
FinTech & Banking • Logistics & Transport • Media
СБ
Сергей Б.
Минск
Data инженер
Senior
3 896,1 Р/час
Apache AirFlow
Apache Hadoop
Apache Kafka
Apache Spark
Bash scripting
ClickHouse
Cloud Functions
Data
DataLens
Docker
+40

Дата инженер / Системный Аналитик с опытом работы более 5 лет. Я являюсь опытным специалистом, которому нравится создавать новаторские и эффективные решения. У меня обширный опыт в разработке и глубокое понимание современных технологий. Проактивный командный игрок с отличными навыками коммуникации, способен быстро осваивать новые технологии и методологии. Ставлю требования бизнеса на первое место. Независимо от того, работаю я самостоятельно или в составе команды, моя цель – достигать результатов, которые превосходят ожидания и способствуют успеху бизнеса. Языки программирования Python, SQL. Инженерия данных Apache Hadoop, HDFS, Apache Spark, PySpark, Apache Airflow. Облачные технологии Yandex Cloud (DataLens, Object Storage, Virtual Machines, Data Proc, Cloud Functions, Managed Kubernetes, Managed Service for PostgreSQL, KMS, IAM, Monitoring). Базы данных PostgreSQL, Greenplum, Oracle, ClickHouse, MongoDB, Redis. Брокеры сообщений Apache Kafka. Data Science Pandas, NumPy. Моделирование данных Многомерное Моделирование (Схема «Звезда»,, Схема «Снежинка»,), Сущность-Связь (ER) Моделирование, Нормализация / Денормализация, Data Vault 2.0. DevOps Docker, Docker Compose, Kubernetes, Bash скриптинг. Системы контроля версий Git, GitLab, GitHub.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail
АД
Азамат Д.
Ставрополь
JavaScript разработчик
Middle
2 337,66 Р/час
HTML5
Redux Toolkit
Redux Thunk
Scrum
Git
Jest
CSS3
БЭМ
GitHub
Npm
+27

Ключевые навыки React, Redux, Redux Saga, Redux Toolkit, react-router-dom, Material UI, HTML5, CSS, Node.js, Express, PostgreSQL, Bcrypt JavaScript, React, Redux, RTK, react-router-dom, HTML, CSS JavaScript Typescript React Redux-Toolkit Redux-Thunk HTML Express PostgreSQL Jest REST API Node.js Git GitHub Agile ES6 HTML5 TypeScript SQL npm Redux-Saga Axios Scrum БЭМ Material UI Express.js Eslint Prettier Bootstrap Atlassian Jira React/Redux CSS3 Frontend-разработчик с опытом работы в разработке клиент-серверных веб-приложений более 3-х лет, поддержки работоспособности существующего кода и рефакторинга. Обладаю хорошими знаниями JavaScript, HTML, CSS. Имею практический опыт проектирования и разработки на React, Redux (Redux-ToolKit, Redux-Saga, Redux-Thunk). Есть опыт в разработке бэкэнда (NodeJS, Express, PostgreSQL). Осваиваю TypeScript. Ищу работу над полезным и интересным для пользователя продуктом, в дружественной атмосфере (предлагать и обсуждать идеи, аргументировать свою позицию, слушать и понимать людей). Обладаю аналитическим складом ума, хорошо развито логическое мышление. Веду активный образ жизни, занимаюсь спортом.

Подробнее
EdTech • Hardware
СП
Сергей П.
Санкт-Петербург
Data инженер
Lead
4 349,14 Р/час
Apache Superset
C/C++
lotus
Kanban
arrow
arch
ClickHouse
CentOS
Numpy
Data
+63

• Сильные технические и математические навыки, умение быстро осваивать инструменты и алгоритмы для работы с данными благодаря богатому и глубокому опыту сфере анализа и исследований • Приобрел успешный опыт в Data Science, начиная от научных исследований (c 2010), потом практических задач для ИТ инфраструктуры инновационного экопарка переработки отходов, и сейчас в проектировании функциональных требований к архитектуре и в сборке и разработке ML моделей и подходов для сложных аналитических систем (умного озера, СУДД, банка, телекоммуникаций) • Эксперт в языке Python (PyCharm & Jupyter) для решения задач по Data Science и для анализа данных (также есть опыт веб разработки в Django & Flask) • Работает с библиотеками, такими как Pandas (+Dask), NumPy, Matplotlib (seaborn, plotly), Statsmodels, SciPy, Scikit-learn и Keras, NTLK, PySpark • Моделировал данные для машинного обучения • Знаком с архитектурой и компонентами экосистемы Big Data, включая GreenPlum, HDFS и облачные хранилища, такие как S3 (MinIO) • Понимает особенности работы с колончатыми базами данных, особенности написания запросов и их последовательной оптимизации, влияние вида запроса на скорость работы и нагрузку на базу данных, задачи и операции, которые требуют специфического решения для колончатых баз данных • Обладает опытом работы с BI инструментами, включая Power BI, Apache Superset (эксперт), Zeppelin • Имеет опыт использования контейнеризации и оркестрации с Docker, включая CI/CD процессы в GitLab • Знаком с ETL инструментами Apache AirKow, DBT, Spark • Также владеет знанием языков программирования C, C++, Java Script, HTML, CSS • Управляет проектами и пользуется инструментами Jira, ConНuence • Обладает опытом работы в Agile среде (- Scrum, Kanban) с использованием инструментов управления проектами, таких как Jira и ConНuence Coursera. Введение в квантовые вычисления. Нейронные сети и глубокое обучение.

Подробнее