Data инженер, Lead

ID 16917
Специалист недоступен
Посмотрите похожих специалистов для решения ваших задач

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+65

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее
E-commerce & Retail • FinTech & Banking
КЯ
Кирилл Я.
Минск
Data инженер
Middle+
3 545,15 Р/час
aks
Apache AirFlow
Apache Kafka
Apache NiFi
Apache Spark
Apache Superset
AWS
Azure
Azure SQL
Bitbucket
+50

Data Engineer с опытом работы на проектах в сфере E-commerce & Retail и FinTech & Banking. На проектах занимался разработкой аналитических платформ, DWH и систем аналитики. Обязанности: - разработка ETL-пайплайнов в Apache Airflow и Apache NiFi; - обработка больших объёмов данных с использованием PySpark, Pandas, NumPy; - оптимизация интеграции Hadoop (HDFS); - агрегация данных в ClickHouse для BI-отчётов; - визуализация данных в Power BI и Superset; - мониторинг и оптимизация производительности запросов в Snowflake; - интеграция PostgreSQL и MS SQL; - использование Docker и Kubernetes для контейнеризации ETL-компонентов; - создание детальных технических проектных документов; - сотрудничество с командой аналитиков; - проведение тестирования системы; - настройка CI/CD-конвейеров с помощью GitLab CI/CD.

Подробнее

Недавно просмотренные специалисты

Urban technology
АМ
Александр М.
Казань
Верстальщик
Middle+
1 948,05 Р/час
Git
HTML
CSS
JavaScript
Figma
Adobe Photoshop
БЭМ
Gulp
Bootstrap
SCSS
+12

ID 365. Общий стаж в разработке более 10-ти лет Твердые знания HTML, CSS, SCSS. Умеренные знания JS. Работа в разных форматах: техподдержка, проектная и аутстаф. - Верстка страниц с использованием html5, css, scss, pug, методологии БЭМ - Создание интерактивных элементов (слайдеры, бургеры, попапы и т д) - Анимации элементов или скрола - Настройка сборщика Gulp - Использование в проектах Git, менеджмент веток - Написание скриптов на JS, jQuery - Формы, валидация форм и отправка данных - Различные библиотеки для расширения функционала (вроде параллакса, красивых анимаций, пагинации и прочего) Поддержка и доработка проектов - Исправления багов в верстке и в стилях - Доработка / исправление работы скриптов - Расширение имеющегося функционала Технологии: html5, css, scss, pug, Bootstrap, БЭМ, Gulp, Webpack, Git, JS, jQuery, Figma, Photoshop

Подробнее
Government & Public Sector • Insurance • Logistics & Transport • Telecom
ЮЧ
Юрий Ч.
Улан-Удэ
Vue.js разработчик
Middle+
3 146,97 Р/час
Git
HTML
CSS
JavaScript
Figma
GraphQL
Vuex
Nuxt.js
БЭМ
TypeScript
+22

Юрий — Vue.js разработчик уровня Middle+. Специализируется на разработке фронтенда, обладает опытом работы в отраслях телекоммуникаций, страхования, государственного сектора и логистики. Ключевые навыки: GraphQL, Canvas API, Git, БЭМ, Prettier, Pinia, Tailwind CSS, ESLint, Quasar, HTML, CSS, Vuex, TypeScript, адаптивная вёрстка, Bootstrap, Vue.js, Nuxt.js, JavaScript, JavaScript ES6+, кроссбраузерная вёрстка, vanilla, Figma. Имеет опыт работы на следующих проектах: - Sparklingtide (Telecom): редизайн системы мониторинга, обновление визуальной части админ-панели, создание блок-схемы для отображения внутренней структуры сетевого оборудования (продолжительность работы — 9 месяцев). - QIC (Insurance): разработка интерфейсов для продуктов международной компании QIC, поддержка и доработка существующих проектов (продолжительность работы — 1 год 2 месяца). - Росатом (Government & Public Sector): разработка интерфейсов для проекта «Умный город», создание карты с отображением информации о сотрудниках, создание интерфейсов для системы контроля качества работы супервайзеров, проведение ревью кода (продолжительность работы — 11 месяцев). - Пулково (Logistics & Transport): разработка клиентской части внутреннего сервиса для авиакомпании «Россия» (Аэрофлот), разработка и написание UI-компонентов, создание карты пассажирских мест самолёта с отображением информации о пассажирах (продолжительность работы — 1 год 1 месяц).

Подробнее
FinTech & Banking • GameDev • Realty & Constructoring
ММ
Максим М.
Челябинск
QA ручной
Middle
3 211,19 Р/час
PostgreSQL
RabbitMQ
MySQL
Docker
REST
Java
Jira
Confluence
SQL
Python
+29

Максим — опытный QA-инженер, специализирующийся на ручном тестировании. Имеет опыт работы в сферах FinTech & Banking, GameDev и Realty & Constructoring. За последние 7 лет Максим участвовал в нескольких проектах, где выполнял широкий спектр задач по тестированию и обеспечению качества. Он работал с различными инструментами и технологиями, такими как Grafana, Groovy, Java, JMeter, Kafka, MySQL, PostgreSQL, Postman, Python, REST, SQL, Swagger, Allure, cURL, GitBash, Jenkins, OpenShift, Docker, Figma, Jaeger, Jira, микросервисы, Notion, Slack, Unity, RabbitMQ, Confluence, Oracle и SoapUI. Максим обладает навыками бэкэнд- и фронтенд-тестирования, а также тестирования микросервисов, баз данных и API. Он умеет работать с инструментами автоматизации тестирования, такими как Zephyr, Testrail и Postman. Также он имеет опыт работы с системами управления проектами, такими как JIRA, Trello и Confluence.

Подробнее