Data инженер, Middle

ID 21459
Специалист недоступен
Посмотрите похожих специалистов для решения ваших задач

Похожие специалисты

E-commerce & Retail
ГВ
Герман В.
Минск
Data инженер
Middle+
3 545,15 Р/час
Alembic
Apache
Apache AirFlow
Apache Spark
athena
Avro
AWS
AWS glue
Bash scripting
Bitbucket
+55

Data-инженер с опытом работы в отрасли электронной коммерции и ритейла более 3 лет. Участвовал в проекте по внедрению платформы снабжения и планирования для крупного производственного предприятия. Выполнял обязанности по управлению командой дата-инженеров, обсуждал архитектуру системы, подключался к источникам данных, оптимизировал SQL-запросы, создавал конвейеры Airflow, работал с Pandas, разрабатывал хранимые процедуры, настраивал соединения Kafka, проектировал витрины данных и HDFS. Работал над созданием простого в интеграции приложения для персонализированной бизнес-аналитики на базе искусственного интеллекта. Занимался разработкой конечных точек Flask, нормализацией данных, контролем операций хранилища данных, разработкой моделей DBT, использовал Pandas, NumPy и SciPy, разрабатывал функции с помощью AWS Lambda. Принимал участие в разработке платформы для сбора и обработки больших объёмов данных из различных источников. Администрировал базы данных, разрабатывал и оптимизировал сложные SQL-запросы, использовал Apache Spark, обрабатывал крупномасштабные наборы данных с помощью AWS EMR, выполнял статистические вычисления с помощью SciPy.

Подробнее
E-commerce & Retail • FinTech & Banking
КЯ
Кирилл Я.
Минск
Data инженер
Middle+
3 545,15 Р/час
aks
Analytics
Apache AirFlow
Apache Kafka
Apache NiFi
Apache Spark
Apache Superset
AWS
Azure
Azure SQL
+50

Data Engineer с опытом работы на проектах в сфере E-commerce & Retail и FinTech & Banking. На проектах занимался разработкой аналитических платформ, DWH и систем аналитики. Обязанности: - разработка ETL-пайплайнов в Apache Airflow и Apache NiFi; - обработка больших объёмов данных с использованием PySpark, Pandas, NumPy; - оптимизация интеграции Hadoop (HDFS); - агрегация данных в ClickHouse для BI-отчётов; - визуализация данных в Power BI и Superset; - мониторинг и оптимизация производительности запросов в Snowflake; - интеграция PostgreSQL и MS SQL; - использование Docker и Kubernetes для контейнеризации ETL-компонентов; - создание детальных технических проектных документов; - сотрудничество с командой аналитиков; - проведение тестирования системы; - настройка CI/CD-конвейеров с помощью GitLab CI/CD.

Подробнее
E-commerce & Retail • Logistics & Transport
АЛ
Алексей Л.
Минск
Data инженер
Senior
3 896,1 Р/час
Apache AirFlow
Apache Hadoop
apache hive
Apache Spark
ClickHouse
cloud
Cloud Functions
Data
DataLens
HDFS
+35

Дата Инженер / Бизнес-Аналитик с опытом работы более 5+ лет. Квалифицированный специалист с богатым опытом использования различных технологий для решения сложных задач. Мой опыт позволяет мне эффективно ориентироваться в стеке технологий и быстро находить наиболее эффективные решения. Стремлюсь быть в курсе последних событий в отрасли, чтобы всегда обеспечивать наилучшие результаты. Языки программирования Python, SQL. Инженерия данных Apache Airflow, Apache Spark, PySpark, Apache Hadoop, Apache Hive, HDFS. Облачные сервисы Yandex Cloud (DataLens, Object Storage, Compute Cloud, Data Proc, Virtual Machines, Cloud Functions, Managed Service for ClickHouse, Managed Service for PostgreSQL). Базы данных PostgreSQL, MySQL, Redis, ClickHouse, Greenplum, MongoDB. Брокеры сообщений Kafka. Data Science Pandas, NumPy. Моделирование данных Многомерное Моделирование (Схема «Звезда», Схема «Снежинка»), Моделирование Сущность-Связь (ER), Нормализация / Денормализация. DevOps Docker, Docker Compose, Bash scripting, Kubernetes. Системы контроля версий Git, GitHub, Bitbucket.

Подробнее
FinTech & Banking • Logistics & Transport • Media
СБ
Сергей Б.
Минск
Data инженер
Senior
3 896,1 Р/час
Apache AirFlow
Apache Hadoop
Apache Kafka
Apache Spark
Bash scripting
ClickHouse
Cloud Functions
Data
DataLens
Docker
+40

Дата инженер / Системный Аналитик с опытом работы более 5 лет. Я являюсь опытным специалистом, которому нравится создавать новаторские и эффективные решения. У меня обширный опыт в разработке и глубокое понимание современных технологий. Проактивный командный игрок с отличными навыками коммуникации, способен быстро осваивать новые технологии и методологии. Ставлю требования бизнеса на первое место. Независимо от того, работаю я самостоятельно или в составе команды, моя цель – достигать результатов, которые превосходят ожидания и способствуют успеху бизнеса. Языки программирования Python, SQL. Инженерия данных Apache Hadoop, HDFS, Apache Spark, PySpark, Apache Airflow. Облачные технологии Yandex Cloud (DataLens, Object Storage, Virtual Machines, Data Proc, Cloud Functions, Managed Kubernetes, Managed Service for PostgreSQL, KMS, IAM, Monitoring). Базы данных PostgreSQL, Greenplum, Oracle, ClickHouse, MongoDB, Redis. Брокеры сообщений Apache Kafka. Data Science Pandas, NumPy. Моделирование данных Многомерное Моделирование (Схема «Звезда»,, Схема «Снежинка»,), Сущность-Связь (ER) Моделирование, Нормализация / Денормализация, Data Vault 2.0. DevOps Docker, Docker Compose, Kubernetes, Bash скриптинг. Системы контроля версий Git, GitLab, GitHub.

Подробнее
AI & Robotics • FinTech & Banking • Travel, Hospitality & Restaurant business
МК
Матвей К.
Минск
Data инженер
Senior
4 155,84 Р/час
Apache AirFlow
Apache Hadoop
apache hive
Apache Spark
Bash scripting
Bitbucket
boot
ClickHouse
cloud
Cloud Functions
+43

Дата-Инженер с опытом работы более 6 лет. Моя цель в работе - стремление добиваться результатов, превосходящих чьи либо ожидания. Я понимаю важность соответствия моей работы конкретным требованиям каждого клиента и умею создавать эффективные стратегии, соответствующие потребностям. Я всегда ищу идеальное решение для всех задач каждого клиента. Языки программирования Python, SQL, Java. Инженерия данных Apache Hadoop, HDFS, Apache Hive, Apache Spark, PySpark, Apache Airflow, dbt, Snowflake. Облачные сервисы Yandex Cloud(DataLens, Object Storage, Compute Cloud, Data Proc, Cloud Functions, Managed Service for PostgreSQL). Базы данных ClickHouse, MS SQL, PostgreSQL, MongoDB, Redis. Брокеры сообщений Kafka. Data Science Pandas, NumPy. Визуализация данных Power BI, Tableau. Бэкенд Spring (MVC, Boot, Security, Data), FastAPI. Моделирование данных Многомерное Моделирование (Схема «Звезда», Схема «Снежинка»), Моделирование Сущность-Связь (ER), Нормализация / Денормализация, Data Vault 2.0. DevOps Docker, Docker Compose, Bash scripting, Kubernetes. Системы контроля версий Git, Bitbucket, GitHub.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • Government & Public Sector • HRTech • LifeStyle • Urban technology
КР
Кирилл Р.
Красноярск
React разработчик
Middle+
3 636,36 Р/час
MobX
react-toastify
Sass
React Query
React testing library
Redux Thunk
Redux
Styled-Components
Testing Library
createAsyncThunk
+42

Кирилл — опытный React-разработчик с навыками работы на проектах в сферах HRTech, E-commerce & Retail, LifeStyle, Urban technology и Government & Public Sector. Он обладает глубокими знаниями в области разработки на React, Next.js, Redux, TypeScript и других технологиях. На своих проектах Кирилл занимался интеграцией пользователей с календарями, разработкой диаграмм Ганта, созданием экспортов отчётов по шаблонам, добавлением авторизации через различные сервисы и другими задачами. Опыт работы Кирилла включает участие в разработке приложения для учёта рабочих часов, сайта речного клуба, мультимедийного мобильного приложения, платформы для планирования архитектурного развития территорий, платформы для фестивалей и платформы для развития креативных индустрий.

Подробнее
FinTech & Banking • Information Security • Telecom
ДК
Дмитрий К.
Москва
Архитектор
Lead
3 103,89 Р/час
C#
C++
FORTRAN
UML
PHP
AWS
RPC
.NET
REST
XML
+48

Дмитрий — архитектор с двадцатипятилетним опытом работы на позиции ведущего архитектора-консультанта и системного архитектора в проектах FinTech & Banking, Information Security и многих других. Вёл более 60 проектов. Работал со всеми крупными банками России: ВТБ, СБербанк, Т-Банк и т.д. Разрабатывал архитектуру предприятия и решений. CTO/EA/SA. Управлял проектами и командой. Аналитик, работает с системной интеграцией, занимался аудитом информационных систем, готовит документацию по стандартам ГОСТ. На проекте NDA выполнял функции ведущего архитектора-консультанта: проводил аудит ИТ, разрабатывал архитектурные решения для государственных и банковских секторов, занимался реинжинирингом архитектурных процессов и миграцией в облачные среды. В рамках проекта «Омега» привлекал разработчиков к использованию технологий IBM, организовывал конкурсы и мероприятия для разработчиков, управлял субподрядчиками, проводил аудит ИТ и заказную разработку для государственного сектора. Как системный архитектор в проекте Ingenico Fortronic разрабатывал архитектуру безопасности системы доступа к серверам карточных эквайреров и интеграционную архитектуру. На проекте TopS разработал архитектуру компонентов системы интеграции iWay. Ведущий архитектор в проекте «Контрактор», где выполнял консалтинг в области архитектуры предприятия, участвовал в разработке стратегии развития продукта и подбирал необходимые технологии.

Подробнее
BioTech, Pharma, Health care & Sports • E-commerce & Retail • FinTech & Banking
МЯ
Максим Я.
Москва
Java разработчик
Senior
3 468,09 Р/час
Grafana
GraphQL
GitLab
Postman
Spring Data
ClickHouse
Spring Cloud
Groovy
Git
Oracle
+46

Максим — опытный Java-разработчик уровня Senior из Москвы. Специализируется на работе с технологиями и инструментами, такими как Apache, Apache Kafka, Docker, Git, GitLab, Kubernetes и другими. Опыт работы: - Система бухгалтерского учёта сделок по ценным бумагам (FinTech & Banking): рефакторинг старого функционала, исправление багов, разработка нового функционала, проведение код-ревью, покрытие тестами. Внедрил единые подходы к разработке, повысил производительность системы за счёт замены REST-интеграции на Kafka. - Ядро системы оператора фискальных данных (FinTech & Banking): развитие существующих и разработка новых сервисов серверной части, анализ требований и проектирование технических решений, оперативное устранение неисправностей. Повысил производительность системы с 1000 rps до 2500 rps. - Программы лояльности (E-commerce & Retail): поддержка и расширение функционала действующей системы, проведение код-ревью, покрытие функционала тестами. Унифицировал запросы-ответы, реализовал микросервис онлайн-оплаты. - Учёт клиентов сети медицинских клиник (BioTech, Pharma, Health care & Sports): поддержка и расширение функционала системы, проведение код-ревью, покрытие функционала тестами. Синхронизировал информацию о клиентах, оптимизировал модель хранения и модель приложения.

Подробнее