ИИ
Ислам И.
Мужчина
Объединенные Арабские Эмираты, Абу-Даби, UTC+4
Ставка
4 624,11 Р/час
вкл. НДС 5% (171.43 Р)
Специалист доступен с 29 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Ansible
Apache
Apache AirFlow
API
Architecture
Avro
BI
CI/CD
Clang
Clean Code
ClickHouse
cloud
code
Composer
Data
Data Warehouse
DBT
debezium
Design Patterns
Docker
Docker Swarm
ETL
Exasol
Flask
GCP
GitHub
Hadoop
HDFS
Hive
Java
Kafka
Kafka Streams
Kotlin
Kubernetes
language
Linear
Native
ngineering
Nginx
optimization
PHP
Python
quality
river
Snowflake
Spark
Spring
Storage
Symfony
Systemd
TeamCity
tools
Unit testing
Vertica
Yarn
DWH
AD
Detection
Zookeeper
ДО
Планирование
Программное обеспечение
Работа в команде
Elasticsearch
Testing
Аналитика
Microservices
Рефакторинг
HP
Разработка
SQL
Jira
PostgreSQL
SAS Data Integration Studio
Отрасли
E-commerce & Retail
FinTech & Banking
Logistics & Transport
Social Networking
Проекты   (8 лет 3 месяца)
Dating app
Роль
Data Engineer
Обязанности
● Работа в команде над разработкой и предоставлением масштабируемой, надежной и удобной платформы данных с упором на поддержание целостности данных и соблюдение соглашений об уровне обслуживания. ● Исследовал и разработал ряд инновационных решений для обработки и маршрутизации потоков данных с использованием Kafka. включая проверку, преобразование и обогащение в реальном времени. Эти решения позволили сократить время разделения событий по типам с 30-40 минут до 3-5 минут, а также существенно снизить загрузку ресурсов и дать возможность обрабатывать до 8 миллионов событий в секунду. ● Реализован анализатор сообщений в реальном времени на основе Kafka с использованием Kotlin, позволяющий владельцам данных получать доступ к конкретным данным и фильтровать их на основе событий. ● Внедрены значительные улучшения в приложении Anomaly Detection: обнаружение проблем в данных временных рядов, включая показатели DAU/WAU, авторизации пользователей и платежей, а также широкий спектр технических показателей. Сотрудничал с пользователями AD для улучшения существующих инструментов и внедрения новых функций. ● Приложения перенесены из локальной среды в облако, мигрированы с Exasol на Snowflake. ● Повышена стабильность конвейера предварительно агрегированных показателей (с задержкой 5–15 минут для миллиардов показателей). ● Управление кластерами ClickHouse и Hadoop: планирование мощности и распределение ресурсов, реализация хаоса. инженерные практики. ● Обслуживание кластера Kafka: обновление с версии 2.8 до версии 3.0, затем до версии 3.5, переход с ZooKeeper на KRaft, обновляя до последних версий все библиотеки Kafka, используемые в приложениях, взаимодействующих с брокерами Kafka. ● Инфраструктура команды: o Платформа отслеживания: более 3,5 млн сообщений в секунду. o Hadoop: более 130 узлов, около 4 ПБ данных. o ClickHouse: 5 геораспределенных кластеров, около 30 серверов, тысячи таблиц. o Kafka: 5 брокеров, JBOD, 10 ТБ, ~2500 производителей с несбалансированной ставкой. o Сервисы GCP и более 20 серверов обработки (кроме Hadoop) в разных ЦОД.
Стек специалиста на проекте
PostgreSQL, Kotlin, Zookeeper, ClickHouse, Hadoop, Kafka, Detection, SAS Data Integration Studio, AD, GCP, Exasol, Snowflake
Отрасль проекта
Social Networking
Период работы
Июнь 2021 - По настоящее время  (4 года 3 месяца)
Онлайн сервис путешествий
Роль
Data Engineer / Server Side Software Engineer
Обязанности
● Разработанная схема данных DWH. ● Разработан конвейер для доставки и обогащения данных о потоке кликов из ElasticSearch в ClickHouse. ● Создание самописного приложения поиска аномалий в timeseries-данных на основе предсказаний. и вот вся математика предсказаний была в ClickHouse и реализация алгоритмов была как раз на уровне sql-запросов ● Создана система ChangeDataCapture(CDC) на базе Debezium. ● Создана система витрины данных с использованием Airflow и Exasol. ● Разработана система тестирования. ● Обученные пользователей и аналитиков, использующих систему A/B-тестирования и DWH. ● Онбординг новых членов команды.
Стек специалиста на проекте
PostgreSQL, Elasticsearch, SQL, ClickHouse, Аналитика, DWH, Testing, Apache AirFlow, Exasol, debezium
Отрасль проекта
Logistics & Transport
Период работы
Январь 2020 - Июнь 2021  (1 год 6 месяцев)
Avito
Роль
Backend PHP Developer
Обязанности
● Перевел существующую логика веб приложения с монолита на микросервисы. ● Разработал API для внешнего интерфейса и мобильных приложений. ● Рефакторинг кода внутри монолита.
Стек специалиста на проекте
PostgreSQL, API, PHP, SQL, Microservices, Рефакторинг
Отрасль проекта
E-commerce & Retail
Период работы
Май 2019 - Декабрь 2019  (8 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Да
Образование
Высшее
Учебное заведение
Российский государственный аграрный университет
Специальность
Магистр "информационные системы в логистике"
Завершение учебы
2016 г.

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+65

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее

Недавно просмотренные специалисты

IoT • Manufacturing • Social Networking
НД
Наталья Д.
Москва
Системный аналитик
Senior
2 597,4 Р/час
Jira
Confluence
Английский язык
JSON API
Базы данных
FastAPI
Автоматизация процессов
1С:Предприятие 8
Use case analysis
Написание ТЗ
+25

Аналитик с 14-м стажем в сфере разработки ПО, включая полный цикл создания решений: от сбора бизнес-требований до внедрения и сопровождения с подготовкой соответствующей документации на каждом этапе жизненнго цикла. Участвовала в проектах по автоматизации и трансформации процессов в таких направлениях как: Казначейство, учет Финансовых интрументов (кредитные сделки, займы, деривативы, поручительства), финансовая отчетность, лизинговая деятельность, управление и взыскание дебиторской задолженности с учетом изменяющихся требований бухгалтерского и налогового учета (в т.ч. в рамках МСФО). Также обладаю профессиональной экспертизой в следующих предметных областях: • Forex, включая техническую интеграцию платформ MT4/MT5 с агрегирующим механизмом XCore для эффективного управления ликвидностью и маршрутизации ордеров. • Знакома с архитектурой брокерских решений, настройкой потоков котировок, а также взаимодействием с поставщиками ликвидности. • Телеком индустрия, в частности процессы тарификации услуг, выставления счетов, приема оплаты, работа с задолженностью, интеграции с бухгалтерскими и ERP-системами. Имею опыт адаптации АСР под изменяющиея требования законодательства. В рамках проектов автоматизации осуществляла анализ RFP/RFI и требований заказчика, подготовку технической документации: функциональные требования, описание пользовательских сценариев (Use Cases), спецификации моделей данных, OpenAPI, диаграммы бизнес-процессов и рабочих процессов. Сильный командный игрок, умею работать по методологиям Scram, Agile, waterfall. Участвую в планировании спринтов, определении объема задач, подготовке пользовательских историй (user stories) и критериев приёмки. Сейчас развиваю навыки проектирования интеграций, изучаю работу микросервисной архитектуры и хочу получить возможность применять это на новом месте. Быстро осваиваю новые предметные области, легкообучаема. Настоена на долгосрочное сотрудничество.

Подробнее
E-commerce & Retail • FinTech & Banking • Information Security • Telecom • Urban technology
РД
Рафаэль Д.
Москва
Angular разработчик
Senior
2 857,14 Р/час
Git
HTML
CSS
Docker
JavaScript
Jira
Figma
REST API
Jest
Webpack
+26

Рафаэль — Angular разработчик уровня Senior из Москвы. Специализируется на фронтенд-разработке с использованием Angular, TypeScript, RxJS, JavaScript и других технологий. Имеет опыт работы в отраслях E-commerce & Retail, FinTech & Banking, Information Security, Telecom, Urban technology. Участвовал в разработке комплексной CRM-системы для B2B-сегмента, где изучал основы Angular-разработки и принципы построения корпоративных приложений. Работал над созданием и оптимизацией пользовательских интерфейсов для различных аутсорсинг-проектов. Реализовал клиентскую часть платформы микрофинансирования с нуля до продакшн-запуска, создав безопасный и интуитивный интерфейс для работы с финансовыми операциями. Разрабатывал интерактивную геоинформационную B2B платформу с real-time отображением геоточек, интуитивно понятным пользовательским интерфейсом и продвинутыми алгоритмами фильтрации и группировки. Внедрил централизованное хранилище состояния в высоконагруженную B2B платформу корпоративного уровня, провёл масштабный рефакторинг критически важного legacy-кода в продакшн-среде. Выступал в роли технического лидера при создании трёх взаимосвязанных систем автоматизации для управления промышленным газовым оборудованием, спроектировав унифицированную архитектуру на основе Feature-Sliced Design. Провёл комплексный анализ архитектурных проблем и внедрил решение на основе модифицированного Feature-Sliced Design в критически важном проекте банковского документооборота, что привело к полной реструктуризации кодовой базы и улучшению читаемости и масштабируемости приложения.

Подробнее
GameDev • Telecom
ДТ
Дмитрий Т.
Майкоп
Angular разработчик
Middle+
2 727,27 Р/час
*nix
HTML5
HTML/CSS
Sass
GraphQL
Web Components
WebSockets
Git
Zeplin
MongoDB
+34

Angular-разработчик с опытом создания масштабируемых SPA-приложений. Специализируется на архитектуре, реализации сложных UI/UX решений, интеграции с бэкендом и написании качественного, тестируемого кода. Владеет TypeScript, глубоко понимает работу фреймворка Angular и современные подходы к разработке. Обладает аналитическим складом мышления, высокой самоорганизацией и вниманием к деталям. Успешно работает как в команде, так и самостоятельно. Легко адаптируется к изменяющимся требованиям, умеет находить нестандартные решения в условиях ограниченного времени. Ответственен, легко обучаем, обладает развитыми soft skills и технической эрудицией. Ключевые навыки и технологии: Проектирование приложений с нуля Разработка гибкой архитектуры Работа с REST API, GraphQL, WebSocket Написание unit и e2e тестов (Karma + Jasmine) Умение работать с чужим кодом Асинхронное программирование, RxJS, NgRx Pixel-perfect верстка по макетам Figma / Zeplin Интеграция с платежными системами и сторонними API Реализация oauth2 авторизации

Подробнее
E-commerce & Retail • IoT • Urban technology
ГК
Галина К.
Минск
Системный аналитик
Lead
5 844,15 Р/час
C++
Visual
script
z/OS
Backlog
Shell scripts
Infomix
language
lotus
Работа с интеграциями
+104

Галина — опытный системный аналитик с 19-летним опытом работы в IT. Она обладает глубокими знаниями и навыками в области разработки программного обеспечения, анализа данных и управления проектами. Галина работала над различными проектами, включая разработку информационных хранилищ, интеграцию данных из разных стран и предметных областей, а также миграцию баз данных в облако. Она также имеет опыт руководства командами разработчиков и тестирования программного обеспечения. На своих проектах Галина выполняла анализ запросов клиентов, разрабатывала дизайн для части проекта, руководила всеми этапами жизненного цикла разработки нового программного обеспечения и поддерживала обновления системного программного обеспечения.

Подробнее