София Я. Data инженер, Senior

ID 27471
СЯ
София Я.
Женщина, 26 лет
Россия, Москва, UTC+3
Ставка
3 802,05 Р/час
вкл. НДС 5% (140.95 Р)
Специалист доступен с 28 августа 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache
Apache AirFlow
Big Data
BigQuery
CI/CD
ClickHouse
Dagster
DBT
Docker
DWH
Elasticsearch
Grafana
Groovy
Hadoop
Java
Kafka
Kubernetes
metrics
NiFi
Oracle
PostgreSQL
Python
REST API
Scala
Snowflake
Spark
SQL
Vertica
victoria
MS SQL
Отрасли
E-commerce & Retail
Telecom
Знание языков
Английский — C1
Главное о специалисте
София — Senior Data инженер из Москвы с опытом работы в отраслях Telecom и E-commerce & Retail. Имеет высшее образование по специальности «бизнес-информатика» с дополнительной специализацией в области биоинформатики. Владеет английским языком на уровне C1. Ключевые навыки: Apache, Apache AirFlow, Big Data, BigQuery, CI/CD, ClickHouse, Dagster, DBT, Docker, DWH, Elasticsearch, Grafana, Groovy, Hadoop, Java, Kafka, Kubernetes, MSSQL, NiFi, Oracle, PostgreSQL, Python, REST API, Scala, Snowflake, Spark, SQL, Vertica, Victoria. Опыт работы на проектах: - Выгрузка данных по мобильным приложениям компании «Билайн». Разработка высокопроизводительных конвейеров данных с использованием Apache NiFi, Spark и Kafka, обрабатывающих до 1 ТБ ежедневно. - Разработка интеграций на проекте «Нефтехим». Создание рабочих процессов ETL на основе метаданных с использованием Apache Airflow и NiFi, интегрирующих REST API и внутренние источники данных. Общая продолжительность работы на проектах — 2 года 3 месяца.
Проекты   (4 года 6 месяцев)
Выгрузка данных по мобильным приложениям компании “Билайн”
Роль
Data Engineer
Обязанности
Команда: 1-3 человека Архитектура: Микросервисная Обязанности: Разрабатывала высокопроизводительные конвейеры данных с использованием Apache NiFi, Spark и Kafka, обрабатывающие до 1 ТБ ежедневно Разработка оптимизированного хранилища HDFS и Hive, сокращающее занимаемое пространство на 50% за счет расширенного разбиения на разделы и форматов ORC/Parquet Работа с запросами (оптимизация, чтение, хранение и т.д.) Построение и хранение данных Развертывание конвейеров CI/CD для DAG на базе Scala, оптимизирующие автоматизацию и поддержку рабочих процессов, специфичных для домена. Обеспечение и поддержка основных потоков данных, лежащие в основе 90% панелей управления аналитического отдела. Повышение качества данных за счет интеграции регистрации и мониторинга с Grafana, Victoria Metrics и ElasticSearch. Работа с большими данными Cборка, компиляция и развертывания приложений в контейнерной среде
Стек специалиста на проекте
Docker, Elasticsearch, API, Java, SQL, Scala, Grafana, MVP, Yandex, Hive, Spark, ClickHouse, Hadoop, Groovy, Kafka, Big Data, DWH, CI/CD, Apache NiFi, VictoriaMetrics, DBT
Отрасль проекта
Telecom
Период работы
Июнь 2023 - По настоящее время  (2 года 3 месяца)
Разработка интеграций на проекте Нефтехим
Роль
Data Engineer
Обязанности
Команда: 10-12 человек Архитектура: Микросервисная Обязанности: Разработка рабочих процессов ETL на основе метаданных с использованием Apache Airflow и NiFi, интегрирующие REST API и внутренние источники данных. Разработка предоставленных чистых семантических слоёв, позволяющих создавать эффективные панели мониторинга для заинтересованных сторон в бизнесе. Документирование потоков данных и программные системы, улучшающие взаимодействие в команде и эффективность адаптации
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Oracle, MVP, ETL, Vertica, Apache AirFlow, NiFi
Отрасль проекта
E-commerce & Retail
Период работы
Март 2021 - Июнь 2023  (2 года 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Высшая школа экономики (НИУ ВШЭ), Москва.
Специальность
Степень бакалавра в области бизнес-информатики, факультет бизнеса и менеджмента, дополнительная специализация в области биоинформатики, факультет компьютерных наук
Завершение учебы
2022 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+65

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail • EdTech • FoodTech • Marketing, Advertising & Design
ДП
Денис П.
Волгоград
Таргетолог
428,57 Р/час
Google Analytics
SEO оптимизация
Веб-аналитика
Организаторские навыки
Adobe Photoshop
Деловая переписка
Деловая коммуникация
Интернет-маркетинг
Создание сайтов
Пользователь ПК
+19

Я специалист в области интернет-маркетинга с опытом работы 6 лет 5 месяцев. Имею высшее образование по специальности филологии и журналистики. Владею русским языком на уровне C1, английским — на уровне B1. Ключевые навыки: POM, деловая коммуникация, креативность, организаторские навыки, работа в команде, пользователь ПК, социальные сети, Adobe Photoshop, Aleo, Google Analytics, веб-аналитика, интернет-маркетинг, Яндекс Директ, Яндекс.Метрика, SEO оптимизация, планирование маркетинговых кампаний, создание сайтов. Работал в отраслях Marketing, Advertising & Design, FoodTech, EdTech, E-commerce & Retail. Участвовал в следующих проектах: - Сеть частных детских садов Sun School — запуск и ведение рекламных кампаний в Яндекс Директ, помощь в оптимизации landing page, веб-аналитика, отчётность. - Онлайн магазин натуральных кормов для собак — разработка маркетинговой стратегии, анализ конкурентов и целевой аудитории, помощь в оптимизации landing page, создание рекламных объявлений, настройка рекламы в Яндекс.Директ, ВК и MyTarget, веб-аналитика и оптимизация рекламных кампаний. - Пиарвет — разработка маркетинговой стратегии, анализ конкурентов, оптимизация площадок компаний-заказчиков в интернете, создание и редактирование landing page, настройка таргетированной рекламы в ВК, ФБ, Instagram, MyTarget, настройка рекламы в Яндекс.Директ, Google Adwords и YouTube, веб-аналитика и оптимизация рекламных кампаний, поиск и найм сотрудников, обучение новых сотрудников. - Школа цифрового рисунка и концепт-арта «Smirnov School» — разработка маркетинговой стратегии, оптимизация площадок компании в интернете, создание landing page, анализ конкурентов и целевой аудитории, настройка таргетированной рекламы в ВК, ФБ, Instagram, YouTube, настройка рекламы в Яндекс.Директ и Google Adwords.

Подробнее
AI & Robotics • E-commerce & Retail • FinTech & Banking • Government & Public Sector • Manufacturing • Social Networking • Urban technology
ДЯ
Денис Я.
Витебск
Бизнес/системный аналитик
Senior
2 597,4 Р/час
Visual
методологии
Specifications
orval
Redmine
AI
Wireframes
C4
search
Сбор и анализ требований
+108

Денис — бизнес- и системный аналитик с 15-летним опытом работы в различных отраслях, включая Urban technology, Manufacturing, Government & Public Sector, AI & Robotics, E-commerce & Retail, FinTech & Banking, Social Networking. В роли ведущего системного аналитика участвовал в создании подсистемы картографического обеспечения МЕТА в рамках АИС «Цифровой двойник». Занимался бизнес-анализом и системным анализом, подготовкой документов по постановке задачи с Use Cases в Confluence, проектированием и проработкой сервисов и интеграций. Как ведущий системный аналитик разрабатывал и внедрял ПО в сфере охраны труда и промышленной безопасности: собирал и анализировал требования, изучал материалы по методологии «Риск-контроль», готовил проектную документацию. Внедрял чат-бот ChatNavigator и голосовой ассистент VoiceKey.Platform для Московской Биржи. Собирал требования к голосовому ассистенту, взаимодействовал с подрядчиками CraftTalk и ЦРТ, продуктовыми командами Московской Биржи, формулировал требования к статистике и отчётности чат-бота и голосового ассистента. Руководил проектом по разработке чат-бота на AI (ИИ) для eCommerce брендов. Проводил анализ конкурентов, оптимизировал чат-бот BRN.ai, работал над добавлением новых интентов и созданием категорий интентов. Опыт работы включает также позицию начальника отдела аналитики в проекте развития и модернизации автоматизированной банковской системы (АБС), где занимался организацией работы отдела, разработкой регламентирующих документов, участием в подборе персонала.

Подробнее