София Я. Data инженер, Senior

ID 27471
СЯ
София Я.
Женщина, 26 лет
Россия, Москва, UTC+3
Ставка
3 802,05 Р/час
вкл. НДС 5% (140.95 Р)
Специалист доступен с 29 октября 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
Apache
Apache AirFlow
Big Data
BigQuery
CI/CD
ClickHouse
Dagster
DBT
Docker
DWH
Elasticsearch
Grafana
Groovy
Hadoop
Java
Kafka
Kubernetes
metrics
NiFi
Oracle
PostgreSQL
Python
REST API
Scala
Snowflake
Spark
SQL
Vertica
victoria
MS SQL
Отрасли
E-commerce & Retail
Telecom
Знание языков
Английский — C1
Главное о специалисте
София — Senior Data инженер из Москвы с опытом работы в отраслях Telecom и E-commerce & Retail. Имеет высшее образование по специальности «бизнес-информатика» с дополнительной специализацией в области биоинформатики. Владеет английским языком на уровне C1. Ключевые навыки: Apache, Apache AirFlow, Big Data, BigQuery, CI/CD, ClickHouse, Dagster, DBT, Docker, DWH, Elasticsearch, Grafana, Groovy, Hadoop, Java, Kafka, Kubernetes, MSSQL, NiFi, Oracle, PostgreSQL, Python, REST API, Scala, Snowflake, Spark, SQL, Vertica, Victoria. Опыт работы на проектах: - Выгрузка данных по мобильным приложениям компании «Билайн». Разработка высокопроизводительных конвейеров данных с использованием Apache NiFi, Spark и Kafka, обрабатывающих до 1 ТБ ежедневно. - Разработка интеграций на проекте «Нефтехим». Создание рабочих процессов ETL на основе метаданных с использованием Apache Airflow и NiFi, интегрирующих REST API и внутренние источники данных. Общая продолжительность работы на проектах — 2 года 3 месяца.
Проекты   (4 года 8 месяцев)
Выгрузка данных по мобильным приложениям компании “Билайн”
Роль
Data Engineer
Обязанности
Команда: 1-3 человека Архитектура: Микросервисная Обязанности: Разрабатывала высокопроизводительные конвейеры данных с использованием Apache NiFi, Spark и Kafka, обрабатывающие до 1 ТБ ежедневно Разработка оптимизированного хранилища HDFS и Hive, сокращающее занимаемое пространство на 50% за счет расширенного разбиения на разделы и форматов ORC/Parquet Работа с запросами (оптимизация, чтение, хранение и т.д.) Построение и хранение данных Развертывание конвейеров CI/CD для DAG на базе Scala, оптимизирующие автоматизацию и поддержку рабочих процессов, специфичных для домена. Обеспечение и поддержка основных потоков данных, лежащие в основе 90% панелей управления аналитического отдела. Повышение качества данных за счет интеграции регистрации и мониторинга с Grafana, Victoria Metrics и ElasticSearch. Работа с большими данными Cборка, компиляция и развертывания приложений в контейнерной среде
Стек специалиста на проекте
Docker, Elasticsearch, API, Java, SQL, Scala, Grafana, MVP, Yandex, Hive, Spark, ClickHouse, Hadoop, Groovy, Kafka, Big Data, DWH, CI/CD, Apache NiFi, VictoriaMetrics, DBT
Отрасль проекта
Telecom
Период работы
Июнь 2023 - По настоящее время  (2 года 5 месяцев)
Разработка интеграций на проекте Нефтехим
Роль
Data Engineer
Обязанности
Команда: 10-12 человек Архитектура: Микросервисная Обязанности: Разработка рабочих процессов ETL на основе метаданных с использованием Apache Airflow и NiFi, интегрирующие REST API и внутренние источники данных. Разработка предоставленных чистых семантических слоёв, позволяющих создавать эффективные панели мониторинга для заинтересованных сторон в бизнесе. Документирование потоков данных и программные системы, улучшающие взаимодействие в команде и эффективность адаптации
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Oracle, MVP, ETL, Vertica, Apache AirFlow, NiFi
Отрасль проекта
E-commerce & Retail
Период работы
Март 2021 - Июнь 2023  (2 года 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Высшая школа экономики (НИУ ВШЭ), Москва.
Специальность
Степень бакалавра в области бизнес-информатики, факультет бизнеса и менеджмента, дополнительная специализация в области биоинформатики, факультет компьютерных наук
Завершение учебы
2022 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее
AI & Robotics • E-commerce & Retail • Logistics & Transport • Telecom
СМ
Сергей М.
Набережные Челны
Data инженер
Senior
4 367,22 Р/час
Adobe Photoshop
Agile
Apache AirFlow
apache hive
Apache NiFi
Big Data
CI/CD
ClickHouse
Confluence
+67

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Подробнее

Недавно просмотренные специалисты

Отрасли не указаны
РГ
Рузиля Г.
Ульяновск
Верстальщик
Middle
2 077,92 Р/час
Git
HTML
CSS
Figma
Zeplin
Adobe Photoshop
Redmine
Gulp
SSH
Slack
+19

- Опыт разработки сайтов более 2 лет - Верстка сайтов с нуля - Работа с багами от сторонних разработчиков - Опыт в вёрстке html-писем Дополнительная информация о разработчике: С 2021 года в коммерческой разработке. 9 готовых проектов Обладает фундаментальными знаниями в HTML/CSS Опыт в верстке HTML e-mail Все навыки разработчика: git, git flow; task trackers (redmine); Методы верстки (послойная, блочная и т.д.); Верстка под разные "движки" сайтов (CMS) на разных типах устройств пользователей; HTML5, CSS3; Запустить простую JQuery библиотеку(SlickSlider/Swiper); Стиль кода; Основные графические редакторы Photoshop, Illustrator(на уровне вырезать картинку); Шрифты(как правильно подключить, какие форматы используем, какие свойства необходимы); bootstrap/skeleton/kube/foundation; Оптимизация контента(изображения, тексты через Типограф); Семантическая верстка; Sass, Less; Шаблонизаторы PUG; БЭМ; Figma/Zeplin/AdobeXD/Avocode; Полифилы(Modernizr, picturefill); SVG; jQuery скрипты(permutation, открытие бургеров); Основные графические редакторы Photoshop, Illustrator(на уровне отредактировать изображение); Работа с frontend сборками(Gulp/Webpack); E-mail верстка; Display grid; CSS анимации; Верстка под VUEjs;

Подробнее
EdTech • Hardware • Telecom
СП
Сергей П.
Евпатория
QA ручной
Senior
2 954,3 Р/час
*nix
Регрессионное тестирование
Тестирование web-приложений
Пользовательские интерфейсы
Zephyr
IOS
Работа с интеграциями
статистика
front
GraphQL
+63

Имею опыт тестирования более 3 лет, как web приложений, так и мобильных (на платформах IOS и Android), и desktop(на windows). Занимался функциональным (системным и интеграционным) и регрессионным тести-рованием. Последним местом работы была компания ТУ СОФТ, проект по работе с номенклатурным учетом. Выполнял системное, интеграционное и регрессионное тестирование задач. Последний год являлся ведущим тестировщиком в команде. Ввёл автоматизацию фронтовых тестов на фреймворке Cypress. Хотел бы далее развиваться в тестировании, больше работать над автоматизированным тестированием. Хотел бы больше развиваться в hard-скиллах, больше работать с ин-струментами тестирования, использовать новые для себя инструменты, работать с брокерами сообщений, с базами данных(развивать навыки SQL), больше работать с Postman.

Подробнее