Павел М. Data инженер, Middle

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Data Engineer с более чем 3 годами опыта в автоматизации ETL-процессов и проектировании аналитических хранилищ данных (DWH). Специализируется на построении витрин данных (raw, ODS, data marts) с использованием Apache Airflow, Python, SQL и GreenPlum. Оптимизировал SQL-запросы, внедрил проверку качества данных (Great Expectations) и разработал архитектуру для BI-дашбордов (Power BI, Apache Superset). Имеет опыт работы с большими данными (Hadoop, Spark) и интеграции данных между PostgreSQL, GreenPlum и BI-решениями. Обладает навыками настройки DAG’ов Airflow, контейнеризации (Docker) и анализа данных с использованием Pandas, NumPy и Scikit-learn. Коммуникабелен, ориентирован на улучшение процессов и командное взаимодействие.

1. Сбор/анализ требований заказчика, составление ТЗ, документирование (Figma, Notion) 2. Описание регламента и построения ETL процессов (API, Python, AirFlow) 3. Знание основ ETL/DWH 4. Построение витрин данных 5. Формировании аналитической отчетности DataLens/PowerBI 6. Тестирование и проверка базовых кейсов

На 3 курсе в университете начал работать по специальности. На работе коллеги занимались машинным обучением, тогда изаинтересовался аналитикой. По мере погружения в эту сферу, остановился на профессии дата-инженера. На данный моментчувствую, что готов решать более сложные техническиезадачи.

Антон — Data инженер уровня Senior из Москвы. Специализируется на проектировании и реализации DWH, разработке правил Data Governance, DataOps, ETL и Data Processing. Имеет опыт работы с Apache AirFlow, Apache Kafka, Apache Spark, API, Atlassian Jira, ClickHouse, Docker, DWH, ETL, Git, GreenPlum, Hadoop, Kafka, Linux, PostgreSQL, Python, RabbitMQ, Redis, SAS, SQL. Участвовал в проектах в отраслях Social Networking, Media, Telecom, FinTech & Banking. В роли Senior Data Engineer в проекте Social Profiler LLC занимался построением полного конвейера данных, разработкой сервисов для интеграции моделей ML, DS, Computer Vision и ChatGPT. В проекте КИБЕР-РОМ в качестве Data Engineer и Python Dev разрабатывал микросервисы для поставки и обработки данных, проектировал хранилище данных, занимался ETL и ELT процессами, потоковой обработкой данных. В проекте Мобильные ТелеСистемы в роли старшего разработчика создавал пайпланы для ML-моделей, работал с DS и DA, помогал в оптимизации кода. В проекте GlowByte Consulting в должности Data Engineer занимался работой с хранилищем данных, поддержкой движка репликации данных Oracle -> dwh hadoop, написанием макросов SAS, скриптов на bash и scala.

3,5+ года опыта в коммерческой разработке мобильных приложений на iOS. Высшее образование. Проекты в сферах FoodTech, Healthcare, IoT, автоматизации бизнес-процессов. Навыки рефакторинга и разработки нового функционала с использованием SwiftUI, UIKit, VIPER. Работа с Combine, WebSockets, Structured Concurrency и другими современными фреймворками.

В январе 2023 начал углубленно изучать основы C# и вместе с изучением основ писать пет-проект "Бронирование номеров отелей" (https://github.com/YariLAN/Room-booking-system) Дополнительный опыт: 1) Участник студенческого проекта компании "ЛАНИТ-ТЕРКОМ" Участник проектов от ЛАНИТ-ТЕРКОМА С чем работа: Проект "Цифровой офис". Разработка микросервиса DashboardService с командой (своя платформа тасок с карточками). Роль: backend-разработчик. - Писал внутреннюю трехслойную архитектуру микросервиса с использованием EF Core - Тесты с помощью AutoMoq - Написание микросервисной архитектуры через внедрение брокера сообщений RabbitMq. - Работа в команде, обсуждение задач, код-ревью Стек: C#, Web API, EF Core, PostgreSQL, Postman, Docker, AutoMoq Среди моих учебных проектов: - Система бронирования номеров отеля на ASP NET Core MVC 3.1 (ASP NET MVC + PostgreSQL) - Морской бой по сети без бд на JS (Socket.io, Express.js, Node.js) - Набор проектов на Web API (Web API, EF Core, MS SQL, RabbitMQ, Docker, Postman) - Проект с использованием паттерна CQRS + MediatR GitHub (https://github.com/YariLAN)

Выполнение задач тестирования, поиск дефектов, описание и вставка дефектов в систему учета, проверка коррекции дефектов. Функциональное тестирование веб-приложений в части обработки данных: тестирование функциональности экспорта данных, импорт данных из разных источников, тиражирование баз данных Нагрузочное тестирование Тестирование производительности

Опыт в автотестировании порядка 5 лет Опыт ручного и автоматизированного тестирования web и мобильных приложений Опыт работы с микросервисной и монолитными архитектурами