Павел М. Data инженер, Middle

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

1. Сбор/анализ требований заказчика, составление ТЗ, документирование (Figma, Notion) 2. Описание регламента и построения ETL процессов (API, Python, AirFlow) 3. Знание основ ETL/DWH 4. Построение витрин данных 5. Формировании аналитической отчетности DataLens/PowerBI 6. Тестирование и проверка базовых кейсов

Data Engineer с более чем 3 годами опыта в автоматизации ETL-процессов и проектировании аналитических хранилищ данных (DWH). Специализируется на построении витрин данных (raw, ODS, data marts) с использованием Apache Airflow, Python, SQL и GreenPlum. Оптимизировал SQL-запросы, внедрил проверку качества данных (Great Expectations) и разработал архитектуру для BI-дашбордов (Power BI, Apache Superset). Имеет опыт работы с большими данными (Hadoop, Spark) и интеграции данных между PostgreSQL, GreenPlum и BI-решениями. Обладает навыками настройки DAG’ов Airflow, контейнеризации (Docker) и анализа данных с использованием Pandas, NumPy и Scikit-learn. Коммуникабелен, ориентирован на улучшение процессов и командное взаимодействие.

За всю карьеру было реализовано большое количество проектов. Начиная от систем контроля доступа, заканчивая разработкой LLM моделей для автоматизации работы менеджеров и ОКК. Также разрабатывал архитектуру для высоконагруженных систем. Разрабатывал DataLake и DWH для дальнейшего построения системы аналитики данных. Разрабатывал системы отчетности. Работал с машинным зрением (классификация изображении). Реализовывал системы речевой аналитики на Pytorch (как самостоятельно разрабатывал сети, так и использовал BERT модели). В работе обычно использую Python, PSQL, Mongo, Redis, Kafka, Airflow, Docker, K8s По мимо этого, руководил проектом по внедрению VDI для работы удаленных пользователей.

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Senior Data Engineer с более чем 9 годами профильного опыта и более 20 лет в IT (старт карьеры в качестве руководителя проектов и технического директора). Активный опыт в разработке и поддержке хранилищ данных, автоматизации процессов обработки данных и создании аналитических решений. Специализируется на проектировании DWH, разработке ETL-пайплайнов с использованием Greenplum, Airflow, Spark, и визуализации данных в Power BI и Superset. Имеет опыт управления распределенными командами, системного администрирования и аналитики. Ориентирован на оптимизацию процессов, обеспечение качества данных и тесное взаимодействие с бизнесом для реализации требований.

Имеется опыт работы на международных проектах в составе распределенной команды. Участвовал в разработке с нуля, а также в рамках рефакторинга и поддержки legacy-кода.

3+ года опыта в роли бизнес и системного аналитика в IT. 3 финтех проекта с высокой долей удовлетворенности заказчиков. Уверенный индивидуальный сотрудник и командный игрок. Фокус работы на качество программного обеспечения, документацию и лучшие практики анализа.

Опыт коммерческой разработки 5 лет; Навыки и умения: Team Leading, Code review и контроль качества кода; Декомпозиция и распределение задач, оценка трудоемкости процессов; Работа с коммерческими React-приложениями: сопровождение; доработка; добавление новых фич. Архитектурное проектирование приложений; Unit Testing; Принятие технических решений совместно с архитектором и командой.

Кемеровский Государственный Университет бакалавриат