Павел К. Data инженер, Middle+

На 3 курсе в университете начал работать по специальности. На работе коллеги занимались машинным обучением, тогда изаинтересовался аналитикой. По мере погружения в эту сферу, остановился на профессии дата-инженера. На данный моментчувствую, что готов решать более сложные техническиезадачи.

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

В Data с 2021 года, коммерческий опыт Data Engineer более 4 лет. Занимался тестированием ETL процессов, написанием автотестов и инструментов для тестирования в команде из 6 ETL QA инженеров. Занимался разработкой и внедрением фреймворка DQ для проверки качества данных в команде из 13 DQ инженеров. Также разрабатывал ETL процессы для построения витрин для дальнейшего анализа и выявления аномалий при сравнении данных из разных источников. Ключевые навыки: SQL, Python, Apache Spark, Hadoop, S3, Apache Airflow, Parquet, Kafka, ETL, ClickHouse, Trino, Git, CI/CD, Системный анализ, Тестирование (Data Quality), РСУБД (ClickHouse, Greenplum, Oracle, PostgreSQL), XML, JSON, Data Analysis, Big Data, DWH, Docker, Apache Hive, Apache Iceberg, Soda Core, Pytest, BI, SAS, Git, CI/CD, BI, Jira, Confluence

Senior Data Engineer с более чем 7 годами опыта в разработке и поддержке DWH, ETL-процессов и аналитических платформ в финансовом и ритейл-секторах. Специализируется на Python, SQL, Hadoop, Spark, Airflow, DBT, Kafka, ClickHouse, PostgreSQL, Oracle, Greenplum. Имеет опыт миграции систем (SAS → Hive HDFS), создания витрин данных, OLAP-кубов, работы с CDC и интеграции источников (PXF, API, Kafka). Разрабатывал предиктивные модели, автоматизировал процессы, поддерживал аналитические команды и руководил миграцией систем.

4 года опыта бизнес/системного анализа, в том числе: опыт общения с заказчиком, сбор пользовательских и бизнес-требований, выяснение деталей; написание технической документации: технических заданий, спецификаций требований, руководств пользователей; разработка функциональных и нефункциональных требований; декомпозиция задач для команд разработки; описание бизнес-процессов в нотации BPMN; проектирование архитектурных решений (микросервисы, монолит); разработка UML-диаграмм; проектирование модели данных (ERD) и API интеграций (REST); организация асинхронного взаимодействия через брокеры сообщений; контроль выполнения задач, приёмочное тестирование. Занимаюсь аналитикой 4 года. Имею опыт в постановке и контроле выполнения задач, сборе требований, проведении внутренних вебинаров для команды, выступлениях и организациях конференций. Умело взаимодействую с командами разработки, умею грамотно доносить технические требования и контролировать соответствие реализации требованиям. Дополнительные навыки: Опыт разработки десктопных приложений и Web API на C#.

Разработчик с профильным образованием и с почти восьмилетним опытом web-разработки. Работал над созданием сложных SaaS платформ с микросерверной архитектурой. Имеет опыт работы оптимизации нагрузок высоконагруженных систем. Помимо непосредственно разработки хорошо разбирается в DevOps и имеет отличное архитектурное мышление. Обладает живым интересом к миру технологий: занимается изучением различных AI решений (знаком с IBM Watson, генеративными нейронными сетями вроде Stable Diffusion)

Java разработчик с 3+ летним опытом работы в этой области. Постоянно улучшает свои навыки и знания и всегда стремится учиться новому и расти профессионально. Огромный опыт разработки core Java Хорошее знание Groovy и Grails Хорошее знание Spring (Core, MVC, Boot, Security, Data) Знание инструментов: JDBC / ORM, а также реляционных баз данных Хорошее знание база данных: PostgreSQL, Oracle Хорошее знание веб протоколов, опыт работы с Restful сервисами