Даниил З. Data инженер, Senior

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Data Engineer с более чем 3 годами опыта в автоматизации ETL-процессов и проектировании аналитических хранилищ данных (DWH). Специализируется на построении витрин данных (raw, ODS, data marts) с использованием Apache Airflow, Python, SQL и GreenPlum. Оптимизировал SQL-запросы, внедрил проверку качества данных (Great Expectations) и разработал архитектуру для BI-дашбордов (Power BI, Apache Superset). Имеет опыт работы с большими данными (Hadoop, Spark) и интеграции данных между PostgreSQL, GreenPlum и BI-решениями. Обладает навыками настройки DAG’ов Airflow, контейнеризации (Docker) и анализа данных с использованием Pandas, NumPy и Scikit-learn. Коммуникабелен, ориентирован на улучшение процессов и командное взаимодействие.

В Data с 2021 года, коммерческий опыт Data Engineer более 4 лет. Занимался тестированием ETL процессов, написанием автотестов и инструментов для тестирования в команде из 6 ETL QA инженеров. Занимался разработкой и внедрением фреймворка DQ для проверки качества данных в команде из 13 DQ инженеров. Также разрабатывал ETL процессы для построения витрин для дальнейшего анализа и выявления аномалий при сравнении данных из разных источников. Ключевые навыки: SQL, Python, Apache Spark, Hadoop, S3, Apache Airflow, Parquet, Kafka, ETL, ClickHouse, Trino, Git, CI/CD, Системный анализ, Тестирование (Data Quality), РСУБД (ClickHouse, Greenplum, Oracle, PostgreSQL), XML, JSON, Data Analysis, Big Data, DWH, Docker, Apache Hive, Apache Iceberg, Soda Core, Pytest, BI, SAS, Git, CI/CD, BI, Jira, Confluence

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Top Skills Software Development Java Kotlin Опыт работы со Scala

– Проектирование сложных интерфейсов и создания дизайн-макетов; – Знание основ разработки интерфейсов; - Опыт работы с Web и Mobile, разработка адаптивов; - Создание дизайн-системы - Умение работать с основными веб-программами и инструментами; - Знание основ диджитал-маркетинга; - Изучение трендов UX/UI-дизайна; - Владение аналитическими навыками; - Участие в разработке стратегий; - Проведение исследований и проектирование пользовательского пути; - Участие в глубинных интервью с клиентами; - Опыт работы в крупных командах, в том числе взаимодействия с разработчиками, аналитиками, тестировщиками; - Знание визуального языка дизайна; - Разработка прототипов ( в т.ч. Интерактивных); - Анализ конкурентов; - Определение структуры; - Разработка фирменного стиля; - Разработка модулей для сервисов погоды, расписания, канбан, планировщиков и т.п. - Опыт ведение проектов интернет-магазинов разной сложности, в том числе с интеграцией 1С - Базовое понимание HTML/CSS; - Дизайн-мышление, исследование и прототипирование, SEO оптимизацией, scrum - Участие в презентации идей, результатов работы; - Опыт наставничества для дизайнеров; - Навыки психологического анализа для более подробного изучения целевой аудитории. Ссылка на портфолио: https://www.figma.com/proto/cDp6jhknbGxIyp2NFQro1K/%D0%9F%D0%BE%D1%80%D1%82%D1%84%D0%BE%D0%BB%D0%B8%D0%BE-%D0%9B%D0%B0%D1%82%D1%8B%D0%BF%D0%BE%D0%B2-%D0%90%D1%80%D1%82%D1%83%D1%80-%D0%A0%D0%B0%D0%BC%D0%B8%D0%BB%D1%8C%D0%B5%D0%B2%D0%B8%D1%87?page-id=0%3A1&node-id=123-227018&node-type=frame&viewport=-1827%2C3703%2C0.38&t=UnMicH0ARAa0jq4F-1&scaling=contain&content-scaling=fixed&starting-point-node-id=123%3A227018

Веб-разработчик с опытом более 5-ти лет. На данный момент специализируется на full-stack разработке, создании веб-приложений используя фреймворк Ruby on Rails. Дизайн архитектуры, прототипирование, разработка и поддержка back-end приложений и API используя Ruby on Rails и другие Ruby фреймворки, такие как: Grape, GraphQL, JSONAPI-Rails. Анализ данных, документирование и покрытие кода тестами (TDD/BDD). Развертывание и настройка инфраструктуры. Интеграция со сторонними API и сервисами. Также есть опыт разработки полного цикла веб-приложений: дизайн архитектуры, front-end и back-end разработка, автоматизированное тестирование и поддержка. Soft skills: Межличностные коммуникации Внимательность Самомотивация Выступления на публике / СМИ Лидерские качества Пунктуальность Способность к быстрому обучению