Сергей К. Data инженер, Senior

Даниил — Data инженер уровня Senior из Сочи, Россия. Специализируется на работе с большими данными, имеет опыт работы в отраслях FinTech & Banking и E-commerce & Retail. Ключевые навыки включают Apache AirFlow, Apache NiFi, Apache Spark, Bash, Big Data, CI/CD, ClickHouse, DBT, Docker, DWH, ETL, Git, GitLab CI, Hadoop, Hive, Kafka, Kubernetes, Linux, PostgreSQL, PySpark, Python, RabbitMQ, Redis, SQL, Trino и другие. Имеет высшее образование по специальности «Информатика и вычислительная техника» и среднее профессиональное образование по направлению «Информационная безопасность телекоммуникационных систем» Сибирского Государственного Университета Телекоммуникаций и Информатики. Опыт работы на проектах: - В роли Data Engineer Team Lead участвовал в нескольких проектах банка (с августа 2020 года), где занимался разработкой архитектурных решений, управлением командой, планированием задач, ревью кода, разработкой ETL процессов поставки данных в DWH, оптимизацией производительности и другими задачами. - В роли Data Engineer работал над проектом по хранению данных и технической поддержке пользователей в компании из сферы E-commerce & Retail (апрель — август 2019 года), где выполнял задачи по технической поддержке пользователей, обслуживанию вычислительной техники, обучению сотрудников и ревью.

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

развитые коммуникативные навыки; опыт работы с Python для разработки, сбора данных, анализа данных, работы с большими данными, в том числе с помощью PySpark; работа с SQL на уровне продвинутых запросов: оконные функции, подзапросы, условные функции; опыт работы с UNIX-системами на уровне простых операций: опыт написания простых bash команд; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; участие в создании ETL\ELT процессов; опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); опыт работы с git; опыт работы с Apache Airflow; опыт работы с Docker в рамках локального запуска контейнеров; умею читать техническую документацию на английском языке.

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

Backend-разработчик с функциями Golang c более чем 4 годами опыта в коммерческих проектах. Высшее техническое образование. Работал над решениями для автоматизации бизнес-процессов и разработки высоконагруженных микросервисных систем. Участвовал в проектах для таких областей, как финансы, e-commerce и здравоохранение. Создавал и поддерживал продукты, включая финансовые платформы, системы мониторинга и MedTech. Специализируется на разработке микросервисов, масштабируемых решений, оптимизации производительности приложений, а также работе с асинхронными системами на основе Kafka и Kubernetes.

● Опыт работы с монолитной и микросервисной архитектурой (проектирование и построение) ● Опыт работы с многопоточностью и асинхронностью, разработка многопоточных приложений ● Опыт разработки отказоустойчивых высоконагруженных (Highload) масштабируемых систем и enterprise приложений ● Опыт разработки реактивных приложений ● Опыт участия в реализации MVP системы ● Опыт разработки корпоративных систем и интеграционных решений на Java ● Опыт осуществления интеграций со сторонними сервисами, большого количества компонентов системы ● Опыт проектирования и реализации интеграционных взаимодействий, очереди ● Опыт по разработке расчетных систем, учетных и платежных решений ● Опыт разработки Web Services (SOAP, REST) ● Опыт разработки бэка под мобильные приложения ● Опыт работы с распределенными хранилищами и системами ● Промышленный опыт работы с реляционными БД, опыт проектирования модели данных, анализа и оптимизации ● Опыт написания миграций БД ● Опыт работы с алгоритмами и структурами данных ● Опыт написания интеграционных, функциональных, unit/e2e и автотестов ● Сопровождение (sl3) ранее разработанного функционала, взаимодействие с командами поддержки sl1/2 тестовых и промышленных сред ● Опыт отладки и оптимизации производительности приложения ● Опыт профилирования и поиска узких мест ● Опыт применения и настройки CI/CD ● Опыт использования хранилищ артефактов (Nexus / Artifactory) ● Опыт работы с облачными платформами (AWS или GCP) ● Опыт разработки и взаимодействия с Helpdesk-решениями, CRM. ● Опыт командной разработки в окружении непрерывной интеграции ● Опыт работы с кэшами, в том числе распределенными ● Опыт работы с сокетами

Профильное образование, опыт работы в IT (веб-разработка) на инженерных направлениях более 10 лет. (ruby стек - более 6 лет) Специализируется на разработке сложных веб-сервисов. Наиболее эффективен в продуктовых командах - глубоко погружается в проект, хорошо понимает ценность задачи с точки зрения бизнеса. Хорошо понимает весь процесс производства ПО от проектирования до поддержки. В качестве тимлида управлял командами до 10 человек. Обладает развитыми Soft-скиллами и коммуникативными навыками (работал некоторое время в продажах, службах поддержки, занимался общественной работой). Умеет соблюдать баланс между интересами бизнеса и технических специалистов. Может донести позицию каждой из сторон. Умеет брать на себя ответственность и изолировать команду от проблем, не связанных с ее зоной компетенции. Имеет опыт найма персонала различной квалификации от junior до senior. Личные качества: Стрессоустойчив, активен, неконфликтен, любознателен, стремиться к глубокому понимаю и легко понимает суть поставленных задач, обладает развитым абстрактным мышлением, терпим к чужому коду и архитектурным решениями. Умеет работать в команде, много лет занимается командными видами спорта.

-Более 5 лет опыта работы в сфере диджитал дизайна; -Дизайн веб и мобильных приложений для всех платформ, веб-сайтов, CRM-платформ; -Разработка wireframe экранов и прототипов; -Проведение UX-исследований; -Создание UI-китов и работа с большими дизайн-системами; -Создание анимации и векторных 2d иллюстраций.