Алибек Д. Data инженер, Middle+

На 3 курсе в университете начал работать по специальности. На работе коллеги занимались машинным обучением, тогда изаинтересовался аналитикой. По мере погружения в эту сферу, остановился на профессии дата-инженера. На данный моментчувствую, что готов решать более сложные техническиезадачи.

Сергей — Data-инженер уровня Senior из Набережных Челнов. Специализируется на работе с большими данными и имеет опыт в отраслях E-commerce & Retail, AI & Robotics, Logistics & Transport, Telecom. Ключевые навыки: работа с базами данных (PostgreSQL, Oracle, MySQL), ETL/ELT-процессы, Apache Airflow, ClickHouse, Hadoop, Kafka, Scala, Spark, DataLens, Power BI, Confluence, Git, Kubernetes. Имеет опыт работы на следующих проектах: - Проект для крупного ритейла: миграция данных из различных источников, оптимизация процессов обработки данных, использование DBT, Trino, Helm, Groovy-скрипты для доработки компонентов Apache NiFi. - EasyCode: организация DWH-хранилища, автоматизация ETL/ELT-процессов, работа с ClickHouse, PostgreSQL, Google Sheets, визуализация данных в DataLens. - Мега маркет: разработка цифровых решений для e-commerce, миграция данных в ClickHouse и Greenplum, работа с Firebase, MsSQL, Яндекс.Метрика, Google Analytics. - KazanExpress: автоматизация отчётности и визуализация данных, создание дашбордов в DataLens, формирование витрин данных в ClickHouse. - МТС: формирование отчётности по продажам B2C и B2B, работа с MySQL, Oracle BI, Power BI.

Тимур — Data инженер уровня Senior из Москвы, специализация — работа с данными. Имеет высшее образование по специальности «Управление и информатика в технических системах». Ключевые навыки: Anchor, Apache AirFlow, Apache Kafka, Apache Spark, CI/CD, ClickHouse, Data Vault, DBT, Docker, DWH, ETL, Git, GitLab, Grafana, Hadoop, Identity Server, Linux, Microsoft, OLAP, OLTP, Oracle Pl/SQL, PostgreSQL, Prometheus, Python, SQL, SSAS, SSIS, HDFS, Hive, Spark. Опыт работы на проектах: - Mediascope (с 2023 года, отрасль — Media): разработка и оптимизация ETL-пайплайнов для обработки рекламных данных на Spark, реализация унифицированной системы конфигурации Airflow DAG’ов, загрузка данных в Data Lake с интеграцией Kafka и Spark Streaming, внедрение системы алертинга и мониторинга кластера, интеграция ML-модели Whisper для транскрибации рекламных видео в текст. - Ингосстрах Банк (1 год 7 месяцев, отрасль — FinTech & Banking): реализация клиентского Web-сервиса с интерактивными отчётами по банковским продуктам на основе собранных в Oracle датасетов, унификация и очистка данных со всех неупорядоченных источников, работа с командной строкой Linux, Greenplum, знакомство с Teradata. Построение и развитие банковского DWH на Oracle Обработка потоков данных (clickstream, IoT) в экосистеме Hadoop (Spark, HDFS, Hive) Наполнение Big Data Platform (подключение различных источников, создание, очистка и стандартизация датасетов) Дизайн системы оповещений и метрик состояния Hadoop-кластера с помощью Grafana + Prometheus Проект по транскрибации нескольких миллионов роликов с помощью ML

развитые коммуникативные навыки; опыт работы с Python для разработки, сбора данных, анализа данных, работы с большими данными, в том числе с помощью PySpark; работа с SQL на уровне продвинутых запросов: оконные функции, подзапросы, условные функции; опыт работы с UNIX-системами на уровне простых операций: опыт написания простых bash команд; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; участие в создании ETL\ELT процессов; опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); опыт работы с git; опыт работы с Apache Airflow; опыт работы с Docker в рамках локального запуска контейнеров; умею читать техническую документацию на английском языке.

Специалист в области QA автотестирования (в частности на Python) В роли Auto QA Lead/Auto QA в проекте SOKOLOV работал с тремя командами разработки, включающими до 35 инженеров. Создал фреймворк UI-E2E-автотестов и управлял более чем 640 тестами (500 UI и 140 API). Внедрил процесс автотестов, сократив время регрессионного тестирования с 5 дней до 1 дня. Обучил навыкам написания автотестов 10 тестировщиков. На проекте X5 RETAIL GROUP занимался автоматизацией тестирования для API и UI с использованием Python и Selenium. Запускал тесты в CI/CD GitLab, в том числе из пайплайна разработчиков. Работал в баг-трекинговой системе JIRA, youTrack. Во время работы в GS Labs составлял план тестирования продукта по спецификации, писал тест-кейсы, создавал и отлаживал тестовые фреймворки для UI, работал с Postman для эпизодических проверок API.

https://www.behance.net/c7b1878f

Понимание концепций объектно-ориентированного программирования (ООП) и шаблонов проектирования Знание возможностей языка Java, таких как коллекции, потоки и лямбда-выражения Опыт работы с Java-фреймворками, такими как Spring и Hibernate Знание баз данных и опыт работы с SQL и JDBC Знание инструментов сборки, таких как Maven и Gradle Понимание лучших практик разработки программного обеспечения, таких как методологии Agile и непрерывная интеграция/непрерывная поставка (CI/CD). Node.js: Понимание особенностей и концепций языка JavaScript Опыт работы с Node.js и его основными модулями Опыт работы с популярными платформами Node.js, такими как Express и Nest.js. Знание асинхронного программирования (Promise, async/await) и событийно-ориентированной архитектуры

Антон — DevOps-инженер с грейдом Senior, имеет высшее образование по специальности «Инженерно-психологическое обеспечение информационных технологий». Опыт работы на проектах составляет 8 лет 8 месяцев. Ключевые навыки: Ansible, Apache Kafka, ArgoCD, Bash, CI/CD, ClickHouse, Docker, Docker Compose, GitHub Actions, GitLab CI/CD, Grafana, HAProxy, Helm, HTTP/HTTPS, Jenkins, JSON, Kubernetes, Linux, MongoDB, MS Windows, Nginx, PostgreSQL, Prometheus, Redis, REST, SQL, YML, автоматизация, базы данных, брокеры сообщений, контейнеризация, логирование, мониторинг, обмен данными, оркестрация, языки программирования. Участвовал в следующих проектах: - Проект по отправке сообщений клиентов по SMS, электронной почте и мессенджерам (Viber, WhatsApp). Задачи включали настройку и поддержку мониторинга системы, администрирование и автоматизацию процессов развёртывания, настройку и управление процессами, оптимизацию инфраструктуры, обеспечение безопасности системы и контроль логирования. - Комплексное веб-приложение для оптимизации обработки и анализа финансовых операций. Задачи включали обновление GitLab, настройку CI/CD через GitLab, автоматизацию Deploy на dev/preprod, настройку логирования Prometheus и Grafana для мониторинга серверов и другие. - Проект по аналитике рекламных компаний на Wildberries. Задачи включали внедрение и оптимизацию конвейеров GitLab CI/CD, мониторинг и ведение логов, подготовку и управление инфраструктурой как кодом, развёртывание и управление кластерами Kubernetes и другие.