Михаил Р. Data инженер, Middle+

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

развитые коммуникативные навыки; опыт работы с Python для разработки, сбора данных, анализа данных, работы с большими данными, в том числе с помощью PySpark; работа с SQL на уровне продвинутых запросов: оконные функции, подзапросы, условные функции; опыт работы с UNIX-системами на уровне простых операций: опыт написания простых bash команд; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; участие в создании ETL\ELT процессов; опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); опыт работы с git; опыт работы с Apache Airflow; опыт работы с Docker в рамках локального запуска контейнеров; умею читать техническую документацию на английском языке.

Data Engineer с 3-летним опытом работы и 4-летним стажем в IT. Начинал как веб-разработчик на Python/Django/Rest. За это время я успел поработать в 4 компаниях, получив разносторонний опыт в проектировании баз данных, разработке ETL/ELT пайплайнов, управлении и трансформации данных. Привык разбираться в сложных задачах и находить эффективные решения. Я постоянно стремлюсь расширять свои знания и навыки, слежу за новыми тенденциями в области Data Engineering. Умею находить информацию, систематизировать ее и применять на практике. Буду рад достичь новых высот в этой сфере и внести вклад в развитие компании.

• PostgreSQL • ClickHouse • Apache AirFlow • Apache NIFI • Power BI • DAX • Yandex Datalens • Python (Pandas, Numpy) • Основы DWH/ETL • GreenPlum

За всю карьеру было реализовано большое количество проектов. Начиная от систем контроля доступа, заканчивая разработкой LLM моделей для автоматизации работы менеджеров и ОКК. Также разрабатывал архитектуру для высоконагруженных систем. Разрабатывал DataLake и DWH для дальнейшего построения системы аналитики данных. Разрабатывал системы отчетности. Работал с машинным зрением (классификация изображении). Реализовывал системы речевой аналитики на Pytorch (как самостоятельно разрабатывал сети, так и использовал BERT модели). В работе обычно использую Python, PSQL, Mongo, Redis, Kafka, Airflow, Docker, K8s По мимо этого, руководил проектом по внедрению VDI для работы удаленных пользователей.

Ключевые навыки: - Опыт работы в JIRA; - Опыт работы по Agile (Scrum и Canban) - SQL (составление базовых запросов); - Знание теории тестирования; - Анализ требований к разрабатываемому ПО; - Опыт составления чек-листов, тест-кейсов, заведение баг-репортов; - Техники тест-дизайна (классы эквивалентности, граничные значения); - ручное функциональное, интеграционное, регрессионное, тестирование REST API с помощью Postman (GET, POST, PUT, DELETE); - работа с MySQL, PostgreSQL (JOIN по нескольким таблицам; INSERT, UPDATE, DELETE; подзапросы, сортировка); - локализация, регистрация дефектов; - Понимание клиент серверной архитектуры; Используемые программы: Jira, Azure, Confluence, Devtools, Postman, Figma

Общий стаж: 15 лет Александр более семи лет в системном анализе, последний проект – разработка интеграционного слоя для комплекса приложений ВТБ-Инвестиций. Также есть опыт на проекте систем доступа приложений к общему аналитическому слою с метаданными. Ведёт процессы от этапа сбора требований до этапа тестирования функционала перед релизом. В работе использует BPMN, UML, Postman. Составлял спецификации и участвовал в проработке архитектур сервисов на REST и SOAP. Личные качества: самостоятельность, командность, открытость, ответственность. Ориентирован на качество реализованного продукта. Рассматривает проекты, где может совмещать бизнес и системный анализ, интересно развивать свою экспертизу в интеграциях.

Тестирование REST API, SOAP API с использованием Postman, soapUI, ReadyAPI . Тестирование SQL БД (Oracle, PostgreSQL), NoSQL БД (Tarantool), написание SQL-запросов средней сложности. Нагрузочное тестирования высоконагруженных систем с использованием Jmeter, Locust, Grafana, Splunk. Тестирование аналитических и архитектурных артефактов (Swagger, Enterprise Architect). Использование DevOps методик и инструментов: CI/CD (GitLab), Jenkins, Terraform, Ansible, XLDeploy. Развертывание и интеграция сервисов в Jboss, Docker, Java Spring, Kubernetes. Разработка и оптимизация модульных и E2E тест-кейсов Разработка и поддержка методик тестирования. Организация процессов тестирования с использованием Testlink, Testrail, JIRA, Confluence, GitLab. Ревью процессов и артефактов автоматизированного тестирования. Коммуникация между подразделениями в процессе работы над продуктами и релизами.