Каталог специалистов

Никита — Data инженер уровня Middle из Уфы. Специализируется на работе с большими данными. Имеет опыт работы в отрасли логистики и транспорта. Ключевые навыки: Apache AirFlow, Apache Kafka, Apache Spark, Apache Superset, Bash, Big Data, ClickHouse, Docker, GitHub, GreenPlum, Hadoop, Jupyter Notebook, PostgreSQL, PySpark, Python, Redash, SQL, оптимизация кода, Pandas, .Net 4.0. Принимал участие в проекте по разработке и внедрению ETL-процессов с использованием Apache Airflow, PySpark, Pandas для обработки больших объёмов данных. В рамках проекта занимался реализацией интеграции с PostgreSQL, созданием и поддержанием витрины данных, разработкой и оптимизацией Data Warehouse, поддержанием качества данных, оптимизацией запросов на SQL и Python, настройкой мониторинга системы. Достижения на проекте: оптимизация SQL-запросов в ClickHouse с использованием библиотеки dbt, сокращение времени выполнения запроса и количества строк кода в 10 раз, выявление 12 проблем в обработке данных, уменьшение времени обработки данных на 11%. Общая продолжительность работы на проектах — 2 года 2 месяца.

Специализируюсь на работе с различными базами данных, настройкой ETL процессов, построением интеграций с различными ресурсами, а также автоматизированном сборе (парсинг, скраппинг) структурированной/неструктурированной информации. Принимал участие в проектах компаний широкого перечня отраслей: видеохостинги, коммерческие банки, агентства недвижимости, а также финтех и производственные стартапы. Осуществлял разметку контента с помощью искусственного интеллекта, настраивал пайплайны для машинного обучения, оптимизировал отказоустойчивость процессов, аналитически собрал процесс для динамической сверки строимости разметки ручной и LLM. Разработал бэкенд коммерческого приложения для корпоративных клиентов банка. Руководил командой хранилища данных европейского стартапа для постройки архитектуры хранилища данных, подготовки к масштабированию, настройки системы качества данных и разработки интеграций с внешними сервисами.

Евгений — аналитик ЕХД, специализируется на работе с большими данными. Имеет опыт в построении универсальных витрин и разработке ETL-процессов. Участвовал в проекте по активному архиву на технологиях Big Data: загрузка данных из десятков архивных систем в единую систему хранения и построение витрин. Занимался подготовкой и согласованием маппингов, сверкой результатов прототипов с эталонами, коммуникацией с заказчиком. В рамках другого проекта работал над созданием хранилища данных на базе Greenplum. Кроме того, есть опыт работы в отделе HR-аналитики, где занимался формированием регулярной отчётности, анализом требований заказчиков и оптимизацией текущих отчётов.

Разработка технических заданий, Работа с большим объемом информации, SQL, Разработка инструкций по ГОСТ, Подготовка презентаций, MS PowerPoint, Adobe Photoshop, Git, Постановка задач разработчикам, Проектная документация, Копирайтинг, написание и корректура текстов Разработка технической документации, Аналитические исследования, ЕСПД, Сбор и анализ информации, Работа с базами данных, Есть опыт работы аналитиком (GreenPlum, Hadoop, PostgreSQL) Google Docs, MS Visual Studio, ГОСТ 19, ГОСТ 34, Стандарт ISA 95, MES-системы, MS Office Инициативность и лидерство: Проявила себя как ответственный лидер, способный вести за собой команду и принимать решения. Аналитический ум: Обладаю способностью к анализу и быстрому принятию решений в условиях ограниченных ресурсов. Глубокое понимание стандартов документирования и способность их применять на практике. Коммуникативные навыки: Умение работать в междисциплинарной команде и эффективно общаться с различными заинтересованными сторонами. Навыки разработки образовательного контента и использования цифровых образовательных платформ. Опыт создания мультимедийных обучающих материалов, включая видеоуроки и интерактивные инструкции. Непрерывное улучшение навыков английского языка, грамотная коммуникация в различных профессиональных ситуациях.

Data Engineer с 3 годами опыта в построении и оптимизации хранилищ данных, разработке ETL-процессов и формировании надёжных моделей данных для аналитики. Обладаю опытом работы с крупными финансовыми DWH, интеграцией разрозненных источников и оптимизацией производительности запросов. Нацелен на повышение качества данных и эффективности решений, принимаемых на их основе.

Hard skills:

- Бизнес-анализ;
- Системный анализ;
- Windows/Linux VRM;
- Zabbix;
- Fine BI;
- БД Oracle, PostgreSQL, MySQL;
- SQL запросы DDL, DML (CRUD), DCL, T-SLQ, индексы, 
 партиции, планы запросов, CTE, оконные функции.
 Умение читать и анализировать планы выполнения 
 запросов.
 Умение анализировать и оптимизировать 
 медленные запросы, использование индексов;
- Greenplum;
- Airflow;
- Проектирование и разработка БД в Oracle;
- PL/SQL;
- ETL процессы;
- API;
- Git.


Soft skills:

- Английский B2;
- FSD документация;
- Jira, Confluence, Trello;
- Умение работать в команде;
- Ответственность в проекте

Готов постоянно развиваться и приносить пользу компании.

Аналитик BI с опытом 5+ лет в разработке дашбордов, BI-отчетности и автоматизации процессов. Специалист умеет превращать хаос данных в понятные и наглядные дашборды, открывая бизнесу новые горизонты для роста. Его главное оружие – Power BI, SQL и аналитический склад ума. Он не просто строит отчеты, а находит узкие места, исследует причины падения метрик и предлагает пути их оптимизации. В его арсенале – опыт настройки ETL/ELT процессов, тестирования решений и взаимодействия с клиентами, пользователями и инженерами данных. Он легко находит общий язык с заказчиками, формирует требования, документирует процессы и обучает пользователей.

Денис — senior DWH-разработчик. Опыт работы на проектах в компании «Дататех»: - Создание и поддержка BI-решений для ВТБ, топ-менеджмента ГК «Т1». - Разработка архитектурных решений (кубы, экстракции, стейджи, витрины). - Работа с высоконагруженными системами (объём данных — 1 млрд строк, 0,5 ТБ). - Написание дагов через Airflow. - Работа с Greenplum и ClickHouse. - Успешная реализация мобильной аналитики и отчётности для ВТБ. - Разработка дашбордов для топ-менеджеров. - Своевременная поставка аналитических отчётов бизнесу.

Виктор — системный аналитик уровня Middle+ из Москвы. Специализируется на разработке высоконагруженных систем, проектировании интеграционных взаимодействий и работе с большими объёмами данных. Языки запросов: SQL, T-SQL, PL SQL — опыт составления сложных запросов к нескольким таблицам и работы с хранимыми процедурами. Python — использование для анализа данных и разработки ETL процессов. Моделирование: BPMN, UML (Use Case, Sequence, ER-диаграммы) — создание диаграмм для визуализации бизнес-процессов и системных взаимодействий. API: Проектирование и документирование REST API с использованием OpenAPI, а также разработка интеграционных интерфейсов через протокол SOAP. EDW (Enterprise Data Warehouse): Проектирование архитектуры хранилищ данных и интеграция ML-моделей в производственные процессы. Опыт работы на проектах: - Разработка высоконагруженных веб-сервисов с применением ML. Обязанности включали выявление требований, проектирование REST API, моделирование бизнес-процессов, разработку требований для мобильного приложения и анализ архитектуры сетевых взаимодействий. Достижения: разработана микросервисная архитектура, успешно внедрены два проекта на трёх предприятиях компании. - Разработка высоконагруженных систем Datalake и ССВД. Обязанности охватывали сбор требований, разработку моделей бизнес-процессов и системных моделей, создание технических спецификаций и реализацию интеграционных интерфейсов. Достижения: собраны требования и создана спецификация для микросервиса проверки больших данных, спроектированы и реализованы интеграционные потоки данных с банковскими источниками. - Проектирование архитектуры хранилища данных (DWH) и вывод ML-моделей в промышленную эксплуатацию. Обязанности: проведение сбора требований, постановка задач для разработчиков, моделирование бизнес-процессов, разработка проектной документации и создание интерактивных аналитических дэшбордов. Достижение: спроектирована архитектура DWH.

- опыт работы с Python для разработки, сбора данных, анализа данных, работы с (большими) данными, обработка данных, машинное обучение; - опыт написания тестов для разработанного функционала; - опыт рефакторинга кода; - опыт работы с git; - опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); - развитые коммуникативные навыки;

развитые коммуникативные навыки; опыт работы с Python для разработки, сбора данных, анализа данных, работы с большими данными, в том числе с помощью PySpark; работа с SQL на уровне продвинутых запросов: оконные функции, подзапросы, условные функции; опыт работы с UNIX-системами на уровне простых операций: опыт написания простых bash команд; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; участие в создании ETL\ELT процессов; опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); опыт работы с git; опыт работы с Apache Airflow; опыт работы с Docker в рамках локального запуска контейнеров; умею читать техническую документацию на английском языке.

● Python (Pandas, NumPy, Scikit-learn, SciPy, Matplotlib) ● Базы данных: PostgreSQL, ClickHouse, Greenplum, Hadoop ● Инструменты разработки: Apache Airflow, Apache Hive, Docker ● Big Data: PySpark, PyTorch ● Управление версиями: Git, BitBucket ● Управление проектами и документацией: Jira, Confluence ● Django, QlikSense

Принимал ключевое участие в проекте по построению Аналитической платформы данных. Участвовал во всех технических этапах работ. Документировал выполненные работы. Написал ряд ETL-процессов, позволяющих регулярно выгружать данные сторонних систем к DWH. Организовал развертывание и тестирование Airflow и Airbyte.

Олег — опытный Data-инженер со специализацией в области аналитики данных. Обладает навыками работы с Python, PostgreSQL, Apache AirFlow, SQL, Git, GreenPlum, Docker, Kafka, Hadoop, ETL, Pandas, DWH, Linux, Numpy, Superset и Power BI. Имеет опыт работы на проектах в сфере HRTech и Government & Public Sector. На последнем месте работы занимался построением аналитического хранилища для результатов измерения, обработкой данных и статистическим анализом, а также формированием отчётов Apache Super Set. В настоящее время работает над QA data platform, где занимается разработкой StT схем, построением пайпланов ELT, сбором требований и написанием документации. Также участвует в проекте по созданию хранилища данных на основе нескольких источников данных с последующим созданием аналитических витрин данных для формирования отчётов.

КЛЮЧЕВЫЕ НАВЫКИ: • Опыт разработки ETL-процессов • Глубокое знание SQL: опыт работы с PostgreSQL, Greenplum, DWH • Базовые знания знания Python • Опыт с Apache Kafka • Опыт работы с MPP-СУБД (Greenplum) • Понимание концепций построения DWH • Опыт работы с BI-инструментами (Tableau, DataLens) • Опыт работы с оркестратором Airflow • Знакома с основами ClickHouse, DBT (Data Build Tool) • Базовый опыт проведения A/B-тестов для оценки качества данных • Опыт работы с системами контроля версий, включая Git ЛИЧНЫЕ И ПРОФЕССИОНАЛЬНЫЕ КАЧЕСТВА: • Увлечена построением ETL-процессов. • Умею анализировать и структурировать данные, приводя их к единому и понятному виду. • Стремлюсь к чистоте и простоте кода. • Постоянно обучаюсь и совершенствую навыки в сфере Data Engineering. • Ориентирована на результат: ставлю цели и добиваюсь их. • Развиваю аналитическое мышление через книги.