Каталог специалистов

Максим — DWH-разработчик уровня Middle из Москвы. Опыт работы: - Data engineer в Сбербанке (FinTech & Banking). Занимался проектированием и разработкой процессов преобразования данных (ETL) для DWH, работал с MPP Greenplum, оптимизировал SQL-запросы. - Data Engineer в GlowByte Consulting (E-commerce & Retail). Выполнял задачи по проектированию и разработке ETL-процессов для DWH. - Product Manager (IIoT) в Schuler Pressen GmbH Представительство в РФ (Hardware). Участвовал в разработке СУБД ORACLE PL/SQL для промышленного оборудования, занимался установкой и настройкой PostgreSQL и ClickHouse. Реализовал крупный инвестиционный проект, участвовал в проекте «Промышленный интернет вещей (IIoT)» и реализовал проект по оснащению IIoT промышленного металлообрабатывающего оборудования.

Антон — опытный Java-разработчик уровня Senior из Новосибирска. Имеет опыт работы на проектах в компаниях Сбербанк и Huawei. В Сбербанке проводил тесты производительности технологий обработки больших данных Spark и Flink, интегрировал Flink с Kafka, создал архитектуру решения для предоставления Flink как банковской услуги. В Huawei внедрил вторичный индекс, ускоривший обработку данных до 31%, оптимизировал логический план Apache Flink (увеличил производительность на 13%), реализовал механизм приблизительной обработки запросов для сокращения использования пространства. Кроме того, спроектировал и реализовал высоконагруженные распределённые системы, работал с технологиями Cassandra, Docker, Spring Boot и другими.

Владею инструментами для работы с данными на всех этапах: - сбор данных из внешних источников (парсинг) или работа с внутренними базами данных - анализ данных в jupyter notebook - моделирование - вывод моделей в продакшн: airflow, docker - проведение A/B тестов и оценка их результатов: умею работать с ratio метриками Умею писать понятный код на python, с логированием и автотестами. Владею инструментами bigdata: умею писать map reduce задачи, а также владею pyspark, имею опыт с Cassandra. Люблю NLP во всех его проявлениях. Обладаю навыками необходимыми для менторинга младших коллег, умею давать развивающую обратную связь. Понимаю каким образом должна выглядеть инфраструктура данных для продуктивного моделирования. Имею опыт создания витрин признаков, написания регламентов по работе с данными, формализации пайплайнов моделирования.

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

4+ лет опыта разработки и развития DWH и Datalake house. Повышение технической экспертизы и изучение новых технологий является приоритетом в моем карьерном пути. Высокий уровень самоорганизации, а также постоянное развитие(лекции/ семинары) позволяют мне непрерывно расти в выбранной области.

Опыт разработки на Java более 6 лет; Опыт разработки на Scala >=2.12 более 4 лет; Есть опыт работы с Http4s; Есть знания и опыт работы с PostgreSQL; В работе использует Docker; docker-compose; Есть опыт работы с Akka; Умеет разбираться в чужом коде; Знает паттерны проектирования, DI, SOLID; Есть опыт разработки и проектирования REST API/Swagger; Есть опыт профилирования и поиска узких мест; Использует и настраивает CI/CD; Умеет проводить качественные code review.

Занимается программированием с 1991 года. Знает языки программирования Java, Oracle PL/SQL, Postgres PL/pgSQL, PHP, Python. Большой опыт разработки на СУБД Oracle, PostgreSQL, в том числе ETL и DWH. Специализация и профессиональные навыки: · Java 17 · Spring Boot · Spring WebFlux · Postgres 15 · Kafka · Redis · Kubernetes · Cassandra 3.11 · Postgres 9.6 · Oracle 11gR2 · Oralce PL\SQL · Postgres PL/pgSQL · Java EE · Java SE · Mapreduce (Hadoop/Spark/Pig) · IntelliJ Idea · Eclipse · SoapUI · Jenkins · Maven · Ant · Pentaho DI · Oracle SQL Developer · pgAdmin · Jaspersoft Studio · Jira · Confluence · Linux · Mac OS · Windows · Критическое мышление · Аккуратность · Гибкость · Ответственность