ВБ
Виктор Б.
Мужчина
Россия, Москва, UTC+3
Ставка
4 805,19 Р/час
НДС не облагается
Специалист доступен с 10 октября 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
ETL разработчик
Грейд
Senior
Навыки
Ansible
Apache AirFlow
Bash
C
ClickHouse
Docker
Git
GitLab
GreenPlum
Hadoop
Java
Jinja
Jira
Kafka
Microsoft
NiFi
Pandas
PostgreSQL
PySpark
Python
RabbitMQ
Requests
REST API
Scala
SQL
Terraform
Vertica
PL/pgSQL
xQuery
Power BI
S3
po
SAP
SAP ERP
Oracle
IBM WebSphere
Yandex Cloud
Spark
SAS Data Integration Studio
Teradata
T-SQL
Oracle Data Integrator
PowerShell
SAS DI
SAS
Отрасли
Cloud Services
E-commerce & Retail
FinTech & Banking
Manufacturing
Social Networking
Telecom
Главное о специалисте
● Опыт разработки более 14 лет ● Опыт разработки на Python, Scala ● Участие в проектировании архитектуры продукта ● Код-ревью, рефакторинг кодовой базы ● Опыт работы с СУБД PostgreSQL, Greenplum, ClickHouse, Vertica, платформой Hadoop, облачными платформами Яндекс.Облако, Cloud.ru ● Уверенное знание фреймворка PySpark ● Опыт использования GIT, Docker, Terraform, Ansible ● Аналитические и организационные навыки ● Опыт руководства коллективом разработчиков ● Опыт разработки проектной документации и архитектурных артефактов
Проекты   (12 лет 7 месяцев)
Создание аналитической платформы
Роль
Тим-лид команды инженеров данных
Обязанности
Создание аналитической платформы исследования данных (“песочницы”) в крупном российском банке (NDA) данных Задачи Проектирование и разработка потоков загрузки данных из систем-источников Участие в создании процессов непрерывной интеграции и доставки (CI/CD) Создание вспомогательных инструментов разработки (генераторов DDL и метаданных) Актуализация проектного репозитория GitLab и тестирование процессов CI/CD Руководство командой инженеров данных Greenplum (проектирование моделей данных, миграция таблиц из MS SQL и Oracle, миграция процедур T-SQL на PL/pgSQL)
Достижения
Созданы готовые к переиспользованию генераторы DDL и DML запросов по артефактам системного анализа Разработаны потоки инициализирующей и регулярной загрузок данных из систем-источников (более 5 тысяч таблиц)
Стек специалиста на проекте
SQL, Python, Oracle, GitLab, Pandas, GreenPlum, Pl/SQL, T-SQL, DWH, Microsoft, PL/pgSQL, Apache AirFlow, CI/CD, Проектирование, Jinja, Разработка, данных
Отрасль проекта
FinTech & Banking
Период работы
Январь 2025 - По настоящее время  (10 месяцев)
Проект для ООО “ВК”
Роль
Инженер данных
Обязанности
Развитие внутреннего продукта по анализу аудитории и активности инфлюенсеров и сообществ в популярных соцсетях Задачи Разработка потоков загрузки метрик сообществ из соцсетей Разработка потока построения детального портрета пользователей сообществ ВК Разработка потока загрузки метрик по публичным страницам государственных учреждений, оптимизация запросов к БД-источнику ClickHouse (Dictionary Table Engine, Array и arrayJoin функции, массивы, лямбда-процедуры, агрегаторы и модификаторы агрегаций) Опыт работы с Star Schema, Snowflake Schema, SCD
Достижения
● Реализована регулярная загрузка метрик сообществ двух крупных соцсетей ● Разработан поток построения детального портрета пользователей, содержащего более 2000 метрик
Стек специалиста на проекте
API, Yarn, Scheme, Spark, ClickHouse, Hadoop, Pandas, Table, Requests, DWH, Python2, Apache AirFlow, HDFS, Snowflake, PySpark, Разработка, UDF, Spark SQL, dataframe, библиотеки, dictionary, Parquet, engine, array, arrayjoin, dags, schema, star
Отрасль проекта
Social Networking
Период работы
Август 2024 - Декабрь 2024  (5 месяцев)
ООО “ВАЙЛДБЕРРИЗ”
Роль
Инженер данных
Обязанности
Проект Развитие аналитического хранилища данных Задачи Разработка ETL-процессов загрузки и обработки данных в хранилище ClickHouse (Проектирование таблиц с использованием табличных движков MergeTree, ReplacingMergeTree, AggregatingMergeTree Table Engine, Kafka Table Engine, разработка потоков загрузки данных с помощью Materialized Views) Apache Airflow (разработка DAGs)
Достижения
Достижения Разработаны и введены в эксплуатацию несколько ETL-потоков по загрузке данных из систем-источников
Стек специалиста на проекте
ClickHouse, Table, Kafka, DWH, Apache AirFlow, Проектирование, views, Materialize, Разработка, данных, engine
Отрасль проекта
E-commerce & Retail
Период работы
Июль 2024 - Август 2024  (2 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский Государственный Университет им. М.В. Ломоносова
Специальность
факультет Вычислительной Математики и Кибернетики, специалитет по направлению “Прикладная математика и информатика”
Завершение учебы
2011 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking
СА
Сергей А.
Санкт-Петербург
ETL разработчик
Middle+
3 339,64 Р/час
Apache AirFlow
Apache Hadoop
Bash
Confluence
Docker
GitHub
GitLab
Jira
JupyterNoteBook
Matplotlib
+45

Опыт работы с SQL на уровне продвинутых запросов (оконные функции, условные операторы выбора, джоины, CTE, функции, процедуры, транзакции); Работа с реляционными БД: PostgreSQL, Greenplum. Ограничения, индексы, PXF и т.д.; Разработка и оптимизация функций и процедур по переносу данных из stg слоя в слой dds; Работа с DWH (схемы построения, нормализация/денормализация, SCD, построение витрин данных); Настройка интеграции Greenplum и ClickHouse для реализации аналитических запросов; Участие в создании ETL\ELT процессов; Работа с Apache Airflow; Проведение очистки и обработки данных используя Python, pandas, PySpark; Задачи AD-hoc аналитики; Визуализация данных в Tableau, Metabase, Python, Excel, анализ результатов; Документирование процессов и архитектуры решений в Confluence;

Подробнее

Недавно просмотренные специалисты

RnD
ВУ
Владислав У.
Москва
Java разработчик
Senior
1 168,83 Р/час
PostgreSQL
RabbitMQ
Docker
REST
API
Java
SQL
GraphQL
Maven
Linux
+17

Владислав — Java-разработчик уровня Senior из Москвы. Специализируется на разработке программного обеспечения. Имеет высшее образование по специальности «Информатика и вычислительная техника, Технологии разработки программного обеспечения» Российского университета транспорта. Ключевые навыки: GraphQL, REST, Java, API, Linux, Apache, СУБД, SQL, Docker, Hibernate ORM, Maven, RabbitMQ, Spring, PostgreSQL, Framework, Jenkins, Microservices. Работал над проектом lolz.live — форумом социальной инженерии для общения, обмена информацией, продажей и покупкой товаров. В рамках проекта занимался рефакторингом, анализом и оценкой задач, исправлением багов, разработкой и реализацией новых функций, работой в команде, документированием API. Достижения на проекте: - Внедрение асинхронной обработки в сервис пользовательских достижений, сокращение времени обработки в 3 раза. - Повышение уровня покрытия проекта unit-тестами до ~60% с использованием JUnit. - Разработка микросервиса для сокращения URL с использованием асинхронного кэша. - Реализация сервиса уведомлений с интеграцией Google SMTP. - Внедрение кеширования постов с помощью Redis в новостную ленту форума, снижение нагрузки на базу данных на 18%. - Оптимизация SQL-запросов в PostgreSQL, уменьшение среднего времени выполнения критических операций на 60%. - Внедрение RabbitMQ для обработки фоновых задач, снижение задержек при выполнении фоновых процессов на 40%.

Подробнее
E-commerce & Retail • Logistics & Transport
ДЛ
Даниил Л.
Москва
Java разработчик
Senior
4 058,94 Р/час
Reporting
ArtemisMQ
Grafana
automation
documentation
planning
approach
Реляционные БД
Spring Integration
WebSockets
+52

Даниил — Java-разработчик уровня Senior из Москвы. Специализируется на разработке цифровых платформ и веб-систем. Имеет опыт работы в отраслях E-commerce & Retail и Logistics & Transport. Ключевые навыки: Agile, Scrum, микросервисы, Spring Boot, Spring Data, Spring Security, CI/CD, Docker, Kubernetes, Git, Jenkins, PostgreSQL, MongoDB, Kafka, RabbitMQ, Redis, REST, WebSockets, многопоточное программирование. Участвовал в двух проектах: 1. Разработка цифровой платформы для автоматизации процессов подготовки, исполнения и анализа операций по гидравлическому разрыву пласта (с 2023 года). Задачи включали реализацию интеграции с оборудованием, автоматизацию отчётности, проектирование и реализацию микросервисов, поддержку качества кода, настройку системы алертов. 2. Разработка веб-системы для автоматизации планирования и управления транспортными операциями в логистической компании (2020–2023). Задачи включали проведение код-ревью, оптимизацию SQL-запросов, реализацию микросервисов, интеграцию GPS и ERP систем, настройку CI/CD пайплайна.

Подробнее
Hardware • Information Security • IoT • Media • Social Networking
АК
Андрей К.
Москва
Python разработчик
Middle+
3 981,88 Р/час
monitoring
developer
C/C++
Grafana
Работа с интеграциями
modbus
docx
ГИС
Анализ
Разработка
+80

Андрей — опытный Python-разработчик уровня Middle+. Обладает навыками работы с различными технологиями и инструментами, такими как Ansible, Apache Kafka, DevOps, Django, Docker, DRF, Elasticsearch, FastAPI, Flask, Microsoft, MongoDB, MQ, MySQL, NoSQL, Oracle, PostgreSQL, RabbitMQ, SQL, SQLAlchemy и другие. Андрей имеет опыт разработки систем в различных отраслях, включая информационную безопасность, аппаратное обеспечение, социальные сети и IoT. Он работал над проектами, связанными с реализацией требований информационной безопасности, разработкой системы гарантированного доведения команд БПЛА, созданием модулей для корпоративного портала и разработкой IoT-платформы управления инженерными системами здания. Также участвовал в разработке информационно-аналитической системы. На проектах Андрей выполнял роли Python-разработчика, разработчика ПО и back-end разработчика. Его опыт работы на проектах составляет 12 лет.

Подробнее