Андрей В. Data инженер, Senior

ID 13682
АВ
Андрей В.
Мужчина
Россия, Барнаул, UTC+7
Ставка
4 495,67 Р/час
вкл. НДС 5% (166.67 Р)
Специалист доступен с 12 февраля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
AD
Apache
Apache AirFlow
ArgoCD
C#
Clean
Docker
ELK
FastAPI
GOlang
GreenPlum
Jaeger
Java
Kafka
Kubernetes
MinIo
MongoDB
MySQL
PHP
PostgreSQL
Python
RabbitMQ
Redis
Spark
SQL
SQLAlchemy
Tensorflow
VMware
ООП
Data
DevOps
DWH
ETL
Декомпозиция и структуризация задач
Оценка задач
Проектирование
Разработка
сбор данных
Сбор и анализ требований
MSSQL
Microsoft
Мониторинг
разработка системы
ESXi
Horizon
Обучение
Работа с интеграциями
Git
Linux
Zabbix
micropython
Apache Superset
Grafana
observium
СhatGPT
NVidia
Whisper
weaviate
chat with rtx
Pandas
MLops
Ansible
Docker Compose
Gitlab CI
Terraform
watchtower
Power BI
Отрасли
E-commerce & Retail
Знание языков
Английский — A1
Главное о специалисте
За всю карьеру было реализовано большое количество проектов. Начиная от систем контроля доступа, заканчивая разработкой LLM моделей для автоматизации работы менеджеров и ОКК. Также разрабатывал архитектуру для высоконагруженных систем. Разрабатывал DataLake и DWH для дальнейшего построения системы аналитики данных. Разрабатывал системы отчетности. Работал с машинным зрением (классификация изображении). Реализовывал системы речевой аналитики на Pytorch (как самостоятельно разрабатывал сети, так и использовал BERT модели). В работе обычно использую Python, PSQL, Mongo, Redis, Kafka, Airflow, Docker, K8s По мимо этого, руководил проектом по внедрению VDI для работы удаленных пользователей.
Проекты   (8 лет 9 месяцев)
Разработка DWH и ETL процессов для построения PowerBI дашбордов
Роль
Главный разработчик
Обязанности
Полномочия, обязанности и достижения: Сбор требований Проектирование и реализация сервисов/проектов Декомпозиция задач Проведение груминга (приоритезация и оценка задач в story points) Разработка DWH для сбора данных Разработка ETL Команда: Data engineer и DevOPS
Стек специалиста на проекте
Сбор и анализ требований, Разработка, сбор данных, Оценка задач, Data, DevOps, Проектирование, ETL, DWH, Python, GreenPlum, Apache AirFlow, PostgreSQL, Декомпозиция и структуризация задач, Kubernetes
Отрасль проекта
E-commerce & Retail
Период работы
Июнь 2023 - Июнь 2024  (1 год 1 месяц)
Реализованные проекты
Роль
data engineer
Обязанности
Проект: Разработка и внедрение СКУД систем. Проект: Построение Дашбордов в Apache Superset Проект: Внедрение мониторинга инфраструктуры, включая состояние жизнеспособности оборудования и уровень сервисов, а также мониторинг приложений, развернутых в кластере Kubernetes, включая сбор tracing информации с приложений. Проект: Реализация интеграций с внешними системами, UnicardOil, Shedex, ЯндексАналитика, RoisStat Проект: Реализация речевой аналитики, транскрибация звонков и дальнейшая классификация по типам. Извлечение общих договоренностей и реализация контроля качества работы менеджера. Проект: Реализация интеграций с WhatsApp. Разработка официального API к WhatsAPP Проект: Реализация предиктивной модели для оптимизации складских остатков Проект: Реализации классификации картинок из ТГ бота, счета, ТТН, УПД, Счет-Фактура, ТОРГ-12 Проект: Реализация аналитики по ценным бумагам на фондовом рынке. Прогноз цен и реализация автоматического расчета сигналов и мультипликаторов. Проект: Реализация системы для AB - тестирования и проведение AB - тестирования Проект (в качестве руководителя): Внедрение и поддержка инфраструктуры проекта, включая системы оркестрации контейнеры зированных приложений, системы непрерывной интеграции процессов разработки и доставки обновлений в различные окружения и системы. Обязанности: Разработка внешних интеграций с Б24 и Terrasoft Community. Разработка системы учета рабочего времени по RFID картам. Установка сканеров RFID в офисы и на склад. Разработка Telegram Ботов для внутренней автоматизации Разработка ml моделей классификации изображений Разработка ml моделей классификации текста Реализация модуля распознавания первички и внесения ее в 1С Реализация и поддержка системы отправки уведомлений (почта/вотсап/Телеграм) Реализация и поддержка интеграции с WhatsApp (язык реализации Golang) Реализация интеграций с внешними сервисами (Unisender/ЮникардОли/Максоптра/Шедекс и другие) Разработка PowerBI Дашбордов (Создание мер на языке DAX) и администрирование ЛК (создание пользователей, назначение прав, создание шлюзов) Аналитика данных компании по продажам и закупкам (проведение A/B тестов, XYZ, ABC, HML аналитики/Прогнозирование LTV/Проведение корреляционного анализа, выявление кластеров клиентов) Администрирование AD и VDI для сотрудников Администрирование Confluence Реализация и поддержка системы авто закупок (прогнозирование продаж и формирование оптимального заказа поставщику с учетом бюджета на закупку) Реализация скриптов парсинга сайтов Разработка микро сервисной архитектуры Развертывание микро сервисной архитектуры Администрирование репликации MSSQL Написание и оптимизация SQL запросов (MSSQL/MySQL/PSQL) Разработка DWH на Greenplum Администрирование Minio и развертывание Data Lake Разработка заданий (DAG ов) для Airflow Работа со Spark для реализации ETL процессов DWH to DM Разработка витрин данных для реализации дашбордов в PowerBI Реализация API к внутренним сервисам на FastAPI + SqlAlchemy + PSQL + Cleary + Redis - Оптимизация запросов к MongoDB Перенос монолитной системы на микросервисы Управление DevOps отделом и командой SRE Проставление целей на спринт, работа по scrum Onboarding новых сотрудников Команда: 3 DevOPS, 3 SRE, 1 LLM Разработчик, 2 BI Аналитика (подключался по мере надобности)
Стек специалиста на проекте
NVidia, Apache Superset, ELK, Grafana, Whisper, PHP, micropython, observium, weaviate, chat with rtx, watchtower, Tensorflow, Spark, Zabbix, Java, Git, Pandas, ArgoCD, Linux, Redis, FastAPI, Ansible, Terraform, Kafka, MinIo, Jaeger, Docker Compose, MLops, Gitlab CI, Docker, SQL, Python, Apache AirFlow, MySQL, СhatGPT, PostgreSQL, ООП, Kubernetes
Отрасль проекта
E-commerce & Retail
Период работы
Октябрь 2015 - Май 2024  (8 лет 8 месяцев)
Перенос CRM системы на микросервисы
Роль
Главный разработчик
Обязанности
Полномочия, обязанности и достижения: Сбор требований Проектирование и реализация сервисов/проектов Декомпозиция задач Проведение груминга (приоритезация и оценка задач в story points) Разработка архитектуры Разработка сервисов Развертывание Слушателя MS SQL сервера Команда: Data engineer и DevOPS
Стек специалиста на проекте
Сбор и анализ требований, Разработка, Оценка задач, Data, DevOps, ArgoCD, Проектирование, Kafka, MinIo, MSSQL, Docker, SQL, Python, Microsoft, Декомпозиция и структуризация задач, Kubernetes
Отрасль проекта
E-commerce & Retail
Период работы
Май 2022 - Май 2023  (1 год 1 месяц)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Московский Техникум Информатики и Вычислительной техники,
Специальность
Информационные системы и программирование, Программист
Завершение учебы
2017 г.

Похожие специалисты

E-commerce & Retail • FinTech & Banking • Government & Public Sector • HRTech
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Senior
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+61

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, Postgresql, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector • Manufacturing
АХ
Артур Х.
Уфа
Data инженер
Senior
4 238,77 Р/час
Ansible
Apache AirFlow
Apache Superset
CI/CD
Clickhouse
Confluence
DBT
Docker
FastAPI
Git
+47

Артур — опытный Data инженер с навыками работы в BI, DWH, SQL и Python. Он обладает глубоким пониманием Apache AirFlow, Apache Superset, CI/CD, Clickhouse, Confluence, DBT, Docker, FastAPI, Git, GitLab, GreenPlum, Jira, Kafka, Kubernetes, Linux, PostgreSQL, RabbitMQ, Redis, REST API, S3, SOAP, TCP/IP и unit-тестирования. Артур работал над несколькими проектами, включая создание платформы для принятия бизнес-решений в металлургической компании, разработку сервиса планирования путешествий, доработку Apache Superset для отображения большого количества данных в дашбордах, создание фреймворка типовых интеграций на базе Apache Airflow, разработку бэкендов для платформы изучения английского языка и системы управления качеством данных. Из достижений можно выделить: Сделал более 12 успешных интеграций с источниками Сделал загрузку более 50 сущностей в хранилище с базовыми проверками качества Сделал гибкий масштабируемый веб-сервис предоставления данных из КХД Сделал доработку Apache Superset для отображения большого количества данных

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее

Недавно просмотренные специалисты

E-commerce & Retail
КЛ
Кирилл Л.
Ташкент
Vue.js разработчик
Senior
3 596,53 Р/час
MobX
Nuxt3
Sass
Redux
CSS3
Pinia
3d
HTML
Vuex
H2
+22

Кирилл — опытный Vue.js разработчик с 6-летним опытом работы на проектах в сфере e-commerce & retail. Он обладает широким спектром технических навыков, включая работу с CSS3, HTML, JavaScript, MobX, Pinia, React, Redux, Sass, Tailwind, TypeScript, Vue.js, Vuex, Angular, Figma, Vanilla.js и JQuery. Кирилл участвовал в разработке нескольких проектов, где он выполнял роль frontend-разработчика. В его обязанности входило проектирование архитектуры фронтенда, разработка интерфейсов для взаимодействия с RESTful API или GraphQL сервисами, улучшение производительности приложения, взаимодействие с дизайнерами, менеджерами и QA-специалистами. Он также занимался обучением и наставничеством младших разработчиков, проводил код-ревью, разрабатывал техническую документацию по архитектуре, компонентам и лучшим практикам проекта.

Подробнее