E-commerce & Retail
EdTech
FinTech & Banking
GameDev
Manufacturing
Telecom
Travel, Hospitality & Restaurant business
Денис Д. Data инженер, Senior
ID 22764
ДД
Денис Д.
Мужчина
Россия, Краснодар, UTC+3
Ставка
4 545,45 Р/час
НДС не облагается
Специалист доступен с 10 июня 2025 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Знание языков
Английский — B2
Немецкий — A2
Главное о специалисте
Я опытный специалист в области работы с данными, обладающий более чем 10-тилетним опытом в качестве Data Engineer и Data Architect. Мой опыт охватывает весь спектр задач, связанных с проектированием, разработкой и администрированием специализированных систем обработки данных, в том числе проектирование архитектуры баз данных, оптимизацию производительности, а также внедрение современных решений для управления данными и их анализом.
Я управлял и участвовал в множестве проектов, где использовал широкий набор технологий, включая языки программирования, такие как Python, Java и SQL, а также работал с различными базами данных, среди которых PostgreSQL, Oracle и greenplum. Мой опыт работы охватывает различные отрасли, включая ритейл, банковские услуги и автоматизацию бизнес-процессов. Я принимал активное участие в разработке хранилищ данных, ETL-процессов и аналитических платформ, что позволило мне развить навыки в проектировании и оптимизации высоконагруженных систем.
Командная работа и эффективное управление проектами — это не только сильные стороны, но и те аспекты, на которые я уделяю особое внимание. Я привык работать в условиях Agile и Scrum, понимая важность взаимодействия и поддержки коллег. Вместе с тем, я проявляю инициативу в обучении и развитии команды, делясь накопленным опытом и знаниями.
Проекты
(25 лет 1 месяц)
Информационная система, отражающая предметную область заказчика. Проект в сфере ВПК
Роль
PostgreSQL Developer
Обязанности
написание Unit-тестов
Импорт/экспорт данных системы, ЕTL,
Хранимые процедуры, проектирование модели данных в соответствии с бизнес-логикой
оптимизация/автоматизация процесса разработки,
подготовка проектной документации
профилирование
Команда проекта: Команда аналитики: 1 Аналитик проекта он же product owner, 2 Аналитика; 2 Технических писателя, 1 Тестировщик.
Разработка: 1 Teamlead, 1 Архитектор проекта, 1 Release manager, 2 Разработчика backend python, 1 sql разработка, 1 DevOps
Достижения
Перенос логики импорта данных на сторону базы данных.
Обработка ошибок при импорте данных, реализация резервного копирования и восстановления данных средствами системы хранения данных без использования внешних утилит.
Изменение логики хранения и обработки данных для повышения производительности в условиях неизменности программно-аппаратных требований.
Стек специалиста на проекте
PostgreSQL, Git, Jira, Confluence, Python, Pandas, Shell, SQLAlchemy, Astra Linux, SE
Отрасль проекта
Manufacturing
Период работы
Февраль 2025 - По настоящее время
(5 месяцев)
Учет взаиморасчетов по договорам и штрафов
Роль
PostgreSQL Developer
Обязанности
DBA, SQL разработчик,
написание Unit- тестов
Создание витрины данных в части штрафов и пеней для соответствующего подразделения компании заказчика.
участие в обсуждении с командой
оптимизация/автоматизация процесса разработки,
подготовка шаблонов и методик,
подготовка проектной документации
Разработка и поддержка интеграционных потоков c различными источниками данных
работа с высоконагруженными системами
профилирование
оценка производительности
поиск узких мест (блокировки etc)
Стек специалиста на проекте
PostgreSQL, Git, Jira, Python, Apache AirFlow
Отрасль проекта
Manufacturing
Период работы
Август 2024 - Январь 2025
(6 месяцев)
ЕвразМаркет
Роль
DBA/SQL-разработчик/Архитектор/TL
Обязанности
Разработка и сопровождение хранилища данных для отдела маркетинга холдинга DWH (Airflow, postgresql, Git, liquibase)
DBA
анализ требований заказчика
анализ источников данных
проектирование и разработка витрин данных
проектирование конечных пользовательских отчётов
разработка хранимых процедур и функций
разработка ETL
тестирование
профилирование
оценка производительности
поиск узких мест (блокировки etc)
управление командой
оценка и распределение задач
решение критических инцидентов
разработка и сопровождение хранилища данных
разработка архитектуры хранилища (Data Vault 2.0 )
ETL/ELT - Apache Airflow DAGS ( Sql , Rest api )
использование dbt с Postgresql и GP
Развёртывание и использование CH с PostgreSQL Table Engine
создание пользовательских витрин
конечная отчетность,
маркетинговая аналитика,
оптимизация производительности.
развертывание, настройка и администрирование, кластеров postgres
Развертывание и настройка CI/CD и сборочных контуров
администрирование MS SQL Server 2019
развёртывание как proof of concept ArenaDataDB (Greenplum в качестве хранилища) + ClickHouse — для витринирования — цель: изменение архитектуры хранилища в сторону ускорения загрузки/обработки данных и доставки конечных отчётов пользователю
Команда: Mobile Apps team (2 Dev , 1 Test ), Frontend team (1 Dev, 1 Test + Reports (Sql dev) parttime)Back server Java dev (1), Analyst (2), Рroduct owner (1), Database Architect /Development /Support 1 and TL
Стек специалиста на проекте
database, Shell, Tracer, SQLAlchemy, Numpy, Data, Pandas, Linux, Helm, Kafka, Profile, cloud, Vault, STrace, Confluence, SQL, Docker, GreenPlum, Mail, Apache AirFlow, Identity Server, REST API, SQL Server Agent, PostgreSQL, Kubernetes
Отрасль проекта
E-commerce & Retail
Период работы
Август 2022 - Июль 2024
(2 года)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Таврический национальный университет им. В.И. Вернадского
Специальность
Прикладная математика
Завершение учебы
2001 г.