МД
Махмуд Д.
Мужчина
Россия, Москва, UTC+3
Ставка
4 500 Р/час
НДС не облагается
Специалист доступен с 6 ноября 2024 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Архитектор
Грейд
Навыки
Отрасли
Проекты
(6 лет 10 месяцев)
Проект: FTI Consulting
Роль
Архитектор
Обязанности
Достижения:
построили несколько хранилищ в крупных ритейл компаниях, наладили систему качества данных, сделали каталоги с которыми аналитикам стало легче работать с хранилищами
Описание проекта:
Участие в проектировании и разработке более чем в 5 проектах , среди которых ритейлы, ecom, строительные и горнодобывающие компании.
Состав Команды:
са, разработчики, DWH разработчики, разработчики BI ,2 девопса, бизнес аналитики, менеджер проекта
Задачи:
Работа с бизнес-требованиями :
- проектирование DWH, DataLake, LakeHouse
- проектирование концептуальной модели данных
- согласование макета витрин
Проектирование интеграций :
- изучение источников данных
- виды подключений (API, СУБД, очереди,object storages)
- ревью кода, создающего отчётность
- описание потоков(batch/stream) и загрузок данных(логи/инкремент)
- мэппинг типов данных, constraints
- написание интеграционных тестов
Проектирование хранилища :
- описание слоёв, доменов, архитектуры
- описание трансформаций внутри хранилища
- создание логической модели данных(3NF, Star/Snowflake,Data Vault 1/2)
- проектирование витрин для отчётности, bi и ml
Написание документации :
- изображение общей архитектуры
- изображение потоков данных(DFD)
- изображение объектов в слоях (s2t)
- изображение модели данных(ERD)
- описание объектов и их метаданных в каждом слое
Написание тз в task-трэкерах:
- для разработки интеграции
- для разработки трансформаций
- для разработки витрин
- для разработки тестов
Стек:
СУБД : Oracle, MS SQL Server,PostgreSQL, Greenplum, Clickhouse
Object storages: HDFS, S3,MinIO
ETL/ELT : Pentaho, SSIS,NiFi,Spark
Languages : SQL, Python
Orchestrators : Airflow, Dagster
Queues: Kafka,RabbitMQ
Стек специалиста на проекте
Dagster, NiFi, batch, language, stories, менеджер, Работа с интеграциями, Написание ТЗ, Разработка, стек, макетов, Ревью, Spark, Queue, Streams, Clickhouse, Data, API, бизнес, Oracle, Проектирование, BI, Kafka, Object, MinIo, СУБД, DWH, Storage, S3, HDFS, SSIS, Pentaho, Vault, Проектирование интеграций, Snowflake, Написание документации, SQL, Python, GreenPlum, Аналитика, разработчик, Apache AirFlow, Data Flow Diagrams (DFD), ER Diagram, ML, Microsoft, PostgreSQL, RabbitMQ, Identity Server, datalake, ETL ELT, данных, constrains
Отрасль проекта
Insurance
Период работы
Февраль 2021 - Октябрь 2024
(3 года 9 месяцев)
Проект:FTI Consulting
Роль
Разработчик ETL/DWH/BI
Обязанности
Описание проекта:
Внедрение omnichannel для Pharma
Разработка ETL/DWH/BI в MS Azure для e-com
Задачи:
- изучение и анализ технического задания
- разработка и оптимизация логической и физической модели DWH (Google BigQuery/DBeaver)
- предобработка данных(дедупликация, очистка пропусков , преобразования форматов данных, мэппинг) (Talend)
- наполнение витрин из сырого слоя (Talend)
- разработка витрин и аналитического слоя (Clickhouse)
- визуализация данных на платформе Tableau
- составление аналитической справки и рекомендаций по реинжинирингу бизнес-процессов
- выгрузка данных из источников (Azure data factory)
- предобработка и трансформация данных (Azure data factory)
- разработка логики и физики DWH (Azure Synapse)
- разработка tabular model (Azure analysis services)
- визуализация в MS Power BI
Стек:
MS Power BI Talend Azure MPP Hadoop
Стек специалиста на проекте
mpp, Визуализация, анализ, Разработка, Программное обеспечение, стек, бизнеспроцессов, Azure Synapse, analysis, Clickhouse, Google, Data Factory, Hadoop, Talend, DWH, Tableau, Services, BBeaver, Визуализация данных, Karma, Azure, Microsoft, MS Power BI, оптимизация, данных
Отрасль проекта
BioTech, Pharma, Health care & Sports
Период работы
Апрель 2019 - Февраль 2021
(1 год 11 месяцев)
Проект:Emerton
Роль
DWH/BI Developer
Обязанности
Описание проекта:
Разработка программного обеспечения
Задачи:
- изучение и анализ технического задания
- разработка витрин и аналитического слоя DWH (MS SQL Server 2016/SSMS)
- разработка табличной модели OLAP (DAX/VS/SSAS)
- эксплуатация(процессинг, роли,траблшутинг)
- оптимизация и поддержка работы с моделью(VS/SSAS)
- визуализация данных на платформе Power BI
- синтез и резюмирование знаний из полученных данных
- составление аналитической справки и рекомендаций по реинжинирингу бизнес-процессов
Стек:
MS SQL Power BI
Стек специалиста на проекте
анализ, Разработка, Программное обеспечение, стек, ssas, бизнеспроцессов, ssms, модель, работу с, знание, OLAP, Power BI, DWH, SQL, Визуализация данных, Microsoft, Identity Server, и поддержка, оптимизация, данных
Отрасль проекта
Insurance
Период работы
Январь 2018 - Апрель 2019
(1 год 4 месяца)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет