ДП
Даниил П.
Мужчина, 30 лет
Россия, Санкт-Петербург, UTC+3
Ставка
3,750 Р/час
НДС не облагается
Специалист доступен с 24 сентября 2023 г.
Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.
Подробнее
О специалисте
Специализация
Data инженер
Грейд
Навыки
Отрасли
Главное о специалисте
Самостоятельный разработчик, который способен реализовать требуемый функционал. Постоянно саморазвиваюсь и улучшаю свои профессиональные навыки за счет прочтения книг и статей. Больше внимание уделяю структуре кода и его читаемости. Считаю документацию важной частью разработки.
В процессе обучения в университете ИТМО познакомился с большим количеством технологий и реализовал множество проектов: Онлайн сервис с рекомендательной системой рецептов, приложение для кластеризации эмоций человек с фотографии, веб-приложения для проведения эксперементального тестирования людей.
При работе в EPAM закончил тренинг центр и внутренний курс по Big Data.
Своё профессиональное будущее вижу в качестве Data Engineer работающего в сфере Big Data.
Проекты
(2 года 1 месяц)
Deco Systems
Роль
Программист Python/ Data Engineer
Обязанности
Data Engineer:
Подготовка программного кода и архитектуры к переносу на новую версию hadoop кластера
Рефакторинг Scala, SQL и Airflow скриптов
Миграция данных с Oracle на Greenplum с изменением целевой архитектуры
Поддержка контроля качества на всем жизненном цикле данных, реализация инструментария для контроля качества данных, формирование метрик качества данных
Развитие архитектуры DWH (DataVault). Проектирование и формирование новых сущностей. Реализация ETL процессов для полученной архитектуры.
Python разработчик:
Проектирование и разработка дополнительного функционала Superset: возможность формирования .pdf отчетов
Реализация модуля синтетических данных для дальнейшего обучения ML моделей
розничной торговли
Период работы
Май 2022 - По настоящее время
(1 год 5 месяцев)
EPAM Systems Inc. (Россия)
Роль
Junior Data Quality Engineer
Обязанности
Python-разработчик:
1. Разработка программного обеспечения: разработал на основе спроектированной архитектуры модули для параллельного создания облачных сервисов
2. Участие в разработке внутреннего фреймворка компании на основе Robot Framework и Boto3: добавил поддержку сервисов aws: Cognito, Athena, ElastichCache, DMS, RDS, Lambda и другие.
3. Написание документации в confluence.
4. Взаимодействие со сторонними командами разработчиков и техподдержки.
Data Quality Engineer
1. Реализовал этапы выгрзки и трансформации данных в ETL процессе.
2. Спроектировал и реализовал DQ проверки по основным DQ Dimensions и бизнес требованиям.
3. Документировал полученные решения на странице проекта в confluence
4. Разработка программного обеспечения: разработал систему внутренних и внешних нотификаций для DQ проверок.
5. Взаимодействие со сторонними командами разработчиков, дизайнеров и бизнес аналитиков.
Период работы
Сентябрь 2021 - Май 2022
(9 месяцев)
Формат работы
Формат работы
Удаленно
Командировки
Готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Санкт-Петербургский национальный исследовательский университет информационных технологий, механики и оптики, Санкт-Петербург
Специальность
Нейротехнологии и программирование
Завершение учебы
2022 г.