Оставьте заявку, мы подберем для вас подходящего специалиста за 48 часов!
Премия рунета

Даниил П. Data инженер, Middle

ID 7499
ДП
Даниил П.
Мужчина, 31 год
Россия, Санкт-Петербург, UTC+3
Ставка
3,687.5 Р/час
НДС не облагается
Специалист доступен с 26 мая 2024 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle
Навыки
Scala
SQL
Hadoop
Apache AirFlow
DWH
ETL
Python
Отрасли
Telecom
Главное о специалисте
Самостоятельный разработчик, который способен реализовать требуемый функционал. Постоянно саморазвиваюсь и улучшаю свои профессиональные навыки за счет прочтения книг и статей. Больше внимание уделяю структуре кода и его читаемости. Считаю документацию важной частью разработки. В процессе обучения в университете ИТМО познакомился с большим количеством технологий и реализовал множество проектов: Онлайн сервис с рекомендательной системой рецептов, приложение для кластеризации эмоций человек с фотографии, веб-приложения для проведения эксперементального тестирования людей. При работе в EPAM закончил тренинг центр и внутренний курс по Big Data. Своё профессиональное будущее вижу в качестве Data Engineer работающего в сфере Big Data.
Проекты   (2 года 9 месяцев)
Deco Systems
Роль
Программист Python/ Data Engineer
Обязанности
Data Engineer: Подготовка программного кода и архитектуры к переносу на новую версию hadoop кластера Рефакторинг Scala, SQL и Airflow скриптов Миграция данных с Oracle на Greenplum с изменением целевой архитектуры Поддержка контроля качества на всем жизненном цикле данных, реализация инструментария для контроля качества данных, формирование метрик качества данных Развитие архитектуры DWH (DataVault). Проектирование и формирование новых сущностей. Реализация ETL процессов для полученной архитектуры. Python разработчик: Проектирование и разработка дополнительного функционала Superset: возможность формирования .pdf отчетов Реализация модуля синтетических данных для дальнейшего обучения ML моделей розничной торговли
Период работы
Май 2022 - По настоящее время  (2 года 1 месяц)
EPAM Systems Inc. (Россия)
Роль
Junior Data Quality Engineer
Обязанности
Python-разработчик: 1. Разработка программного обеспечения: разработал на основе спроектированной архитектуры модули для параллельного создания облачных сервисов 2. Участие в разработке внутреннего фреймворка компании на основе Robot Framework и Boto3: добавил поддержку сервисов aws: Cognito, Athena, ElastichCache, DMS, RDS, Lambda и другие. 3. Написание документации в confluence. 4. Взаимодействие со сторонними командами разработчиков и техподдержки. Data Quality Engineer 1. Реализовал этапы выгрзки и трансформации данных в ETL процессе. 2. Спроектировал и реализовал DQ проверки по основным DQ Dimensions и бизнес требованиям. 3. Документировал полученные решения на странице проекта в confluence 4. Разработка программного обеспечения: разработал систему внутренних и внешних нотификаций для DQ проверок. 5. Взаимодействие со сторонними командами разработчиков, дизайнеров и бизнес аналитиков.
Период работы
Сентябрь 2021 - Май 2022  (9 месяцев)
Формат работы
Формат работы
Удаленно
Командировки
Готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Санкт-Петербургский национальный исследовательский университет информационных технологий, механики и оптики, Санкт-Петербург
Специальность
Нейротехнологии и программирование
Завершение учебы
2022 г.

Похожие специалисты

LifeStyle
ГР
Гатауллин Р.
Казань
Data инженер
Senior
5,625 Р/час
DevOps
Docker
Flask
GitLab
GitLab CI/CD
metabase
ГОСТ
Управление командой
Apache AirFlow
PostgreSQL
+61

- Data Engineer с опытом работы с распределенными системами обработки данных более 9 лет; - Глубокие знания проектирования, внедрения и сопровождения ETL-процессов с нуля; - Практический опыт управления командой и управления продуктом; - Кандидат наук (= PhD в России) в области компьютерных наук. Опытный инженер данных Создал платформу данных с нуля. Из языков программирования — преимущественно Python, преимущественно SQL, Sparks, Scala. из облачных сервисов AWS — создание некоторой инфраструктуры, GCP — 5 мес. опыта. Инструменты управления — Docker-Master of Docker, Kubernetes — создает инфраструктуру воздушного потока. Базы данных: PostgreSQL, Redis-как брокер сообщений, Из отраслей-маркетинг, продажи, финтех Опыт работы в НЛП, ML-знает концепцию, работал руководителем группы, также работал специалистом по данным в Data Analyst.

Подробнее
Insurance • Marketing, Advertising & Design
НМ
Николай М.
Гродно
Data инженер
Senior
3,915 Р/час
Java
Python
Pl/SQL
SQL
T-SQL
PL/pgSQL
IBM
JavaScript
Object
Pascal
+53

Разработчик с 17-летним опытом работы в разработке программного обеспечения. Большой опыт работы с Oracle PL/SQL, MS SQL, настройкой производительности SQL, концепциями хранилищ данных и ETL, 3 года опыта в Java, 4 года в Delphi. Опыт работы на всех этапах жизненного цикла разработки программного обеспечения 11-летний опыт разработки Oracle (9i, 10g, 11g), включающий в себя: логический и физический дизайн базы данных, распределение памяти, разбиение, сегменты таблиц и индексов, роли и привилегии; настройка производительности SQL, индексация, распараллеливание, объяснение планов, подсказки, статистика; опыт работы во всех аспектах хранилища данных, отчетности BI, ETL и всех этапах жизненного цикла разработки хранилища данных; большой опыт в Kalido DIW; глубокие знания в логическому и физическом моделировании данных с использованием методов нормализации; программирование PL/SQL, хранимые процедуры, функции, пакеты, триггеры, типы; программирование с использованием динамического SQL и PL/SQL; программирование ETL-процессов с использованием PL/SQL, T-SQL; работа с Oracle: разработка приложений с использованием Oracle Forms; разработка отчетов и визуализация данных с использованием Oracle Reports, Oracle Graphics и Oracle BI Publisher; разработка приложений с использованием HTML/XML/CSS/XSLT; Манипулирование, очистка и обработка данных с использованием SQL. Анализ необработанных данных, подведение итогов и выработка рекомендаций. Проектирование, разработка и внедрение новой функциональности. Проектирование, разработка отчетов и визуализация данных с использованием Cognos.

Подробнее

Недавно просмотренные специалисты

Telecom
ДП
Даниил П.
Санкт-Петербург
Data инженер
Middle
3,687.5 Р/час
SQL
Python
Scala
Hadoop
ETL
DWH
Apache AirFlow
+7

Самостоятельный разработчик, который способен реализовать требуемый функционал. Постоянно саморазвиваюсь и улучшаю свои профессиональные навыки за счет прочтения книг и статей. Больше внимание уделяю структуре кода и его читаемости. Считаю документацию важной частью разработки. В процессе обучения в университете ИТМО познакомился с большим количеством технологий и реализовал множество проектов: Онлайн сервис с рекомендательной системой рецептов, приложение для кластеризации эмоций человек с фотографии, веб-приложения для проведения эксперементального тестирования людей. При работе в EPAM закончил тренинг центр и внутренний курс по Big Data. Своё профессиональное будущее вижу в качестве Data Engineer работающего в сфере Big Data.

Подробнее