Денис Ф. Data инженер, Middle

ID 16808
ДФ
Денис Ф.
Мужчина, 26 лет
Россия, Самара, UTC+4
Ставка
2 750 Р/час
НДС не облагается
Специалист доступен с 12 ноября 2024 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle
Навыки
Apache
Apache AirFlow
Apache Kafka
Bash
Docker
Git
Google colab
Matplotlib
NiFi
Numpy
Pandas
Plotly
Power BI
PySpark
Clickhouse
GreenPlum
Hive
Identity Server
Microsoft
PostgreSQL
SQL
Python
Linux
MS Windows
Kafka
Jira
Hadoop
Отрасли
E-commerce & Retail
FinTech & Banking
Главное о специалисте
Денис — опытный Data-инженер, специализирующийся на Apache AirFlow, Apache Kafka, Docker, Git и других инструментах. Обладает навыками работы с Python, SQL, Linux и Windows. Имеет опыт работы в проектах по мониторингу качества воздуха и анализу кредитных рисков стартапов. В первом проекте занимался поддержкой работоспособности мониторинга загрязнения окружающей среды, созданием ETL-процессов и описанием документации по потокам данных. Во втором — исследовал данные компании, создавал ETL-процесс для сбора, обработки и загрузки данных, а также занимался исправлением ошибок и подготовкой данных для визуализации и отчётности.
Проекты   (3 года 3 месяца)
Мониторинг и оценка качества воздуха в городской среде
Роль
Data Engineer
Обязанности
Описание проекта Поддержка работоспособности мониторинга загрязнение окружающей среды и контроль состояния загрязнения атмосферы в населенных пунктах. Состав команды 1 PO, 2 BE, 1 FE, 1 DA, 2 DE Технологии на проекте Airflow, Hadoop, PySpark, SQL, Python, Bash, Git Задачи/реализованный функционал Поначалу занимался задачами, связанными с качеством данных: выяснял возникновение ошибок в Airflow и исправлял их; интегрировал данные в таблицы за отсутствующие периоды; описывал документацию по потокам данных: создавал схемы потоков данных и описание трансформаций данных. Также создавал ETL-процессы под новые бизнес запросы, или с учетом масштабирования при помощью Apache Airflow.
Стек специалиста на проекте
Bash, Git, Hadoop, PySpark, SQL, Python, Apache AirFlow
Отрасль проекта
E-commerce & Retail
Период работы
Апрель 2023 - Сентябрь 2024  (1 год 6 месяцев)
Анализ кредитных рисков стартапов
Роль
Data Engineer / Data Analyst
Обязанности
Описание проекта Проект направлен на создание системы для анализа и оценки кредитных рисков различных стартапов. Система использует данные о заемщиках, их финансовую историю и другие факторы для моделирования вероятности дефолта и определения оптимальных условий кредитования. Состав команды 1 PO, 1 BA, 1 SA, 2 BE, 1 FE, 1 QA, 1 DS, 2 DE Технологии на проекте Airflow, Hadoop, PySpark, SQL, Python, GreenPlum, Git, Linux, Bash Задачи/реализованный функционал Проводил исследование данных, которые есть у компании и которые были бы необходимы в рамках проекта, по итогу выделил данные о заемщиках, о конкурентах и об экономическом рынке на текущий момент. Далее занимался созданием ETL-процесса для сбора, обработки и загрузки этих данных в схему нашей команды. В том числе имел опыт создание витрин данных в архитектуре Data Vault. В последующем занимался исправлением ошибок, которые могли возникать в DAG-ах при сборе, обработке и загрузке данных. Также подготавливал данные для визуализации и отчетности. Помимо этого занимался описанием всех ETL-процессов внутри проектов и создал схему потоков данных, SLA регламентов.
Стек специалиста на проекте
Bash, Git, Linux, Hadoop, PySpark, SQL, Python, GreenPlum, Apache AirFlow
Отрасль проекта
FinTech & Banking
Период работы
Июль 2021 - Март 2023  (1 год 9 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет

Похожие специалисты

Marketing, Advertising & Design • RnD
КК
Кирилл К.
Астана
Data инженер
Middle
3 250 Р/час
Apache AirFlow
API
Big Data
Bitbucket
CI/CD
code
Docker
EViews
Flake8
Git
+66

● data scientist / ML engineer с опытом коммерческой разработки 3.5 года; ● технологический стек: python - pandas, numpy, scikit-learn, tensor flow, PyTorch, OpenCV; SQL; Spark; Linux; Docker. ● опыт оптимизации вычислений. ● запустил с нуля до стадии продукта 3 проекта; ● есть опыт наставничества (студенты, junior-разработчики); ● опыт бэкенд разработки на python. ● отличный системный и ML дизайн ● знание архитектуры нейронных сетей. Понимание механизма внимания и трансформатора; ● опыт использования TensorFlow и PyTorch для экспериментов с архитектурой; ● опыт использования NGC; Примечание - если речь идет про облачный сервис NVIDIA NGC, то его конкретно не использовал, но он мало чем отличается от используемых аналогов; ● понимание основ MLOps; ● опыт разработки конструкции систем машинного обучения в различных областях – CV/NLP/ML

Подробнее
Insurance • Marketing, Advertising & Design
НМ
Николай М.
Гродно
Data инженер
Senior
3 915 Р/час
Java
Python
Pl/SQL
SQL
T-SQL
PL/pgSQL
IBM
JavaScript
Object
Pascal
+53

Разработчик с 17-летним опытом работы в разработке программного обеспечения. Большой опыт работы с Oracle PL/SQL, MS SQL, настройкой производительности SQL, концепциями хранилищ данных и ETL, 3 года опыта в Java, 4 года в Delphi. Опыт работы на всех этапах жизненного цикла разработки программного обеспечения 11-летний опыт разработки Oracle (9i, 10g, 11g), включающий в себя: логический и физический дизайн базы данных, распределение памяти, разбиение, сегменты таблиц и индексов, роли и привилегии; настройка производительности SQL, индексация, распараллеливание, объяснение планов, подсказки, статистика; опыт работы во всех аспектах хранилища данных, отчетности BI, ETL и всех этапах жизненного цикла разработки хранилища данных; большой опыт в Kalido DIW; глубокие знания в логическому и физическом моделировании данных с использованием методов нормализации; программирование PL/SQL, хранимые процедуры, функции, пакеты, триггеры, типы; программирование с использованием динамического SQL и PL/SQL; программирование ETL-процессов с использованием PL/SQL, T-SQL; работа с Oracle: разработка приложений с использованием Oracle Forms; разработка отчетов и визуализация данных с использованием Oracle Reports, Oracle Graphics и Oracle BI Publisher; разработка приложений с использованием HTML/XML/CSS/XSLT; Манипулирование, очистка и обработка данных с использованием SQL. Анализ необработанных данных, подведение итогов и выработка рекомендаций. Проектирование, разработка и внедрение новой функциональности. Проектирование, разработка отчетов и визуализация данных с использованием Cognos.

Подробнее

Недавно просмотренные специалисты

AgroTech • BioTech, Pharma, Health care & Sports • E-commerce & Retail • FinTech & Banking
ТР
Татьяна Р.
Москва
Java разработчик
Lead
4 687,5 Р/час
Framework
написание модульных и интеграционных тестов
b2b
ArtemisMQ
Grafana
IOS
Исследование
Оптимизация кода
Работа с интеграциями
Microservice Architecture
+130

2008 - 2018 гг. — нерелевантный опыт в качестве Software developer (фронтенд-разработка и продвижение веб-сайтов): 2008 - разработка движка для 3D-презентаций и виртуальных туров на ActionScript. С 2010 года - веб-разработка (JS, HTML, CSS + CMS и фронтенд-фреймворки); продвижение контента и сайтов в сети, СЕО-продвижение и поисковая оптимизация, создание элементов для приложения с дополненной реальностью AR. С 2018 года — основное направление - backend-разработка (Java-developer). Имею опыт лида команды, менторинга сотрудников и предоставления технической поддержки, а также организации скрам-процессов с нуля. Обладаю отличными навыками коммуникации и способностью эффективно взаимодействовать с различными участниками команды, включая бизнес-аналитиков, тестировщиков и менеджеров проекта. Демонстрирую самостоятельность и инициативу в решении проблемных ситуаций, способна принять на себя ответственность за свою работу и достижение поставленных целей. Гибко адаптируюсь к изменениям и новым требованиям, способна эффективно работать в динамичной среде и быстро осваивать новые технологии и концепции. Понимаю важность создания легко читаемого и легко обслуживаемого исходного кода. В свободное от работы время интересуюсь информационными технологиями и инновациями, увлекаюсь видео-съемкой, монтажом видео и графикой. Непрерывно прохожу различные курсы, люблю осваивать новые направления и знакомиться с людьми, у которых можно чему-то научиться.

Подробнее
BioTech, Pharma, Health care & Sports • Cloud Services • FinTech & Banking • Social Networking
ММ
Максим М.
Таганрог
Frontend разработчик
Senior
3 375 Р/час
UI
TypeORM
Hooks
React Query
Redux Toolkit
Saga
React testing library
Онбординг сотрудников
JavaScript
Redux
+62

React: Глубокое понимание React и его основных концепций, таких как компоненты, виртуальный DOM, жизненный цикл компонентов и управление состоянием. Языки программирования и технологии: Знания JavaScript и современных стандартов веб-разработки, включая HTML5 и CSS3. Знание TypeScript. Frontend-фреймворки и библиотеки: Знание и опыт работы с библиотеками и инструментами, такими как Next, Redux, Redux Toolkit, Saga, Effector, React Hook Form, React Table, Ant-Design, Material-UI, React Query, React Router. Адаптивный и отзывчивый дизайн: Опыт разработки интерфейсов, которые хорошо работают на различных устройствах и экранах. Кроссбраузерная совместимость: Понимание основных принципов кроссбраузерной совместимости и опыт в тестировании и отладке на различных платформах и браузерах. Современные инструменты разработки: Знание систем контроля версий, таких как Git, и опыт работы с инструментами сборки и автоматизации задач, такими как Webpack. Оптимизация производительности: Понимание методов оптимизации производительности фронтенд-приложений, включая сжатие и кэширование ресурсов, ленивую загрузку и улучшение общей производительности приложения. Командная работа и коммуникация: Умение эффективно работать в команде разработчиков, обмениваться знаниями и опытом.

Подробнее
FinTech & Banking • Government & Public Sector • Information Security
СГ
Самир Г.
Баку
C# разработчик
Middle+
3 250 Р/час
C#
ASP.NET Core
сбор
методологии
ASP.NET
Unit testing
сервисы
Работа с интеграциями
языки программирования
Работа с требованиями: выявление, анализ, управление
+92

Я — опытный разработчик .NET с более чем 6-летним опытом, специализирующийся на разработке серверных приложений и интеграции с внешними сервисами. Один из моих самых значимых проектов — это разработка платформы «SIMA», облачного решения для цифровых подписей и биометрической верификации. В рамках этого проекта я разработал ключевые API для интеграции с удостоверяющими центрами и биометрическими сервисами, что позволило обеспечить надёжную и безопасную аутентификацию пользователей. «SIMA» стала популярной платформой, которая улучшает доступ к электронным услугам для миллионов людей, значительно упрощая процесс идентификации и использования цифровых подписей. Кроме того, у меня есть опыт работы с такими технологиями, как .NET 8, Entity Framework, Dapper, Redis, RabbitMQ, Docker и другими. Мне интересна разработка высококачественных и надёжных решений, и я всегда стремлюсь изучать новые технологии для совершенствования своих навыков.

Подробнее