Татьяна П. Инженер БД, Senior

ID 29086
ТП
Татьяна П.
Женщина, 28 лет
Россия, Москва, UTC+3
Ставка
3 142,85 Р/час
НДС не облагается
Специалист доступен с 31 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Инженер БД
Грейд
Senior
Навыки
Agile
Apache AirFlow
Apache Kafka
CI/CD
ClickHouse
DBT
Docker
ETL
FastAPI
Flask
Git
GreenPlum
Hive
Identity Server
Linux
Matplotlib
Microsoft
NLTK
Numpy
Pandas
PostgreSQL
Power BI
PySpark
Python
REST API
S3
Scrum
Sklearn
SpaCy
SQL
SQLAlchemy
администрирование серверов
Отрасли
E-commerce & Retail
LifeStyle
Знание языков
Английский — B2
Главное о специалисте
Data Engineer с более чем 5 годами опыта в разработке ETL-процессов, создании и поддержке витрин данных, а также автоматизации процессов обработки данных. Специализируется на интеграции данных из различных источников, проектировании хранилищ данных и оптимизации пайплайнов с использованием Airflow, PySpark, и dbt. Имеет опыт управления удаленными командами, обеспечения качества данных и построения аналитических отчетов. Ориентирована на повышение эффективности процессов, улучшение качества данных и тесное взаимодействие с бизнесом для реализации требований.
Проекты   (5 лет 1 месяц)
Разработка и поддержка витрин данных для аналитики и коммерческого API
Роль
Data Engineer
Обязанности
- Сбор и подготовка данных из различных источников для создания витрин. - Автоматизация процессов сбора данных с использованием Apache Airflow и Python. - Проектирование и наполнение таблиц различных слоев хранилища данных (PostgreSQL, ClickHouse). - Разработка витрин для коммерческого API, обеспечивающих бизнес-требования. - Выполнение ad-hoc запросов и выгрузок для аналитиков и бизнеса. - Участие в проектировании и оптимизации фреймворка на dbt для трансформации данных. - Обеспечение качества данных и валидация загружаемых данных. - Настройка CI/CD для автоматизации процессов обработки данных. - Документирование процессов и взаимодействие с бизнесом для уточнения требований.
Достижения
- Ускорила процесс подготовки витрин, сократив время обработки данных на 20%. - Обеспечила стабильность и качество данных для коммерческого API. - Внедрила dbt-фреймворк, упростив трансформацию неструктурированных данных.
Стек специалиста на проекте
PostgreSQL, SQL, Python, ClickHouse, Apache AirFlow, DBT
Отрасль проекта
LifeStyle
Период работы
Сентябрь 2023 - Июль 2025  (1 год 11 месяцев)
Создание и поддержка пайплайнов обработки данных для аналитики
Роль
Data Engineer
Обязанности
- Разработка и поддержка ETL-пайплайнов с использованием Apache Airflow и Pandas. - Интеграция данных из API различных сервисов в хранилище данных. - Контроль качества поступающих данных и их валидация. - Автоматизация отчетности для бизнес-пользователей. - Оптимизация процессов обработки данных для повышения производительности. - Настройка CI/CD для автоматического запуска пайплайнов. - Документирование процессов обработки данных и их передача команде. - Взаимодействие с бизнесом для уточнения требований к данным. - Тестирование и отладка пайплайнов для минимизации ошибок.
Достижения
- Автоматизировала процесс формирования отчетов, сократив время подготовки на 30%. - Обеспечила высокое качество данных, минимизировав ошибки в хранилище. - Ускорила интеграцию данных из внешних API.
Стек специалиста на проекте
Git, SQL, Python, Pandas, Apache AirFlow, CI/CD
Отрасль проекта
LifeStyle
Период работы
Август 2022 - Сентябрь 2023  (1 год 2 месяца)
Сбор и подготовка датасетов для аналитики
Роль
Data Engineer
Обязанности
- Сбор и подготовка датасетов для аналитических задач. - Обеспечение качества данных и их валидация перед загрузкой. - Администрирование удаленного сервера для обработки данных. - Написание технических заданий для команды разметчиков. - Управление удаленной группой разметчиков данных (до 10 человек). - Настройка инструментов для обработки данных и их тестирование. - Оптимизация процессов разметки данных для повышения производительности. - Документирование процессов и обучение команды. - Взаимодействие с заказчиками для согласования требований.
Достижения
- Успешно подготовила и передала более 50 датасетов для аналитики. - Сократила время разметки данных за счет автоматизации процессов. - Обеспечила стабильную работу сервера для обработки данных.
Стек специалиста на проекте
SQL, Python, Linux
Отрасль проекта
LifeStyle
Период работы
Ноябрь 2021 - Август 2022  (10 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Дипломы и сертификаты
ClickHouse для аналитиков и разработчиков (Stepik) 2023 г.
Экспресс-курс Greenplum для аналитиков и разработчиков (Stepik) 2023 г.
Промышленное машинное обучение (Coursera) 2022 г.
Data Engineer (Karpov Courses) 2022 г.
ведение в машинное обучение (Coursera) 2021 г.
Образование
Высшее
Учебное заведение
Национальный исследовательский университет "Высшая школа экономики"
Специальность
Машинное обучение и высоконагруженные системы
Завершение учебы
2025 г.
Высшее
Учебное заведение
Московский государственный технический университет им. Н.Э. Баумана
Специальность
Автоматизированные системы обработки информации и управления
Завершение учебы
2020 г.

Похожие специалисты

E-commerce & Retail • Manufacturing • Telecom
АЛ
Андрей Л.
Москва
Инженер БД
Senior
4 285,71 Р/час
anchor
Ansible
Apache
Apache AirFlow
Apache Spark
Avro
Azure
Bash
Big Data
cdc
+64

Андрей — инженер баз данных уровня Senior из Москвы с опытом работы в сферах Telecom, Manufacturing и E-commerce & Retail. Специализируется на проектировании и оптимизации хранилищ данных, работе с Big Data и ETL-процессами. Владеет широким спектром технологий и инструментов, включая Apache AirFlow, Apache Spark, Hadoop, PostgreSQL, Oracle, Microsoft SQL Server, ClickHouse, Greenplum и другие. Имеет опыт работы на следующих проектах: - МегаФон: миграция корпоративного хранилища данных, проектирование многоуровневой архитектуры DWH, внедрение практик DataOps. - Тера Интегро: разработка и оптимизация распределённых DWH, создание алерт-систем на базе Zabbix, потоковая обработка данных. - НЛМК: миграция данных, оптимизация PostgreSQL, поддержка проектов и разрешение инцидентов, разработка ETL-процессов. - IQVIA: разработка и оптимизация хранилищ данных, стриминговая обработка данных, моделирование данных, обработка больших данных с использованием Apache Spark.

Подробнее
Cloud Services • EdTech • Information Security • Logistics & Transport
АБ
Александр Б.
Москва
Инженер БД
Senior
4 025,97 Р/час
.NET Core
ADO.NET
AllFusion ERwin Data Modeler
Angular
Antlr
Apache NiFi
API
ASP.NET
C#
ClickHouse
+39

На данный момент я занимаюсь миграцией базы данных с MSSQL на PostgreSQL, работой с Docker и тестированием API разрабатываемого продукта, а так же дополнением и поддержанием кастомного решения стек: Go / postgres / redis / Kafka / clickhouse / Yandex cloud / nginx / docker / kubernetes / vue3 / nuxt / grafana / Loki / prometius / helm / jsonnet. Мой опыт включает администрирование баз данных, проектирование и оптимизацию структуры базы. Миграции OLAP и OLTP баз данных, в основном с MSSQL/ORACLE на PostgreSQL/Tantor. Я имею навыки анализа запросов, разработки индексов и использования механизма секционирования. Кроме того, я имею опыт настройки планировщика задач и формирования отчетов, а также написания и оптимизации сложных запросов, работа с транзакциями и etc. Спектр моих познаний и задач над которыми я работал очень большой начиная от проектирования, тестирования, оптимизации и заканчивая общением с внешним заказчиком. Я умею работать с различными ресурсами, такими как Github, Gitlab, Docker, Jira, Slack, YouTrack, Confluence, TFS и BI, CI/CD, разворачивание контейнеров Docker, тестирование API при помощи Postman и TypeScript. В области работы с СУБД я имею опыт работы с MSSQL, MySQL, PostgreSQL и T-SQL, PLPGSQL, Clickhouse, Greenplump. Я разрабатывал и настраивал job на MSSQL, а также работал с SSIS. У меня также есть опыт работы с SQL + JSON и XML. Я обладаю пониманием и опытом разработки ETL процессов, написания Merge и работы с Apache Nifi. В области разработки на C# я имею опыт написания приложений на ASP.NET, ASP.NET CORE, Razor Pages, WPF и Windows Form. Я также использую JS в веб-проектах и применяю паттерны проектирования MVC и MVVM. Я знаком с принципами SOLID и использованием ORM Entity Framework. Небольшой опыт разработки на языке Goland. Я также использую Python для визуализации и анализа данных, включая библиотеки numpy, pandas и matplotlib.

Подробнее
AgroTech • Cloud Services • Travel, Hospitality & Restaurant business
МП
Максим П.
Минск
Инженер БД
Middle+
4 545,45 Р/час
Apache AirFlow
Apache Hadoop
apache hive
Apache NiFi
Apache Spark
athena
AWS
Bash scripting
Bitbucket
ClickHouse
+54

Дата Инженер баз данных с опытом работы более 5 лет. Квалифицированный специалист с обширным опытом работы в области проектирования, разработки и оптимизации решений для обработки и хранения данных. Уверенно использую широкий стек технологий, включая Java, Python, SQL, Apache Airflow, Hadoop, HDFS, Hive, Yandex Cloud и AWS, для реализации сложных проектов и автоматизации процессов. Обладаю навыками разработки и управления крупномасштабными системами, такими как DWH и Data Lake, а также оптимизацией ETL/ELT-процессов для повышения производительности. Внимательно слежу за последними тенденциями в отрасли, что позволяет внедрять инновационные решения для достижения наилучших результатов. Стремлюсь развивать свои компетенции и вносить значительный вклад в реализацию стратегических целей команды и компании.

Подробнее

Недавно просмотренные специалисты

Manufacturing • Travel, Hospitality & Restaurant business
ГА
Гагик А.
Москва
React разработчик
Senior
2 727,27 Р/час
HTML5
Оптимизация кода
Redux
GraphQL
typescript
REST
Scrum
Git
API
Frontend
+30

Я являюсь Frontend-разработчиком на стеке React.js, Next.js и TypeScript. C интересом создаю удобные и красивые интерфейсы, в которых стараюсь заложить сразу качественное архитектурное решение надолго. 5 лет опыта работы в качестве Frontend Developer. Сейчас я занимаюсь полной переработкой корпоративной платформы У-УАЗ Экипаж — это система для управления экипажами и автопарком. Я внедрял сложную бизнес-логику планирования смен и отчетности с более чем 50 бизнес-правилами. Для решения задач в реальном времени использовал WebSocket и Server Sent Events, работал с MobX и немного Electron.js, создавал новые shared-ui компоненты и переписывал легаси на современный стек React и TypeScript. А на 1-ом месте работы работал с микрофронтами на базе Webpack Module Federation 5v. В свободное время я слушаю подкасты, читаю блоги, прохожу специализированные курсы и постоянно расширяю свои знания. В работе ценю хороший код и открытых коллег.

Подробнее
E-commerce & Retail • FinTech & Banking
ЭЯ
Эмиль Я.
Видное
QA ручной
Middle
2 597,4 Р/час
Регрессионное тестирование
IOS
GitLab
Postman
Bash
Git
Cypress
Android
Newman.js
Xcode
+30

-Тестирование API–CRUD запросы в Postman, создание коллекций, автоматизация коллекций, запуск через newman для CI/CD; -В процессе самостоятельного изучения освоил автоматизацию на Cypress; -Консольные утилиты Android-базовые команды (установка приложений, менеджер пакетов, shell), продвинутые команды (сбор артефактов тестирования, работа с сетью, масштабирование экрана, работа с вводом, изменение настроек, monkey testing) -Работа в Xcode, запуск и настройки эмуляторов, анализ логов -Charles Proxy-перехват трафика с устройств/эмуляторов на android, ios -Chrome DevTools -Git-создание файлов, базовые команды, выкладка изменений, команда commit, работа с ветками -SQL-базовые команды, CRUD операции (create, delete, insert, update), join (left, right, inner), union -Bash-базовые команды, продвинутые команды (ps, top, kill, ping. Curl, sed, awk)

Подробнее