Анна М. Data инженер, Middle

ID 7500
АМ
Анна М.
Женщина, 37 лет
Россия, Санкт-Петербург, UTC+3
Ставка
3 896,1 Р/час
НДС не облагается
Специалист доступен с 2 января 2026 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Middle
Навыки
Python
PostgreSQL
Git
Redis
FastAPI
Alembic
SQLAlchemy
Pydantic
REST API
Pandas
Отрасли
Blockchain
Telecom
Проекты   (7 лет 2 месяца)
ООО Деко Системс
Роль
Back-end разработчик
Обязанности
Разработка backend части приложения для компании «Ростелеком» для ведения внутренней отчетности. Стек технологий: - Postgressql - Docker - Redis - Fastapi - Alembic - Sqlalchemy - Asyncpg - Pydantic - Rest API - Авторизация jwt token + refresh token - Проверка авторизации через LDAP - Pandas - Openpyxl - генерация excel файлов с выпадающими списками, скрытыми колонками, формулами и т.д. Спровоцировала авторизацию с помощью jwt token и refresh token с проверкой существования пользователя в LDAP, настроила защиту от использования старых токенов после обновления на основе Redis, Спроектировала ролевую модель, валидацию прав на доступ к эндпоинтам на основе информации о пользователе из jwt token, Спроектировала асинхроннеые сервисы для корректировки и выгрузки данных на основе Sqlalchemy с асинхронным драйвером asyncpg для взаимодействия с СУБД Posrgressql, Настроила миграции базы даных с использованием Alembic Реализовала модуль загрузки файлов excel с их валидацией и обновлением данных в БД. Реализовала модуль выгрузки данных из БД в exel с добавлением ограничений, выпадающих списков, скрытых листов, ограничением на редактирование части колонок.
Период работы
Май 2022 - По настоящее время  (3 года 3 месяца)
StudyFree Inc
Роль
Middle python developer
Обязанности
Основной задачей было выстраивание системы сбора данных со сторонних ресурсов (для сайта агрегатора) и внутренней статистики (поведение клиентов на сайте, рекламные компании). Разработка ETL-процессов: - Data Pipelines (DAG-и): Apache Airflow; - Scraping/Parsing: Scrapy, Selenium, Requests; - Working with Database: SQLalchemy, MongoDB, Postgresql; - Data cleaning and natural language processing (NLP): Pandas, NLTK, spaCy, Scikit–learn Настройка аналитики и сбор данных по рекламным компаниям через api: - UA (google analytics), GA4, GTM, Firebase; - Google Ads Api, Facebook api Используемый стек технологий: Python Postgresql Apache Airflow Confluence Jira, GitLab, Doker Linux. Работа по методологии Scrum
Период работы
Май 2021 - Апрель 2022  (1 год)
ООО "Марка"
Роль
Разработчик
Обязанности
C сентября 2019 года: Парсинг и мониторинг интернет ресурсов (scrapy, selenium, requests, BeautifulSoup, SQLalchemy). Анализ данных, статистика (pandas, numpy, matplotlib) Разработка баз данных (MySQL, Postgresql, MongoDB, sqllite) ML(sklearn, xgboost, catboost, lightgbm, ELI5, SHAP), Разработка сайтов (Django, Flask, SQLalchemy). Используемый стек технологий: Linux Confluence Jira, Git, Doker Python. Работа по методологии Scrum До августа 2019 года: Тестирование и доработка сайта (HTML5, CSS, 1CBItrix), настройка веб аналитики (UA (google analytics), GTM, Яндекс Метрика, Firebase). Контекстная реклама (Яндекс Директ) + РСЯ, VK реклама
Период работы
Июнь 2018 - Май 2021  (3 года)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Санкт-Петербургский политехнический университет Петра Великого, Санкт-Петербург
Специальность
Медицинской Физики и Биоинженерии, Физико-химической биологии клетки
Завершение учебы
2011 г.

Похожие специалисты

E-commerce & Retail
ГВ
Герман В.
Минск
Data инженер
Middle+
3 545,15 Р/час
Alembic
Apache
Apache AirFlow
Apache Spark
athena
Avro
AWS
AWS glue
Bash scripting
Bitbucket
+55

Data-инженер с опытом работы в отрасли электронной коммерции и ритейла более 3 лет. Участвовал в проекте по внедрению платформы снабжения и планирования для крупного производственного предприятия. Выполнял обязанности по управлению командой дата-инженеров, обсуждал архитектуру системы, подключался к источникам данных, оптимизировал SQL-запросы, создавал конвейеры Airflow, работал с Pandas, разрабатывал хранимые процедуры, настраивал соединения Kafka, проектировал витрины данных и HDFS. Работал над созданием простого в интеграции приложения для персонализированной бизнес-аналитики на базе искусственного интеллекта. Занимался разработкой конечных точек Flask, нормализацией данных, контролем операций хранилища данных, разработкой моделей DBT, использовал Pandas, NumPy и SciPy, разрабатывал функции с помощью AWS Lambda. Принимал участие в разработке платформы для сбора и обработки больших объёмов данных из различных источников. Администрировал базы данных, разрабатывал и оптимизировал сложные SQL-запросы, использовал Apache Spark, обрабатывал крупномасштабные наборы данных с помощью AWS EMR, выполнял статистические вычисления с помощью SciPy.

Подробнее
E-commerce & Retail • FinTech & Banking • Government & Public Sector
КН
Кирилл Н.
Ростов-на-Дону
Data инженер
Middle+
3 896,1 Р/час
Ansible
Apache AirFlow
Astra Linux
Atlassian
Bash
Bitbucket
Cassandra
Celery
CI/CD
Docker
+66

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Подробнее

Недавно просмотренные специалисты