Гатауллин Р. Data инженер, Senior

ID 9566
ГР
Гатауллин Р.
Мужчина
Россия, Казань, UTC+3
Ставка
5 844,15 Р/час
НДС не облагается
Специалист доступен с 14 июля 2025 г.

Добавьте подходящих специалистов в список и оформите заявку для предварительного бронирования времени специалистов. После оформления заявки ваш персональный менеджер организует прохождение всех необходимых проверок с вами и каждым кандидатом из заявки. Специалист привлекается к проекту только после окончательного подтверждения его выхода с вашей стороны.

Подробнее
О специалисте
Специализация
Data инженер
Грейд
Senior
Навыки
DevOps
Docker
Flask
GitLab
GitLab CI/CD
metabase
ГОСТ
Управление командой
Apache AirFlow
PostgreSQL
Python
SQL
Мониторинг
Apache Spark
Data
ETL
Git
PySpark
Spark
Amazon
Amazon RDS
Amazon S3
Amazon Web Services
apache hive
API
AWS Lambda
cloud
Базы данных
Elastic
Hadoop
Machine learning
MSQL
React
Scikit-learn
Snowflake
SQLx
SQS
VPC
XGBoost
Дизайн
Отчетность
AWS
AWS RDS
AWS S3
Hive
Jenkins
Rabbit
Raw SQL
.Net 4.0
.NET 5
.NET 6
.NET 7
Django
JSON
SWOT-анализ
Веб-приложения
Обучение
Проектирование БД
Разработка ПО
Testing
Analytics
Отрасли
LifeStyle
Знание языков
Английский — B1
Главное о специалисте
- Data Engineer с опытом работы с распределенными системами обработки данных более 9 лет; - Глубокие знания проектирования, внедрения и сопровождения ETL-процессов с нуля; - Практический опыт управления командой и управления продуктом; - Кандидат наук (= PhD в России) в области компьютерных наук. Опытный инженер данных Создал платформу данных с нуля. Из языков программирования — преимущественно Python, преимущественно SQL, Sparks, Scala. из облачных сервисов AWS — создание некоторой инфраструктуры, GCP — 5 мес. опыта. Инструменты управления — Docker-Master of Docker, Kubernetes — создает инфраструктуру воздушного потока. Базы данных: PostgreSQL, Redis-как брокер сообщений, Из отраслей-маркетинг, продажи, финтех Опыт работы в НЛП, ML-знает концепцию, работал руководителем группы, также работал специалистом по данным в Data Analyst.
Проекты   (11 лет 10 месяцев)
Sayt
Роль
Cofounder and Tech Lead
Обязанности
Проверьте мой профиль: https://www.toptal.com/resume/ramil-gataullin - Проектирование, внедрение и поддержка веб-платформы для сбора и анализа голосовых отзывов, способствующей улучшению обслуживания клиентов в сфере HoReCa; - В качестве технического директора участвовал в развитии бизнеса и тестировании гипотез для определения соответствия продукта рынку; - Создание и управление командой разработчиков: наставничество, проверка кода и техническое руководство. Разработал, внедрил и поддерживал веб-платформу, которая собирает и анализирует голосовую обратную связь, которая помогает улучшить обслуживание клиентов в HoReCa. Участвовал в развитии бизнеса и тестировании гипотезы, выступая в качестве тек-диогида, чтобы найти продукт, подходящий для рынка. Создал и управлял командой разработчиков, контролируя их рост посредством наставничества, проведения обзоров кода и предоставления технических рекомендаций. Технологии: Full-stack, DevOps, Docker, Flask, GitLab, GitLab CI/CD, Metabase, IT Management, Business
Стек специалиста на проекте
Docker, Управление командой, DevOps, GitLab, Analytics, Testing, ГОСТ, Flask, GitLab CI/CD, metabase
Отрасль проекта
LifeStyle
Период работы
Июнь 2022 - По настоящее время  (3 года 2 месяца)
Rollee SaS
Роль
Lead Data Engineer
Обязанности
- Создание платформы данных для поддержки данных о доходах работодателей в Европе - Управление командой дата-инженеров: наставничество, проверка кода и техническое руководство Создал и поддерживал платформу данных для поддержки данных о доходах работодателей в Европе. Созданы панели мониторинга (метабаза) для поддержки принятия бизнес-решений. Руководил командой инженеров по обработке данных, предлагая наставничество, проводя обзоры кода и предоставляя техническое руководство. Технологии: Python, Apache Airflow, Docker, GitLab CI/CD, SQL, PostgreSQL, Metabase
Стек специалиста на проекте
PostgreSQL, Docker, SQL, Python, Apache AirFlow, Мониторинг, GitLab CI/CD, metabase
Отрасль проекта
LifeStyle
Период работы
Ноябрь 2021 - Апрель 2023  (1 год 6 месяцев)
Системы EPAM
Роль
Data Engineer
Обязанности
Помощь в создании и обслуживании трубопроводов клинических испытаний, включая очистку, обогащение и автоматизацию. Спроектировал и реализовал конвейер ETL для поддержки процесса семантического отображения. Руководство и участие в исправлении ошибок в репозитории Foundry Git. Технологии: Spark, Foundry, SQL, ETL, Git, Data Engineering, Apache Spark, PySpark
Стек специалиста на проекте
Git, SQL, Data, Spark, ETL, Apache Spark, PySpark
Отрасль проекта
LifeStyle
Период работы
Январь 2021 - Ноябрь 2021  (11 месяцев)
Формат работы
Тип занятости
Фулл-тайм
Формат работы
Удаленно
Командировки
Не готов
Релокация
Не готов
Готов работать на зарубежных проектах
Нет
Образование
Высшее
Учебное заведение
Институт вычислительной математики и информационных технологий Казанского федерального университета
Специальность
Кандидат наук (эквивалент PhD в России), информатика (обработка естественного языка) 2017 - 2019 гг. Название научно-исследовательской работы: «Морфологическое разрешение неоднозначности в текстовом корпусе (на примере татарского языка)» https://kpfu.ru/dis_card?p_id=2865
Завершение учебы
2019 г.
Высшее
Учебное заведение
Институт вычислительной математики и информационных технологий Казанского федерального университета
Специальность
Аспирант, Компьютерные науки
Завершение учебы
2017 г.
Высшее
Учебное заведение
Институт вычислительной математики и информационных технологий Казанского федерального университета
Специальность
Степень специалиста, Компьютерные науки
Завершение учебы
2013 г.

Похожие специалисты

E-commerce & Retail • EdTech • RnD
АК
Алексей К.
Белград
Data инженер
Senior
4 110,32 Р/час
Python
Hadoop
Apache AirFlow
AWS
AWS RDS
Bash
beams
Big Data
BigQuery
C++
+106

Алексей — опытный Data инженер с более чем шестилетним опытом работы в проектах RnD, E-commerce & Retail и EdTech. В портфолио Алексея есть несколько успешных проектов: Customer360, разработка программного обеспечения для бухгалтерского учёта для одного из крупнейших розничных продавцов товаров для дома, Apache Superset по визуализации данных для целей BI, внутренний проект, направленный на решение проблем повторного развёртывания групп DAG Airflow на учётных записях Kohls и IAS, IAS Python Upgrade, настройка и поддержка кластера Hadoop/Spark, разработка приложений на Hadoop/Spark для научных целей. Алексей участвовал в разработке и поддержке групп DAG Airflow для преобразования данных, включая сшивание данных; разработал и спроектировал Metadag Airflow DAG, которая автоматизирует и повышает уровень понимания процессов в команде C360; выполнил общую миграцию из локальных в облачные сервисы; получил большой опыт в разработке приложений Flask, выполнении миграций БД с использованием SQLAlchemy и Alembic; разработал внутреннюю систему контроля доступа для приложения Superset; разработал пакет Python3 airflow-redeploy, который упрощает процесс повторного развёртывания групп DAG через официальный REST API и плагин REST API.

Подробнее
FinTech & Banking • Logistics & Transport • Media • Telecom
РД
Роман Д.
Београд
Data инженер
Middle+
3 596,53 Р/час
Python
PostgreSQL
Apache AirFlow
GreenPlum
SQL
Git
Docker
Kafka
Hadoop
Oracle
+41

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

Подробнее
E-commerce & Retail
ГВ
Герман В.
Минск
Data инженер
Middle+
3 545,15 Р/час
Alembic
Apache
Apache AirFlow
Apache Spark
athena
Avro
AWS
AWS glue
Bash scripting
Bitbucket
+55

Data-инженер с опытом работы в отрасли электронной коммерции и ритейла более 3 лет. Участвовал в проекте по внедрению платформы снабжения и планирования для крупного производственного предприятия. Выполнял обязанности по управлению командой дата-инженеров, обсуждал архитектуру системы, подключался к источникам данных, оптимизировал SQL-запросы, создавал конвейеры Airflow, работал с Pandas, разрабатывал хранимые процедуры, настраивал соединения Kafka, проектировал витрины данных и HDFS. Работал над созданием простого в интеграции приложения для персонализированной бизнес-аналитики на базе искусственного интеллекта. Занимался разработкой конечных точек Flask, нормализацией данных, контролем операций хранилища данных, разработкой моделей DBT, использовал Pandas, NumPy и SciPy, разрабатывал функции с помощью AWS Lambda. Принимал участие в разработке платформы для сбора и обработки больших объёмов данных из различных источников. Администрировал базы данных, разрабатывал и оптимизировал сложные SQL-запросы, использовал Apache Spark, обрабатывал крупномасштабные наборы данных с помощью AWS EMR, выполнял статистические вычисления с помощью SciPy.

Подробнее
E-commerce & Retail • FinTech & Banking
АМ
Артем М.
Москва
Data инженер
Middle+
5 844,15 Р/час
Basics
Java
Pl/SQL
Python
R
SAS
Scala
SQL
Docker
GitLab CI/CD
+49

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Подробнее

Недавно просмотренные специалисты

AgroTech • BioTech, Pharma, Health care & Sports • Cloud Services • E-commerce & Retail • EdTech • LifeStyle • Manufacturing • Marketing, Advertising & Design • Realty & Constructoring • Travel, Hospitality & Restaurant business
АЛ
Артём Л.
Тула
UX/UI дизайнер
Senior
2 568,95 Р/час
Web Design
Подготовка и проведение презентаций
Axure RP
Прототипирование
Tilda
Usability
Adobe XD
Adobe Illustrator
Sketch
Иллюстрация
+42

Опытный UX/UI дизайнер с глубоким пониманием принципов создания интуитивно понятных и эстетичных интерфейсов. Специализируется на разработке продуктов, которые эффективно решают бизнес-задачи заказчиков и удовлетворяют потребности пользователей. Профессиональные компетенции: • Разработка дизайн-систем и интерактивных прототипов • Проведение UX-исследований, создание User Flow и анализ результатов • Работа с нейросетями, 3D-графикой и анимацией • Руководство дизайн-отделом в IT-компании (6 лет) • Web Design, UI/UX, UX-аналитика • Создание сценариев использования и тестирование интерфейсов • Понимание HTML/CSS для эффективного взаимодействия с разработчиками • Профессиональная вёрстка в Tilda • Опыт работы с айдентикой, упаковкой и полиграфией Ключевые навыки: • Анализ больших объёмов информации и преобразование их в инновационные решения • Креативный подход к поиску нестандартных решений • Эффективная командная работа и разрешение конфликтов • Стремление к высокому качеству проектов • Проактивность и инициативность в достижении результатов • Быстрая адаптация к изменениям в требованиях и технологическим трендам Методология работы: • Структурирование идей и формулировка гипотез • Проведение опросов и исследований • Трансформация пользовательских потребностей в практические решения • Создание интуитивно понятных интерфейсов, сочетающих функциональность и эстетику Ссылка на резюме-портфолио в Google Doc: https://docs.google.com/document/d/15TZ2elWLhRAXMBudq5LCXA9F4HMvz1dx286RSTZdbrw/edit?usp=sharing Ссылка на резюме резюме-портфолио в PDF: https://disk.360.yandex.ru/i/FJYbqICeTl2qGg

Подробнее
E-commerce & Retail • FinTech & Banking • RnD
ЕП
Елена П.
Красноярск
Бизнес/системный аналитик
Senior
3 246,75 Р/час
components
ЧТЗ
разработка документации
Сбор и анализ требований
Работа с интеграциями
UML
Kanban
Поддержка пользователей
анализ
Разработка
+83

Елена — опытный специалист в области бизнес- и системного анализа с семилетним опытом работы на проектах. Она обладает глубокими знаниями и навыками в таких областях, как Agile, BPMN, Camunda, Confluence, DBeaver, Draw.io, Figma, Jira, JSON, Kanban, Lucidchart, Microsoft, MongoDB, PlantUML, PostgreSQL, Postman, REST API, Scrum, SOAP, SQL, Swagger, Trello, UML, Visio, Waterfall, WSDL, XML, XSD. Елена работала над проектами по разработке веб и мобильного приложения дистанционного банковского обслуживания клиентов, переносу процессов компании по производству и продаже обогащённой питьевой воды на новую версию ПО, а также над множеством проектов по автоматизации бизнеса в целях развития франшизы. В рамках этих проектов она занималась разработкой документации, моделированием бизнес-процессов, проектированием и администрированием баз данных, разработкой и документированием REST API, тестированием API, управлением задачами и другими задачами.

Подробнее
E-commerce & Retail • Manufacturing
ЕФ
Екатерина Ф.
Омск
Бизнес/системный аналитик
Middle+
3 246,75 Р/час
Http4s
C4
UML
Kanban
ANSYS
Postman
StormBPMN
JSON
REST
+43

Екатерина — бизнес/системный аналитик уровня Middle+ из Омска. Специализируется на анализе и проектировании систем в отраслях E-commerce & Retail и Manufacturing. Имеет опыт работы с широким спектром инструментов и технологий, включая 1С, ANSYS, API, BPMN, C4, Confluence, Docker, Google Docs, Jira, JSON, Kafka, MySQL, PostgreSQL, Postman, REST, Scrum, UML и другие. Принимала участие в следующих проектах: - Разработка сайта мебельной фабрики: доработка функциональности сайта, добавление автоматизации по созданию заказа, разработка личного кабинета клиента. - Веб-приложение для приёма заявок на заказ пресс-форм: увеличение количества заявок на покупку, сокращение времени обработки заявки, создание интеграций с различными платформами. - Разработка ПО для взаимодействия компонентов авионики в БАС: разработка логики взаимодействия авионики в беспилотных авиационных системах. - Проектирование и производство продукции авиационной, аэрокосмической, вертолётной промышленности: разработка конструкторской документации, анализ и выполнение прочностных расчётов изделий, проектирование и 3D-моделирование.

Подробнее