Каталог ИТ-специалистов Data инженер

Опыт работы на всех этапах жизненного цикла разработки программного обеспечения, включающий в себя: работа с базами данных PostgreSQL, ClickHouse, GreenPlum; исследовательский анализ данных с использованием Pandas, Numpy, Seaborn; построение ML-моделей для дополнения отсутствующих данных; проектирование и разработка ETL-процессов с использованием Apache Airflow, SQL, Python, Spark; инструменты скрейпинга BeautifulSoup, Selenium; работа с экосистемой Hadoop - HDFS, YARN, Spark, HBase, Hive, Pig; создание информационных дашбордов с помощью Tableau, Redash, Superset; back-end разработка с помощью Python, Django, DjangoRestFramework. Дополнительная информация: Курсы: Karpov.Courses (01/2021 – 07/2021) Аналитик данных Karpov.Courses (11/2021 – 12/2021) Симулятор аналитика Karpov.Courses (03/2022 – 09/2022) Инженер данных Тренинг-центр ISSoft (06/2022 – 09/2022) «Школа Big Data»

работал с чистым SQL на уровне продвинутых запросов (оконные функции, условные операторы выбора и т.д.); опыт работы с UNIX-системами на уровне простых операций; развитые коммуникативные навыки; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; опыт проведения code review; участие в создании ETL процессов опыт сбора информации из Интернета путем парсинга применял как уже обученные модели машинного обучения/глубокого обучения, так и занимался их обучением самостоятельно опыт работы с большими данными в Hadoop и Spark и в составлении сложных SQL запросов в Apache Hive опыт работы с Apache Airflow опыт работы с Python для анализа данных (pandas, numpy, matplotlib, seaborn)

- опыт работы с Python для разработки, сбора данных, анализа данных, работы с (большими) данными, обработка данных, машинное обучение; - опыт написания тестов для разработанного функционала; - опыт рефакторинга кода; - опыт работы с git; - опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); - развитые коммуникативные навыки;

3 года опыта в качестве SQL разработчика( Oracle PL/ SQL, PostgreSQL), в оптимизации SQL. 2 года опыта работы в ReactJS, JavaScript, HTML, CSS. Опыт на всех этапах жизненного цикла разработки программного обеспечения: создание, разработка, разработка, тестирование, внедрение и сопровождение; 3 года опыта в качестве SQL разработчика (Oracle начиная с 9i, Postgres), включая: Проектирование логической и физической структуры, партиционирование, сегментация, роли и привилегий; Построение логической и физической модели данных с использованием методов нормализации; Программирование на PL/SQL и PL/pgSQL: хранимые процедуры, функции, пакеты, триггеры, типы, использование динамического SQL; Разработка приложений с использованием Oracle Forms; подготовка отчетности и данных визуализации с использованием Oracle Reports, Oracle Graphics и Oracle BI Publisher; 2 года опыта в разработке Frontend(ReactJS), включая: Разработка пользовательского интерфейса; Разработка, отладка приложений с использованием WebStorm, Google Chrome; Использование HTML/CSS/React/JavaScript/TypeScript; Очистка и обработка данных с использованием SQL; анализ первичных данных, подготовка выводов и рекомендаций; проектирование, разработка и внедрение нового функционала; Использование методологии Scrum Дополнительная информация: Быстрая обучаемость, самомотивация, способность адаптироваться к новой среде.

опыт работы с Python для разработки, сбора данных, анализа данных, работы с большими данными; работа с SQL на уровне продвинутых запросов; опыт работы с UNIX-системами на уровне простых операций; развитые коммуникативные навыки; опыт написание тестов для разработанного функционала; опыт рефакторинга кода; опыт проведения code review; обучение и использование моделей машинного обучения/глубокого обучения; опыт в реализации ETL процессов опыт работы с большими данными в экосистеме Hadoop (PySpark, Hive); опыт работы с git; опыт работы с Apache Airflow. менторство и развитие младших разработчиков

• PostgreSQL • ClickHouse • Apache AirFlow • Apache NIFI • Power BI • DAX • Yandex Datalens • Python (Pandas, Numpy) • Основы DWH/ETL

4 года опыта работы как разработчик с навыками Oracle PL/SQL, знаниями концепций хранилищ данных и опытом создания ETL процессов Oracle (11g), PostgreSQL, MS SQL включая: Логическое и физическое моделирование баз данных Настройка производительности, индексация, распараллеливание, подсказки, статистика, создание хранимых процедур Разработка ETL процессов в Apache Airflow Разработка на Python, включая: Разработка ETL процессов в Apache Airflow Программирование математических и криптографических алгоритмов Анализ и обработка данных

Python Pandas Data Science Анализ данных SQL Git PySpark Hadoop ООП Atlassian Jira Jupyter

Дата Инженер с опытом работы более 5 лет. Дата Инженер с глубоким пониманием принципов и методов моделирования данных, обладающий способностью разрабатывать и внедрять эффективные структуры данных, соответствующие требованиям бизнеса. Мой опыт заключается в построении и оптимизации пайплайнов обработки данных, работе с большими массивами данных и создании эффективных систем обработки данных. Всегда готов решать новые задачи, продолжать учиться и расти как профессионал.

Самостоятельный разработчик, который способен реализовать требуемый функционал. Постоянно саморазвиваюсь и улучшаю свои профессиональные навыки за счет прочтения книг и статей. Больше внимание уделяю структуре кода и его читаемости. Считаю документацию важной частью разработки. В процессе обучения в университете ИТМО познакомился с большим количеством технологий и реализовал множество проектов: Онлайн сервис с рекомендательной системой рецептов, приложение для кластеризации эмоций человек с фотографии, веб-приложения для проведения эксперементального тестирования людей. При работе в EPAM закончил тренинг центр и внутренний курс по Big Data. Своё профессиональное будущее вижу в качестве Data Engineer работающего в сфере Big Data.

Повышение квалификации, курсы: 2023 MADE VK, DS 2019 coursera https://www.coursera.org/, ML, тер вер, лин алгебра Тесты, экзамены: 2019 Geekbrains Geekbrains, Python Для DS