София Я. Data инженер, Senior

Артём — опытный Data-инженер, специализирующийся на разработке платформ данных и интеграции различных источников информации. Обладает навыками работы с такими инструментами, как PostgreSQL, Clickhouse, Kafka, Elasticsearch, Airflow, Spring, а также имеет опыт использования технологий Apache Ignite, Hadoop, Hive, Spark, PySpark. Артём участвовал в нескольких проектах, где проявил себя как специалист по разработке сложных архитектур данных. В одном из проектов он разработал платформу данных с нуля, организовал процесс миграции из различных источников и оптимизировал существующие таблицы Clickhouse. В другом проекте Артём разработал продукт для расчёта активов с весом риска для отдела рисков. Он также реализовал конвейеры данных, создал платформу для модульного тестирования и разработал индивидуальную интеграцию с различными внутренними API.

Более 6 лет в области обработки и анализа больших данных. Высшее техническое образование. Глубокие знания в проектировании ETL-процессов, разработке систем на основе Apache Spark и управлении жизненным циклом моделей машинного обучения. Опыт работы в крупных компаниях, таких как МАГНИТ и РОСНЕФТЬ, где участвовал в реализации сложных проектов, направленных на автоматизацию бизнес-процессов и оптимизацию работы с данными.

Кирилл — data-инженер из Ростова-на-Дону. Обладает опытом работы на проектах в сферах FinTech & Banking, Government & Public Sector и E-commerce & Retail. На проекте для компании из сферы FinTech & Banking занимался обработкой больших объёмов информации, анализом данных, разработкой дата-пайплайнов и организацией data quality. Использовал Python, bash, Hadoop, Greenplum, PL/pgSQL, Atlassian, Jupyter, Hue, Hive, Airflow, Superset, Power Bi, PySpark, Pandas, PyArrow. Для государственной компании разрабатывал детальный слой и строил витрины, писал пайплайны по доставке и обработке данных. Использовал Python, Apache Airflow, Git, Posgresql. В качестве python-разработчика для госструктуры создавал скрипты для автоматизации бизнес-процессов и администрирования оборудования, а также писал процедуры для баз данных. В работе использовал Python, Bash, FastAPI, Sqlalchemy, ansible, postman, Git, pgsql, Linux, Docker, Prometheus, Grafana и др. Опыт работы на позиции python-разработчика включал аналитику данных и контроль data quality, разработку скриптов по автоматизации и эксплуатацию измерительной техники. Использовал Python, bash, MySQL, Postgresql, Astra Linux, SecretNet. На последнем месте работы в сфере E-commerce & Retail занимался интеграцией реляционных и нереляционных источников, настройкой мониторинга и алертинга, нормализацией и очисткой данных. Работал со стеком из MongoDB, Postgres, S3, YandexCloud, Greenplum, Python, SQL, Ni-Fi, Airflow, Kafka, k8s, Jenkins, Github, ELK, Grafana, Vault.

Роман — опытный Data-инженер уровня Middle+ с опытом работы более 4 года. Он обладает широким спектром навыков в области разработки и аналитики данных, включая знание Python, PostgreSQL, Apache AirFlow, GreenPlum, SQL, Git, Docker, Kafka, Hadoop, Oracle, ETL, DWH, PySpark, Jira, Hive, Clickhouse, Data, MySQL, BI, API, FastAPI, Pl/SQL, MongoDB, Redis, Spark, Apache Spark, Bash, Confluence, GitLab CI/CD, Grafana, HDFS, CI/CD, GitLab, oozie, Scala, Akka, HTTP, REST, Jenkins, Jupyter Notebook. Роман работал над проектами в таких отраслях, как медиа, телекоммуникации, логистика и транспорт, финтех и банкинг. На проектах он занимался созданием и поддержкой ETL-конвейеров, рефакторингом кода, настройкой мониторинга и алертинга, проектированием решений для DWH и разработкой REST API. Опыт Романа включает работу в IT-компании, где он участвовал в создании изолированной среды разработки для аналитиков, а также в телекоммуникационной компании, автомобильном бизнесе и банке. В последнем проекте он разработал витрину данных, которая сэкономила компании порядка 80 млн рублей в квартал.

В свободное от работы время , учит программирование на языке JAVA/kotlin и составляет приложения на платформу Android, разрабатывал приложения с использованием патернов mvp и mvvm, экспериментировал с dagger2 библиотекой

Я QA-инженер с 5-летним опытом в коммерческой разработке. Предпочитаю командную работу с акцентом на эффективную коммуникацию. Ответственно подхожу к задачам, гибко адаптируюсь к изменениям требований и уделяю внимание анализу причин возникновения дефектов, предлагая решения для их устранения. Опыт тестирования Web, Desktop и мобильных приложений, включая аудит фронтенда и бэкенда. Владею инструментами: Postman, SOAP UI, Swagger, DevTools.

Моя основная экспертиза — разработка и развитие современных хранилищ данных (DWH), Data Lake House и решение сложных инфраструктурных задач. За плечами больше четырех лет успешного внедрения решений, позволяющих эффективно управлять огромными объемами информации. Я хотел бы развиваться в области изучения передовых подходов и новейших технологий, открывающих новые горизонты анализа больших данных и способствующих повышению эффективности бизнес-процессов компаний. В достижении поставленных целей мне помогают такие качества, как высокий уровень самоорганизации, постоянная жажда профессионального роста, активное участие в специализированных лекциях и семинарах, стремление совершенствовать технические знания и развивать экспертизу.