Вакансия: Data Engineer DWH в Москва

Необходимые навыки

• > Python
• > SQL
• > ETL
• > Spark
• > Data Vault

Требования

Понимание архитектуры современных аналитических систем и принципов межсистемной интеграции. Понимание архитектуры хранилищ данных и методологий проектирования(Data Vault). Знание Python.

Обязанности

Data Platform отвечает за запуск data driven сервисов и продуктов, создание экосистемы и процессов по работе с данными в Самокате...

Описание

Вакансия открыта в инфраструктурном продуктовом стриме - Data Platform.

Data Platform отвечает за запуск data driven сервисов и продуктов, создание экосистемы и процессов по работе с данными в Самокате, а также за технологическое развитие платформы для решения новых задач компании.

Мы в поисках Data Engineer, которому предстоит выполнять следующий блок задач:

• Разработка хранилища данных на базе Greenplum

• Построение ETL-процессов поставки данных с помощью DBT и Airflow

• Работа в продуктовой команде

• Расчет сложных аналитических показателей в витринах данных

• Участие в тестировании потоков с целью обеспечения их стабильной работы

• Осуществление поддержки разработанных пайплайнов

• Разработка технической документации

• Внедрение реализованных решений

• Понимание архитектуры современных аналитических систем и принципов межсистемной интеграции

• Понимание архитектуры хранилищ данных и методологий проектирования(Data Vault)

• Знание Python

• Знание SQL на высоком уровне и опыт оптимизации запросов на какой-либо СУБД

• Опыт работы с Apache Airflow

• Опыт работы с СУБД Greenplum будет плюсом

• Опыт обработки данных в экосистеме Hadoop (Spark/PySpark, Hive) будет плюсом