Вакансия: Data Engineer в Москва

Необходимые навыки

• > Java
• > SQL
• > Big Data
• > Hadoop
• > ETL
• > Spark
• > Hive

Требования

Опыт разработки pySpark/Python. Уверенное знание SQL. Понимание принципов организации DWH. Владение GIT. Опыт работы с Hadoop. Понимание подходов к...

Обязанности

Разработка витрин. Подготовка структур, новых таблиц. Написание ETL скриптов для наполнения таблиц. Разработка проверок контроля качества данных базовых витрин для...

Описание

Проект в банке топ-10 по разработке и развитию корпоративного хранилища данных.

ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:

• Разработка витрин;
• Подготовка структур, новых таблиц;
• Написание ETL скриптов для наполнения таблиц;
• Разработка проверок контроля качества данных базовых витрин для нужд Бизнес-заказчиков;
• Оптимизация и доработка существующих решений;
• Интеграция с Kafka и существующими сервисами.

ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ:

• Опыт разработки pySpark/Python;
• Уверенное знание SQL;
• Понимание принципов организации DWH;
• Владение GIT;
• Опыт работы с Hadoop.

СОВСЕМ КРУТО, ЕСЛИ ТЫ ИМЕЕШЬ:

• Понимание подходов к организации разработки (CI/CD, DevOps);
• Опыт разработки DAGs на Apache Airflow;
• Опыт работы с Hive.

У НАС ТЫ СМОЖЕШЬ НАЙТИ:

• Работу в комфортабельном офисе г. Москва (Волгоградский проспект);
• Прозрачную систему карьерного развития в компании;
• Персонального наставника с первого дня работы;
• Возможность развития личной экспертизы и экспертизы компании;
• Собственную платформу внутренних и внешних образовательных программ;
• Возможность пройти сертификацию;
• Возможность участия в обучении, конференциях, митапах;
• Неповторимую корпоративную культуру компании.