Вакансия: Data Engineer в Москва

Необходимые навыки

• > Hadoop
• > Spark

Требования

Опыт разработки на Spark. Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop. Опыт выстраивания и...

Обязанности

Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark. Разработка ETL-алгоритмов и витрин данных (Apache...

Описание

Cinimex – разработчик ПО и системный интегратор. Мы работаем с российскими банками, ритейлерами, производственными и добывающими компаниями.

Сферы деятельности: заказная разработка, 1С, машинное обучение и анализ данных.

Аккредитованная IT-компания, 26 лет на рынке, более 500 человек в штате.

Сейчас мы в поисках Инженера на проект разработки витрин данных для Qlik Sense. В команде: руководитель проекта, тимлид, несколько разработчиков и аналитиков.

Задачи:

• Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark;
• Разработка ETL-алгоритмов и витрин данных (Apache Spark, Hadoop);
• Проведение системного, функционального и интеграционного тестирования;
• Разработка и внедрение эффективных методик контроля качества данных;
• Оптимизация загрузок;
• Проектирование логической модели и логики преобразования данных;
• Анализ требований бизнеса по получению новых данных, оценка наличия и качества данных.

Ожидаем от Вас:

• Опыт разработки на Spark;
• Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop;
• Опыт выстраивания и оптимизации производительности ETL-потоков;
• Опыт работы с Hive;
• Продвинутые знания SQL.

Мы предлагаем:

• Гибкое начало рабочего дня: с 08:00 до 11:00 (по московскому времени);
• Возможность взять больничный без больничного: 7 дней в году;
• ДМС, включая стоматологию и горячую линию психологической поддержки;
• Внешнее обучение: посещение IT-конференций, сертификация, тренинги и курсы за счет компании;
• Английский язык: оплачиваемое обучение в школе Cinimex и скидки на Skyeng;
• Внутренний сервис бенефитов: скидки на кафе и рестораны, загородные клубы, SPA, фитнес, электронные библиотеки, бытовую технику;
• Корпоративные цены на фитнес в X-fit для сотрудников и их родственников.