Вакансия: Data Engineer в Москва

Полное описание вакансии: Data Engineer в Москва

ID Название вакансии Город Компания От До Валюта Тип вакансии Дата и время публикации вакансии Роль
1054061 Data Engineer Москва > Синимекс open 2023-12-12
Необходимые навыки
  • > Hadoop
  • > Spark
Требования

Опыт разработки на Spark. Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop. Опыт выстраивания и...

Обязанности

Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark. Разработка ETL-алгоритмов и витрин данных (Apache...

Описание

Cinimex – разработчик ПО и системный интегратор. Мы работаем с российскими банками, ритейлерами, производственными и добывающими компаниями.

Сферы деятельности: заказная разработка, 1С, машинное обучение и анализ данных.

Аккредитованная IT-компания, 26 лет на рынке, более 500 человек в штате.

Сейчас мы в поисках Инженера на проект разработки витрин данных для Qlik Sense. В команде: руководитель проекта, тимлид, несколько разработчиков и аналитиков.

Задачи:

  • Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark;
  • Разработка ETL-алгоритмов и витрин данных (Apache Spark, Hadoop);
  • Проведение системного, функционального и интеграционного тестирования;
  • Разработка и внедрение эффективных методик контроля качества данных;
  • Оптимизация загрузок;
  • Проектирование логической модели и логики преобразования данных;
  • Анализ требований бизнеса по получению новых данных, оценка наличия и качества данных.

Ожидаем от Вас:

  • Опыт разработки на Spark;
  • Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop;
  • Опыт выстраивания и оптимизации производительности ETL-потоков;
  • Опыт работы с Hive;
  • Продвинутые знания SQL.

Мы предлагаем:

  • Гибкое начало рабочего дня: с 08:00 до 11:00 (по московскому времени);
  • Возможность взять больничный без больничного: 7 дней в году;
  • ДМС, включая стоматологию и горячую линию психологической поддержки;
  • Внешнее обучение: посещение IT-конференций, сертификация, тренинги и курсы за счет компании;
  • Английский язык: оплачиваемое обучение в школе Cinimex и скидки на Skyeng;
  • Внутренний сервис бенефитов: скидки на кафе и рестораны, загородные клубы, SPA, фитнес, электронные библиотеки, бытовую технику;
  • Корпоративные цены на фитнес в X-fit для сотрудников и их родственников.

Вверх