ID | Название вакансии | Город | Компания | От | До | Валюта | Тип вакансии | Дата и время публикации вакансии | Роль |
---|---|---|---|---|---|---|---|---|---|
1054061 | Data Engineer | Москва | > Синимекс | open | 2023-12-12 |
Требования
Опыт разработки на Spark. Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop. Опыт выстраивания и...
Обязанности
Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark. Разработка ETL-алгоритмов и витрин данных (Apache...
Описание
Cinimex – разработчик ПО и системный интегратор. Мы работаем с российскими банками, ритейлерами, производственными и добывающими компаниями.
Сферы деятельности: заказная разработка, 1С, машинное обучение и анализ данных.
Аккредитованная IT-компания, 26 лет на рынке, более 500 человек в штате.
Сейчас мы в поисках Инженера на проект разработки витрин данных для Qlik Sense. В команде: руководитель проекта, тимлид, несколько разработчиков и аналитиков.
Задачи:
- Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark;
- Разработка ETL-алгоритмов и витрин данных (Apache Spark, Hadoop);
- Проведение системного, функционального и интеграционного тестирования;
- Разработка и внедрение эффективных методик контроля качества данных;
- Оптимизация загрузок;
- Проектирование логической модели и логики преобразования данных;
- Анализ требований бизнеса по получению новых данных, оценка наличия и качества данных.
Ожидаем от Вас:
- Опыт разработки на Spark;
- Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop;
- Опыт выстраивания и оптимизации производительности ETL-потоков;
- Опыт работы с Hive;
- Продвинутые знания SQL.
Мы предлагаем:
- Гибкое начало рабочего дня: с 08:00 до 11:00 (по московскому времени);
- Возможность взять больничный без больничного: 7 дней в году;
- ДМС, включая стоматологию и горячую линию психологической поддержки;
- Внешнее обучение: посещение IT-конференций, сертификация, тренинги и курсы за счет компании;
- Английский язык: оплачиваемое обучение в школе Cinimex и скидки на Skyeng;
- Внутренний сервис бенефитов: скидки на кафе и рестораны, загородные клубы, SPA, фитнес, электронные библиотеки, бытовую технику;
- Корпоративные цены на фитнес в X-fit для сотрудников и их родственников.