ID | Название вакансии | Город | Компания | От | До | Валюта | Тип вакансии | Дата и время публикации вакансии | Роль |
---|---|---|---|---|---|---|---|---|---|
1033524 | Python Разработчик | Москва | > ПСБ (ПАО «Промсвязьбанк») | open | 2023-12-21 |
Требования
Опыт работы по направлению инженер данных / разработчик ETL не менее 3 лет. Опыт использования эко-системы Apache Hadoop: HDFS, Yarn...
Обязанности
Проектирование и разработка процессов преобразования данных (ETL) для хранилища; данных и платформы BigData. Построение полного жизненного цикла моделей машинного обучения.
Описание
Ключевые задачи:
- Опыт работы по направлению инженер данных / разработчик ETL не менее 3 лет;
- Опыт использования эко-системы Apache Hadoop: HDFS, Yarn, Spark, Hive;
- Опыт разработки на Python (PySpark) или Scala (Spark);
- Опыт работы и настройки Apache Airflow;
- Опыт работы и настройки БД Greenplum;
- Опыт работы с БД Postgresql, Hive, Oracle, MS SQL;
- Умение быстрого погружения в разработанный код;
- Умение применять алгоритмы и шаблоны проектирования на практике;
- Умение оптимизировать SQL-запросы;
- Опыт работы с Jira и Confluence;
- Знание ООП, алгоритмов и шаблонов проектирования;
- Знание командной строки и стандартных утилит Linux;
- Знание системы контроля версий Git;
- Уверенное знание Python;
- Уверенное знание SQL;
- Знание Scala, Java будет плюсом;
- Понимание особенностей работы MPP систем;
- Понимание SOAP и REST;
- Понимание DevOps.
Что важно для нас:
- Развитие платформы BigData;
- Проектирование и разработка процессов преобразования данных (ETL) для хранилища; данных и платформы BigData;
- Построение полного жизненного цикла моделей машинного обучения;
- Обработка данных с использованием языков Python, Scala, Java;
- Английский на уровне чтения технической документации;
- Опыт работы с MPP-системами (Teradata, GreenPlum, Vertica);
- Опыт работы с планировщиками задач (Airflow/Luigi/crontab);
- Опыт создания REST сервисов.
Что предлагаем:
- График работы 5/2, с 09:00 до 18:00, возможность работать в гибридном режиме;
- Официальное оформление в соответствии с ТК РФ;
- Конкурентный уровень дохода: оклад + премии;
- Медицинская страховка, страховка для выезжающих за границу;
- Доплата к отпуску и больничному листу;
- Дополнительные льготы при заключении брака и рождении детей;
- Социальная поддержка при сложных жизненных ситуациях;
- Льготное кредитование для сотрудников;
- Обучение в корпоративном университете банка;
- Корпоративная библиотека.