Вакансия: ETL developer в Казань

Необходимые навыки

• > Python
• > Java
• > SQL
• > REST
• > PostgreSQL
• > ClickHouse
• > Kafka
• > Hadoop
• > ETL

Требования

Уверенные знания SQL middle+ (Postgres, Clickhouse). Понимание ETL процедур ( REST, SQL, Java илиPython), и способов интеграции. Опыт общения со стриминговыми...

Обязанности

Построение и поддержка интеграций с различными системами. Написание коннекторов, адаптеров и SQL кода по загрузке, трансформации и валидации данных Активное...

Описание

«Газпром ИД» («ГИД») – технологичная молодая компания в структуре холдинга. Мы создаем уникальное приложение "ГИД", в котором сотрудники Группы Газпром получают доступ ко всем продуктам и цифровым сервисам компании.

Проект: Построение дата-платформы компании, от выбора технологий, до реализации задач развёртывания компонентов для построения современного стека для принятия решений на данных
Стек: Java/Python, Kubernetes, Kafka, Kafka connect, Spark/Flink, Data lake (dremio), SQL (Postgres, Clickhouse), temporal database, GitOps, Argo CD

На данный момент мы формируем команду, и в поиске ETL developer (Удаленка или офис/гибрид Мск, Спб).

Что делать:

• Построение и поддержка интеграций с различными системами
• Написание коннекторов, адаптеров и SQL кода по загрузке, трансформации и валидации данных Активное участие в построении мониторинга таких процедур и качества данных (совместно с DQ-инженерами)
• Участие в построении DataOps, GitOps процедур

От Вас:

• уверенные знания SQL middle+ (Postgres, Clickhouse)
• Понимание ETL процедур ( REST, SQL, Java илиPython), и способов интеграции

Как плюс:

• Опыт общения со стриминговыми данными (kafka)
• Опыт использования стека Hadoop

Взамен:

• ТК РФ, ДМС (включая стоматологию и госпитализацию), квартальные премии дополнительно
• Новый социально значимый проект в начальной стадии разработки
• Дружный доброжелательный коллектив, в котором приятно работать, лояльное руководство
• Скидки на спорт, кино, языковые курсы