Вакансия: ClickHouse Data Engineer в Москва

Необходимые навыки

• > Linux
• > Docker
• > Работа с базами данных
• > Базы данных
• > ClickHouse
• > Data engineer

Требования

Знание SQL, продвинутый опыт пользования реляционными или колоночными СУБД. Опыт разработки и поддержания сложных хранимых процедур и/или запросов.

Обязанности

Разработка витрин и хранилищ данных в ClickHouse. Проектирование и построение пайплайнов обработки и потоков данных (MV, ETL, etc.).

Описание

Мы занимаемся разработкой собственных AdTech продуктов в парадигме Data Driven Development. Ключевой частью нашей системы являются данные, для чего у нас используется ClickHouse. На текущий момент у нас есть несколько кластеров CH с объемом в петабайты, со входящим потоком более 200 миллионов записей в минуту и мы продолжаем постоянно расширяться. Для работы с таким количеством данных кроме разработчиков, аналитиков, тестеров и devops нам нужен ClickHouse Data Engineer.

Чем у нас предстоит заниматься:

• Разработка витрин и хранилищ данных в ClickHouse;
• Проектирование и построение пайплайнов обработки и потоков данных (MV, ETL, etc.);
• Профилирование и аудит текущих источников нагрузки, частых запросов, витрин данных и бутылочных горлышек;
• Консультирование по принципам организации работы с хранилищами данных и самими данными.

Что мы ждем от кандидата:

• Знание SQL, продвинутый опыт пользования реляционными или колоночными СУБД;
• Опыт разработки и поддержания сложных хранимых процедур и/или запросов;
• Опыт профилирования запросов в нагруженных системах, обеспечения гарантий доставки;
• Понимание различных способов организации DWH их области применимости.

Будет плюсом:

• Опыт работы с нагруженными кластерами ClickHouse;
• Понимание внутреннего устройства реляционной или колоночной СУБД и их особенностей реализации на уровне движка/ядра;
• Опыт построения мониторинга производительности системы, отслеживания "самого жадного запроса/пользователя".

Что мы предлагаем:

• Уютный офис около станции метро Севастопольская, возможность выбора формата работы (гибридный формат, удаленный формат). Возможность работать из другой страны;
• Вся необходимая современная техника;
• Гибкое начало рабочего дня;
• Работа в команде профессионалов с обширной технической и бизнес экспертизой;
• Возможность повлиять на продукт и бизнес-процессы;
• Корпоративные мероприятия и тимбилдинги;
• Кухня с кофе, фруктами и сладостям, компенсация питания;
• Настольные игры и пинг-понг.

А еще у нас в офисе живут настоящие медузы и даже есть душ.