Вакансия: Data Engineer в Новосибирск

Необходимые навыки

• > SQL
• > NoSQL
• > ClickHouse
• > KAFKA
• > Cassandra
• > Apache Spark
• > KSQLDB
• > Column-oriented
• > graph-oriented

Требования

Опыт работы Data Analyst/Engineer от 2-х лет. Опыт работы или уверенное знание ClickHouse. Опыт построения сложных составных SQL...

Обязанности

Бизнес аналитики. Проджект и продакт менеджеры. Дизайнеры. Отдел Frontend. Отдел Backend. Отдел QA. Отдел DevOps. Микросервисы на Go и PHP...

Описание

Мы - продуктовая IT-компания, которая занимается разработкой крупного и высоконагруженного SaaS решения для клиентов на международном рынке. Мы используем современные технологии и гарантируем отсутствие legacy кода.

Мы разделяем обязанности. В нашей команде:

• бизнес аналитики
• проджект и продакт менеджеры
• дизайнеры
• отдел Frontend
• отдел Backend
• отдел QA
• отдел DevOps

Наш стек:

• микросервисы на Go и PHP (8+) на бэкенде
• MySQL
• используем: Kafka, ClickHouse, Redis
• фронтенд на React + Vite SSR

Чем предстоит заниматься:

• создание структур данных, выбор подходящих движков в ClickHouse и других СУБД в соответствии с бизнес требованиями
• написание / оптимизация / профилирование SQL/NoSQL запросов
• ETL процесс получения raw data из KAFKA (KSQLDB)
• совместная работа с бизнес аналитиком над новыми отчетами
• совместная работа с разработчиками сервиса отчетов в рамках имплементации
• настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных)
• решение возможных проблем с нарушением целостности данных
• дальнейшая работа с данными в компании (BI, warehouse, ETL)

Наши ожидания:

• Опыт работы Data Analyst/Engineer от 2-х лет
• Опыт работы или уверенное знание ClickHouse
• Опыт построения сложных составных SQL запросов и оценка их производительности
• Экспертиза в выборе типа хранилища данных и понимание различий SQL/NOSQL/Column-oriented/OLAP/Time Series
• Желателен опыт работы с данными в KAFKA (KSQLDB) и коннекторы к ClickHouse
• Будет плюсом знание и опыт Cassandra, Apache Spark и BI решений Tableau, Apache Superset
• Будет плюсом опыт работы с graph-oriented базами данных (neo4j, graphDB, RedisGraph)
• Уровень английского языка достаточный для чтения технической документации

Мы рады предложить Вам:

Социальные гарантии:

• Белая заработная плата 2 раза в месяц (зависит от пожеланий и профессионально уровня кандидата);
• Годовой бонус (13-я ЗП);

Комфортные условия работы:

• Удаленный формат работы;
• Гибкое начало рабочего дня;
• Компенсация занятий по английскому языку;
• Отсутствие бюрократии, вопросы решаются оперативно, без многочисленных согласований.

Перспективы самореализации и развития:

• Наличие большого количества задач, которые дают возможность материального и профессионального роста;
• Поездки на ИТ-конференции, митапы, учебные курсы за счет компании;
• Большая высококвалифицированная команда, тимлид, проджект менеджер, увлеченные своим делом на 100%, к которым всегда можно обратиться.

• Возможность релокации в Европу.