Data Engineer (Travel)

TL;DR

Data Engineer (Travel): Develop and maintain ETL pipelines and design data storage structures for a fast-growing travel data warehouse using YTsaurus and ClickHouse with an accent on data modeling, performance optimization, and large-scale data processing. Focus on designing efficient data layers, optimizing ETL processes, and becoming a business domain expert in travel analytics.

Что делать

• Разрабатывать, сопровождать и ревьюировать ETL-процессы для извлечения, трансформации и загрузки данных из различных источников.
• Проектировать структуру хранения данных на разных уровнях с учётом производительности и объёма.
• Оптимизировать неэффективные участки в процессах поставки данных, анализировать и профилировать данные.
• Изучать бизнес-процессы и ключевые метрики компании, становиться экспертом в прикладных областях.
• Документировать все преобразования и потоки данных, обеспечивая стандарты качества и производительности.

Требования

• Проектирование DWH, включая слои, модели хранения и ETL-процессы.
• Опыт разработки ETL-процессов на Apache Airflow или аналогах.
• Экспертное владение SQL.
• Знание языков программирования высокого уровня (Python, Go, Java и др.).
• Понимание архитектуры реляционных баз данных и алгоритмов работы с большими данными.

Хорошо, если есть

• Опыт работы с MPP-СУБД (Greenplum, ClickHouse, Vertica, Teradata и др.).
• Понимание принципов распределённой обработки данных (Hadoop, MapReduce, MPP).

Культура и преимущества

• Расширенная медицинская страховка с первого месяца, включая стоматологию и лечение за рубежом.
• Психотерапия, лазерная коррекция зрения, ведение беременности и роды по стажу.
• Страховка для родственников по системе 80/20.
• Внутренняя образовательная платформа, менторство, оплата участия в конференциях.
• Спортзалы в офисах, корпоративный спортивный клуб и скидки в фитнес-клубах.
• Гибкий график без фиксированного времени начала и конца рабочего дня.
• Льготные жилищные займы для сотрудников в российских офисах.
• Программы поддержки для детей: страхование, детские дни, подарки и чекапы.