description
Описание вакансии
Data Engineer в команду SMT
Компания: 2ГИС
🔹Что предстоит делать:
-Разрабатывать с нуля MVP новой дата-платформы и инфраструктуры для ingest/transform;
-Мигрировать существующие пайплайны с Hadoop/HDFS на новую архитектуру (S3, Kafka, Spark, ClickHouse);
-Работать с большими объёмами данных и высоконагруженными Kafka-топиками;
-Строить отказоустойчивые пайплайны обработки и доставки данных;
-Участвовать в архитектурных решениях, внедрять best practices хранения, мониторинга и качества данных;
-Проектировать витрины данных под продуктовую и управленческую аналитику (OLAP);
-Сопровождать миграцию BI-отчётов на новую платформу (например, DataLens, Power BI).
🔹Почему это интересно:
-Ты действительно будешь создавать платформу с нуля — не “настроил Airflow и готово”, а архитектура верхнего уровня с безопасностью, мониторингом и многопользовательской нагрузкой;
-Прямое влияние на технологический курс всей компании: твои решения будут использовать десятки команд;
-Работа с современным стеком: Spark 3+, Kafka, S3, ClickHouse, и BI-инструментами;
-Возможность реализовать техрешения, которые трудно было бы внедрить в рамках существующего кода/подходов;
-Технический вызов: миграция с Hadoop, масштабируемость, отказоустойчивость, строгие SLA на доставку данных.
Контакты:
Компания: 2ГИС
🔹Что предстоит делать:
-Разрабатывать с нуля MVP новой дата-платформы и инфраструктуры для ingest/transform;
-Мигрировать существующие пайплайны с Hadoop/HDFS на новую архитектуру (S3, Kafka, Spark, ClickHouse);
-Работать с большими объёмами данных и высоконагруженными Kafka-топиками;
-Строить отказоустойчивые пайплайны обработки и доставки данных;
-Участвовать в архитектурных решениях, внедрять best practices хранения, мониторинга и качества данных;
-Проектировать витрины данных под продуктовую и управленческую аналитику (OLAP);
-Сопровождать миграцию BI-отчётов на новую платформу (например, DataLens, Power BI).
🔹Почему это интересно:
-Ты действительно будешь создавать платформу с нуля — не “настроил Airflow и готово”, а архитектура верхнего уровня с безопасностью, мониторингом и многопользовательской нагрузкой;
-Прямое влияние на технологический курс всей компании: твои решения будут использовать десятки команд;
-Работа с современным стеком: Spark 3+, Kafka, S3, ClickHouse, и BI-инструментами;
-Возможность реализовать техрешения, которые трудно было бы внедрить в рамках существующего кода/подходов;
-Технический вызов: миграция с Hadoop, масштабируемость, отказоустойчивость, строгие SLA на доставку данных.
Контакты:
tips_and_updates
Как откликнуться эффективно
- arrow_right1–2 релевантных кейса (ссылки/скриншоты)
- arrow_rightСроки и формат работы (когда на связи)
- arrow_right2–3 уточняющих вопроса по задаче
handshake
Рекомендации работодателю
- arrow_rightОпишите результат и критерии приёмки
- arrow_rightУкажите бюджет/вилку — это повышает качество откликов
- arrow_rightСразу обозначьте сроки и доступность по коммуникациям
lists
Ещё вакансии
Старший дизайнер
Яндекс
Не указан
Офис
Полная занятость
SMM Специалист
ООО Дилер Дв
Не указан
Офис
Полная занятость
Middle/Senior DevOps Инженер
AV Soft
200 000 ₽ — 330 000 ₽
Офис
Полная занятость
Миддл/Сеньор Продуктовый Аналитик (Web3/TMA)
Photo Lab
2 500 ₽ — 3 500 ₽
Удалённо
Полная занятость
HR Менеджер
Проект А
Не указан
Офис
Полная занятость
Продуктовый аналитик
Инсап
Не указан
Офис
Полная занятость