Big Data / ETL Engineer

🛰 Big Data / ETL Engineer (ончейн-аналитика)

Компания: Task Agency
Локация: remote, кандидаты кроме Беларуси
Ищем Big Data / ETL Engineer в продуктовую команду, которая делает деньги из блокчейна. Без хайпа — только код, структура и цифры.
💰 Вилка: 300 000 – 450 000 ₽ net
Full-time, формат — удалёнка, децентрализованная команда из разных стран, много асинхрона, созвоны редкие.

🧩 Чем заниматься:
- Строить и оптимизировать ETL/ELT-пайплайны для TB+ данных
- Работать с ончейн-данными: события блокчейна, calldata, трейсы, Web3 API
- Разрабатывать алгоритмы детекции аномалий и метрики производительности
- Интегрироваться с потоковыми/сырьевыми данными (Kafka или аналоги)
- Развивать инфраструктуру под ресёрч и тест стратегий

🛠 Стек и требования:
- Продовый опыт с ClickHouse
(шардинг, репликация, партиции, TTL, агрегирующие движки, оптимизация)
- Python (pandas/numpy) + создание и поддержка ETL/ELT-пайплайнов
- Apache Airflow (DAG, Sensors, Operators, XCom)
- Практический опыт алгоритмов отслеживания выбросов:
z-score, IQR, Q-test, DBSCAN/HDBSCAN, Isolation Forest и т.п.
- Понимание архитектуры данных: схемы, partitioning, latency/throughput, мониторинг, data quality
- Контейнеризация, CI/CD, автоматизация деплоя
- Опыт работы с бигдатой (ТБ+, миллиарды строк)
- Английский от B1

Плюсом будет Rust, Kafka/Prefect/Arrow/Parquet, опыт с ончейн- или трейдинг-данными, pet-проекты в data-инженерии.


💌 Как откликнуться
Пиши в ЛС :
- резюме, ссылка на LinkedIn
- кратко по опыту с ClickHouse + Airflow
- пометка «ETL / Big Data»