Big Data Platform - это высоконагруженная геораспределенная система хранения и обработки данных (Data lake), построенная на современном стеке и hi-end железе.
Здесь ты будешь работать в команде сильных инженеров, сможешь предлагать свои идеи и участвовать в создании настоящей платформы больших данных.
- Поддерживать и развивать Kubernetes кластеры, как в облаке, так и baremetal
- Работать с CI/CD (GitLab), мониторингом (Prometheus, Grafana) и логированием (Opensearch)
- Развивать отказоустойчивую архитектуру для компонентов платформы (MinIO, Hive Metastore, Airflow, Spark и др.)
- Решать сложные задачи на стыке сетей, хранилищ и вычислений
- Участвовать в инцидент-менеджменте и повышении надёжности платформы