О вакансии
Ищут Senior+/TeamLead DataOps для поддержки и развития data-инфраструктуры в производственной табачной компании. Роль включает Kubernetes, CI/CD, вычислительные движки, хранилища данных, CDC, мониторинг и автоматизацию.
Задачи
- Поддержка и развитие CI/CD пайплайнов для data-инфраструктуры.
- Организация и сопровождение Kubernetes-кластера, включая деплойменты и Helm-чарты.
- Настройка и поддержка инфраструктуры для работы с DWH, Lakehouse и Streamhouse.
- Поддержка и администрирование вычислительных движков Trino, Flink, StarRocks и Spark.
- Работа с системами хранения Apache Iceberg, Paimon, Parquet, ORC и S3 через MinIO.
- Настройка CDC-процессов для сбора и синхронизации данных.
- Мониторинг и логирование сервисов, устранение инцидентов.
- Автоматизация задач управления экспериментальными окружениями на 20 и более машинах.
- Взаимодействие с data-инженерами и аналитиками для обеспечения стабильности и прозрачности процессов.
Условия
Локация: РФ/РБ.
Период работы: 6 и более месяцев.
Сфера: производство, табачная компания.
Будет плюсом
- Опыт настройки CDC.
- Знание Terraform или Ansible.
- Опыт работы с Trino и StarRocks.
- Опыт построения архитектур Lakehouse и Streamhouse.
- Знание особенностей работы с Big Data-стеком.