DevOps-инженер

Что предстоит делать

• Поддержка и развитие on-prem инфраструктуры платформы данных (Airflow, Greenplum, Docker,Linux);
• Разработка, сопровождение и автоматизация процессов CI/CD в GitLab;
• Администрирование и сопровождение Apache Airflow, PostgreSQL, Greenplum и вспомогательных сервисов платформы;
• Обеспечение стабильной, безопасной и отказоустойчивой работы инфраструктуры данных;
• Настройка мониторинга, логирования, алертинга и наблюдаемости платформы;
• Управление SSL/TLS-сертификатами, секретами и доступами к сервисам платформы;
• Участие в проектировании и внедрении новой Lakehouse-платформы (Ceph RGW, Apache Iceberg, Project Nessie, Trino, ClickHouse);
• Развертывание и сопровождение сервисов потоковой обработки данных (Kafka, Debezium,Flink/Spark);
• Участие в развитии контейнерной платформы и внедрении Kubernetes для сервисов платформы данных;
• Планирование вычислительных ресурсов, развитие инфраструктуры и оптимизация производительности;
• Автоматизация эксплуатации инфраструктуры с использованием Bash, Python и инструментов Infrastructure as Code;
• Взаимодействие с командами разработки, аналитики и сопровождения при реализации инфраструктурных проектов.

Что ждём от вас

• Обязательно Linux (администрирование, networking, performance tuning) Docker, Docker Compose GitLab CI/CD PostgreSQL (администрирование, SSL/TLS, роли, резервное копирование);
• Опыт сопровождения production-инфраструктуры Мониторинг и алертинг (Grafana, Prometheus или аналогичные системы) Опыт автоматизации (Bash, Python);
• Понимание сетевой инфраструктуры, безопасности и управления сертификатами;
• Опыт работы с on-prem / bare metal инфраструктурой; Будет преимуществом Kubernetes, Helm Apache Airflow (Celery Executor) Greenplum Apache Iceberg Project Nessie Ceph RGW (S3) Trino, ClickHouse или StarRocks Kafka, Debezium Apache Spark или Apache Flink Ansible, Terraform GitOps (Argo CD, Flux).

Что предлагаем