Data Engineer

Что предстоит делать

<p><strong>mcpk.</strong> соединяет высококлассных европейских IT-специалистов с ведущими IT-компаниями в регионе DACH. Наша основная философия проста: разработчики являются нашими клиентами в той же мере, что и бизнесы. Когда вы присоединяетесь к нам, вы работаете напрямую и исключительно с командой клиента — в данном случае, известной британской компанией. Тем временем, mcpk. берет на себя весь ваш операционный комфорт за кулисами и административную поддержку. Мы ценим прозрачность и простоту, что означает нулевое вмешательство в вашу повседневную техническую рутину.</p><p>Мы ищем высокотехничного <strong>Data Engineer</strong> из ЕС для партнерства с британской командой в проектировании и масштабировании экосистемы данных следующего поколения. Вы возьмете на себя ответственность за наше облачное присутствие, обеспечивая высокую доступность, автоматизацию и экономическую эффективность нашей платформы данных.</p><p><b>Чем вы будете заниматься:</b></p><ul><li>Проектировать, создавать и развивать нашу основную платформу данных, используя облачную экосистему AWS и Snowflake.</li><li>Внедрять принципы DevOps в жизненный цикл данных, создавая комплексную автоматизацию CI/CD с нуля.</li><li>Владеть стратегией Infrastructure as Code (IaC), используя Terraform для надежного развертывания, управления и масштабирования ресурсов платформы данных.</li><li>Проектировать и оркестрировать надежные ETL/ELT-процессы с использованием Python, SQL и современных фреймворков оркестрации, таких как dbt, sqlmesh или Airflow.</li><li>Постоянно мониторить состояние платформы, быстро решая сложные проблемы, влияющие на SLA, в задачах, пайплайнах и облачной инфраструктуре.</li><li>Возглавлять инициативы по оптимизации ресурсов для снижения затрат на хранение и максимизации производительности запросов в AWS и Snowflake.</li><li>Тесно сотрудничать с коллегами-инженерами, делиться знаниями и обеспечивать техническое наставничество для повышения квалификации команды.</li></ul><p><b>Технические требования и экспертиза</b></p><ul><li>Владение Terraform. Вы должны быть полностью способны управлять сложными файлами состояний, писать модули и развертывать инфраструктуру AWS и Snowflake как код.</li><li>Глубокие административные знания внутреннего устройства платформы Snowflake. У вас должен быть практический опыт настройки объектов интеграции хранилищ, внешних стейджей, нативного Snowpipe (а не только сторонних загрузчиков), мониторов ресурсов и детализированного RBAC.</li><li>Продвинутый опыт работы с GitHub Actions. Мы ожидаем, что вы будете создавать и поддерживать сложные многоступенчатые пайплайны CI/CD, а не просто настраивать базовые триггеры развертывания.</li><li>Опыт работы с Apache Airflow или MWAA на административном уровне. Вам необходимо знать, как обслуживать инфраструктуру — масштабировать workers, управлять подключениями и отлаживать сбои на уровне платформы, а не только писать DAG.</li><li>Хорошее практическое знание основных серверных сервисов и сервисов хранения AWS, в частности S3 и Lambda.</li><li>Надежная основа программирования и написания запросов с использованием Python и SQL.</li><li>Исключительные навыки решения проблем и способность полностью брать на себя ответственность за технические задачи в быстро меняющейся, автономной среде.</li></ul><p><b><strong>Что мы предлагаем</strong>:</b></p><ul><li>100% удаленная работа из ЕС с очень гибким графиком.</li><li>Долгосрочное партнерство B2B/FOP с компенсацией в евро.</li><li>Надлежащее оборудование для обеспечения бесперебойной работы.</li><li>Бесплатные корпоративные занятия по английскому и немецкому языкам.</li><li>Возможность работать с современными инструментами над престижным, высокомасштабируемым медиа-продуктом из Великобритании.</li></ul><p><strong>Принципы, которые нас определяют:</strong></p><ul><li>Долгосрочная ориентация: Мы не ищем краткосрочного сотрудничества. Мы создаем стабильные среды, где специалисты могут процветать годами, предлагая последовательную и надежную поддержку.</li><li>Экспертиза и рост: Мы следуем лучшим отраслевым практикам, поощряем непрерывное обучение и приветствуем свежие, инновационные подходы.</li><li>Абсолютная прозрачность: Доверие — наша основа. Мы не скрываем детали и не упрощаем задачи — ожидайте честности на каждом этапе.</li><li>Психологическая безопасность: Мы поддерживаем среду сотрудничества, где вы можете высказывать опасения, предлагать идеи и чувствовать искреннюю поддержку команды.</li><li>Гибкость в действии: Благодаря нашей плоской структуре мы быстро принимаем решения и адаптируемся к вашим уникальным потребностям без бюрократических задержек.</li></ul> <div> <a href="https://jobs.dou.ua/companies/mcpk/vacancies/364957/#reply-btn-id">Відгукнутись на вакансію</a> </div>