Инженер данных (Databricks)

Что предстоит делать

<h3>О компании</h3><p>Наш клиент — ведущая компания по страхованию жизни и часть глобальной группы финансовых услуг. Основанная в 1896 году со штаб-квартирой в Северной Америке, компания предлагает широкий спектр продуктов, включая аннуитеты и страхование жизни, через общенациональную сеть агентов.</p><h3>Описание проекта</h3><p>Проект включает производственную систему для управления клиентами и программами страхования жизни, в которых они участвуют. Специалист будет отвечать за поддержку существующей системы и разработку новых функций.</p><h3>Технологии</h3><ul><li>Databricks, Unity Catalog, Delta Lake, Databricks Genie</li><li>Продвинутый SQL</li><li>Python</li><li>Microsoft Azure</li></ul><h3>Чем предстоит заниматься</h3><ul><li>Сотрудничать с командой из трех инженеров для разработки и поддержки решений для работы с данными в Databricks;</li><li>Разрабатывать и поддерживать рабочие процессы обработки данных с использованием Databricks, SQL, Python и Delta Lake;</li><li>Работать с Unity Catalog для управления правами доступа к данным, происхождением данных (data lineage) и управлением данными;</li><li>Поддерживать существующую производственную систему и участвовать во внедрении новых функций и улучшений;</li><li>Исследовать и устранять проблемы в рабочих процессах данных Databricks и производственных процессах;</li><li>Сотрудничать с членами команды и заинтересованными сторонами для предоставления надежных инженерных решений для работы с данными;</li></ul><h3>Требования к кандидату</h3><ul><li>3+ года профессионального опыта в области инженерии данных;</li><li>Отличные коммуникативные навыки и навыки сотрудничества, способность эффективно работать с техническими и нетехническими заинтересованными сторонами;</li><li>Практический опыт проектирования и разработки решений для работы с данными в Databricks, включая архитектуру Databricks, Unity Catalog, Delta-таблицы, происхождение данных, права доступа, Databricks Genie и ноутбуки;</li><li>Продвинутые навыки SQL, включая написание сложных запросов и выполнение преобразований данных;</li><li>Свободное владение Python для обработки данных, автоматизации и разработки решений в области инженерии данных;</li><li>Профессиональный опыт работы с облачными сервисами и платформами данных Microsoft Azure;</li></ul><h3>Будет плюсом</h3><ul><li>Опыт использования AI-возможностей Databricks, включая Agent Bricks, и внедрения решений на основе генеративного ИИ и RAG в Databricks;</li><li>Опыт работы с сервисами данных Azure, включая Azure Synapse, Synapse pipelines, Azure Data Factory и Azure SQL pools;</li><li>Опыт настройки процессов CI/CD для решений Databricks с использованием Azure DevOps, Databricks Asset Bundles и практик Infrastructure as Code;</li><li>Опыт оптимизации производительности для рабочих нагрузок Databricks, SQL-запросов и конвейеров обработки данных;</li><li>Сертификация Databricks Certified Data Engineer Professional;</li><li>Сертификация Databricks Certified Generative AI Engineer Associate;</li></ul><h3>Что мы предлагаем</h3><p>Глобальный пакет льгот включает:</p><ul><li>Техническое и нетехническое обучение для профессионального и личностного роста;</li><li>Внутренние конференции и митапы для обучения у отраслевых экспертов;</li><li>Поддержку и наставничество со стороны опытного сотрудника, которые помогут вам в профессиональном росте и развитии;</li><li>Медицинскую страховку;</li><li>Курсы английского языка;</li><li>Спортивные мероприятия для поддержки здорового образа жизни;</li><li>Гибкие варианты работы, включая удаленные и гибридные возможности;</li><li>Реферальную программу для привлечения новых талантов;</li><li>Программу поощрения за выслугу лет и дополнительные дни отпуска.<br><br><em>Обратите внимание: мы с уважением рассмотрим все заявки, но свяжемся только с кандидатами, прошедшими предварительный отбор</em></li></ul> <div> <a href="https://jobs.dou.ua/companies/issoft/vacancies/369297/#reply-btn-id">Відгукнутись на вакансію</a> </div>