Старший Data Engineer (Azure)

Что предстоит делать

<p><strong>Какова цель этой позиции?</strong> <br>Мы ищем Senior Data Engineer с сильным практическим опытом работы в экосистеме Azure, который будет проектировать, создавать и поддерживать масштабируемые пайплайны данных и инфраструктуру. Вы будете тесно работать с другими инженерами, чтобы обеспечивать надежные и качественные потоки данных по всей организации. Потенциальные клиенты делают много запросов, поэтому мы хотим привлечь нового специалиста в команду и обеспечить быстрый подбор.<br><br><strong>Локация:</strong> Удаленно (предпочтительно часовой пояс CET), готовность координировать работу с часовыми поясами США и ЕС.<br><br><strong>Обязанности:</strong> <br>Проектировать, создавать и поддерживать масштабируемые, надежные ETL/ELT пайплайны данных для пакетных и потоковых данных.</p><ul><li>Проектировать архитектуру и оптимизировать решения для хранения данных (data lakes, data warehouses) на Azure.</li><li>Разрабатывать и поддерживать модели данных, схемы и логику трансформации для поддержки аналитики и отчетности.</li><li>Обеспечивать качество, согласованность и целостность данных во всех пайплайнах с помощью валидации, мониторинга и оповещений.</li><li>Оптимизировать производительность пайплайнов и устранять узкие места в обработке данных большого масштаба.</li><li>Внедрять и поддерживать CI/CD пайплайны для рабочих процессов data engineering.</li><li>Сотрудничать с data scientists, аналитиками и backend-инженерами, чтобы понимать требования к данным и предоставлять решения.</li><li>Определять и внедрять лучшие практики для data governance, безопасности и контроля доступа.</li><li>Наставлять младших data engineers и участвовать в принятии технических решений и архитектурных ревью.</li><li>Документировать архитектуру данных, пайплайны и процессы для внутреннего обмена знаниями.<br> </li></ul><p><strong>Требования:</strong></p><ul><li>Сильный практический опыт работы в роли Data Engineer, включая обязанности уровня senior или lead.</li><li>Сильный практический опыт работы с экосистемой данных Azure (например, Azure Data Factory, Azure Synapse Analytics, Azure Databricks, Azure Data Lake Storage).</li><li>Сильное знание SQL и опыт работы с реляционными и нереляционными базами данных.</li><li>Сильный опыт программирования на Python (или Scala/Java) для обработки данных и разработки пайплайнов.</li><li>Опыт проектирования и создания ETL/ELT пайплайнов как для пакетных, так и для потоковых данных (например, Spark, Kafka, Azure Event Hubs).</li><li>Уверенное понимание моделирования данных, концепций data warehousing и dimensional design.</li><li>Опыт работы с infrastructure-as-code и инструментами CI/CD (например, Terraform, шаблонами ARM/Bicep, Azure DevOps, GitHub Actions).</li><li>Опыт работы с практиками обеспечения качества данных, тестирования и мониторинга пайплайнов данных.</li><li>Сильные аналитические навыки и навыки решения проблем, способность самостоятельно работать с неоднозначными или сложными задачами в области данных.</li><li>Сильные коммуникативные навыки, способность эффективно взаимодействовать между командами и объяснять технические концепции нетехническим стейкхолдерам.<br> </li></ul><p><strong>Будет плюсом:</strong></p><ul><li>Сертификаты Azure (например, Azure Data Engineer Associate, Azure Solutions Architect).</li><li>Опыт работы с инструментами оркестрации (например, Apache Airflow, пайплайнами Azure Data Factory).</li><li>Опыт работы с инструментами data governance и каталогизации (например, Microsoft Purview).</li><li>Знакомство с инструментами BI/отчетности (например, Power BI).</li><li>Опыт работы в регулируемой среде данных или среде с высокими требованиями к комплаенсу.</li></ul><p><strong></strong></p><p><strong>Процесс найма:</strong></p><ul><li>Интервью с HR</li><li>Техническое интервью</li><li>Интервью с клиентами</li><li><strong>Проверка рекомендаций</strong></li></ul><p><br><strong>Мы предлагаем:</strong></p><ul><li>Удаленный формат работы. Работайте откуда угодно и будьте частью географически распределенной команды</li><li>Будьте впереди. Работайте с передовыми технологиями</li><li>Возможность оплаты через PE account, Payoneer или Wise</li><li>Бонусы &amp; реферальная система</li><li>12 оплачиваемых дней отпуска и 5 дней больничного в год</li><li>Гибкий график</li><li>Компенсационная программа для покупки новых ноутбуков</li><li>Оплачиваемые профессиональные сертификации &amp; образовательные курсы</li><li>Оплачиваемые занятия английским</li><li>Дружелюбная атмосфера с ежеквартальным team building</li><li>Без бюрократии</li></ul><p>Готовы попробовать свои силы? Не тяните кота за хвост и без сомнений отправляйте свое CV!</p> <div> <a href="https://jobs.dou.ua/companies/seedium-io/vacancies/373277/#reply-btn-id">Откликнуться на вакансию</a> </div>