Младший Big Data инженер

Что предстоит делать

<p>Мы ищем мотивированного <strong>Junior Big Data Engineer</strong> для присоединения к нашей команде. В этой роли вы будете участвовать в разработке и поддержке конвейеров данных, моделей данных и решений для обработки данных в современных облачных средах и средах больших данных. Вы будете тесно работать со старшими инженерами над созданием масштабируемых решений для работы с данными и поддержкой бизнес-инициатив, основанных на данных.</p><p>Идеальный кандидат имеет практический опыт работы с Python, PySpark и SQL, твердое понимание основ инженерии данных и заинтересован в работе с крупномасштабными платформами данных и решениями на основе ИИ.</p><p><strong>Ключевые обязанности:</strong></p><ul><li>Поддержка проектирования, разработки и сопровождения конвейеров данных и процессов ETL/ELT.</li><li>Разработка и оптимизация рабочих процессов преобразования данных с использованием Python и PySpark.</li><li>Помощь в интеграции данных из нескольких источников с обеспечением качества, согласованности и надежности данных.</li><li>Совместная работа с инженерами данных, специалистами по данным и инженерами AI/ML для подготовки и управления наборами данных для аналитики и приложений машинного обучения.</li><li>Участие в моделировании данных, проектировании схем и деятельности по организации хранилищ данных.</li><li>Мониторинг конвейеров данных, расследование проблем и участие в улучшении производительности.</li><li>Соблюдение лучших практик управления данными, безопасности и конфиденциальности.</li><li>Документирование технических решений, процессов и потоков данных.</li><li>Отслеживание новых технологий и отраслевых тенденций, внедрение инновационных решений в практику инженерии данных, а также эффективное документирование и описание технических решений и процессов.</li></ul><p><strong>Инструменты и навыки, которые вы будете использовать в этой роли:</strong></p><ul><li>Palantir Foundry</li><li>Python</li><li>PySpark</li><li>SQL</li><li>TypeScript</li></ul><p><strong>Требования:</strong></p><ul><li>Опыт работы в инженерии данных от 1 года</li><li>Уверенное владение Python и SQL</li><li>Практический опыт работы с PySpark</li><li>Знакомство с технологиями больших данных (например, Apache Hadoop, Spark, Kafka, BigQuery и др.)</li><li>Базовый опыт работы с облачными сервисами (например, AWS Glue, Azure Data Factory, Google Cloud Dataflow)</li><li>Понимание конвейеров ETL/ELT и методов интеграции данных</li><li>Опыт работы с системами баз данных (например, PostgreSQL, MySQL, NoSQL и др.)</li><li>Эффективные навыки решения проблем и аналитические способности в сочетании с отличными коммуникативными навыками и способностью к сотрудничеству</li><li>Развитые коммуникативные навыки и умение работать в команде</li><li>Хорошие математические, статистические и алгоритмические навыки</li><li>Английский язык — Upper-Intermediate или выше</li></ul><p><strong>Будет плюсом:</strong></p><ul><li>Опыт работы с AI/ML</li><li>Предыдущий опыт работы с JavaScript и TypeScript</li></ul> <div class="content-conclusion"><p><strong>Мы предлагаем*:</strong></p><ul><li>Гибкий формат работы — удаленно, в офисе или по гибкому графику</li><li>Конкурентную заработную плату и хороший компенсационный пакет</li><li>Индивидуальный карьерный рост</li><li>Инструменты для профессионального развития (программа наставничества, tech-лекции и тренинги, центры компетенций и многое другое)</li><li>Активные технологические сообщества с регулярным обменом знаниями</li><li>Компенсация расходов на образование</li><li>Запоминающиеся подарки к юбилеям</li><li>Корпоративные мероприятия и тимбилдинги</li><li>Другие льготы, зависящие от локации</li></ul><p>*не распространяется на фрилансеров</p></div> <div> <a href="https://jobs.dou.ua/companies/n-ix/vacancies/298035/#reply-btn-id">Відгукнутись на вакансію</a> </div>