Data Engineer

Что предстоит делать

<p><nobr>1-й</nobr> корпус Национальной гвардии Украины «Азов» — военное формирование, входящее в состав НГУ. Подразделение собирает команду мотивированных специалистов, готовых быть примером и работать вместе на победу.</p><p>Data Engineer (Дата-инженер) — это специалист, который разрабатывает и поддерживает конвейеры для сбора данных, проектирует и администрирует базы данных, а также обеспечивает качество информации для аналитиков.</p><p><b>Обязанности:</b></p><ul><li>построение и поддержка ETL/ELT: Проектирование, разработка и поддержка автоматизированных конвейеров данных (data pipelines) для сбора информации из различных источников;</li><li>архитектура и хранение данных: Проектирование, оптимизация и администрирование баз данных (реляционных, NoSQL, аналитических СУБД);</li><li>парсинг и сбор данных: Создание и поддержка парсеров, скраперов, коннекторов и API для интеграции с новыми источниками информации;</li><li>обеспечение качества данных: Валидация, очистка, дедупликация и мониторинг целостности данных на всех этапах обработки;</li><li>контейнеризация и локальное развёртывание: Развёртывание и поддержка сервисов в локальных/изолированных средах, работа с Docker, оркестраторами и скриптами автоматизации;</li><li>кросс-функциональное сотрудничество: Обеспечение удобного и быстрого доступа к данным для команд дата-аналитиков, социологов и смежных направлений.</li></ul><p><b>Требования:</b></p><ul><li>основные требования;</li><li>опыт: От 2 лет гражданского или военного опыта на позиции Data Engineer / Backend Developer с глубоким акцентом на работе с данными;</li><li>языки программирования: Уверенное владение Python (пакеты для обработки данных, асинхронность, парсинг, работа с API);</li><li>базы данных и SQL: Глубокое понимание SQL, опыт работы и оптимизации запросов/индексов в СУБД (PostgreSQL, ClickHouse, NoSQL и т.д.);</li><li>eTL/ELT и оркестрация: Опыт построения конвейеров данных и использования инструментов оркестрации (Airflow, Prefect или собственных скриптовых решений);</li><li>контейнеризация и Linux: Опыт работы с Docker, Docker Compose, понимание принципов развёртывания и администрирования решений на Linux-серверах;</li><li>системное мышление: Умение понимать потребности аналитиков, формулировать технические требования и проектировать удобные модели данных;</li><li>будет весомым плюсом:;</li><li>опыт создания и оптимизации высоконагруженных или сложных парсеров/скраперов (работа с анти-скрапинг системами, ротацией IP и т.д.);</li><li>опыт работы с неструктурированными данными (большие массивы текста, медиафайлы, логи);</li><li>опыт развёртывания векторных баз данных (Qdrant, ChromaDB, Milvus и т.д.) или инфраструктуры для работы с ML/NLP/LLM моделями;</li><li>базовые навыки сетевой безопасности и системного администрирования.</li></ul><p><b>Условия:</b></p><ul><li>возможность прохождения службы по контракту или по мобилизации до конца военного положения;</li><li>возможность перевода действующих военнослужащих из других подразделений;</li><li>обеспечение качественным современным материальным и техническим обеспечением;</li><li>служба на полигонах, в пунктах постоянной дислокации части и в полевых условиях;</li><li>базовое денежное обеспечение от 25 000 до 127 000 грн в зависимости от задач и места прохождения службы;</li><li>постоянное медицинское, психологическое и социальное сопровождение;</li><li>бесплатное лечение и реабилитация;</li><li>регулярные обучения с профессиональными инструкторами для повышения боевых навыков;</li><li>бесплатный доступ к учебным программам и лекционным материалам.</li></ul><p>Если вы обладаете необходимым опытом и соответствуете требованиям вакансии, пожалуйста, отправляйте своё резюме или звоните по номеру рекрутингового центра корпуса АЗОВ <b>4308</b>.</p><p>Мы с нетерпением ждём вашу заявку и готовы рассмотреть всех кандидатов. Спасибо!</p> <div> <a href="https://jobs.dou.ua/companies/azov-1-korpus-ngu/vacancies/374773/#reply-btn-id">Откликнуться на вакансию</a> </div>