Data Engineer (Web Scraping & OSINT)

Что предстоит делать

<p>Ми — <strong>Everstar</strong>. Ми допомагаємо знайти себе в мілтек і працювати на перемогу разом з найбільшими і найкращими оборонними компаніями України.</p><p>Зараз ми у пошуках <strong>Data Engineer (Web Scraping &amp; OSINT) </strong>для нашого клієнта — одного з найбільших розробників та виробників БпЛА для потреб оборони України. Ми шукаємо технічно сильного інженера <strong>з мисленням розслідувача</strong>, який допоможе нам з нуля вибудувати інфраструктуру <strong>цифрової розвідки (OSINT)</strong>. Якщо ваша амбіція — не просто писати код і «скрейпити пів інтернету», а перетворювати терабайти сирих даних з відкритих джерел на <strong>стратегічний інтелект</strong>, розплутувати глобальні ланцюги постачання та знаходити неочевидні зв’язки, ця роль саме для вас.</p><p><strong>Вимоги до кандидата</strong></p><ul><li><strong>Досвід роботи:</strong> Практичний бекграунд в OSINT, Data Engineering або кібербезпеці з жорстким фокусом на <strong>автоматизований</strong>, а не ручний збір даних.</li><li><strong>Програмування та скрейпінг:</strong> Вміння писати та підтримувати надійні скрейпери/краулери (на <strong>Python</strong> або інших релевантних технологіях).</li><li><strong>Робота з базами даних:</strong> Практичний досвід із реляційними (SQL) та/або нереляційними (NoSQL) БД. Розуміння time-series підходу для версіонування даних є значним плюсом.</li><li><strong>Розуміння ETL/ELT:</strong> Досвід нормалізації, збагачення, дедуплікації, логування та підготовки даних до подальшого аналізу.</li><li><strong>Системне мислення:</strong> Здатність самостійно побудувати процес від А до Я: збір → нормалізація → збереження → відстеження змін → зручний пошук результатів.</li><li><strong>Аналітичні навички:</strong> Висока увага до деталей, вміння верифікувати надійність джерел, відсіювати інформаційний шум і перетворювати «сирі» дані на практичні інсайти.</li><li><strong>Soft Skills:</strong> Готовність працювати в динамічному середовищі, здатність аргументувати висновки, вести прозору документацію та ефективно колаборувати з командою.</li></ul><p><strong>Майбутні обов’язки:</strong></p><ul><li><strong>Побудова OSINT-інфраструктури:</strong> З нуля вибудувати процеси системного збору, зберігання та оновлення публічних/напівпублічних даних (сайти, реєстри, звіти, соцмережі).</li><li><strong>Автоматизація (Data Engineering):</strong> Розробляти та підтримувати автоматизовані скрейпери/краулери та ETL/ELT-пайплайни (grab → extract → load), щоб повністю відійти від ручного пошуку.</li><li><strong>Проєктування сховищ:</strong> Створювати структуру для зберігання результатів із застосуванням time-series підходу (історичність даних), щоб відстежувати зміни у джерелах у часі.</li><li><strong>Аналіз ринків та трендів:</strong> Проводити глибокі дослідження локального та глобального ринків (виробники, ланцюги постачання, сировина, обладнання, технологічні тренди).</li><li><strong>Моніторинг сигналів:</strong> Відстежувати ризики та можливості (зміни в компонентній базі, дефіцити, поява нових гравців) та готувати регулярні аналітичні дайджести.</li><li><strong>Створення баз знань:</strong> Формувати контактні мапи (decision-makers), переліки компаній та аналізувати зв’язки між гравцями ринку для потреб сорсингу.</li><li><strong>Взаємодія з командою:</strong> Тісно працювати з командою: перетворювати high-level запити у чіткі плани збору даних, швидко перевіряти гіпотези.</li><li><strong>Підбір інструментів:</strong> Налаштовувати та використовувати необхідні OSINT tools, cloud-рішення, VPN для стабільності систем у межах правового поля та етичних стандартів.</li></ul><p><strong>Умови роботи:</strong></p><ul><li>офіційне працевлаштування через Дія.City;</li><li>відпустка — 24 календарних дні на рік + 1 день відпустки на день народження;</li><li>медичне страхування після успішного проходження випробувального терміну;</li><li>можливість створювати нове, експериментувати та вирішувати складні завдання;</li><li>професійне зростання та постійне вдосконалення навичок;</li><li>команда однодумців та інноваторів</li><li>бронювання військовозобов’язаних за умови наявності актуальних військово-облікових документів;</li><li>комфортний офіс на правому березі Києва.</li></ul> <div> <a href="https://jobs.dou.ua/companies/everstar/vacancies/345448/#reply-btn-id">Відгукнутись на вакансію</a> </div>