Data Engineer (Web Scraping & OSINT)
At a glance
Mid-level Data Engineering role at Everstar. Kyiv | Київ, Ukraine · full-time.
Pay not stated Data Engineer salary
dataroles summary, based on the employer's posting.
What you'll do
- Build systems to collect, store and refresh public and semi-public data from websites, registries, reports and social platforms
- Write and maintain automated crawlers and ETL or ELT pipelines to replace manual information gathering
- Design time-aware data storage so you can track how sources and their contents change
- Research markets, supply chains, materials and technology trends, then surface risks and opportunities in regular briefs
- Map companies, decision-makers and market connections, turning team questions into focused data collection plans
What you bring
- Hands-on experience in OSINT, data engineering or cybersecurity, focused on automated data collection
- Ability to build and maintain dependable scrapers or crawlers using Python or another relevant technology
- Practical experience with SQL or NoSQL databases and ETL or ELT data preparation
- You can take data from collection through cleaning and storage to change tracking and useful search
Who this fits
This role suits an engineer who combines automated data gathering with investigative judgment, careful source checks and clear documentation. You’ll collaborate with a team to test hypotheses and explain findings. The job is based at a Kyiv office, with up to ten remote-work days per year and a flexible schedule.
From the employer
Ми — EVERSTAR, перша рекрутингова агенція в MilTech для тих, хто готовий створювати технологічне майбутнє.
Але досить про нас, розказуємо вакансію.
У зв’язку з розширенням R&D-відділу відкрита позиція Data Engineer (Web Scraping & OSINT). Ми шукаємо технічно сильного інженера з мисленням розслідувача, який допоможе нам з нуля вибудувати інфраструктуру цифрової розвідки (OSINT). Якщо ваша амбіція — не просто писати код і «скрейпити пів інтернету», а перетворювати терабайти сирих даних з відкритих джерел на стратегічний інтелект, розплутувати глобальні ланцюги постачання та знаходити неочевидні зв'язки, ця роль саме для вас.
Що тебе чекає?
- Побудова OSINT-інфраструктури: З нуля вибудувати процеси системного збору, зберігання та оновлення публічних/напівпублічних даних (сайти, реєстри, звіти, соцмережі).
- Автоматизація (Data Engineering): Розробляти та підтримувати автоматизовані скрейпери/краулери та ETL/ELT-пайплайни (grab → extract → load), щоб повністю відійти від ручного пошуку.
- Проєктування сховищ: Створювати структуру для зберігання результатів із застосуванням time-series підходу (історичність даних), щоб відстежувати зміни у джерелах у часі.
- Аналіз ринків та трендів: Проводити глибокі дослідження локального та глобального ринків (виробники, ланцюги постачання, сировина, обладнання, технологічні тренди).
- Моніторинг сигналів: Відстежувати ризики та можливості (зміни в компонентній базі, дефіцити, поява нових гравців) та готувати регулярні аналітичні дайджести.
- Створення баз знань: Формувати контактні мапи (decision-makers), переліки компаній та аналізувати зв'язки між гравцями ринку для потреб сорсингу.
- Взаємодія з командою: Тісно працювати з командою: перетворювати high-level запити у чіткі плани збору даних, швидко перевіряти гіпотези.
- Підбір інструментів: Налаштовувати та використовувати необхідні OSINT tools, cloud-рішення, VPN для стабільності систем у межах правового поля та етичних стандартів.
Необхідні навички та досвід:
- Досвід роботи: Практичний бекграунд в OSINT, Data Engineering або кібербезпеці з жорстким фокусом на автоматизований, а не ручний збір даних.
- Програмування та скрейпінг: Вміння писати та підтримувати надійні скрейпери/краулери (на Python або інших релевантних технологіях).
- Робота з базами даних: Практичний досвід із реляційними (SQL) та/або нереляційними (NoSQL) БД. Розуміння time-series підходу для версіонування даних є значним плюсом.
- Розуміння ETL/ELT: Досвід нормалізації, збагачення, дедуплікації, логування та підготовки даних до подальшого аналізу.
- Системне мислення: Здатність самостійно побудувати процес від А до Я: збір → нормалізація → збереження → відстеження змін → зручний пошук результатів.
- Аналітичні навички: Висока увага до деталей, вміння верифікувати надійність джерел, відсіювати інформаційний шум і перетворювати «сирі» дані на практичні інсайти.
- Soft Skills: Готовність працювати в динамічному середовищі, здатність аргументувати висновки, вести прозору документацію та ефективно колаборувати з командою.
Простий і зрозумілий старт. Оформлення через Дія.City — без складних схем.
Баланс між роботою і життям. 24 дні відпустки, гнучкий графік і до 10 днів віддаленої роботи на рік.
Підтримка, коли вона потрібна. Медичне страхування та консультації з психологом.
Можливість вчитись і рости. Компенсація курсів і доступ до навчальних матеріалів. А також підтримка від команди, менторство та баді.
Гідна оплата. Ринкова компенсація та бонуси.
Культура, яку відчуваєш. Визнання досягнень, подарунки до важливих подій, додатковий вихідний у День народження, корпоративи та сильна внутрішня спільнота.
Команда поруч. Офіс у Києві (правий берег) з усім необхідним та людьми, з якими легко працювати.