Data Engineer UPD:_вакансію_закрито

Огляд

Сили оборони – Збройні сили України, а також інші утворені відповідно до законів України військові формування, правоохоронні та розвідувальні органи, органи спеціального призначення з правоохоронними функціями, на які Конституцією та законами України покладено функції із забезпечення оборони держави.

Обов'язки

• поєднання даних з різних джерел, entity resolution, data quality роботи
• виправлення пропусків у даних та можливих помилок
• здійснення геопросторового аналізу: просторові запити, кореляція треків, робота з географічними даними, розподіленими в часі
• моделювання даних, створення DWH
• виконання аналітичних запитів

Вимоги

• знання PySpark, Spark SQL, Hive, RDD
• знання pandas, GeoPandas, Shapely
• навички роботи з REST API, web-scrapping
• досвід налаштування пайплайнів даних за допомогою Python
• досвід роботи з Git та bash
• досвід роботи з ELK-стеком
• досвід роботи з Apache Airflow або аналогічними системами

Умови

• робота в м. Київ
• повна зайнятість
• офіційна мобілізація до кінця воєнного стану
• гібридний формат роботи
• грошове забезпечення від 43 000 грн