Big Data Engineer

IT SmartFlex — це продуктова компанія, заснована 2019 року як дочірня компанія провідного мобільного оператора Vodafone Ukraine з метою об’єднати експертів у сферах телекомунікацій і програмного забезпечення. 

Наша ціль — розвивати та поглиблювати власну IT-експертизу. Ми створюємо новітні проектні рішення для телеком-індустрії та розробляємо продукти високої якості для мільйонів користувачів мобільного зв’язку.

Обов’язки:

• Визначення зовнішніх та внутрішніх джерел великих даних для проведення аналітичних робіт
• Побудова ефективних процесів отримання та конвеєрної обробки даних великих об’ємів із гетерогенних джерел даних, розробка методів та регламентів необхідних ETL-процесів
• Розробка моделей даних, адаптованих до технологій великих даних
• Розробка необхідних аналітичних звітів, розрізів і агрегатів великих даних
• Оцінка відповідності наборів даних предметній галузі та задачам аналітичних робіт
• Керування життєвим циклом даних (процеси отримання, розміщення, зберігання, розподілення, міграції, архівування та видалення великих даних)

Вимоги:

• Знання та розуміння технологій OLAР
• Досвід в галузі будування сховищ даних та процесів видобутку, обробки та трансформування даних на основі MPP архітектури
• Досвід у database schema design  та dimensional data modeling
• Знання та великий досвід використання SQL, Oracle
• Знання Java або Python як стеки для автоматизації процесів
• Досвід у роботі з NoSQL базами на кшталт HBase, Elasticsearch
• Знання Redis DB,  MongoDB може бути корисним
• Досвід роботи з MPP базами даних (знання СУБД Vertica буде перевагою)
• Розуміння  побудови розподілених кластерів на кшталт Spark, Hadoop, та інших
• Розуміння та наявність досвіду у роботі з системами брокерів повідомлень на кшталт Kafka
• Розуміння побудови та досвід роботи з інструментами data governan
• Досвід побудови та використання data analytics та data science wokbench
• Знання UNIX з досвідом використання Shell для задач автоматизації
• Знання технічної англійської мови

Ми пропонуємо:

• Колектив однодумців, прозорість рішень та відкритість в комунікації
• Участь в масштабних проектах
• Офіційне працевлаштування, соціальні гарантії
• Гнучкий графік роботи та віддалені робочі дні
• 24 календарних днів відпустки
• Медичне корпоративне страхування та оздоровлення
• Безкоштовний мобільний зв'язок