Big Data Engineer​ у м. Київ

Місто: Київ


Vodafone Україна — компанія світового рівня, що займає провідні позиції у сфері технологій та телекомунікацій, впроваджує інновації у всіх напрямках діяльності. Щодня ми працюємо над впровадженням амбітних проектів.

Саме тому Vodafone Україна — це не лише телекомунікації, а й новітні технології, зокрема Cloud Services, Big Data, IoT, Smart City.

Про вакансію:

  • Вас чекає команда розробки продуктів, що базуються на технології Big Data, в одному з найбільших операторів зв’язку на ринку
  • Ви будете брати участь у розробці ETL процесів і конвеєрів даних для розвитку продуктів
  • Ви також будете брати участь у інтеграції зовнішніх систем, таких як Data Warehouse та інші з платформами даних Big Data.

З чим доведеться мати справу:

  • Розробка конвеєрів даних (data pipelines) для подальшої аналітики та використання в продуктах Big Data
  • Розробка оптимальних структур зберігання та передачі даних
  • Отримання, обробка даних із гетерогенних джерел даних, розробка методів та регламентів необхідних ETL-процесів
  • Розробка необхідних аналітичних звітів, розрізів і агрегатів даних
  • Оцінка відповідності наборів даних предметній галузі та задачам аналітичних робіт
  • Керування життєвим циклом даних (процеси отримання, розміщення, зберігання, розподілення, міграції, архівування та видалення даних)
  • Взаємодія з аналітиками та спеціалістами Data Science в рамках командної роботи по створенню продукта
  • Участь у створенні POC з нуля — проектування, розробка тощо
  • Покращення існуючої системи роботи з даними. Ми віримо в твій досвід).

Вимоги:

  • Досвід роботи в ролі Data Engineer не менше 2-х років
  • Знання Python/Apache Spark/Streaming/GraphX
  • Знання SQL и NoSQL та досвід роботи з базами данних (Oracle / MySQL)
  • Досвід в галузі будування сховищ даних та процесів видобутку, обробки та трансформування даних;
  • Досвід у database schema design та dimensional data modeling"
  • Досвід роботи з системою SAS (SAS EG, SAS code).

Буде додатковою перевагою:

  • Знання мов програмування Java, Scala, Shell
  • Досвід роботи з базами — SAS / HBase / Redis DB / Cassandra / MongoDB
  • Досвід у роботі з СУБД для аналізу великих даних HP Vertica
  • Розуміння побудови розподілених кластерів на кшталт Spark / Hadoop / Elasticsearch.

Чекаємо на тебе в нашій команді!