Базы данных / MySQL Oracle Архитектура\Аналитика ПО / Архитектор БД

Разработчик BigData (Hadoop) - удаленно Удаленная работа

Функциональные обязанности:
 
Участие в сложных интеграционных проектах по развитию гибридного DWH(Hadoop, Oracle, Teradata)  в роли разработчика
Разработка и проектирование потоков данных, алгоритмов загрузки и обработки данных в Hadoop
Участие в разработке моделей на основе алгоритмов machinelearning
Оптимизация и настройка производительности ETL-процессов
Миграция существующих приложений на Hadoop инфраструктуру
Анализ и тестирование существующих решений в технологическом стеке Hadoop
 Требования:
Фундаментальные знания принципов построения распределенных систем хранения и обработки данных
Наличие практического опыта работы с Hadoop (Hive, Impala, sqoop, oozie, HDFS, YARN), понимание парадигмы map-reduceи алгоритмов работы Spark;
Опыт работы с реляционными СУБД  (Oracle, MS/SQL), навыки оптимизации запросов
Желателен опыт работы с ETL-инструментами (InformaticaBDM, ODI, Pentaho) и BI-средствами
Навыки программирования на Scala/Java/Python
Приветствуется опыт работы с NoSQLбазами данных (HBase, Cassandra)
Навыки работы с Unixshell
Предметная область
Знания предметной области «Банки и финансы»  является плюсом
 
 
 

Описание вакансии

Загрузить резюме (doc, docx, pdf) Max.: 2MB
Файл не выбран