Все вакансии Москвы

Требования: Опыт работы с BigData хранилищем от 3 лет – Hive/Impala/Spark/NoSQL;
Знание Python или Java/Scala и практические навыки программирования хотя бы на одном из языков в контексте обработки больших данных;
Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop с использование Apache Spark/ Spark Streaming;
Опыт работы с не реляционными форматами (AVRO, JSON, XML и др.);
Хорошее знание SQL, опыт работы с реляционными СУБД (Oracle, MS SQL, MySql, Postgres, Greenplum и др);
Опыт проектирования, разработки и поддержки инфраструктуры для хранения и обработки больших данных;
Понимание принципов итеративной разработки, знакомство с подходами CI/CD;

Обязанности: Участвовать в построении и доработке архитектуры DWH/Data Lake,
Выстраивать ETL решения для консолидации данных, разрабатывать и оптимизировать функционал расчёта бизнес показателей и нормативов, а также организовывать UI для работы с Data Lake