Data Engineer, Инженер данных
Дата размещения: 21 декабря
Итак, вам предстоит:
- анализ требований к витринам данных (взаимодействие с владельцем продукта, BI-разработчиками, data scientist-ами);
- поиск и исследование источников данных для последующей интеграции;
- оценка пригодности, качества исходных данных;
- разработка ETL процессов на Spark;
- оркестрация ETL процессов в Airflow;
- проектирование баз данных;
Наши требования:
- Scala
- Python
- Батчевый и стриминговый фреймворк Spark
- Батчевый фреймворк AirFlow
- Знания инструментария NiFi
- Знания, где искать данные
- Знание SQL
- Практический опыт в роли DE от 2х лет
Что мы предлагаем:
- Официальное трудоустройство в ООО ВК-ИТ, аккредитованную ИТ-компанию
- Возможность удаленной работы на территории РФ
- Участие в конференциях
- Билайн университет
- Компенсация за оборудование
- Компенсация обучения по квалификации
- ДМС