Основные задачи:
-
разработка PL\SQL скриптов
-
разработка общих сервисов на python
-
оптимизация и разработка сервисов для передачи и трансформации данных
Возможный опыт и навыки:
-
Высшее образование;
-
Хороший опыт работы с python,git,numpy,pandas,SQL,docker;
-
Обязателен опыт с Airflow;
-
Обязателен опыт работы с Apache Spark (можно любой версии, у нас 4-я);
-
Обязателен опыт работы с данным;
- Понимание концепта Фабрики Данных;
- Будет плюсом знание Apache NiFi