Разработчик ETL
от 29 389 руб.
Вакансия "Разработчик ETL"
Полная занятость, полный рабочий день
Опубликовано 3 июня 2024 года
Обновлено 3 июня 2024 года
Обязанности
- Разработка ETL процессов Sqoop;
- Разработка потоков обработки данных на PySpark;
- Создание пайплайнов в планировщике задач Oozie;
- Разработка систем контроля качества данных на Apache Griffin;
- Написание Bash скриптов;
- Обработка структурированных данных (XML/JSON) на Python/PySpark;
- Исправление багов и проблем функционала;
- Работа с системами контроля версий GIT/SVN.
Общие требования
- Знание SQL на отличном уровне;
- Уверенное владение ЯП Python;
- Опыт работы с любым ETL инструментом;
- Опыт работы с СУБД (Oracle, MS SQL, Sybase и др. );
- Опыт работы с Linux;
- Опыт работы с Hadoop;
- Опыт работы с инструментами обработки больших данных (Spark, MapReduce и др. ).
Требования к образованию
Высшее
Опыт работы
Не менее 3 лет
Загрузка...
Похожие вакансии
Работодатель
АО "НЕОФЛЕКС КОНСАЛТИНГ"
АКЦИОНЕРНОЕ ОБЩЕСТВО "НЕОФЛЕКС КОНСАЛТИНГ"
Дата регистрации
21 мая 2009 года
Юридический адрес
127015, г. Москва, ул. Вятская, д. 35, строение 4
Генеральный директор
Рубан Олег Викторович
с 13 июня 2017 года
