Обязанности:
Мы ищем кандидата в команду дата-инженеров Что делать: - Организовывать бесперебойную поставку данных в популярных форматах по разнообразным протоколам; - Исследовать организацию и структуру данных; - Строить пайплайны витрин; - Обеспечивать качество данных; - Участвовать в проектировании хранилища данных. Что нужно знать/уметь: - Иметь представление о принципах построения систем хранения и обработки данных; - Опыт работы с популярными протоколами обмена информации (REST, SOAP, очереди сообщений, FTP и т.п.); - Опыт работы с популярными форматами данных (JSON, XML, CSV, Parquet); - Опыт работы с реляционными СУБД на языке SQL (PostgreSQL, Greenplum); - Опыт программирования на Python; - Опыт работы с экосистемой Hadoop (Hdfs, Spark, Yarn); - Приветствуется опыт построения ETL на Apache AirFlow.Похожие вакансии
До 206 000 руб.
Москва. Станции метро: Смоленская
Бристоль, сеть магазинов
Аналитик данных (data scientist, data engineer)
От 100 000 руб.
Москва. Станции метро: Смоленская
Федеральное государственное автономное учреждение Научно-исследовательский институт Центр экологической промышленной политики (ФГАУ НИИ ЦЭПП)