Ведущий инженер данных (проект ИКТ)

НИИ «ВОСХОД» — мультисервисный партнер государства в области информационных технологий с 1972 года. Мы создаем инновационные ИТ-решения для органов власти, внедряем и развиваем новые форматы эффективного взаимодействия между государством и обществом. Институт специализируется на разработке и эксплуатации информационных систем, услугах в области информационной безопасности (в том числе создании средств криптографической защиты информации), а также разработке и развитии ИТ-архитектуры современных информационных систем и цифровых платформенных решений. НИИ «ВОСХОД» включен в реестр аккредитованных ИТ-компаний и организаций оборонно-промышленного комплекса. Обязанности: Проектирование и разработка аналитических витрин данных Работа с базами данных, участие в разработке архитектуры данных, формирование логики наполнения и хранения данных Мониторинг и оптимизация процессов сборки витрин Разработка ETL-процессов по преобразованию и загрузки данных Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными Предоставление экспертной поддержки внутренним потребителям по вопросам, связанным с использованием данных Формирование наборов данных и описание их атрибутивного состава Обработка массивов данных и подготовка информации для последующей аналитики / построения прогнозных моделей, работа с базами данных Разработка и оптимизация sql-запросов Подготовка данных (выборка, очистка, генерация признаков, интеграция, формирование) Построение дашбордов (не обязательно, но будет плюсом) Требования: Твердые знания программ из пакета MS Office, опыт использования Jira, Redmine, программы по моделированию бизнес-процессов BPMN, ARIS Стек технологий: PostgreSQL, MS SQL, MongoDB, Apache Superset, Power BI, Qlik, Visiology Опыт не менее 1 года работы в качестве Data Engineer / Data Analyst / ETL Developer Знание PostgreSQL или MySQL на экспертном уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности) Знание основных понятий и концепций из области Data Warehousing Знание и опыт разработки на Python (pandas, request, jinja, sqlalchemy, psycopg2) и/или Java Умение анализировать, обобщать статистические данные Способность обрабатывать и структурировать разные объемы сложной информации, а также доступно и наглядно её презентовать Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, Hive/Impala) или распределенных (MPP) СУБД (Greenplum, ClickHouse) — как преимущество Опыт в построении пайплайнов на Airflow Понимание принципов UX/UI при подготовке дашбордов; Желателен опыт разработки витрин данных Условия: Стабильную и конкурентоспособную заработную плату; Оформление по ТК РФ; Комфортный, просторный офис (м. Проспект Вернадского/м. Мичуринский проспект); Бесплатная охраняемая парковка на территории офиса. Спортивный зал в офисе; Возможность гибридного графика работы