Дата-инженер

З/п не указана
Опыт работы: От 1 года до 3 лет
График работы: Полный день
Занятость: Полная занятость
Компания: АНО Проектно-аналитический центр Мосцифра

Приглашаем в команду дата-инженера:Обязанности:

  • настройка формата логического контроля поступающих потоков данных;
  • разработка модели данных на уровне хранилища для интерактивных информационных панелей;
  • разработка ETL-процессов, реализация схем загрузки и трансформации данных, потоков данных (data pipeline);
  • настройка потоков в Apache NiFi, AirFlow;
  • выявление проблем в проектировании БД и участие в процессе их решения;
  • выполнение разовых выгрузок из БД и ad-hoc аналитики;
  • управление качеством данных;
  • написание скриптов трансформации (SQL, Python);
  • настройка цепочки SQL-запросов и подготовки витрин данных для BI - агрегация и расчеты аналитических показателей;
  • тестирование запросов и витрин данных;
  • оптимизировать производительность извлечения, обработки и загрузки данных;
  • разрабатывать и поддерживать в актуальном состоянии документацию по разработанному функционалу.
Требования:
  • уверенное знание Python;
  • знание SQL на профессиональном уровне, понимая принципы оптимизации запросов и организации хранения данных;
  • опыт построения ETL-процессов, понимание как их протестировать и проверить целостность данных;
  • опыт работы с качеством данных (очистка данных, процедуры Data Quality);
  • знание принципов работы BI-систем, построения аналитических панелей;
  • уверенный уровень владения Excel - сводные таблицы, формулы, ВПР;
  • базовые знания принципов построения системной архитектуры, архитектуры данных, работы с базами данных;
  • опыт настройки взаимодействия систем (REST API, ODBC/JDBC);
  • знание английского языка на техническом уровне.
Приветствуется:
  • опыт работы с любым BI системами - Qlik, Tableau, Power BI
  • опыт с NiFi и/или Airflow;
  • знание методологии Data Vault 2.0;
  • опыт подготовки и очистки данных с помощью Excel или специализированных инструментов;
  • навыки написания технической документации.
Наши преимущества:
  • амбициозные проекты;
  • значимая роль в молодой команде экспертов, в которой коллеги всегда
    поддерживают друг друга;
  • развивающие задачи и карьерные вызовы, реальные возможности для
    роста;
  • открытая атмосфера, где ценят обратную связь, инициативность, креатив.
Условия:
  • работа в стабильной компании;
  • оформление согласно ТК РФ;
  • комфортабельный офис в шаговой доступности от м. Арбатская;
  • уровень заработной платы обсуждается с успешным кандидатом;
  • график работы: 5х2, с 09-00 до 18-00.
Хочу откликнуться
<
>