Разработка витрин данных для дашбордов на платформе Vertica

Необходимо разработать витрины данных и SQL-скрипты для расчета и вывода на дашборды метрик эффективности производства.

Компания «Сибур» разрабатывает систему для анализа эффективности производства, состоящую из 4 дашбордов с 50-60 метриками в каждом. Информация для них берется из озера данных на платформе Vertica, которое наполняется из баз данных, MES-систем и прочих локальных источников.

Сейчас проведен бизнес- и системный анализ деятельности предприятий на 8 заводах ООО «СибурТюменьГаз». С 1 июля начнется детальная проработка системы для ее последующего тиражирования на остальные предприятия холдинга.

Лидер проекта ищет 6 специалистов — 5 архитекторов данных и 1 инженера-программиста, которые присоединятся к команде проекта, проанализируют требования отдельных предприятий, спроектируют и доработают хранилище данных с учетом новых требований, подготовят SQL-скрипты для вывода метрик на дашборды и разработают инструменты для интеграции озера данных с локальными информационными системами.

1. Хранилище данных в формате таблиц, представлений и витрин данных, реализованное на платформе Vertica.

2. SQL-скрипты для вывода метрик из озера данных на дашборды.

3. Рабочая документация в формате *.docx.

4. Исходный код инструментов для интеграции озера данных с локальными системами (ETL-процедуры, REST/gRPC API и пр.), разработанный на выбранном языке программирования (Python, Java, C# или C++) и соответствующий соглашениям о кодировании.

5. Рабочая документация на программный код, описывающая его структуру, порядок сборки, развертывания, настройки и запуска, в формате *.docx.

1. Хранилище данных решает поставленные задачи и соответствует подходам к проектированию, принятым в проекте.

2. SQL-скрипты протестированы и оптимизированы.

3. Исходный код инструментов для интеграции решает поставленные задачи, протестирован совместно с архитектором, не содержит ошибок и соответствует соглашениям о кодировании, которые будут определены на старте проекта.

4. Рабочая документация подготовлена в соответствии с требованиями технической поддержки.

5. REST/gRPC API для интеграции систем успешно прошли тестирование.

6. ETL-процессы разработаны с применением современных инструментов проектирования (Apache NiFi, Apache Airflow).

Для архитектора данных проект предусматривает денежное вознаграждение в размере 1 280 000 рублей после всех вычетов для физлиц (налоговая ставка 13%) или 1 382 990 рублей после всех вычетов для самозанятых / ИП (налоговая ставка 6%).

Для инженера-программиста проект предусматривает денежное вознаграждение в размере 924 000 рублей после всех вычетов для физлиц (налоговая ставка 13%) или 998 345 рублей после всех вычетов для самозанятых / ИП (налоговая ставка 6%).