Текст ниже сгенерен copy.ai и отредактирован @Anonymous
Описание проекта
Разрабатываемый проект является системой для аналитики данных ресторанов, использующих платформы IIKO и Absolut. В процессе разработки будет создана Data Warehouse (DWH) на базе Clickhouse для агрегации данных из тысяч заведений.
В рамках проекта также планируется обогащение данных из внешних источников, таких как погода, праздники и мероприятия. Также необходимо подключить собственные источники данных, включая статистику из социальных сетей и рекламных платформ.
https://miro.com/app/board/uXjVMwkJK9I=/
Цели проекта
- Возможность хранить, обрабатывать данные из различных источников данных
- Возможность работать с новыми источниками данных без постоянного участия разработки
- Отделить аналитические и операционные данные для обеспечения надежности, стабильности и скорости работы с данными
- Возможность формировать новые отчеты по клиентам средстами BI-инструментов без участия разработки
Требования к хранилищу данных
- Настроить PostgreSQL для эффективной работы c данными.
- Создать структуру базы данных для хранения данных, включая таблицы, индексы и связи между таблицами.
- Разработать процессы ETL для загрузки данных из платформ IIKO и Absolut в DWH.
- Обеспечить производительность запросов к данным, включая использование оптимизированных запросов и индексов.
Результаты проекта
- Данные из платформ IIKO и Absolut загружены и хранятся в DWH.
- Данные из внешних источников (погода, праздники, мероприятия) обогащаются и доступны для анализа.
- Данные из собственных источников (статистика из социальных сетей, рекламных платформ) подключены и доступны для анализа.