

如图所示,观远数据Galaxy的技术架构,主要可分为分析决策系统与运维系统,通过Kubernetes和Docker容器化的方式进行部署。
分析决策系统自下而上可分为数据接入层,数据存储层,计算层,逻辑层,前端应用层。
· 数据接入层支持多种数据库、文件数据和SaaS数据等;
· 数据存储层主要采用Minio+Delta Lake的分布式对象存储;
· 计算层主要采用Spark来提供计算引擎,支持集群化的横向扩展能力。同时直连与实时数据场景下,还有相应的直连数据引擎和实时数据引擎来提供相应的数据计算支撑;
· 逻辑层是整个BI产品的核心,主要做系统元数据管理、请求解析与计算任务开发、系统任务调度、前后端交互等工作;
· 前端应用层,主要为Guandata Web、H5、Guandata Admin等前端应用。
运维系统主要包括分布式跟踪系统、系统状态监控、日志收集检索系统、Spark JobServer管理、Spark管理等组件,用来支撑系统的正常运行以及实现运维、监控的需要。
配置说明
为了稳定运用平台,为企业成员提供良好的数据分析体验,保障智能决策之旅,在规划阶段,需要对将使用的资源数目进行评估,以掌握后续的成本状况;
在使用期间,需要对实际需要的资源容量进行巡检,以及时扩容,满足业务分析需求。企业可根据实际用户数据量等进行硬件环境配置,观远数据的专业顾问将为企业提供规划方案。






























