数据平台 · 数据流图

数据平台 · 谁在哪个阶段碰数据

数据平台数据流图(深色) 数据流图:管理员、工程师、分析师、使用者四条角色道,采集、存储、加工、分析、发布五个步骤;焦点为分析步骤的探索建模节点与工程师向分析师的匿名数据交接;权限管控节点锈红标注治理关注点。 管理员 工程师 分析师 使用者 01 采集 02 存储 03 加工 04 分析 05 发布 匿名数据 ADM 项目启动 建 bucket · 配权限 MinIO · LDAP ADM 权限管控 桶策略 · 目录同步 LDAP 控制台 ENG 源头接入 外部源 → 原始层 NiFi · Kafka LS DB ENG 原始落地 原始数据入湖 MinIO DB DB ENG 清洗加工 原始 → 分析表 NiFi · Trino DB TB SCI 探索建模 匿名数据 → 洞察 JupyterHub TB FL SCI 发布洞察 模型 → 看板 Superset FL FL CON 查询消费 聚合视图 · 只读 Trino TB WB 步骤 01 采集 02 存储 03 加工 04 分析 05 发布 数据类型 WB DB TB FL LS 关注点 权限治理 焦点 流向 常规交接 治理触发 焦点交接 对外消费