- 背景概述
为了支持更多的数据分析师参与到公司整体的数仓建设和数据开发、数据分析工作;加快公司整体的数据资产化进程和支持商家侧数据的客群分析、精准营销等产品功能。提高公司各业务部门的数据开发效率和数据可视化分析能力。
- 逻辑架构
上图中:
- 数据源管理系统进行数据源实例级别的隔离;
- 数据集成开发进行数据同步到数据仓库层,保证逻辑数据空间的数据库表的权限隔离;
- 数据开发中的离线和实时开发对数据仓库间进行受控的数据权限分享控制,支持数据表行列级权限的控制;
- 任务提交运行后,资源组管理系统对开发组内的任务进行独立执行队列的隔离控制,同时进行计算资源的成本统一结算;
- 数据仓库分析完成的应用层数据,对接数据服务层;在同一个工作空间内,完成数据可视化开发和数据API开发控制;
从而达成从下向上的全链路逻辑工作空间的隔离和权限管控;下文将逐个子系统进行改造或改进点的阐述。
- 用户权限
在加入开发组的空间管理功能后,用户视角下有以下调整:
对于上文描述的数据集成任务开发、数仓开发等场景下,用户由原来的单平台层面的操作逻辑调整为在开发组内进行隔离操作的。此外,新增的流程控制包括: 开发组的加入和管理流程,数据表权限获取等审批流程,开发组内的任务操作和管理审批流程,开发组间数据分享的审批流程等