你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn。
角色和职责
定义云规模分析策略后,需要组织团队才能成功交付。 本文介绍云规模分析应考虑的一些角色和职责。 可以将这些角色和职责映射到我们在前一篇文章中讨论的各种团队。
重要
本文重点介绍潜在角色和职责,但它不是完整列表。 请考虑本文的指南,然后根据组织内的工作方式对其进行更改。 如果你是一个小型组织,可能没有分配资源给这些角色,但这不应该阻止你部署云规模的分析平台。 如果你是大型组织,你可能会决定简化和合并角色。
角色
云规模分析部署涉及多个角色。 下表描述了每个角色、职务和职责。
角色 |
其他职务 |
责任 |
技能 |
适用于: |
解决方案架构师 |
平台架构师、解决方案架构师 |
设计和监督云技术以满足业务/客户需求 |
云技术主题专家,体系结构模式开发 |
数据应用程序团队,平台组 |
平台运营 |
云工程师、基础结构工程师、系统工程师 |
协助云技术设计、实现和启用云服务和功能以及管理云资源 |
云技术主题专家、编程、DevOps |
数据登陆区域运营、平台组 |
安全架构师 |
|
安全标准和策略设计、安全标准和策略监督、安全工具决策、安全评估和审核以及安全模式和流程 |
安全技术主题专家、法规、合规性和法律控制、决策、威胁防护和漏洞管理 |
平台组 |
安全工程师 |
安全运营 |
安全策略、标准和工具实现,并帮助进行安全评估和/或审核 |
安全技术主题专业知识、法规、合规性和法律控制、威胁检测、漏洞管理和 SOC 流程 |
平台组 |
DataOps 工程师 |
数据平台运营 |
协调分析流程、将功能部署到生产环境,以及自动化质量管理。 |
敏捷开发、DevOps、统计过程控制 |
数据应用程序团队 |
数据建模架构师 |
数据建模器 |
数据建模、数据映射和数据模式 |
行业数据标准、数据工具能力、数据湖数据库模板和数据治理 |
数据应用程序团队 |
数据解决方案架构师 |
数据解决方案架构师 |
数据平台最佳做法应用程序、数据发布者/数据产品所有者指南和数据模式 |
行业数据标准、数据工具能力、湖泊数据库模板和数据治理 |
数据应用程序团队,平台组 |
数据工程师 |
数据 QA 工程师、ETL 工程师 |
湖数据库模板/数据湖/仓库/市场实现、数据移动和数据转换 |
数据库、编程/脚本、简单存储和数据 API |
数据应用程序团队 |
数据所有者 |
源数据所有者,技术发布者 |
访问权限审批、数据质量、业务术语定义、使用规则定义,以及在用于加入数据源的控制文件中指定数据 |
领域主题专家和业务关系 |
数据应用程序团队 |
数据产品所有者 |
数据科学家经理,数据分析师经理 |
数据产品、数据产品使用情况和指标定义的愿景 |
业务主题专家、业务关系、分析概念、用户体验设计和产品管理 |
数据应用程序团队 |
数据分析师 |
数据可视化、设计器、业务数据分析师、BI 开发人员、BI 工程师、报告分析师 |
可视化、图表、图形、仪表板、表、报表和探索性数据分析 |
编程/脚本/SQL、统计信息、数据清理和数据可视化 |
使用者、数据应用程序团队 |
数据科学家 |
机器学习研究员、机器学习工程师、定量分析师、AI 程序员 |
算法、模型、数据产品策展、探索数据分析、测量和改进结果以及传达结果 |
业务主题专家、高级数学、机器学习、数据挖掘工具、编程/脚本/SQL、统计信息和数据可视化 |
数据应用程序团队 |
数据管理管理器 |
数据管理主管,数据管理发起人 |
数据管理计划监督、数据管理标准、策略和规则,以及支持治理功能的工具审批 |
治理法规和控制框架、业务关系以及业务策略与目标的一致性 |
平台组、治理 |
数据专员 |
数据受托人 |
数据含义、数据质量、数据合规性、数据资产适用性、数据产品知识及其使用、数据团队外展、概念主题区域所有权、具有技术数据所有者的主题区域领导以及数据主体区域管理 |
域主题专业知识、数据质量、治理法规和治理控制框架 |
数据应用程序团队,治理 |
责任
云规模分析部署涉及多个责任领域。 下表提供了上述每个区域的概述。
计算
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
管理用于请求计算的 UI |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
指定使用哪些工具将计算引入数据平台基础结构即代码 (IaC) 模板 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
配置和监视访问数据平台的计算 |
|
|
|
|
|
|
A |
R |
|
|
R |
R |
R |
R |
为用于访问数据平台的计算提供生产者支持 |
|
|
|
|
|
|
|
A |
|
|
R |
|
|
R |
了解、监视和执行业务规则和清理以进行数据管护 |
|
A |
|
|
|
|
|
|
|
|
R |
R |
R |
R |
数据生命周期
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
负责数据平台中区域的数据模型体系结构 |
|
|
|
|
|
|
|
R |
|
|
R |
A |
R |
R |
推动体系结构审批,实现数据平台的整体连续性 |
|
|
|
|
|
|
|
|
|
|
R |
A |
R |
|
自有源数据加载到数据平台 |
A |
|
|
|
|
R |
|
|
|
|
|
|
|
|
管理加载到数据平台的源数据 |
A |
|
|
|
|
R |
|
|
|
|
|
|
|
R |
管理数据平台中的引入服务 |
|
|
|
|
|
|
|
|
|
|
A |
|
|
|
管理数据平台中的握手服务 |
|
|
|
|
|
|
|
|
|
|
A |
|
|
|
管理原始数据区的存档数据(保存期限和存档策略) |
|
R |
|
|
A |
|
|
|
|
|
|
|
|
R |
准备要引入的数据以投放或加载到其他区域 |
A |
|
|
|
|
|
|
|
|
|
|
|
|
|
更改管理 - 对现有数据源的更改 |
A |
|
|
|
|
R |
|
|
|
|
|
|
|
|
执行端到端测试和报告结果 |
|
|
|
|
|
|
|
R |
|
R |
A |
R |
R |
R |
执行测试后的错误修复 |
|
|
|
|
|
|
|
R |
|
R |
A |
R |
R |
R |
数据产品和运营
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
管理备份和恢复 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
管理数据库性能和可用性 |
|
|
|
|
|
|
A |
R |
R |
R |
|
|
|
|
管理数据平台的 ITSM 进程(事件、问题、更改、请求等) |
R |
R |
R |
R |
R |
R |
R |
R |
R |
R |
R |
|
|
R |
监督数据平台服务的服务级别协议 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
支持和管理 Azure 订阅 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
了解组织、订阅、许可证、用户帐户和租户之间的关系,以设置订阅模型 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
查看每月 Azure 帐单并了解使用情况和费用 |
R |
R |
|
|
|
|
A |
|
|
|
|
|
|
|
管理成本并创建报销和退款报表 |
|
R |
|
|
|
|
A |
|
|
|
|
|
|
|
成本管理 - 使成本模型能够定义报告和费用。 |
|
R |
|
|
|
|
A |
|
|
|
|
|
|
|
成本管理 - 使用成本报告分析趋势和使用量增长 |
|
R |
|
|
|
|
A |
|
|
|
|
|
|
|
执行代码评审以确保可靠的完整性 |
|
|
|
|
|
|
|
R |
|
R |
A |
|
|
R |
生成并交付批准的数据解决方案体系结构 |
|
|
|
|
|
|
|
R |
|
R |
R |
|
|
R |
投放区域
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
管理投放区域预配的 UI |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
请求投放区域 |
A |
|
R |
R |
|
|
|
|
|
|
|
|
|
|
审批投放区域预配 |
A |
|
|
|
R |
|
|
|
|
|
|
|
|
|
管理投放区域预配执行 |
|
|
|
|
|
|
A |
R |
|
|
|
|
|
|
概况
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
在体系结构获得批准后,管理利益相关者的沟通。 |
|
|
|
|
|
|
A |
|
|
|
|
|
|
|
衡量将来项目的可重用性 |
R |
R |
|
|
|
|
R |
R |
|
|
R |
A |
R |
R |
业务团队培训 |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
基础结构团队支持 |
R |
R |
R |
R |
R |
R |
|
A |
|
R |
R |
|
|
R |
事件管理 - 数据平台相关问题 |
|
|
|
|
|
|
|
R |
|
|
A |
|
|
|
定义、传达和推动数据策略和数据管理策略的执行 |
|
|
|
|
A |
|
|
|
|
|
|
|
|
|
治理
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
拥有数据产品所有者/数据所有者之间的合作关系,以确保采取最佳做法 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
与数据平台相关的记录标准的 EA、云和安全性主要联络人 |
|
|
|
|
|
|
R |
|
R |
|
|
A |
R |
|
与数据产品所有者/数据所有者合作进行数据完整性工作 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
负责处理数据平台中的所有数据 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
定义与数据平台相关的元数据管理标准(有关元数据创建和维护的策略和规则) |
R |
R |
|
|
A |
|
|
|
|
|
|
|
R |
R |
确保数据平台中的数据质量和数据管理标准 |
R |
R |
R |
R |
A |
R |
|
|
|
|
|
|
R |
R |
确保数据平台中的数据安全性和符合性 |
R |
R |
|
|
A |
R |
|
|
R |
R |
|
|
|
R |
在数据平台中监视和查看数据质量 |
R |
R |
R |
R |
A |
R |
|
|
|
|
|
|
R |
R |
在数据平台中度量和报告数据质量给管理层 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
Lake 数据库模板
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
管理用于将数据引入数据平台的湖数据库模板映射 |
R |
A |
|
|
|
|
|
|
|
|
R |
|
|
R |
拥有数据平台中的湖数据库模板 |
|
R |
|
|
|
|
|
|
|
|
R |
A |
R |
R |
加入
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
拥有新的数据用例流程请求 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
标识数据用例的数据所有者 |
A |
R |
|
|
R |
|
|
|
|
|
|
|
|
|
从数据所有者和数据产品所有者收集数据用例要求 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
批准新数据用例 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
确定数据用例分类和数据域 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
定义数据目录的其他数据用例元数据(资产说明、联系人、文件夹结构等) |
R |
R |
|
|
A |
R |
|
|
|
|
|
R |
R |
R |
确定数据用例的数据访问要求 |
R |
R |
|
|
A |
|
|
|
|
R |
|
R |
R |
R |
促进数据用例的资金审批 |
R |
R |
|
|
A |
|
|
|
|
|
|
R |
R |
|
促进敏感数据加入的隐私评估 |
R |
R |
|
|
A |
|
|
|
|
R |
|
R |
R |
|
使数据用例的体系结构模式获得批准 |
R |
R |
|
|
|
|
|
|
|
|
|
A |
R |
R |
与数据工程师协作处理数据用例 |
|
R |
|
R |
A |
|
|
|
|
|
|
|
|
R |
确保满足和对齐现有数据模型标准 |
|
|
|
|
|
|
|
|
|
|
|
|
A |
|
确保遵循治理和风险准则 |
|
|
|
|
A |
|
|
|
|
|
|
|
|
|
创建“源到目标”映射文档并拥有更新 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
R |
|
审批“源到目标”映射文档 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
R |
|
职权范围
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
对数据术语表的读取访问权限 |
|
|
R |
R |
A |
|
|
|
|
|
|
|
|
|
管理数据术语表创建、更新、删除 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
批准数据术语表更改 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
对数据目录拥有读取访问权限 |
|
|
R |
R |
A |
|
|
|
|
|
|
|
|
|
管理数据目录创建、更新、删除 |
|
|
R |
R |
A |
R |
|
|
|
|
|
|
|
|
批准数据目录更改 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
在 Purview 中注册数据源 |
|
R |
|
|
A |
|
|
|
|
|
R |
R |
R |
R |
管理 Purview ADLS 扫描 |
|
|
|
|
A |
|
|
|
|
|
R |
|
|
R |
管理 Purview 权限 |
|
|
|
|
A |
|
|
|
|
|
R |
|
|
R |
管理 Purview 策略(数据集访问) |
|
|
|
|
A |
R |
|
|
|
|
|
|
|
|
批准权限范围策略(数据集访问) |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
监视 Purview 见解报告 |
R |
R |
|
|
A |
R |
|
|
|
|
|
|
|
|
管理 Purview 集合 |
|
|
|
|
A |
|
|
|
|
|
R |
|
|
R |
安全
责任领域 |
数据所有者 |
数据产品所有者 |
数据分析师 |
数据科学家 |
数据管理管理器 |
数据专员 |
解决方案架构师 |
平台运营 |
安全架构师 |
安全工程师 |
DataOps 工程师 |
数据解决方案架构师 |
数据建模架构师 |
数据工程师 |
管理数据平台的加密和加密服务 |
|
|
|
|
|
|
|
R |
A |
R |
R |
|
|
R |
审批结构化区域的数据访问请求 |
R |
|
|
|
|
|
|
|
|
R |
|
R |
R |
|
审批黄金区域的数据访问请求 |
R |
R |
|
|
A |
|
|
|
|
|
|
|
|
|
审批原始区域的数据访问请求 |
R |
|
|
|
|
|
|
|
|
R |
|
R |
R |
|
监视和审核数据平台访问 |
R |
R |
|
|
|
|
|
|
A |
R |
|
|
|
|
下一步
了解数据管理登陆区域和数据登陆区域中的组一致性: