关于阿里云开发者:DataWorks-功能实践-生产开发环境隔离

42次阅读

共计 4700 个字符,预计需要花费 12 分钟才能阅读完成。

简介:DataWorks 性能实际系列,帮忙您解析业务实现过程中的痛点,进步业务性能应用效率!

往期回顾:

  • DataWorks 性能实际速览 01 期——数据同步解决方案:为您介绍不同场景下可选的数据同步计划。
  • DataWorks 性能实际速览 02 期——独享数据集成资源组:为您介绍进行数据同步时,可应用的资源组与网络连通计划、注意事项。

通过前两期的介绍,您能够理解应用 DataWorks 进行数据同步的次要知识点:数据同步计划和资源组,而在理论利用过程中,咱们经常会须要将开发和生产环境进行隔离,开发环境用于数据同步测试,生产环境用于生产数据的同步解决。本期就为您介绍 DataWorks 实现开发与生产环境隔离的次要知识点。

性能举荐:规范模式——开发环境与生产环境隔离

为不便不同平安管控要求的用户生产数据,DataWorks 为您提供 简略模式 规范模式 两种工作空间模式,其中 简略模式 无奈设置开发环境和生产环境,而 规范模式 同时提供开发环境与生产环境,并将两个环境隔离开,您能够别离在开发环境和生产环境中进行数据工作解决。

Part1:简略模式与规范模式的 DataWorks 工作空间

首先为您介绍两种模式工作空间的次要区别。

<span> 简略模式 </span><span> 规范模式 </span>
<span> 在简略模式工作空间下,一个 DataWorks 空间上层对应一个 MaxCompute 我的项目(或一个 EMR 集群、Hologres 数据库等),该环境即视为生产(PROD)环境。</span><span class=”lake-card-margin-top lake-card-margin-bottom”><img src=”https://ucc.alicdn.com/pic/developer-ecology/5905f40277b34b25b42339b43191595c.png” class=”image lake-drag-image” alt=” 简略工作空间.png” title=” 简略工作空间.png”></span><span> 在规范模式工作空间下,一个 DataWorks 空间上层对应两个 MaxCompute 我的项目(或两个 EMR 集群、Hologres 数据库等),一个视为开发(DEV)环境,一个视为生产(PROD)环境。</span><span class=”lake-card-margin-top lake-card-margin-bottom”><img src=”https://ucc.alicdn.com/pic/developer-ecology/06025e5dcc2a4570bcea8a5c681a7e4a.png” class=”image lake-drag-image” alt=” 规范工作空间.png” title=” 规范工作空间.png”></span>

由上可见,DataWorks 的规范模式工作空间能够将开发、生产环境进行隔离,因而,如果您应用了规范模式后,进行数据拜访与权限管控时,开发环境与生产环境的应用注意事项不统一。

## Part2:不同模式工作空间的数据拜访

您能够在 DataWorks 的 工作空间配置 > 计算引擎信息 区域,设置不同模式下,工作空间的数据拜访模式。

<span> 计算引擎类型 </span><span> 环境 </span>规范模式工作空间简略模式工作空间<span>(开发环境即生产环境)</span>
MaxCompute<span> 开发环境 </span><span> 页面运行工作(不可选):默认为执行工作者(以后登录者)</span><span> 页面运行工作(不可选):默认为执行工作者(以后登录者)</span><span> 调度拜访身份(可选):</span><ul><li><span> 阿里云主账号 </span></li><li><span> 阿里云 RAM 角色 </span></li></ul><ul><li><span> 工作负责人:工作 Owner 账号的身份 </span></li></ul>
<span> 生产环境 </span><span> 调度拜访身份(可选):</span><ul><li><span> 阿里云主账号 </span></li><li><span> 阿里云 RAM 用户 </span></li></ul><ul><li><span> 阿里云 RAM 角色 </span></li></ul>
<span>E-MapReduce</span><span> 开发环境 </span><ul><li><span> 快捷模式下拜访身份:对立应用集群内的 Hadoop 用户。</span></li><li><span> 平安模式下拜访身份:工作执行者 </span></li></ul><ul><li><span> 快捷模式下拜访身份:对立应用集群内的 Hadoop 用户。</span></li><li><span> 平安模式下拜访身份(可选):</span></li></ul><ul><li><ul><li><span> 工作责任人 </span></li><li><span> 阿里云主账号 </span></li></ul></li></ul><ul><li><ul><li><span> 阿里云 RAM 用户 </span></li></ul></li></ul>
<span> 生产环境 </span><ul><li><span> 快捷模式下拜访身份:对立应用集群内的 Hadoop 用户。</span></li><li><span> 平安模式下拜访身份(可选):</span></li></ul><ul><li><ul><li><span> 工作责任人 </span></li><li><span> 阿里云主账号 </span></li></ul></li></ul><ul><li><ul><li><span> 阿里云 RAM 用户 </span></li></ul></li></ul>
<span>Hologres</span><span> 开发环境 </span><span> 页面运行工作(不可选):默认为执行工作者(以后登录者)。</span><span> 页面运行工作(不可选):默认为执行工作者(以后登录者)</span><span> 调度拜访身份(可选):</span><ul><li><span> 阿里云主账号 </span></li><li><span> 阿里云 RAM 用户 </span></li></ul>
<span> 生产环境 </span><span> 调度拜访身份(可选):</span><ul><li><span> 阿里云主账号 </span></li><li><span> 阿里云 RAM 用户 </span></li></ul>

## Part3:不同模式工作空间的权限治理特色

DataWorks 采取 RBAC 权限模型供用户治理 DataWorks 所有页面可见性能以及 API 的应用权限,同时这套权限体系与 MaxCompute 的 RBAC 角色体系存在人造的映射关系,详情可参见 成员及角色治理与成员角色与权限关系。不同工作空间类型的权限治理特色与优缺点不统一,以下表格为您比照介绍两种空间类型的权限细分特点。

<span> 细分特点 </span><span> 简略模式 </span><span> 规范模式 </span>
<span> 权限概述 </span><span> 在简略模式空间下,DataWorks 的“开发”角色因为与所绑定 MaxCompute 我的项目的“Role_Project_Dev”Role 进行了映射,因而 DataWorks</span><span> 开发角色人造可能读取 MaxCompute 我的项目内的所有数据 </span><span>。</span><span> 在规范模式空间下,DataWorks 的“开发”角色因为与所绑定 MaxCompute 我的项目(dev 环境)的“Role_Project_Dev”Role 进行了映射,因而:</span><ul><li><span>DataWorks 开发角色人造可能读取 MaxCompute 我的项目(dev 环境)内的所有数据。</span></li><li><span> 因为没有和 MaxCompute 我的项目(PROD 环境)的 role 映射,因而默认状况下 DataWorks</span><span> 开发角色无 MaxCompute(PROD 环境)的数据权限 </span><span>。</span></li></ul>
<span> 长处 </span><span> 简略、不便、易用 </span><span>。</span><span> 仅须要受权数据开发人员“DataWorks 开发角色”即可实现所有数据仓库开发工作。</span><span> 平安、标准 </span><span>。</span><ul><li><span> 具备平安、标准的代码公布管控流程(蕴含代码评审、代码 DIFF 查看等性能),保障生产环境稳定性,防止不必要的因代码逻辑引起的脏数据蔓延或工作报错等非预期状况。</span></li><li><span> 数据拜访失去无效管控,数据安全得以保障。</span></li></ul>
<span> 毛病 </span><span> 存在 </span><span> 不稳固、不平安 </span><span> 的危险。</span><ul><li><span> 开发角色能够不通过任何人审批,随时新增、批改代码并提交至调度零碎,给生产环境带来不稳固因素。</span></li><li><span> 面向 MaxCompute 计算引擎时,开发角色默认领有以后 MaxCompute 我的项目所有表的读写权限,可随便对表进行减少、删除和批改等操作,存在数据安全危险。</span></li></ul><span> 流程绝对简单 </span><span>,个别状况下无奈一人实现所有数据开发、生产流程。</span>

## MaxCompute 引擎在不同模式下数据库表命名标准

简略模式下不辨别开发环境和生产环境,开发库即生产库。规范模式下,反对开发环境和生产环境隔离,开发环境和生产环境的数据库表命名有所区别,如果须要在开发环境拜访生产环境的数据库表,请依据以下命名标准严格辨别数据库表名,防止误操作生产环境。

<span> 环境类型 </span><span> 规范模式 </span><span> 示例 </span>
<span> 开发环境 </span><span> 我的项目名_dev. 表名 </span><span> 在 projectA 我的项目下创立一个开发库表 user_info,则数据库表名为:projectA_dev.user_info。</span>
<span> 生产环境 </span><span> 我的项目名. 表名 </span><span> 在 projectA 我的项目下创立一个生产库表 user_info,则数据库表名为:projectA.user_info。</span>

更多的简略模式与规范模式的区别可返回帮忙核心。

## 场景实际:

权限治理与规范化数据开发:通过本实际,您能够理解应用规范模式的工作空间时,用户进行数据开发的规范流程与权限管控倡议。

> 版权申明:本文内容由阿里云实名注册用户自发奉献,版权归原作者所有,阿里云开发者社区不领有其著作权,亦不承当相应法律责任。具体规定请查看《阿里云开发者社区用户服务协定》和《阿里云开发者社区知识产权爱护指引》。如果您发现本社区中有涉嫌剽窃的内容,填写侵权投诉表单进行举报,一经查实,本社区将立即删除涉嫌侵权内容。

正文完
 0