关于cdh5:CDHHDP迁移之路
哪些用户须要迁徙 原社区版用户 社区版不再更新Cloudera(Cloudera 和Hortonworks 合并后)所有产品不再提供社区版,用户无奈获取新的性能。 社区版不再收费2021年1月31日开始,所有Cloudera软件都须要无效的订阅,且订阅费低廉(50个节点,一年订阅费50万美元)。 原企业版用户 企业版不再更新Cloudera 和Hortonworks 合并后推出了新一代大数据平台 CDP,CDH 6和HDP 3将是CDH和HDP的最初企业版本,用户无奈持续获取新的性能和性能晋升。 企业版不再服务至2022年3月份,CDH/HDP全副EoS,用户没方法获取售后反对: 起源:cloudera官网 迁徙方向 方向一:CDPCDP是 Cloudera 和Hortonworks 合并后公布的新产品,交融原来CDH和HDP能力并减少了一些新性能和BugFix,反对云部署等能力。 尽管CDP提供了一些新能力,也将持续更新并提供反对,但外国的软件无奈适配国产软硬件生态(国产芯片、操作系统、服务器、中间件),技术方向不能自主可控,许可证也受外国法律限度,近期俄罗斯事件将这方面危险彻底裸露: Oracle发表暂停在俄业务3月3日,Oracle发推文称:“为了Oracle在寰球各地的150000名员工的利益,为了反对乌克兰民选政府和乌克兰人民,Oracle公司曾经暂停了在俄罗斯联邦的所有业务。 泛滥科技公司断供俄罗斯a. 谷歌发表 Google Pay 在俄罗斯无限期暂停应用;b. 苹果公司除了发表在俄罗斯停用 Apple Pay 以外,也在俄罗斯境内进行所有产品的销售c. 英特尔、戴尔、AMD 发表向俄罗斯断供芯片 d. …… 下一个或是GitHub?外媒音讯称,寰球第一代代码托管平台GitHub 正在思考限度俄罗斯开发人员应用开源软件。只管此类软件的应用是收费的,但它的许可协定依然存在诸多限度,包含禁止受制裁的国家应用本来对公众收费凋谢的代码。 方向二:国内封装的Hadoop商业版对开源组件进行封装,装置部署运维方面有一些加强。 然而不可避免的,封装开源组件始终是受制于国外法律与国际形势,危险与方向一迁徙到CDP相当。 同时,对开源组件进行封装的厂商无奈获取最新的源代码。另外,很多人认为有源代码就能够自主可控,理论代码只是一个技术的载体,仅仅领有源代码并不代表领有核心技术,数千万行代码里扫清有意无意的破绽基本不事实,拥抱开源的同时也肯定拥抱了危险。 随着美国公司Cloudera不再更新社区版,这一类产品将无奈取得能力更新,除非也降级到CDP,齐全走向方向一。 方向三:国内自主研发大数据产品TDHTranswarp Data Hub(TDH)是星环科技自主研发的企业级一站式多模型大数据根底平台,采纳当先的多模型技术架构,8种存储引擎反对10种数据模型,成套的工具组件让零碎的装置部署、扩容降级、平安防守、危险告警、权限治理等工作变得更便捷。在技术当先性、性能、易用性、安全性、国产化生态兼容性,以及售后服务等诸多方面具备劣势。同时,国产自主研发的TDH对国产化生态具备高度兼容性,满足信创验收要求。 迁徙到不同平台后取得的能力 迁徙到国产自主研发大数据产品TDH 如果你关注性能TDH的多模架构,反对关系表、文本、时空天文、图数据、文档、时序等在内的10种数据模型;离线数据批处理、高并发的在线数据服务、数据集市、数据仓库、数据湖、图存储剖析、空间数据存储、实时数据处理、数据中台、数据治理等各类大数据业务场景一站解决。 如果你关注性能TDH自研高性能分布式计算和存储引擎,整体性能是CDP的 5~25倍。 如果你关注开发TDH残缺反对SQL2003规范,反对PLSQL存储过程,兼容Oracle、DB2、Teradata等方言,无需每个场景一套接口。 如果你关注运维TDH提供开箱即用的可视化运维监控、平安管控工具,容器技术带来极致的装置、降级、补丁体验。 如果你关注售后TDH原厂超过1100人研发与反对团队和超过3万名星环科技认证的大数据工程师,专业性更强,售后无忧。 如果你关注架构TDH提供对立SQL引擎、对立计算引擎、对立分布式存储管理、对立资源调度、对立内联架构高效搞定湖仓集一体、HTAP等简单场景,无需平凑组件散装架构。 如果你关注平安TDH提供的容器隔离、灾备、访问控制、联邦学习、隐衷爱护、可信计算等技术保障网络层、加固层、治理层、流通层全方位数据安全。 如果你关注国产化TDH齐全自研,通过工信部代码自主研发率扫描测试。同时TDH实现了与支流信创生态厂商的适配互认工作,满足信创验收要求。 迁徙到CDP 迁徙方向的比照剖析 以下别离从兼容性、技术当先性、性能、易用性、稳定性、灾备与可靠性、安全性、自主可控、国产生态、解决方案、售后服务等多方面比照各迁徙方向,供用户参考。 兼容性兼容性,间接决定迁徙老本。很多客户认为CDP是CDH/HDP的高版本,应能够平滑降级,基于开源整合的产品,也能够平滑降级,而TDH是国内自主研发的大数据产品,兼容性不好,降级老本高,其实不然。 CDP1) CDH 5降级CDP有重大组件版本兼容性问题, 包含 sentry 换成ranger,Hive2 降级到 Hive3,降级对组件的兼容性影响大;2) 例如:某客户CDH5降级到CDP的降级工夫长达数月之久。 ...