关于华为云:华为云低代码Astro企业应用-Astro-Pro上线啦

<article class=“article fmt article-content”><p>Astro Pro是华为云推出的一款企业应用开发治理平台,专为减速企业数字化转型而设计。</p><p>Astro Pro作为华为云Astro系列的一部分,提供了一整套元数据管理解决方案,旨在为企业SaaS利用提供一个端到端的开发治理平台。</p><p>这个平台通过积淀通用能力,放慢利用构建,同时反对差别场景的灵便扩大,助力企业在业务翻新上获得劣势。</p><p>以下是Astro Pro的几个要害特点:</p><p>元数据治理:Astro Pro通过元数据多租治理实现大规模定制交付,这意味着它可能反对多个租户的数据管理,从而进步企业应用的构建效率和定制能力。</p><p>高下代码协同:平台反对低代码架构设计,并且能够灵便集成企业的高代码存量服务。这样的做法有助于企业疾速构建外围业务利用,同时进步多层级、多分支企业的利用构建效率。</p><p>架构可视化:Astro Pro提供微服务图谱智能剖析能力,使企业可能可视化地设计和剖析其端到端(E2E)架构。这有助于企业更好地了解和优化其服务架构。</p><p>基线定制拆散:平台容许多分支、多版本、历史版本的追溯,这样企业能够依据本人的需要进行定制化开发,同时放弃与骨干版本的独立性。</p><p>现已开启公测,点击下方链接即可申请:https://www.huaweicloud.com/product/astropro.html</p><p></p></article>

March 5, 2024 · 1 min · jiezi

关于华为云:华为云命令行工具KooCLI高效云端管理的秘诀

做运维多年,公司从传统运维改为云上。刚一接触时,的确因为要学习很多云常识而懊恼。每次想要执行某个操作时,都要先登录到云平台,浏览界面,寻找正确的按钮。这样不仅浪费时间,还常常出错。直到有一天,我发现了云上命令行工具,我的云端管理效率从此失去了质的飞跃。 我从华为云官网产品帮忙文档中理解了KooCLI工具,文档中介绍的便捷操作和高效治理让我心动不已,于是,我开启了我的体验。通过简略的命令行输出,我可能疾速实现之前须要繁琐操作的事件。而且更令我感到惊喜的是,联合脚本能够自动化执行反复的工作,极大的晋升了我的工作效率。我不再须要频繁登录云平台,而是能够通过命令行随时治理我的资源。 要利用KooCLI,首先须要进行装置,华为云KooCLI反对Windows、Linux、MacOS零碎便捷装置及Docker容器配置,满足大家的各种环境须要。 装置实现之后,咱们就能够利用华为云API Explorer凋谢接口平台,依据本身需要迅速理解每个接口的具体信息。华为云KooCLI能够调用华为云上所有凋谢的API接口,咱们填写好必要参数后①,CLI示例页签就能够同步生成CLI命令②,咱们能够间接点击复制按钮③,在命令行界面执行,或者在华为云提供的网页版Shell工具Cloudshell④中运行,精确又不便。  当然,咱们还能够间接在命令行界面利用help命令理解接口及参数信息。只须要在云服务service或接口名称operation后增加“--help”参数,即可查看帮忙信息。 hcloud <service> --help hcloud <service> <operation> --help 为了晋升用户执行命令的体验感,华为云KooCLI还提供了命令主动补全及命令交互性能。 只有开启命令主动补全性能后,在输出命令时应用“Tab”键,即可实现依据已有命令提醒其待补全的内容,目前开启命令补全反对bash。 而命令交互则是反对多平台,在命令中增加“--interactive”参数即可进入交互式提醒。可依据咱们输出的内容,主动提醒云服务名称、API名称、参数及信息形容,也提供局部参数值的补全性能。 最近,我还发现KooCLI新上线了生成JSON格局API入参骨架的性能,在命令中增加“--skeleton”参数即可在本地环境生成骨架JSON文件。生成的模板蕴含命令反对的所有参数及形容,能够将不须要的参数删除。将批改好的文件模板文件传递到--cli-jsonInput参数,即可应用填写的参数运行命令,又晋升了工作效率。 总之,我当初曾经离不开华为云KooCLI了。它成为了我云端治理的得力助手,助力我高效地应答各种挑战。每当有新需要或我的项目时,我都会毫不犹豫地抉择应用这款工具。 如果你还在为云端治理而懊恼,无妨尝试一下云上命令行工具。置信它会为你带来意想不到的播种和惊喜。 产品官网链接:[  https://support.huaweicloud.com/hcli/index.html]()

March 4, 2024 · 1 min · jiezi

关于华为云:最常用的几款Paas平台编译构建工具的对比

原文链接:https://bbs.huaweicloud.com/blogs/417355 作者:华为云专家——沈洲 发现市面上这方面的文章还比拟少,来裁减一下。 罕用的 PaaS 平台内的构建工具包含了以下这些: 一、AWS CodeBuild 托管在 AWS 云平台上,具备高可用性和弹性。反对多种编程语言和框架,包含 Java、Python、Node.js、Ruby 等。能够与其余 AWS 服务集成,如 AWS CodePipeline、AWS CodeCommit、AWS S3 等。反对构建和测试多个我的项目,且构建速度快。 二、CircleCI 反对多个版本的操作系统,包含 Linux、macOS 和 Windows。提供了易于应用的 UI 界面和可自定义的配置文件。 反对多种编程语言和框架,包含 Java、Python、Ruby 等。提供了丰盛的插件和集成,如 Slack、GitHub、JIRA 等。 三、CodeArts Build 华为云出品的 paas 平台构建工具。反对多种语言和框架,如 Java、Python、Node.js 等。它提供了一个易于应用的界面和命令行工具,能够疾速部署应用程序。CodeArts Build 还提供了一些弱小的性能,如主动扩大、日志治理、监控和警报等。 总体来说,AWS CodeBuild 适宜在 AWS 生态系统中构建和测试应用程序,而 CircleCI 适宜在多个平台上构建和测试应用程序,抉择哪个工具取决于具体的需要和环境。但目前, 美国的云服务受到了肯定的制裁, 相对来说注册和应用都有一些不不便之处。 在这里举荐一下 CodeArts Build, 作为华为自主研发的产品,相对来说更适宜在国内应用了。 我感觉它最次要的劣势包含了: 自动化构建Codearts Build 能够自动化构建应用程序,从而缩小手动操作,进步构建效率。 多语言反对Codearts Build 反对多种编程语言,包含 Java、Python、Node.js 等,能够满足不同我的项目的需要。 继续集成Codearts Build 反对继续集成,能够自动化执行构建、测试、部署等操作,从而进步开发效率和代码品质。 多环境反对Codearts Build 反对多种部署环境,包含私有云、公有云、混合云等,能够满足不同场景的需要。 ...

February 28, 2024 · 1 min · jiezi

关于华为云:朴素的DevOps价值观

原文链接:奢侈的DevOps价值观_软件开发生产线 CodeArts_实践实际_DevOps概览_华为云 Nicole Forsgren博士在DOES上的演讲,说过一句话:Architecture matters...Technology doesn't。 最近也遇到越来越多相似的问题,例如:业务方向不明确的状况下,如何拆分微服务? 咱们通常的观点是“架构是服务于业务的,太过超前的架构是节约”,由此能够想到架构与业务其实也有类似的关系。 编辑 参考Nicole的句式,从DevOps波及到的几个维度登程:业务、架构与技术;人、流程与工具;准则,办法与实际,于是便有了如下的几句话: Business matters...Architecture doesn't. Architecture matters...Technology doesn't.<!----> People matters...Process doesn't. Process matters...Tool doesn't.<!----> Principle matters...Method doesn't. Method matters...Practice doesn't.本文中暂且把这些观点称之为奢侈的DevOps价值观。之所以奢侈,是因为这只是一个比拟原始的想法,称之为价值观是因为具备相当的普适性。同时,如果这些观点有幸真的能够逐步造成价值观,它也应该是简略纯朴的。 业务、架构与技术上面,让咱们先来看看业务(Business)、架构(Architecture)与技术(Technology)这个维度: 编辑 Business matters...Architecture doesn't . 架构是服务于业务的,对于初创公司,新型的业务,是否须要驳回微服务,答复是视状况而定的,但通常倡议从单体利用开始。 微服务的价值与挑战一样显著。 初创公司,业务方向还在一直摸索,服务的边界是含糊的,即便对微服务的技术储备足够,也不倡议此时就搞微服务架构,用最简略间接的办法搞定疾速变动的业务诉求。 用贷款买房来类比架构投入,本人出的首付款就像是后期在架构上的投入,贷款就好比是缩小肯定的架构投入,所需承担的技术债权: 贷款买房,预期的是将来的房产的增值,贷款的利息相较起来是能够承受的。 []()[]()守业期也是同样,此时承当肯定的技术债权是理智正当的抉择。 一味谋求全款买房,就会错过买房的最好工夫窗口。 []()[]()业务的工夫窗口更短,须要一直的疾速试错,冀望在架构层面一步就位是不事实的。 不能贷款过多,否则无奈承当月供。 []()[]()架构能够一开始简略些,原始一些,但根本的品质和NFR还是须要满足的;而一旦找对业务方向,又须要疾速开展,所以架构在初期具备肯定的扩大能力还是须要的。 要定期清理债权,房贷车贷过多,即便是无力偿还,生存品质也会降落,脱离了原始购房改善生活品质的初衷。 []()[]()技术债权也须要定期偿还,定期清理,不能让因为技术债权产生的额定工夫老本,大于承当技术债权所带来的机会成本。 这其实是一个经济杠杆,用短期或长期的负债,来换取工夫老本和机会成本。所以做架构也好,做DevOps也好,须要有经济的头脑。SAFe第一条准则Take an economic view,也有这层含意。这是一个均衡,一场与工夫的赛跑,但总而言之,业务诉求高于一切。 以上所说的都是因为业务策略须要,被动无意识的承当技术债权。如果是有意识的负债,那个叫做奢侈浪费,本来就应该打消。 Architecture matters...Technology doesn't. 《圣经·旧约·创世记》第11章记录,过后人类语言相通,和衷共济,联结起来兴修心愿能通往地狱的高塔,即巴别塔。“来吧,咱们要建造一座城,和一座塔,塔顶通天,为要传扬咱们的名,省得咱们扩散在全地上”。此举轰动了上帝,为了阻止人类的打算,于是他悄悄地来到天国来到世间,扭转并区别开了人类的语言,使他们因为语言不通而扩散在各处,那座塔于是大功告成了。 架构如此重要,所以一旦业务绝对清晰一些,就要依据业务须要,思考逐步切换到微服务架构,才不至于沉积太多技术债权,对于可扩展性、可规模化、可部署性等也都至关重要。 优雅的良好的架构更加重要,不要让微服务成为另一座巴别塔。实践上微服务能够最大化利用各种语言的劣势,但如果没有好的服务切分与架构设计,微服务只会变成更大的劫难,只会是碎片化而不是去中心化。微服务的目标是更灵便的协同,如果服务之间短少沟通,就背离了微服务设计的初衷。 Google外部有开发三大语言,别离是官网编译语言C/C++、官网脚本语言Python、和官网UI语言Java。保持三大语言意味着外部沟通的顺畅,没有应用最新的技术和语言,并不影响,反而有助于Google疾速成为世界领先的公司。 团队效率高于集体效率,对立技术栈带来的收益,往往大于应用最新技术栈带来额定的保护和沟通老本。Etsy在2010年,决定大量缩小生产环境中的技术,对立标准化到LAMP栈。“与其说这是一个技术决策,不如说是一个哲学决策”。这让所有人,包含开发和运维,都能了解整个技术栈。另一个例子,Etsy在2010年引入MongoDB,后果是“无模式数据库的所有劣势都被它们引发的运维问题对消了”,最终Etsy还是抉择放弃了MongoDB,迁徙到MySQL。 DevOps也并非只有Web利用、SaaS或是开放平台才实用,咱们听到太多传统银行的转型案例,主机开发的案例,技术并非DevOps的相对先决条件,尽管开放平台可供选择的工具会多一些,前面咱们还会就工具进行探讨。 技术圈总是喜爱追赶潮流,总是存在各种鄙视链,就像已经呈现的PHP与其余各种语言的互喷群。还有相似于容器编排技术,大家一窝蜂的从Swarm、Mesos向K8s迁徙。但对于企业而言技术永远不是第一位的,最新的未必是最合适的,永远追赶最新的技术,往往丢失了自我的思考和技术的积攒。 人、流程与工具接下来,再让咱们看看人(People)、流程(Process)和工具(Tool)这个维度: 编辑 People matters...Process doesn't. ...

February 27, 2024 · 1 min · jiezi

关于华为云:华为云CodeArts-Build使用笔记如何在CodeArts-Build使用自定义执行机

之前,我比照了最罕用的构建软件之间的区别和优劣势,如果想查看的话,能够回顾之前的文章《最罕用的几款Paas平台编译构建工具的比照》。 明天次要是基于华为云CodeArts Build的理论搭建教训,给大家做一点小小的分享,心愿能够大家带来帮忙。本文是Build教训分享第二弹, 会解说如何将本人的主机接入CodeArts Build,用于构建。 本文引入一个执行主机的概念, 执行主机指的是执行构建工作当中所用到的计算资源,包含了内置执行机和自定义执行机两种。 内置执行机通常指编译构建服务本身提供的执行主机,无需配置。自定义执行机是一种用户本人提供的计算资源,通过注册的形式托管到构建服务,通过构建进行调度,用于执行构建工作。咱们在应用过程中,如果存在接入自定义的Jenkins资源,手动新建资源池和代理,以及执行脚本的等等的需要,就会应用到这个性能。 配置自定义执行机的步骤: 1.首先, 在配置yml的时候, 在yml的构建环境配置里, 抉择执行机高级设置。而后会呈现自定义执行机的选项, 在外面抉择咱们配置好的资源池。 2.如果咱们须要新增一个资源池, 须要到资源池治理的界面,而后抉择新建资源池。 3.保留之后就能够在yml里配置了。而后这个自定义的执行资源,是须要在代理机上安装Agent并接入注册到CodeArts的, 这个对主机的规格也有要求。(具体的新增代理形式能够在官网文档中找到) 4.配置实现后, 回到构建步骤界面, 即可抉择新增的自定义执行机。  如果想体验CodeArts Build,能够点击编译构建CodeArts Build_多语言构建平台_高效云端开发_华为云进行体验

February 26, 2024 · 1 min · jiezi

关于华为云:一图揭秘为什么开发者都选择华为云软件开发生产线CodeArts

华为云软件开发生产线CodeArts是一站式、全流程、平安可信的云原生DevSecOps云平台,集华为30年研发实际、前沿研发理念、先进研发工具为一体,笼罩需要、开发、测试、部署等软件交付全生命周期环节,为开发者打造全云化研发体验。 体验通道:https://www.huaweicloud.com/devcloud/?utm_source=developer.hu...

February 23, 2024 · 1 min · jiezi

关于华为云:DevOps的3大核心基础架构

原文链接:https://support.huaweicloud.com/reference-devcloud/devcloud_r... 因为近年DevOps概念的炽热,加之DevOps的涵盖面十分广,因而有很多文章和技术都在和DevOps强行关联,使很多想要理解学习DevOps的开发者疑惑不解。 其实,DevOps的常识体系如果从顶层上来合成,可大分为2局部:方法论和工具链。 方法论这部分,因为DevOps的很多理念脱胎于麻利,所以你所能理解到的各种麻利理念,实际和办法都能够作为DevOps常识体系的一部分,这部分在本文中不做赘述。 本文次要探讨对于DevOps工具链这部分内容,对DevOps的工具进行一个总结与演绎。 简而言之,实现DevOps工具链,根本须要3个外围基础架构: SCM配置管理系统Automation自动化零碎Cloud云(或者说可伸缩的、自服务的、虚拟化零碎) SCM配置管理系统配置管理是DevOps最底层的基础设施。无论是Configuration As Code,还是Infrastructure As Code,强调的都是用治理代码的形式来治理环境。将环境版本化,无论对于疾速创立,还是可稳固的反复创立这些DevOps的根本要求来说,都是最重要的根底。 配置管理系统有GIT、SVN、Mercurial、GitHub、Bitbucket等。对于DevOps施行来说,抉择哪种SCM的一个重要思考点,就是后续的Automation和Cloud这两个环节中的其它工具对这些工具的集成状况如何。作为近年来比拟受欢迎的Git来说,这所有都不是问题,是最好的抉择。 SCM中所搁置的内容又能够再分成2个档次,别离为: AppCode:即利用代码。EnvCode:即环境相干的代码,这部分内容又能够进一步细化成环境配置(Config)和配置数据(ConfigData)。 环境配置:指那些针对以后利用基本上固定的环境配置。环境数据:指那些须要在部署的同时依据状况调整的数据,如:配置文件,开发、测试、生产环境的地址等。Automation自动化零碎自动化在DevOps中的作用显而易见,这部分的主线个别由各种类型的Build零碎来实现,如:Jenkins、Team City、Travis CI、CC等等。只有这些还不够,为了可能实现利用从开发环境到生产环境的迁徙,咱们还必须解决如编译、自动化测试、依赖复原、容器构建、打包、编排等很多操作,因而还须要配置如Junit、Xunit、FitNesse、Selenium、NuGet、NPM、JMeter等许多其它的工具来实现。但这些工具只是在自动化零碎中实现某一部分的性能,个别都须要由Build零碎来驱动,并依赖于SCM中所提供的各种代码来实现的。 因而咱们当初通常抉择华为云CodeArts这样能帮忙团队实现DevOps端到端买通全流程的工具。在华为云CodeArts中提供了麻利需要治理、配置管理、测试计划、部署、以及自动化流水线的DevOps端到端服务。通过CodeArts,用户能够一站式实现所有开发工作。 Cloud 云云服务的呈现应该是催生DevOps的重要因素,没有云服务所提供的弹性、自服务等个性,很多DevOps的理念只能停留在纸面上。 对于DevOps施行来说,咱们须要理解的就是各种云所提供的API,因为无论是自动化零碎还是后面的SCM的产出,最终都须要调用这些API来实现最终利用部署。 在华为云CodeArts中,咱们能够通过CodeArts间接调用华为云的其余私有云服务,例如弹性云服务器ECS、云容器引擎CCE、容器镜像服务SWR等,并可通过这些云服务帮忙用户实现丰盛多样的产品需要。 通过编译构建工作的配置,将Docker镜像间接上传至SWR镜像仓库。通过调用ECS服务,间接将构建好的软件包部署到云主机中。原文链接:https://support.huaweicloud.com/reference-devcloud/devcloud_r...因为近年DevOps概念的炽热,加之DevOps的涵盖面十分广,因而有很多文章和技术都在和DevOps强行关联,使很多想要理解学习DevOps的开发者疑惑不解。 其实,DevOps的常识体系如果从顶层上来合成,可大分为2局部:方法论和工具链。 方法论这部分,因为DevOps的很多理念脱胎于麻利,所以你所能理解到的各种麻利理念,实际和办法都能够作为DevOps常识体系的一部分,这部分在本文中不做赘述。 本文次要探讨对于DevOps工具链这部分内容,对DevOps的工具进行一个总结与演绎。 简而言之,实现DevOps工具链,根本须要3个外围基础架构: SCM配置管理系统Automation自动化零碎Cloud云(或者说可伸缩的、自服务的、虚拟化零碎) SCM配置管理系统配置管理是DevOps最底层的基础设施。无论是Configuration As Code,还是Infrastructure As Code,强调的都是用治理代码的形式来治理环境。将环境版本化,无论对于疾速创立,还是可稳固的反复创立这些DevOps的根本要求来说,都是最重要的根底。 配置管理系统有GIT、SVN、Mercurial、GitHub、Bitbucket等。对于DevOps施行来说,抉择哪种SCM的一个重要思考点,就是后续的Automation和Cloud这两个环节中的其它工具对这些工具的集成状况如何。作为近年来比拟受欢迎的Git来说,这所有都不是问题,是最好的抉择。 SCM中所搁置的内容又能够再分成2个档次,别离为: AppCode:即利用代码。EnvCode:即环境相干的代码,这部分内容又能够进一步细化成环境配置(Config)和配置数据(ConfigData)。 环境配置:指那些针对以后利用基本上固定的环境配置。环境数据:指那些须要在部署的同时依据状况调整的数据,如:配置文件,开发、测试、生产环境的地址等。Automation自动化零碎自动化在DevOps中的作用显而易见,这部分的主线个别由各种类型的Build零碎来实现,如:Jenkins、Team City、Travis CI、CC等等。只有这些还不够,为了可能实现利用从开发环境到生产环境的迁徙,咱们还必须解决如编译、自动化测试、依赖复原、容器构建、打包、编排等很多操作,因而还须要配置如Junit、Xunit、FitNesse、Selenium、NuGet、NPM、JMeter等许多其它的工具来实现。但这些工具只是在自动化零碎中实现某一部分的性能,个别都须要由Build零碎来驱动,并依赖于SCM中所提供的各种代码来实现的。 因而咱们当初通常抉择华为云CodeArts这样能帮忙团队实现DevOps端到端买通全流程的工具。在华为云CodeArts中提供了麻利需要治理、配置管理、测试计划、部署、以及自动化流水线的DevOps端到端服务。通过CodeArts,用户能够一站式实现所有开发工作。 Cloud 云云服务的呈现应该是催生DevOps的重要因素,没有云服务所提供的弹性、自服务等个性,很多DevOps的理念只能停留在纸面上。 对于DevOps施行来说,咱们须要理解的就是各种云所提供的API,因为无论是自动化零碎还是后面的SCM的产出,最终都须要调用这些API来实现最终利用部署。 在华为云CodeArts中,咱们能够通过CodeArts间接调用华为云的其余私有云服务,例如弹性云服务器ECS、云容器引擎CCE、容器镜像服务SWR等,并可通过这些云服务帮忙用户实现丰盛多样的产品需要。 通过编译构建工作的配置,将Docker镜像间接上传至SWR镜像仓库。通过调用ECS服务,间接将构建好的软件包部署到云主机中。

February 21, 2024 · 1 min · jiezi

关于华为云:华为云软件开发生产线CodeArts开发者实践8件套开发者的进阶宝典

<article class=“article fmt article-content”><p>华为云软件开发生产线 CodeArts是一站式DevSecOps平台,集华为多年研发实际,前沿研发理念,当先研发工程能力于一体,笼罩软件开发全生命周期,开箱即用,为您提供软件开发的所有。为帮忙开发者疾速上手CodeArts,咱们汇聚了精品视频课程、在线入手试验、职业认证及丰盛示例代码,助您扫平产品应用的所有阻碍,玩转DevOps!</p><p>链接:【CodeArts开发者实际】CodeArts开发者八件套——开发者的进阶宝典!-云社区-华为云</p><p></p></article>

February 6, 2024 · 1 min · jiezi

关于华为云:华为云之EVS云硬盘的使用与快速入门

@TOC 一、EVS云硬盘介绍云硬盘(Elastic Volume Service)是一种为ECS、BMS等计算服务提供持久性块存储的服务,通过数据冗余和缓存减速等多项技术,提供高可用性和持久性,以及稳固的低时延性能。您能够对云硬盘做格式化、创立文件系统等操作,并对数据做长久化存储。二、购买ECS云服务器1.创立windows零碎的ECS云主机 2.创立Linux零碎的ECS云主机 三、创立EVS云硬盘创立两块云硬盘,一块挂载windows应用,一块挂载linux应用 四、云硬盘挂载windows零碎的ECS1.挂载云硬盘windows 2.登录到windows的ECS云主机 3.查看磁盘列表 4.初始化磁盘 5.新建卷 6.查看新加卷 7.向磁盘写入数据 五、云硬盘挂载Linux零碎的ECS1.挂载到Linux零碎的云主机 2.进入Linux云主机 3.查看磁盘列表[root@ecs-b15f ~]# lsblkNAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINTvda 253:0 0 40G 0 disk ââvda1 253:1 0 40G 0 part /vdb 253:16 0 10G 0 disk 3.磁盘分区[root@ecs-b15f ~]# fdisk /dev/vdbWelcome to fdisk (util-linux 2.23.2).Changes will remain in memory only, until you decide to write them.Be careful before using the write command.Device does not contain a recognized partition tableBuilding a new DOS disklabel with disk identifier 0xb7e5d6cb.Command (m for help): nPartition type: p primary (0 primary, 0 extended, 4 free) e extendedSelect (default p): pPartition number (1-4, default 1): First sector (2048-20971519, default 2048): Using default value 2048Last sector, +sectors or +size{K,M,G} (2048-20971519, default 20971519): Using default value 20971519Partition 1 of type Linux and of size 10 GiB is setCommand (m for help): wThe partition table has been altered!Calling ioctl() to re-read partition table.Syncing disks.4.格式化磁盘[root@ecs-b15f ~]# mkfs.ext4 /dev/vdb1mke2fs 1.42.9 (28-Dec-2013)Filesystem label=OS type: LinuxBlock size=4096 (log=2)Fragment size=4096 (log=2)Stride=0 blocks, Stripe width=0 blocks655360 inodes, 2621184 blocks131059 blocks (5.00%) reserved for the super userFirst data block=0Maximum filesystem blocks=215167795280 block groups32768 blocks per group, 32768 fragments per group8192 inodes per groupSuperblock backups stored on blocks: 32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632Allocating group tables: done Writing inode tables: done Creating journal (32768 blocks): doneWriting superblocks and filesystem accounting information: done 5.挂载分区[root@ecs-b15f ~]# mount /dev/vdb1 /data/[root@ecs-b15f ~]# df -hFilesystem Size Used Avail Use% Mounted ondevtmpfs 486M 0 486M 0% /devtmpfs 496M 0 496M 0% /dev/shmtmpfs 496M 6.8M 489M 2% /runtmpfs 496M 0 496M 0% /sys/fs/cgroup/dev/vda1 40G 2.1G 36G 6% /tmpfs 100M 0 100M 0% /run/user/0/dev/vdb1 9.8G 37M 9.2G 1% /data6.向磁盘写入数据[root@ecs-b15f ~]# cd /data/[root@ecs-b15f data]# touch file100[root@ecs-b15f data]# lltotal 16-rw-r--r-- 1 root root 0 Oct 21 21:39 file100drwx------ 2 root root 16384 Oct 21 21:37 lost+found六、云硬盘EVS快照1.创立磁盘快照 ...

September 1, 2023 · 2 min · jiezi

关于华为云:AI-重塑千行百业-华为云发布盘古大模型-30-和昇腾-AI-云服务

华为开发者大会 2023(Cloud)7 月 7 日在中国东莞正式揭开帷幕,并同时在寰球 10 余个国家、中国 30 多个城市设有分会场,邀请寰球开发者共聚一堂,就 AI 浪潮之下的产业新机会和技术新实际发展交换分享。 在 7 日下午举办的大会主题演讲中,华为常务董事、华为云 CEO 张安全重磅公布盘古大模型 3.0 和昇腾 AI 云服务。其中,盘古大模型3.0围绕“行业重塑”“技术扎根”“凋谢同飞”三大翻新方向,继续打造外围竞争力,为行业客户、搭档及开发者提供更好的服务。昇腾 AI 云服务单集群提供 2000P Flops 算力,千卡训练 30 天长稳率达到 90%,为业界提供稳固牢靠的 AI 算力,让大模型触手可及。 张安全示意:“盘古大模型要让每个行业、每个企业、每个人都领有本人的专家助手,让工作更高效更轻松。咱们始终保持 AI for Industries 的策略,在深耕行业的路线上一直前行。我深信大模型将重塑千行百业,而每一个开发者,都将是扭转世界的英雄。” 盘古大模型 3.0:重塑千行百业华为云盘古大模型从一开始就聚焦为行业服务,本次大会公布的盘古大模型 3.0 也是一个面向行业的大模型系列,包含“5+N+X”三层架构: L0层包含自然语言、视觉、多模态、预测、科学计算五个根底大模型,提供满足行业场景中的多种技能需要。盘古 3.0 为客户提供 100 亿参数、380 亿参数、710 亿参数和 1000 亿参数的系列化根底大模型,匹配客户不同场景、不同时延、不同响应速度的行业多样化需要。同时提供全新能力集,包含 NLP 大模型的常识问答、文案生成、代码生成,以及多模态大模型的图像生成、图像了解等能力,这些技能都能够供客户和搭档企业间接调用。无论多大参数规模的大模型,盘古提供统一的能力集。 L1 层是 N 个行业大模型,华为云既能够提供应用行业公开数据训练的行业通用大模型,包含政务,金融,制作,矿山,气象等大模型;也能够基于行业客户的自有数据,在盘古大模型的 L0 和 L1 层上,为客户训练本人的专有大模型。 L2 层为客户提供了更多细化场景的模型,更加专一于政务热线、网点助手、先导药物筛选、传送带异物检测、台风门路预测等具体行业利用或特定业务场景,为客户提供“开箱即用”的模型服务。 盘古大模型采纳齐全的分层解耦设计,能够疾速适配、疾速满足行业的多变需要。客户既能够为本人的大模型加载独立的数据集,也能够独自降级根底模型,也能够独自降级能力集。在 L0 和 L1 大模型的根底上,华为云还为客户提供了大模型行业开发套件,通过对客户自有数据的二次训练,客户就能够领有本人的专属行业大模型。同时,依据客户不同的数据安全与合规诉求,盘古大模型还提供了专用云、大模型云专区、混合云多样化的部署状态。 “盘古为行业而生,就要为行业着想,更好地服务千行百业的客户”,张安全示意。现在,盘古大模型已在金融、金融、制作、医药研发、煤矿、铁路等诸多行业施展着微小价值。 在政务畛域,华为云携手深圳市福田区政务服务数据管理局,上线了基于盘古政务大模型的福田政务智慧助手小福,可能精准了解民众征询用意,改变传统的一网通办模式,把老百姓的话语转化为政府办事的语言,让城市更有爱。盘古政务大模型对超过 20 万条政务数据进行精调,包含 12345 热线、政策文件、政务百科等,把握了丰盛的法律法规、办事流程等行业常识。基于盘古政务大模型的小福,在一网通办业务中体现出行业性、专业性、当先性和惠民性。 ...

July 8, 2023 · 2 min · jiezi

关于华为云:重磅华为云发布盘古大模型30

明天,华为开发者大会2023(Cloud)在中国东莞正式揭开帷幕。在下午举办的大会主题演讲中,华为常务董事、华为云CEO张安全重磅公布盘古大模型3.0,将围绕“行业重塑”“技术扎根”“凋谢同飞”三大翻新方向,继续打造外围竞争力,为行业客户、搭档及开发者提供更好的服务。 盘古大模型3.0是一个面向行业的大模型系列,包含“5+N+X”三层架构:L0层包含自然语言、视觉、多模态、预测、科学计算五个根底大模型,提供满足行业场景中的多种技能需要。盘古3.0为客户提供100亿参数、380亿参数、710参数和1000亿参数的系列化根底大模型,匹配客户不同场景、不同时延、不同响应速度的行业多样化需要。同时提供全新能力集,包含NLP大模型的常识问答、文案生成、代码生成,以及多模态大模型的图像生成、图像了解等能力,这些技能都能够供客户和搭档企业间接调用。无论多大参数规模的大模型,盘古提供统一的能力集。 L1层是N个行业大模型,华为云既能够提供应用行业公开数据训练的行业通用大模型,包含政务,金融,制作,矿山,气象等大模型;也能够基于行业客户的自有数据,在盘古大模型的L0和L1层上,为客户训练本人的专有大模型。 L2层为客户提供了更多细化场景的模型,更加专一于政务热线、网点助手、先导药物筛选、传送带异物检测、台风门路预测等具体行业利用或特定业务场景,为客户提供“开箱即用”的模型服务。 盘古大模型采纳齐全的分层解耦设计,能够疾速适配、疾速满足行业的多变需要。客户既能够为本人的大模型加载独立的数据集,也能够独自降级根底模型,也能够独自降级能力集。在L0和L1大模型的根底上,华为云还为客户提供了大模型行业开发套件,通过对客户自有数据的二次训练,客户就能够领有本人的专属行业大模型。同时,依据客户不同的数据安全与合规诉求,盘古大模型还提供了专用云、大模型云专区、混合云多样化的部署状态。 “盘古为行业而生,就要为行业着想,更好地服务千行百业的客户”,张安全示意。现在,盘古大模型已在金融、金融、制作、医药研发、煤矿、铁路等诸多行业施展着微小价值。 在政务畛域,华为云携手深圳市福田区政务服务数据管理局,上线了基于盘古政务大模型的福田政务智慧助手小福,可能精准了解民众征询用意,改变传统的一网通办模式,把老百姓的话语转化为政府办事的语言,让城市更有爱。盘古政务大模型对超过20万条政务数据进行精调,包含12345热线、政策文件、政务百科等,把握了丰盛的法律法规、办事流程等行业常识。基于盘古政务大模型的小福,在一网通办业务中体现出行业性、专业性、当先性和惠民性。 在煤矿畛域,盘古矿山大模型曾经在全国8个矿井规模应用,一个大模型能够笼罩煤矿的采、掘、机、运、通、洗选等业务流程下的1000多个细分场景,让更多的煤矿工人可能在高空上作业,不仅能让煤矿工人的工作环境更加舒服,而且能够极大地缩小安全事故。 在铁路畛域,盘古铁路大模型能精准辨认现网运行的67种货车、430多种故障,无故障图片筛除率高达95%,成为货运列检员身边无力的数字助手,将列检员从每日数百万张的“图海”检测中解放出来。 在气象畛域,盘古气象大模型是首个精度超过传统数值预报办法的AI预测模型,同时预测速度也有大幅晋升。原来预测一个台风将来10天的门路,须要在3000台服务器的高性能计算机集群上破费5小时进行仿真。当初基于预训练的盘古气象大模型,通过AI推理的形式,研究者只需单台服务器上单卡配置,10秒内就能够取得更准确的预测后果。 在金融畛域,盘古金融大模型能够对银行的各种操作、政策、案例文档进行预训练,能依据客户的问题,为柜台工作人员主动生成流程和操作领导,将原来须要均匀5次的操作升高为1次,办结工夫缩短5分钟以上。盘古大模型让数十万网点柜员都领有本人的智慧助手。 在制作畛域,过来单产线制订器件调配打算,往往要花费3个小时以上能力做齐1天的生产打算。盘古制作大模型学习了华为产线上各种器件数据、业务流程及规定当前,可能对业务需要进行精确的用意了解,并调用天筹AI求解器插件,1分钟即可做出将来3天的生产打算。 在药物研发畛域,原来一款新药研发均匀须要10年工夫、破费10亿美金。盘古药物分子大模型助力西安交通大学第一从属医院刘冰传授团队发现寰球40年来首个新靶点、新类别的抗生素,并将先导药物研发周期缩短至1个月、研发老本升高70%。 张安全示意:“盘古大模型要让每个行业、每个企业、每个人都领有本人的专家助手,让工作更高效更轻松。咱们始终保持AI for Industries的策略,在深耕行业的路线上一直前行。我深信大模型将重塑千行百业,而每一个开发者,都将是扭转世界的英雄。”

July 8, 2023 · 1 min · jiezi

关于华为云:华为云天筹AI求解器荣获世界人工智能大会最高奖

7 月 6 日,2023 世界人工智能大会(WAIC 2023)在上海揭幕,华为云天筹 AI 求解器凭借在赋能行业上的突出贡献,摘得大会最高奖项“卓越人工智能引领者”SAIL 奖。 华为云天筹 AI 求解器是一款将运筹学和AI相结合的云服务产品,冲破业界运筹优化极限,以通用模式形容问题,高效计算求解最优计划。基于求解器的决策优化计划可为企业带来新的经营形式,在决策机制上升高对人的依赖,尤其针对供应链及制作治理方面带来质的晋升,从⽽显著进步企业的收益增长速度,晋升企业成长空间。 华为云将天筹 AI 求解器与行业场景联合, 推出一系列的行业智能决策计划。在供应链场景,基于 AI 求解器的生产排班,可实现超大规模打算排产,供给能力最大化,库存齐套率晋升 37%,每年节俭微小资金;在制作行业,可帮忙家居、服装、钣金等制作原料切割最优排版,资料利用率晋升 2% 以上,每年为企业节约老本上亿元;在交通行业,可优化航班调度,让 260 万旅客不再坐摆渡车;天津港与华为云合作开发了基于天筹 AI 求解器的新一代港口智能打算平台,可实现整个港口打算 10 分钟内实现,打算速度晋升 144 倍,大幅晋升作业效率和资源利用率。 作为世界人工智能大会的最高奖项,SAIL 奖(Super AI Leader,卓越人工智能引领者)保持“谋求卓越、引领将来”的理念,评比和经营秉持“高端化、国际化、专业化、市场化、智能化”准则,从寰球范畴挖掘在人工智能畛域中具备高度认可和美誉、并具备晋升人类福祉意义的我的项目。

July 6, 2023 · 1 min · jiezi

关于华为云:NineData-x-华为云正式上线

6月5日,NineData 企业级 SQL 开发平台正式成为华为云“联营联运”商品。通过联营联运模式,单方将在产品、解决方案和生态等多个方面发展深度单干,独特提供高效、智能、平安的数据管理服务,帮忙客户轻松构建一站式云端数据库治理平台。 NineData入驻华为云联营商品“联营商品”是华为云打造的云上精品市场,秉承“优中选优,精当选精”的理念,多方面综合思考企业的行业影响力、技术水平和服务质量等因素,对立制订严格的准入门槛,从源头上严格把控提供软件和利用的服务商的技术、研发和服务实力,旨在为用户提供优质的云上生态应用服务。此次,NineData 入驻华为云联营,是华为云对 NineData 产品和服务的充沛认可。 华为云数据库服务产品部总经理苏光牛示意:“咱们很快乐 NineData 可能退出华为云'联营联运'商品,华为云始终专一于提供稳固牢靠、平安可信、可继续倒退的云服务,基于华为云当先技术以及服务保障,通过华为云数据库和 NineData 的联营单干,独特为企业的数字化转型提供高效、智能的数据管理服务,为行业带来更多翻新倒退时机。” NineData 企业级 SQL 开发平台正式成为华为云“联营联运”商品家喻户晓,华为云数据库是专为企业打造的外围数据安全上云、稳固高效解决与剖析的服务。它基于华为多年的数据库研发和运维教训,联合了数据库云化革新技术,大幅优化了传统数据库的性能和可用性。其中GaussDB是华为自主翻新研发的行业当先的国产原生分布式数据库,面向金融政企客户打造企业外围利用云化的智能数据底座。深耕技术创新的同时,GaussDB 也在继续扩充搭档生态圈,联结更多搭档为企业提供有竞争力的翻新解决方案。NineData 提供的企业级数据库开发平台,能够帮忙企业实现SQL审核、数据库标准、敏感数据爱护、数据复制、数据备份等能力。 同时,NineData 依靠华为云数据库的高可用、高牢靠、高平安、高性能、即开即用、便捷运维和弹性伸缩等数据库能力,为用户提供了全链路的数据安全保障和高效的数据管理能力。此次 NineData 退出华为云联营联运打算,也将开启 SaaS 服务销售新模式。目前,NineData 客户已笼罩制造业、地产、金融科技、云厂商等行业,继续为客户提供极具竞争力的解决方案,帮忙不同行业的客户更好的达成业务指标。 玖章算术创始人&CEO叶正盛示意:“随着数字化时代的减速推动,企业曾经逐步意识到多云数据管理的重要性。NineData 将以华为云平台为底座,与行业领先者同行,帮忙客户一直晋升技术团队的开发效率,高效利用多云基础设施与数据安全。” NineData产品架构近日,一家以平安著称的国内出名的奢华汽车制造商,在全面应用云计算减速企业数字化、智能化转型,该企业应用了华为云数据库、玖章算术 NineData 提供的残缺的云端数据库计划,华为云数据库提供了自主翻新的、高性能的、稳固的云数据库能力,NineData 则向用户提供了稳固、高效的数据库 SQL 开发平台,独特帮忙企业实现更加高效业务流程。 对于NineDataNineData SQL 开发是一款反对多云、多源数据库的弱小工具。面向企业,NineData 提供了高效平安的 SQL 审核、数据库标准、敏感数据爱护、定时公布等能力,面向开发者提供 SQL开发窗口、可视化表结构设计和数据导入导出等性能,NineData 还基于内置的 Al,基于自然语言的SQL服务,晋升72%的SQL开发效率;智能化SQL优化,晋升企业零碎的稳定性;通过天然语音对话查问数据,能够向企业提供了更加宽泛、高效的数据拜访服务。同时,NineData 同时还提供数据复制、数据比照、数据备份等性能,反对 MySQL、ClickHouse、PolarDB、GaussDB、Redis、SQLServer、Kafka、ElasticSearch 等多种数据源治理,能够帮忙企业实现平滑的数据上云、跨云迁徙、ETL 等需要。 NineData X 华为云将来,NineData 将与华为云的深度单干,基于单干翻新与能力共享的联营联运新模式,独特为企业提供更加全面、高效、智能的数据管理服务,帮忙企业更好地应答数字化转型的挑战,让每个人用好数据和云。

June 6, 2023 · 1 min · jiezi

关于华为云:面向-Web微服务应用的-Serverless-托管平台云应用引擎-CAE

1. 业务诉求:决定公布一个利用,我须要思考什么?如果你们公司目前有一个绝妙的 IDEA 急需落地! 为了将业务计划筹备好!你须要思考但不限于以下几个动作: 搭建服务器、配置组网环境开发技术栈造型,搭建软件开发我的项目框架搭建多类型如测试、灰度、生产环境,版本在多环境之间人工流转为了应答业务突发,提前准备冗余的资源业务上量后,运维/经营复杂度晋升,业务可靠性面临极大挑战,招收更多专家技术人员针对上述的思考,你可能将面临的问题有: 昂扬的根底设置治理老本简单、低效产品研发--上线流程;推高研发老本和业务迭代周期昂扬人力/技术老本;极具挑战的运维复杂度,加剧升高业务迭代效率如果此时提供了一种服务不须要运维和治理技术资源的技术,你会不会思考应用。这就是本文行将将介绍的一种适时而生的云利用引擎——云托管服务。 2. 云利用托管的演进趋势先来看看传统利用托管的演进趋势,云利用托管从利用架构的演进大略有以下三个过程: 单体利用架构,这种形式上云工期:周。对应的云端托管是在虚拟机托管的,对利用进行封装,然而这种虚机托管的形式须要手动部署利用,手动做负载平衡,手动弹性伸缩。云托管解决“疾速交付”问题云原生架构,这种形式上云周期:天。容器化托管:微服务化+容器化效率倍增,极具挑战的运维复杂度。半自动弹性伸缩(资源主动伸缩),按资源付费,资源有时是独占的,在这个过程中,资源利用率比拟低。Serverless 架构,上云工期:小时,Serverless 托管:根底设置免运维,除了关怀业务利用的根底逻辑之外,不须要关怀网络、存储、计算、部署和容器治理等等。这个时候利用与运行时环境解耦,从业务利用到最底层的基础设施全副实现主动弹性伸缩(从部署到上线),按需付费,最大化进步资源利用率。 2.1 云利用托管解决的问题ECS:虚机托管(单体)云厂商提供操作系统 OS,机房、存储、网络、计算。对于客户来说,须要 CI/CD,云端利用业务及负载平衡,手动(虚拟机+利用业务)扩容伸缩 CCI/CCE:容器托管云厂商除了提供同样的操作系统、机房、存储、网络、计算,还可能实现主动容器弹性伸缩。对于客户来说,仍旧须要 CI/CD,云端的利用业务及负载平衡,手动利用业务扩容缩容 CAE:Serverless 托管在这种形式下,云厂商能减少了 CI/CD 流水线,实现全自动弹性伸缩、负载平衡。此时用户只须要关注云端的利用业务。Serverless 托管的劣势在于屏蔽了简单的基础设施治理和业务运维,客户可专一于业务。 3. CAE 产品介绍CAE(Cloud Application Engine 云利用引擎),一个面向利用的 Serverless 托管服务,可提供极简集成与部署、极低应用老本、免运维能力(免基础设施运维)的一站式利用托管计划,反对从源码、软件包、镜像包等集成公布利用,提供秒级弹性伸缩能力,是一款按量付费的云服务产品。可做到基础设施免运维,依据可观测的运行指标对利用进行生命周期治理。CAE 面向多个行业:互联网(直播、教育、游戏)、大企业(车联网、智能制作、商超)、政务(交通门、空间信息、医疗)、金融(互联网金融、风控、资管)等。 3.1 特点介绍上云简略:提供环境标签和减少用户体验。一键创立资源隔离的运行环境:环境命名,不同命名环境之间资源隔离;用户一键开明环境,一站式极简上云。运维高效:反对丰盛的弹性策略、产品组合以及布局中的参考架构。提供资源、连贯、周期性、工夫等多维度因素;屏幕 ECS、CCE、ELB、VPC 等根底云服务,内置 CSE/RDS 等常见中间件的配置管理,集成 AOM 监控能力,apm 拓扑告警能力平安可信:华为可信教训和平安个性降级。内置华为多年可信教训,反对出海业务,基于虚机、容器等资源层平安个性强化降级业务平安 3.2 CAE 逻辑概念CAE 能够创立多个环境,比方测试环境、灰度环境和生产环境。每个环境下能够配置多个利用,每个利用由多个组件形成,每个组件就是一个个源代码、镜像或者软件包。 举一个例子: 4. 要害个性4.1 从源托管反对常见业务状态极简部署上云: 4.2 传统部署流程与CAE部署流程的区别与传统的部署流程相比,CAE 提供一站式部署: 4.3 极致弹性伸缩痛点一:为应答周期性业务洪峰,提前准备资源,稳定期资源利用率低诉求:资源按需弹性和伸缩,按使用量计费痛点二:促活流量激增,预留资源预估不精确、手动扩容稳定性差诉求:丰盛的弹性伸缩策略,极低弹性时延,全自动弹性施行痛点三:为维持业务稳固,面临从基础设施到业务的简单维度诉求:根底设置免运维,聚焦业务层运维 5. 典型案例5.1 全国连锁的综合性行业平台背景:XXX 为服务行业的综合型大企业,公司成立数十年,从刀耕火种的小企业到现在全国性的行业平台,是比拟典型的业务驱动技术改革的客户。 从业务起步阶段到上量阶段到规模阶段,随着业务的增长迅速,逐步发现痛点,并进行改善,最初发现冗余资源老本昂扬,简单运维态势威逼业务,技术门槛高,加剧危险。 最初进行了云化改革,业务托管上云,根底设置免运维,丰盛的弹性策略,秒级弹性能力,资源应用按需付费,流量峰期过来能够立马开释流量,极大降低成本,利用 CAE 丰盛的弹性策略和秒级弹性能力,无忧应答业务涌动。 ...

June 5, 2023 · 1 min · jiezi

关于华为云:化繁为简高效部署-华为云发布部署服务CodeArts-Deploy

随着互联网、数字化的倒退,公司机构与各类企业往往须要进行大量频繁的软件部署,部署设施类型多样,如:本地机器、云上裸金属服务器、云上虚拟机与容器等。面对多种部署模式、分布式简单运行环境,如何用最短时间、高质量、安全可靠的进行软件部署,这曾经成为一个广泛关注的课题。 继续部署,通过频繁的、标准化、自动化的形式,将软件疾速交付到生产环境。从开发人员提交代码到编译、测试、部署,全流程无人干涉,齐全自动化执行。这种模式与部署能力,能够大幅放慢软件版本上线速度,保障新性能第一工夫被用户应用。 2月27日,华为云公布继续部署服务CodeArts Deploy,通过模块化自在编排部署流程,实现软件的自动化部署,帮忙企业软件产品的疾速、高效、高质量交付。 传统部署怎么做?  当开发者把代码构建打包后,软件包须要被装置到具体的服务器上,才可能对外提供服务从而实现商业变现。软件被装置到服务器这一过程,在软件开发流动中通常被称为部署。 当初少数应用程序,其部署过程都比较复杂,常常蕴含很多步骤,且步骤间夹杂着人工确认等动作,很容易发生意外状况。 即使一个简略的部署动作,也可能会因为服务器版本的不同、文件目录构造的差别、权限的不统一、配置项繁琐而导致应用程序无奈失常启动; 同时,部署项的数量、服务器数量、每次部署的步骤数也会间接影响软件的部署效率,三个维度的复杂性独特导致软件部署的工作量呈指数级增长; 而且,一个软件产品从开发进去到最终入网,往往须要通过开发环境、集成测试环境、预发模仿环境、生产环境等多轮测试验证。 从多个角度剖析得悉,传统的部署形式无奈实现软件规模化部署。 简而言之,传统的部署形式存在效率低、周期长,可重复性差、易错、成功率低等问题;也存在着部署责任和权限不清晰、上线频度低、重大依赖执行部署动作的人和教训等大量的短板。从趋势上看,更加频繁的交付新个性,疾速闭环反馈,是软件开发统一谋求的指标。 华为云CodeArts Deploy助力平安、高效继续部署 华为云CodeArts Deploy采纳沙箱技术,提供可视化UI页面,通过封装技术对用户屏蔽繁琐的操作配置流程,用户只需填写要害的参数,即可实现利用的部署。 基于其易入门、性能全、集成度高、自动化、牢靠的部署能力,CodeArts Deploy可能帮忙大量客户疾速实现业务上云,全面晋升软件的交付效率,显著晋升交付品质。 具体来看,华为云CodeArts Deploy有以下5大劣势: 个性一:内嵌丰盛零碎模板,配置简略,开箱即用 面对多种新技术所衍生出的多种部署形式,华为云CodeArts Deploy将各种部署能力进行UI化提取,通过零碎模板集成的形式,将缭乱繁冗的部署工程配置标准化并向用户凋谢。 目前,CodeArts Deploy内嵌超过15个零碎模板,蕴含主机、容器、Serverless等多种部署状态,笼罩了Tomcat、Springboot、Go、NodeJs、Docker、Kubernetes等多种语言和技术栈。 除提供丰盛的零碎模板外,还反对用户开发自定义模板,将具备雷同部署流程的利用通过模板进行归档复用,缩小反复配置工作,极大晋升继续部署效率。 个性二:步骤自在组装,灵便编排,满足各行业部署诉求 一次残缺的部署过程通常会蕴含多个步骤。对于不同的用户和行业,波及到的部署场景可能会存在微小的差别,导致部署工程的配置以及步骤间依赖关系也不尽相同。 例如,一款大型软件通常由多个部件组成,对于大型软件的部署,会波及多个部署步骤和软件包的装置,且存在简单的前后依赖关系;同时,不同技术栈的部署步骤也不尽相同。所以开发一套可能笼罩全副行业和场景的规范部署计划无奈行得通。 华为云CodeArts Deploy服务可对部署过程进行拆分提取,将每一个动作封装为一个独立的插件,以部署步骤的形式提供给用户。用户能够基于步骤进行自在组装,只需输出必要的参数即可实现工程配置,防止手动编写部署脚本。同时,用户可依据部署场景须要,用托拽的形式自定义编排部署工程。 目前,CodeArts Deploy已集成40多个部署步骤,涵盖多种技术栈的部署,以及文件操作、软件装置等附加通用能力,通过丰盛的部署步骤,以及自在灵便编排性能的加持,使得利用部署更轻松。 个性三:横纵向权限隔离,多环境一键式自动化部署,助力企业平安、高效生产 DevOps麻利模式下,通常包含Alpha、Beta、Gamma、Production等四种环境。软件在上线过程中,依据测试阶段软件会被部署不同环境,每个环境都须要通过严格的测试,满足以后环境的验证规范,能力进入到下个环境。 华为云CodeArts Deploy提供以利用为核心的环境治理能力,将同一利用下的各个环境进行对立治理,在多环境部署的场景下,使每个环境采纳雷同的部署流程,保障交付的一致性。 生产故障是软件开发不可碰触的红线,环境作为其中最要害的一环,其平安治理显的尤为重要。CodeArts Deploy采纳横向和纵向的权限隔离机制,严守平安部署底线。 横向鉴权限度部署时只可抉择以后利用关联的环境,防止在简单的软件开发中利用和环境穿插部署导致安全事故。另外,每个环境的职责不同,面向的成员角色也会有所差别,所以对环境的权限须要做差异化的配置。 纵向鉴权采纳更加精细化的“角色-权限”二维矩阵模型,反对环境实例级别的权限隔离,精准把控每个环境的平安。 基于环境治理,CodeArts Deploy提供一键式自动化部署能力,部署过程可视化,可随时察看部署状态,如果部署过程中产生异样,反对一键回滚到上一版本,实现平安部署。CodeArts Deploy人造与流水线无缝对接,当代码提交时可主动触发实现环境的实时降级,真正实现无人值治理。 个性四:反对多种部署状态,满足各种部署场景 基于企业部署环境和业务多元化的须要,华为云CodeArts Deploy提供主机、容器、微服务以及函数流等多种部署状态。 主机部署 CodeArts Deploy开发了大量的部署步骤,涵盖根底软件装置、文件操作、软件部署等方面。在反对Linux操作系统多个支流发行版本的同时,也反对基于Windows操作系统为平台的软件部署场景。 容器部署 CodeArts Deploy反对华为云CCE集群、用户自有集群以及三方供应商提供的通用Kubernetes集群,实现云上云下协同部署。提供基于Kubernetes Manifest形容的全量部署和基于镜像迭代的疾速部署能力。 另外,CodeArts Deploy也提供基于Helm客户端(Kubernetes包管理器开源软件)、Kubectl命令行以及原生Docker命令等多种容器部署能力。 微服务部署 CodeArts Deploy通过买通华为云上下游,实现CodeArts与华为云Servicestage服务的对接,满足用户基于微服务架构利用的部署。Servicestage人造集成SpringCloud、ServiceComb等开源框架,配合CSE微服务引擎,助力微服务利用更好、更快的部署。 函数工作流 对于冀望间接运行代码源文件,对底层运行资源不关注的用户。CodeArts Deploy通过对接新一代Serverless函数计算与编排服务FunctionGraph,以事件驱动函数的形式实现软件的公布。 个性五:多地区灾备部署,多账号协同部署 一次宕机或者一段时间的停服,可能会给公司或企业带来微小的负面影响,造成无法挽回的损失,所以灾备部署性能已成为部署工具的必要能力之一。 华为云CodeArts Deploy反对跨region的灾备部署能力,应用同一套部署配置,将利用同时部署到生产环境和其余region搭建的容灾环境,极大升高紧急情况下长时间停服的概率,确保产品安全可靠。 ...

March 1, 2023 · 1 min · jiezi

关于华为云:贺来自开发者的点赞华为云开发者联盟入选-2022-中国技术品牌影响力企业榜

2023 年 1 月 4 日,中国技术先锋年度评比 | 2022 中国技术品牌影响力企业榜单正式公布。作为中国当先的新一代开发者社区,SegmentFault 思否依靠数百万开发者用户数据分析,各科技企业在国内技术畛域的行为及影响力指标,最终评比出 30 家上榜企业。华为云开发者联盟作为中国当先的云计算技术开源企业,入选 30 强之列。 信开发者的力量,始终以来华为云开发者联盟都保持鼎力推动开发者生态建设。2022 年,华为云开发者联盟曾组织或参加顶级技术大会、开发者大赛、技术沙龙数百场,输入高质量技术博客1000篇+,以当先技术回馈社区,和开发者独特成长。目前,华为云开发者联盟已领有开发者用户400万+,咱们始终保持生于云,长于云,让开发者成为决定性力量。 2023年,华为云开发者联盟将继续加强生态建设,服务宽广开发者。 千行百业数字化转型既是挑战,也是时机。华为云将以松软的云技术做底座,与客户及搭档携手推动数字经济倒退,使能行业数字化转型,开释数字生产力,为经济复苏和社会倒退提供源能源。 点击关注,第一工夫理解华为云陈腐技术~ 附:《2022 中国技术品牌影响力企业》

January 4, 2023 · 1 min · jiezi

关于华为云:华为王泽锋开源事业的魅力所在

受访者:王泽锋(Kevin Wang),华为云云原生开源负责人,CNCF大使,CNCF技术监督委员会贡献者,Kubernetes资深维护者,KubeEdge、Volcano、Karmada等多个CNCF我的项目发起人,目前负责华为云在云原生开源社区的整体工作,对Kubernetes及云原生技术有深刻的见解。https://www.bilibili.com/vide... 如果脱离了社区,只有一份公开的代码,这样的我的项目是没有生命力的。——王泽锋开源到底有着怎么的魅力?很多开源的从业者都会有本人的解读。当这个问题摆在王泽锋背后,他的答复令人深感服气。  初见王泽锋,人们很难将他的形象与那一连串头衔分割在一起。作为华为云原生开源团队负责人、KubeEdge[1]、Volcano[2]和Karmada[3]等我的项目联结创始人、CNCF社区官网大使,王泽锋堪称开源技术畛域的“大神”级人物。在深刻交换后,他给人留下的印象却更多是一位喜爱音乐、爬山和养鱼,同时对开源文化与技术充满热情的邻家大哥;而谈起本人的成就却是云淡风轻。  其实,王泽锋主导发动的KubeEdge我的项目利用在日常生活中堪称“随处可见”。  2020年,当全国范畴内的高速公路收费站筹备开始全面推行ETC免费模式时,一个前所未有的IT技术难题摆在了中国高速路网零碎背后。公路网络须要在各个省市自治区部署总计约10万台门架零碎和相应的控制器与边缘终端,部署运行超过50万个利用,通过免费专网向各省和路网核心上传数据,这放眼寰球都是前所未有的大规模边缘设施部署和治理需要。面对这一重大技术挑战,通过认真的调研和评估,我的项目方最终抉择了面向边缘计算场景,专为云边协同设计的KubeEdge开源我的项目。 KubeEdge在ETC零碎中帮忙治理总计约100,000个边缘节点和500,000个边缘应用程序,每天解决超过3亿条数据,将收费站的交通效率进步了10倍,人们的高速出行由此变得更为便捷。  ▲KubeEdge边缘计算我的项目在高速ETC的利用  除了高速公路ETC免费网络这一大规模实际利用外, 在智慧航天畛域,2021年首颗搭载基于KubeEdge云原生边缘计算的“天算星座”计算平台[4]的试验卫星在轨稳固运行,KubeEdge帮忙商业卫星上的边缘计算设施实现在轨图片剖析,甚至进行本地化AI模型训练和算法改良,从而挑选出有价值的卫星图片向高空传输,节约贵重的天地连贯带宽;中海油应用KubeEdge为大型海上智能油田赋能,构建“海陆协同”新范式;上汽团体智能汽车胜利搭载KubeEdge进入智能汽车畛域,给人们带来了更多智能行车体验;顺丰科技联合KubeEdge构建物料和供应链畛域泛生产因素物联网技术利用,让物流更为智能和便民……   ▲北京邮电大学将KubeEdge集成至卫星计算平台,使得卫星在太空中首次可同时调用边缘和核心云的资源并具备AI能力和多任务处理能力 时至今日,KubeEdge在交通、能源、通信、金融、工业制作、CDN、智慧园区等各行各业曾经有了更加深广的利用和普惠价值。   回顾KubeEdge的倒退历程,王泽锋印象最粗浅的,是本人亲手创立的开源我的项目胜利解决了事实中业界重大课题后的喜悦情绪。当我的项目的意义从初期的“与人分享代码”,逐步走到“与别人独特推动世界向前提高”,每一位从业者都能发自心底感触到开源的微小魅力。  能播种这样的感触,王泽锋付出了很多。 开辟国内Kubernetes开源生态2014的云原生技术圈,正处于容器编排技术蓬勃发展的关键期。彼时的Kubernetes刚刚开源不久,得益于Google Borg零碎的低劣基因,凭借灵便的架构、申明式API等先进的理念,受到了华为容器团队的青眼,并将其集成到PaaS平台中。  在帮忙客户进行平台迁徙的过程中,王泽锋辨认到许多Kubernetes的能力有余,包含简单利用编排调度、故障迁徙策略、网络多立体隔离、大规模下的service性能等。基于Upstream first的理念,王泽锋开始到Kubernetes上游社区奉献,也因而开始了他的开源旅程。  2015年,王泽锋成为了国内最早的Kubernetes maintainer之一。2015-2018年期间,王泽锋主导了Kubernetes社区的多个要害个性和子项目的设计研发工作,包含: · nodeAffinity - 利用多区域高可用的节点亲和性· podAffinity - Pod间亲和性调度个性· taint-toleration - 利用故障迁徙个性· IPVS-proxy - 大规模场景下海量微服务反对个性· Kubernetes Federation - 集群联邦子项目(即起初的Kubefed)· Poseidon - 调度子项目· cluster-api-provider-openstack - 集群部署子项目  这些改良不仅失去了社区的踊跃回应,并且在社区实现开发后被大量企业用户在生产环境中宽泛应用,业务价值显著。  在此过程中,华为公司在Kubernetes社区中的影响力一劳永逸。随着Kubernetes成为云原生产业的事实标准之一,王泽锋与华为公司的成绩让更多同行看到了深度参加开源事业的意义和价值。中国企业抉择及早参加翻新开源我的项目的行为,让中国开源贡献者在国内上的影响力大大增加。与“搭便车”的做法相比,保持回馈上游社区无疑更有久远价值。  而回到终点,提及为什么会抉择摸索和开辟这条充斥挑战的路线,这要从晚期国内外的开源环境说起。过来,国内软件行业对国内开源我的项目的态度更多是学习借鉴或者间接应用,与上游社区的互动和回馈较少,这种策略更适宜于成熟的技术和我的项目,能够摘取现成的果实,这样的气氛仿佛很适宜晚期的国内市场需求,因而很少有人反其道而行之;但对于处在晚期或者疾速倒退中的我的项目并不能带来多少帮忙,从长远看并不是可继续的衰弱生态。  凭借敏锐的洞察力,王泽锋很早就意识到Kubernetes对云原生产业的重大意义。他晓得,在开源社区的促成下,Kubernetes很快会成为云原生技术畛域的要害底层撑持。但如果只是一味期待我的项目成熟不劳而获,是难以在Kubernetes将来的倒退路线上获得话语权。为了长期独特倒退,必须深刻参加社区建设中。  王泽锋开始参加Kubernetes开源社区的奉献工作后,对开源世界的生态环境有了更加粗浅的意识:参加开源奉献不仅是单纯的付出,而是一种互利共赢的良性生态行为。基于这种意识,王泽锋在华为外部组建了专门的开源工作团队,成为Kubernetes开源社区在国内的第一批企业化贡献力量之一。  以开源成绩发明社会价值把我的项目代码放到公开仓库,就是开源了吗?王泽锋显然不这么认为。  在Kubernetes社区中逐步积攒起影响力后,王泽锋将指标转向了更宽泛行业场景利用实际。2018 年,在帮忙客户于边缘构建商业利用的过程中,王泽锋与共事联结创建了KubeEdge开源我的项目,并捐献到CNCF基金会遵循凋谢社区的治理模式。 KubeEdge也因而成为CNCF第一个将云原生技术利用到边缘计算的开源我的项目。KubeEdge的主旨是联合云原生技术与边缘计算理念,帮忙工业互联网、IoT、智慧交通、智慧能源等行业享受到云原生凋敝生态的种种益处,以及开源社区带来的各种便当。  在KubeEdge我的项目外,王泽锋还发动了Volcano和Karmada两个云原生开源我的项目,别离用于AI、大数据、高性能计算的基础设施治理需要,以及大规模云原生集群的多云编排需要。现在,Volcano曾经在很多互联网、金融、科研机构的数据分析场景中发光发热,Karmada也失去了越来越多海内外企业的关注和利用。  与此同时,这些开源我的项目的社会成绩也让我的项目自身失去了开源社区的更多关注。越来越多企业与技术人参加到了我的项目的后续倒退中,生产实践与社区奉献独特为我的项目提供能源,造成了一种充满活力的良性循环。  开源社区须要建设良性循环问渠那得清如许,为有源头活水来。 如果把开源我的项目比作一个个池塘,来自社区的奉献就像源头的活水,而池塘中养育的水草游鱼则是从我的项目中受害的各利益方。一如池塘的生态环境一样,开源社区也须要建设同样的良性循环。  王泽锋十分明确这个情理。在开源行业倾泻激情的这些年,他始终在致力推动社区建设这样的气氛和生态体系。  KubeEdge我的项目诞生之前,边缘计算产业的软件标准化水平还比拟低下。很多终端用户受困于厂商和许可证绑定的问题,须要领取高额受权费用能力实现生产线智能化、翻新利用开发等指标;如果技术更新换代,后期投入就会变成昂扬的沉没老本。这一现状无疑是不利于大环境的翻新步调的。  回顾过后的摸索路线,王泽锋这样总结:  咱们心愿可能复现云原生晚期倒退的状态,让所有用户都能享受到开源的便利性。咱们心愿大家能够无门槛获取最前沿技术,在本人的环境中尝试各种各样的业务翻新。另一方面,咱们也心愿凝聚业界最强的力量,大家一起来推动整个行业的翻新和迭代提高。在将来,等到市场空间足够大,足够标准化之后,咱们置信所有的商业公司都能够有平等的商业变现时机。 正是在这样的理念推动下,华为云先后将KubeEdge、Volcano和Karmada三大我的项目开源,填补了云原生技术在相干畛域的技术空白。而社区的开放性也大大晋升了这几个我的项目自身的活跃度,很多企业开始将它们用于生产环境,反过来也一直向社区回馈奉献。随着越来越多的商用落地案例涌现进去,越来越多的企业通过这些我的项目获得了业务胜利。例如,德国某地轨道交通零碎的设施治理、某初创企业的云机器人平台、中海油的油田设施智能化等泛滥行业我的项目对KubeEdge的选用, Volcano在中科类脑OS[5]、锐天离线计算集群[6]、小红书大规模机器学习平台[7]等案例中的性能体现,Karmada在VIPKID容器体系设计[8]、艾莫尔人工智能研究院[9]等企业、我的项目中的落地。  ▲中海油在智能油田建设项目中部署智能边缘计算平台 图/央视新闻客户端  这些实际案例充沛印证了开源的一大魅力,就是很多用户能够应用开源我的项目进行自助技术可行性验证。开源社区每天都在产生着各种令人意想不到的行业试验和落地翻新过程,这是开源事业最激动人心的画面,也是让更多潜在用户置信社区的凋谢与容纳,置信本身能够平等地参加制订社区的倒退路线的力量所在。社区和用户的双向奔赴,能力真正激发社区生态的原生生机。   最终,王泽锋为他的池塘找到了那一汪活水。 对开源事业充满热情在晚期参加Kubernetes社区建设的过程中,王泽锋有机会与过后谷歌公司一位首席架构师——Kubernetes社区最资深的技术首领——Brian Grant坐下来一起探讨技术计划,交换各自的技术见解。  令他印象粗浅的是,Brian Grant作为功成名就的行业前辈,仍旧对技术充满热情,对热心开源事业的后辈满怀急躁和期待。  王泽锋置信,这样的激情才是开源事业得以继续后退,一直为社会发明价值的能源源泉。而他本人,也秉承这一理念,以丰满的精气神一直致力直到明天。现在,很多开源社区活动都能看到王泽锋的身影,在演讲布道之余他总是会激情解答与会者的问题,帮忙开源新人理解社区的工作模式、我的项目的技术理念,并更快找到问题的解决方案。在王泽锋的引领下,20多位来自各个组织的开发者,在CNCF的泛滥我的项目中,成长为业务骨干、外围开发者,这是一种技术分享,更是一种开源精力传承,集体奉献不可估量[10]。  而这些优质的我的项目领导者,现在也正在各个领域施展领导作用。技术到生产,在业务的深刻落实和企业服务层面,王泽锋参加发动的云原生交流平台“创原会” [11] 企业会员曾经笼罩各行各业要害畛域,通过摸索前沿云原生技术,共享产业落地实际,共创云原生与业务交融的有限可能。  开源是来自时代的声音, 在开源布道这条路线上,王泽锋也从未停歇。  2018 年,王泽锋发动了“Cloud Native Days China”系列Meetup和“Cloud Native Lives”系列网络研讨会,为开发者们搭建更加多元的交流平台。值得一提的是,这类流动会特地留神笼罩到很多二三线城市,帮忙那里的开发者理解学习前沿技术。  2020 年疫情暴发后,中国KubeCon大会被迫勾销,给整个云原生开源社区带来重大损失。为此,王泽锋牵头分割国内的开源爱好者与CNCF独特组织了Cloud Native + Open Source Virtual Summit 2020,以线上会议的模式吸引了少量技术人参会交换,无效补救了KubeCon暂停的缺憾。  ...

October 10, 2022 · 1 min · jiezi

关于华为云:Smartbi亮相华为云828-B2B企业节一起成就好生意

8月28日,华为协同3万余家生态搭档发动全国首个基于数字赋能的“828 B2B企业节”,旨在为各大企业搭建一个翻新倒退平台,帮忙他们“成就好生意,成为好企业”。 作为华为云的生态合作伙伴,思迈特软件受邀亮相“828 B2B 企业节”,凭借实力超强的大数据BI产品和业余的技术服务,满足泛滥行业客户的营销、服务场景需要,为企业赋能,全方位反对企业实际数字化转型,以数据驱动高质量倒退。 一、数字赋能,携手共创本次“828·B2B企业节”将设置四大专题周:“新品公布周〡商机促成周〡技术创新周〡教训分享周”,并针对专精特新、企业初创、中企出海、中小企业纾困,这四大重点场景发展专项反对口头,提供特地产品服务和专项资金反对,助力企业更好倒退。 作为828 B2B企业节的联结协办单位,思迈特软件参加了此次828 B2B企业节系列流动,并针对官网联动、直播推广、海报共创等多个方面,独特赋能中小企业,推动其数字化倒退,实现整体生态和渠道的买通。 官网联动|Smartbi官网互链 商品举荐 | 华为云828专区产品举荐 广告联结流传 | C位联结海报流传 直播推广 | 华为云828流动直播专场 内容营销 | 入选云商店企业号作者 此外,思迈特软件已携手华为在多个城市进行全面推广,冀望反对更多企业实现数字化转型。 二、技术引领,同心同行在此之前,思迈特软件已通过与华为在产品层、业务层造成的深度单干,思迈特软件实现了技术的一直更迭,实现共创共享共赢。 在技术层面上,思迈特软件基于本身的技术积攒与翻新,踊跃拥抱信创生态,目前已陆续实现了华为GaussDB200技术认证、华为鲲鹏云服务兼容性认证,并曾积极参与华为云鲲鹏凌云搭档打算、华为云解决方案搭档打算,为单方的进一步单干打下良好基础。在服务层面上,思迈特软件一直驱动产品与服务能力齐头并进,赋能中小企业,帮忙企业培养自有数据能力,为更多客户带来更好的产品和高价值的服务。828 B2B企业节,既是企业数字化翻新倒退的交换与赋能平台,也是属于企业本人的节日。 风雨同舟扬帆起,乘风破浪万里航。将来思迈特软件与华为云放弃密切合作,紧贴客户场景需要,服务更多行业多畛域客户,从摸索到引领,一直携手共进。

September 18, 2022 · 1 min · jiezi

关于华为云:华为云CDN云视频通信专场828低价购CDN005元GB起短信0006元条起

828选华为云,实惠更实用。华为云CDN&云视频通信专场特惠进行中,流动工夫:2022年8月22日-9月16日;9月6月CDN专场直播6600元大礼包限量发放,享上九折,等您来~全场CDN0.05元GB起,短信0.006元条起,直播、点播、媒体解决特惠套餐包6.5折起!华为云CDN中国大陆流量包100GB低至5元,行业短信套餐包500条只需3元。828不知怎么买?最全省钱攻略看这里! 攻略一: 企业爆品专区,更高性价比企业新专属优惠,CDN中国大陆流量包1TB收费减速一整年!高性价比套餐包低至0.92折,助力企业轻松搭建云视频通信及内容减速服务、直播、点播、通信等。 攻略二:CDN组合流量包,高性价比首选华为云CDN“组合流量包”包含全时(24h)和闲时(北京工夫00:00-18:00)两种时间段混合应用, 新老客户同享6.5折超值优惠,低至0.061元/GB。“组合流量包”有多种比例组合抉择,客户依据业务有多种闲全时占比的组合包可选,且后盾主动计费,无需手工操作。对于教育、医疗、政企、金融等行业的业务可抉择闲时段比例高的流量包,采取错峰应用更“佳”优惠!这样能够破费更少的钱应用CDN减速服务,并实现业务效率和用户体验双重晋升。 攻略三:CDN全时段流量包低至2.5折,尽享高性价比优质服务华为云平台中立更牢靠,性能彪悍不怕测,华为云CDN在828上的优惠也不是只有“组合流量包”优惠,还有“全时流量包”的优惠也是相当给力,精选CDN中国大陆流量包2.5折起倾情奉上!1PB流量仅0.08元/GB,量大价更优!全时段减速,推动体验晋升,享受更低的价格,体验更优质的CDN服务,全面多重力度优惠为企业客户降低成本压力!此外,CDN海内流量包半价购,如果有出海减速业务需要的企业可不容错过哦! 攻略四:0门槛抽奖,100%中奖828流动期间,华为云企业实名认证用户,或新购付费大于1元,既可取得1次抽奖机会,同一用户最多抽两次,每次均100%中奖,最高可得华为智慧屏SE。 攻略五:新购满额赢华为奢华大礼华为云用户新购实付付费金额达到肯定额度,即可兑换相应的实物礼品,快快下单来赢取华为设施奢华大礼吧!其中最为吸引人的是生产满 额即送华为笔记本大礼,各位小伙伴们快快来华为云CDN分会场赢取吧!攻略六:晒单送码豆,最高可送100W码豆828流动期间下单的用户,参加CDN和视频云晒单送码豆流动。晒出您在2022年8月22号-9月16号期间购买的华为云CDN和视频云订单,金额0元以上,胜利晒单,立返与订单金额数等同的码豆(比方:订单金额为1000,立返1000码豆),码豆可在码豆会员中心兑换实物礼品(具体以码豆核心库存为准)。 华为云CDN828企业上云节,企业客户在各种业务场景中有减速需要的都能够借此机会上量晋升本身业务体验啦!例如:针对各大门户网站、电商、资讯类APP等网站类平台可进行网站减速,让用户能够就近晦涩拜访网站资源;对于游戏客户端、APP商店,以及软件实时更新应用下载减速,华为云CDN具备突发性的超大流量承载能力,可极大晋升下载体验;针对在线视频分享网站、音乐视频点播APP、在线教育类网站(网课)等可应用点播减速,让用户享受高清晦涩视频观看体验;而对于各行业动动态内容混合,含较多动静资源申请的网站能够应用全站减速,能无效晋升动静页面的加载速度,避开网络拥挤路由,进步拜访成功率。

August 22, 2022 · 1 min · jiezi

关于华为云:华为云Linux服务器安装桌面

购买的华为云Linux服务器,操作系统是centos8,操作系统版本能够在买的时候抉择。咱们须要在centos上装一个桌面,为了近程应用浏览器不便。 通过ssh登录到华为云服务器上,替换yum的源,执行上面的命令:sed -i "s@https://repo.huaweicloud.com@https://repo.huaweicloud.com/centos-vault@g" /etc/yum.repos.d/CentOS*repo装置GNOME3,大概1.2G。首先执行上面命令: yum groupinstall "Server with GUI"设置GDM开机启动,上面设置gdm开机启动,并立刻启动该服务: systemctl enable gdm --now默认状况,CentOS8默认启动级别为multi-user.target,上面设置CentOS8的启动级别为graphical.target systemctl set-default graphical.target 登录华为云后盾重启服务器,而后用华为云后盾的【近程登录】服务器就能够看到图形化桌面了。

March 2, 2022 · 1 min · jiezi

关于华为云:来自开发者的点赞华为云开发者社区入选-2021-中国技术品牌影响力企业榜

2022 年 1 月 13 日,中国技术先锋年度评比 | 2021 中国技术品牌影响力企业榜单正式公布。作为中国当先的新一代开发者社区,SegmentFault 思否依靠数百万开发者用户数据分析,各科技企业在国内技术畛域的行为及影响力指标,最终评比出 30 家上榜企业。华为云作为中国当先的高新通信技术企业,入选 30 强之列。 置信开发者的力量,始终以来华为云开发者社区都保持鼎力推动开发者生态建设。2021 年,华为云曾组织或参加顶级技术大会、开发者大赛、技术沙龙数场,输入高质量技术博客1000+篇,以当先技术回馈社区,和开发者独特成长。 2022 年,华为云将继续加强生态建设,服务宽广开发者。 点击关注,第一工夫理解华为云陈腐技术~

January 17, 2022 · 1 min · jiezi

关于华为云:华为数通hcia认证考试题库有多少题华为数通hcia考试通过率高吗

华为数通hcia认证,次要是定位于中小型网络的根本配置和网络方保护方面,它包含的内容也比拟多,如果大家想加入华为数通hcia认证考试的话,就须要熟练掌握这些方面的常识,这样能力一次性通过考试,很多敌人在考试之前,都会先看下题库的状况,这样就晓得考试的题型了,那么华为数通hcia认证考试题库有多少题?华为数通hcia考试通过率高吗?上面就给敌人们介绍一下。 华为数通hcia认证考试题库有多少题? 可能有不少考生都会晓得华为认证有存在题库这个事儿,那么华为hcia题库有多少题呢? 在这里明确通知大家,华为数通hcia认证考试题库数量不一。次要起因是不同方向的认证题库数量不一样,其次题库是会随着版本的降级而变动的。拿HCIA Video Conference方向为例,目前题库数量为320题左右。拿HCIA Video Conference方向为例,目前题库数量为320题左右。华为数通hcia认证考试题库 正式考试中会考多少道题呢? 正式考试中会考多少题也是不确定的,比方HCIA数通方向可能考60题,比方其余的HCIA方向也可能考85题,这都是不确定的!不过数量广泛较少在100题以内。 华为数通hcia认证考试通过率高吗? 通常来说,咱们服务的考生中华为认证hcia考试中Fail挂科的概率是十分十分小的。因为培训机构提供业余的华为HCIA考试题库服务,对于HCIA各个方向的题库皆为专人拍题、解题、上传至服务器供考生练习,因为咱们与业界培训机构也有着严密的单干,同时意味着咱们有着宏大的考生基数,在第一工夫变题就会立马收到告诉,也大大防止了Fail挂科的危险。 那么又有人问了:“如果忽然变题了,还要考生去告诉和你们反馈,那个踩雷的考生不就亏大了吗?”其实这个挂科的考生的确很可怜,然而考试本就不存在100%的通过,考生本身也是须要承当肯定危险的。其次Pearson VUE考试核心不是任何培训机构可能干涉的,如果真的有考生挂了,也只能说点太背了,撸起袖子再考一次吧。华为数通hcia认证考试题库 华为认证考试是中文还是英文? 华为认证考试是我国网络工程师认证中的高难度且富裕含金量的认证,考华为认证能够抉择简体中文或是英语作答的形式。当然在中国预约考试时绝大部分考生还是首选简体中文,对英文程度不高的人显得十分敌对了。 华为认证考试除了英语和简体中文以外,还反对哪种语言呢? 俄语、法语、古代西班牙语、葡萄牙语(巴西)、日语。 华为数通hcia认证考试题库有多少题?以上就给大家介绍了对于华为数通hcia认证考试题库的问题,华为数通hcia认证考试题库外面的试题还是比拟多的,大家肯定要认真的去做练习,最好是多做几遍,这样就能够比拟纯熟的把握考试的重点了,从而能够获得好的问题。

November 1, 2021 · 1 min · jiezi

关于华为云:华为hcip考试认证多少钱什么是华为hcip认证

信息化时代短少不了网络工程师这个职业,而网络工程师对于互联网的倒退以及保护,起到的作用是十分重要的。网络工程师中还分为高级、高级和专家级,那你晓得hcip认证是什么级吗?通知大家是华为认证的高级网络工程师,他有解决个别互联网公司遇到的网络通信故障的能力。如果你也想申请华为hcip认证,那你晓得华为hcip考试认证多少钱吗?其实费用并不多,具体的内容下文就来通知大家。华为hcip考试认证多少钱 华为hcip考试认证多少钱? hcip考试一共是三门课程,这三门课程都是在电脑上进行选择题的答复,而且都是有题库的,只有你筹备的好,考过这个认证是非常容易的,单考一门的课程是160美金,三门课程合起来就是480美金,换算成人民币也就是3000块钱左右,有的人如果有优惠券的话,还能略微再打点折扣,所以你只须要付3000人民币左右,也就可能拿到华为高级认证网络工程师hcip这个认证了。 华为认证hcia、hcip、hcie哪一个容易找工作呢? 华为认证分成了三个级别,别离是ia、ip和ie,也就能够了解成是华为的高级网络工程师,华为高级网络工程师和华为专家级网络工程师,在这三个级别当中,其实最容易考的是属于hcia和hcip这两个,因为它只有口试。 然而如果你的指标是出于找工作的话,如果你去考hcia就有点太低了,因为这个认证所学的内容比拟少,所以如果你是出于找工作的目标,那么举荐你考的就是hcip了,也就是至多要成为高级网络工程师才比拟容易找工作。 hcip是华为这三个级别外面的两头级别,至于他更下层的那个hcie就叫做网络专家了,所以你也就可能了解,为什么说考一个hcip的认证找工作就没问题了,因为他把绝大多数在工作中所须要的技能基本上都学了,比方网络的招投标,网络设计,网络布局,还有日常的各种网络配置和平安协定等等,简直涵盖的内容十分广,足够应酬你工作中的内容了。 什么是华为hcip认证? hcip是华为认证ICT高级工程师,同时也是是华为认证的中级认证,很多以前接触过华为认证的敌人可能会很纳闷,华为认证的中级认证不是hcnp吗?怎么忽然变成hcip了?其实在2019年3月22日,华为认证全面降级的时候,hcnp就正式更名为hcip了,把“N”(Network)降级为“I”(ICT,Information and Communications Technology 信息通信技术),象征着“IT和CT”技术深度交融。不过降级之后的hcip和原有的hcnp实质上并没有什么区别,本来曾经考取了hcnp证书的敌人也不必放心,因为之前考取的hcnp证书在有效期内同样是无效的。华为hcip考试认证多少钱 hcip认证次要定位于中小型网络的布局、设计、配置与保护,蕴含网络根底、常见接口与电缆、以太网交换机、路由器原理、TCP/IP协定、广域网协定、路由协定、DDR/ISDN、访问控制列表、备份核心、简略网络故障排除。 领有hcip认证将证实您对数据通信网络有全面深刻的理解,把握面向中小型企业的网络通用技术,并具备设计中小企业网络以及应用华为3Com网络设备施行您的设计的能力。 随着互联网的倒退,很多企业都须要这方面的网络技术人才,所以当初很多公司都会对本人的外围技术骨干进行相干的华为hcip培训,甚至有些人脱产学习,专门找培训机构做hcip培训,从而实现转行。 上文曾经通知大家华为hcip考试认证多少钱了,如果你取得了华为HCIP认证,就意味着你领有了丰盛的网络常识和解决问题的实际能力。当中小企业遇到网络技术上的难题时,你就能够凭借本人的网络常识来解决企业所遇到的网络难题。很多企业都对能取得hcip认证的网络工程师开出了很高的薪水,所以有能力的敌人去考一个hcip对本人的前途是十分有益处的。

October 29, 2021 · 1 min · jiezi

关于华为云:分辨hcip和hcnp有什么区别了解两者的含义

随着21世纪的到来,人们对科技倒退的认知越来越多。hcip和hcnp逐步深刻人们的脑海中。首先咱们要分明的理解那何为hcip和hcnp,hcip和hcnp有什么区别?接下来,小编将从这三面进行简单明了的叙述。 hcip和hcnp有什么区别 HCIP和HCNP的区别是什么? HCIP的呈现就是因为此次命名的降级。现在,以云为平台,大数据、物联网、人工智能等技术的深度交融,正将咱们带入一个万物感知、万物互联、万物智能的新时代。为紧随ICT技术发展趋势,华为认证也将其命名从原先代表着网络技术的“N”(Network)降级为“I”(ICT,Information and Communications Technology信息通信技术),象征着“IT和CT”技术深度交融。 除此之外,华为认证体系蕴含“ICT技术架构认证”、“平台与服务认证”、“行业ICT认证”三类技术畛域人才规范。其中,ICT技术架构认证聚焦ICT根底软硬件设施,提供Data Center、Storage、Server(In progress)、Routing & Switching、WLAN、Security、SDN、Transmission、Access、LTE、5G十一个技术方向的能力认证,造就具备基础设施布局、建设和保护能力的专业人才;平台与服务认证笼罩AI、IoT、Cloud等新技术畛域,提供Cloud Computing、Cloud Service、Big Data、AI、IoT、Enterprise Communication六个技术方向的认证,聚焦造就具备业务、技术、利用交融能力,能进行云平台架构、建设和经营,并在平台根底上进行新技术利用和开发翻新的新型人才;行业ICT认证深刻了解行业,提供Finance、Public Safety两个行业方向的认证,聚焦造就既懂技术,又懂行业的复合型人才。 此次的降级中,HCNP降级成为了HCIP,因而二者并没有实质上的区别。 华为认证级别新名称公布之后,华为认证原有名称与新名称具备雷同效劳,对于曾经拿到HCNP证书的考生来说,原证书在有效期内继续失效,具备等同效劳。在这降级期间培训的考生也无需放心,认证大使局部教材仍沿用原有名称,这点不会对学习产生影响,考生从认证大使所获取的华为认证教材都是最新版本。对于考试内容方面,本次变动仅是认证名称降级。认证考试纲要、考题不发生变化。因考试零碎需逐渐降级,所以在一段时间内考试科目仍应用原认证考试名称。考生依照指定的考试代码参加考试即可。 HCIP的含意 HCIP是华为认证ICT高级工程师,同时也是是华为认证的中级认证,其中HCIA(华为认证ICT工程师)是华为认证高级认证,HCIE(华为认证ICT专家)是华为认证的高级认证。 hcip和hcnp有什么区别 HCNP的含意 HCNP认证包含但不限于:网络基础知识,交换机和路由器原理,TCP/IP协定簇,路由协定,访问控制,网络故障的排除,华为路由替换设施的装置和调试。 通过HCNP认证,将证实您对中小型网络有全面深刻的理解,把握中小型网络的通用技术,并具备独立设计中小型网络以及应用华为路由替换设施施行设计的能力。 在上文中,小编通过HCIP的含意、HCNP的含意以及hcip和hcnp有什么区别这三方面介绍了本篇文章的主题。随着社会的倒退和社会的提高,人们对些许常识有了新的定义,心愿本篇文章对有须要的敌人有肯定的帮忙。

October 15, 2021 · 1 min · jiezi

关于华为云:云小课丨SA基线检查给云服务来一次全面体检

摘要:随着企业上云过程的放慢,因为云服务配置不合理、不合规等引发的平安危险一劳永逸。如果没有加以器重并做及时的诊断处理,将会对企业云上业务带来微小的安全隐患。本文分享自华为云社区《云小课丨平安第11课 SA基线查看:给云服务来一次全面“体检”》,作者:云平安佳人 。 随着企业上云过程的放慢,因为云服务配置不合理、不合规等引发的平安危险一劳永逸。如果没有加以器重并做及时的诊断处理,将会对企业云上业务带来微小的安全隐患。 近期,华为云SA的云服务基线查看性能全面降级。它反对检测云服务(如IAM、OBS、ELB等)的身份认证、访问控制、日志审计等平安配置,可对云服务进行全面“体检”,第一工夫理解云服务危险配置的所在位置和危险数目,并提供检测后果,针对存在的危险配置给出加固倡议和帮忙领导。帮忙用户提前排除平安危险,保障云上业务的平安。 云服务基线查看是指对云服务要害配置项进行检测,通过执行扫描工作,查看基线配置的危险状态,对存在安全隐患的配置进行处理。如同人体必要的健康检查个别,云服务基线查看是企业上云的关键环节。 那么,怎么开启云上危险全面“体检”呢?如何判断云服务配置是否合规?怎么解决不合理配置? 接下来,就追随小课的脚步,三步教您通过华为云基线查看发现云服务危险配置项,对查看后果做响应处理,轻松满足平安合规~~~ 应用SA前,您须要购买SA戳这里 步骤一:设置查看打算默认查看打算是每隔3天查看一次,每次在00:00~06:00进行查看。如果不应用默认打算,能够依据业务需要自定义查看打算。 在“基线查看”页面,单击页面右上角的“设置查看打算”,进入查看打算设置页面。 单击“创立打算”,零碎右侧弹出新建查看打算页面。 在弹出的新建查看打算页面,配置查看打算并单击“确定”。 SA会在指定的工夫执行云服务基线扫描,扫描后果能够在“基线查看”中查看。 步骤二:执行查看打算查看打算设置后,零碎将依据指定查看工夫进行检测。同时,还反对立刻执行查看打算。 立刻查看所有查看标准SA可依据您设置的查看标准,立刻执行已配置的查看标准。 “立刻查看”工作在10分钟内仅能执行一次。 1、在“基线查看”页面,单击页面右上角“立刻查看”。 2、刷新页面,查看“最近查看工夫”,即可确认是否为最新的扫描后果。 立刻执行某个查看打算SA可立刻手动执行您设置的某个查看打算。配置后,零碎将立刻执行已抉择的基线查看打算。 手动立刻执行“定期主动查看打算”在10分钟内仅能执行一次。 1、在左侧导航栏抉择“设置 > 检测设置”,进入检测设置页面。2、在待执行立刻手动查看的查看打算所在栏的上方单击“立刻查看”。 零碎将立刻执行已抉择的基线查看打算。 步骤三:查看查看后果查看查看后果总览查看打算执行后,稍等片刻,即可在基线查看页面查看以后区域检测到的基线查看后果汇总数据。 表1 查看后果总览 查看“查看标准”详情在“基线查看”页面,默认进入“查看标准”列表页面。查看标准页面会展现所有基线查看标准,包含查看项、查看状态、危险资源、形容,以及最近查看工夫等信息。 单击“查看详情”,能够跳转至对应查看项的详情页面。基线查看提供危险项查看的详情查问能力,对某个的查看项执行了查看动作后,查看状态、工夫、危险等级、形容、查看过程高深莫测,并且反对查看这一查看项所笼罩的资源名称、类型,查看后果等。云服务基线查看的全貌信息和细节展示都和盘托出。 查看“查看资源”详情在“基线查看”页面,抉择“查看资源”页签。查看资源以列表模式聚合出现所有的危险资源后果,并依照危险等级做降级排序,高优展现危险数目多,危险等级高的云上资源,便于您查看详情,依据领导倡议做及时的响应处理。 单击“查看详情”,能够跳转至对应资源的详情页面。针对某一查看资源,出现该资源下所有查看项的列表明细,您能够依据聚合后的查看项,全面查看危险查看状态,再做对应的查看或者详情查看操作。 查看“查看后果”详情在“基线查看”页面,抉择“查看后果”页签。单击“查看详情”,能够跳转至对应查看项的查看后果详情页面。您可查看该查看项的查看状态、最近查看工夫、查看形式、危险等级、查看形容及查看过程,还有相干材料为您提供响应处理的领导倡议,还能够查看这一查看项所笼罩的资源名称、资源类型等聚合明细,可针对某一资源再进行对应的查看操作。 正视云上配置不合规、不合理导致的“病情”,通过云服务基线查看“平安体检”及时排查隐患,防患于未然,治患于基本,能力轻松满足平安合规,为云上业务保驾护航! 更多对于SA的性能,戳这里进行理解吧~~ 点击关注,第一工夫理解华为云陈腐技术~

October 15, 2021 · 1 min · jiezi

关于华为云:华为云企业级Redis助力VMALL打造先进特征平台

摘要:当电商平台对AI算法模型的需要越来越多,特色数据平台的对立建设是不少开发团队头疼的事件。因为只有通过对立的特色数据存储,能力扭转原有的“数据孤岛”,解决生产反复造轮子的困境。本文分享自华为云社区《华为云企业级Redis:助力VMALL打造先进特色平台》,作者: GaussDB 数据库 。 1 客户介绍华为商城(VMALL)是华为公司旗下自营及精选好物的官网电商平台,本着“智慧生存、精选好物”的理念,为消费者提供最齐全的华为品牌产品及鸿蒙生态产品,笼罩了办公、出行、居家、静止、娱乐等生存需要,致力于将全场景智慧生存带给更多的消费者。 云数据库GaussDB(for Redis)作为华为云旗下企业级Redis,致力于为客户提供稳固牢靠、超高并发,且可能极速弹性扩容的KV存储服务。GaussDB(for Redis)在VMALL特色工程平台建设中,起到了关键作用。 2 业务痛点VMALL应用了大量的AI和大数据技术,用来撑持智能举荐、精准营销、智能搜寻、选品投放等业务的高效发展。 随着业务的疾速倒退,系统对AI算法模型的需要日益增多。以后的AI开发流程中,“模型训练”和“模型部署”阶段都曾经有成熟的平台撑持,唯独“特色数据筹备”阶段不足通用平台,导致了“线上推理和线下训练的特色数据不统一”、“各算法模型独立开发,特色生产反复造轮子”、“特色工程投入工夫多(占据算法开发耗时的60%-70%)”3个关键问题,重大影响了研发效率,妨碍业务倒退。 为解决此问题,VMALL大数据团队开始着手建设对立的特色平台。 特色平台的核心部件是特色存储数据库,只有通过对立的特色数据存储,能力扭转原有的“数据孤岛”困境,彻底解决“不统一”、“难共享”、“效率低”3大问题。 但也正是因为特色数据库须要承当买通线上/线下多个场景,对接批式/流式多种数据源,满足训练/推理多样生产需要,对特色数据库的选型提出了十分高的要求:须要找到一款数据存储服务,既能提供低成本的海量数据存储并不便扩容,又能保证数据的相对牢靠和服务的高可用;既要满足低时延的线上推理,又要满足高吞吐的线下训练;既能提供简洁的KV接口供上游轻松生产,又要兼容支流的批式/流式解决引擎(Spark/Flink等)供上游疾速接入。 通过深刻调研,VMALL大数据团队最终抉择了GaussDB(for Redis)作为特色数据库,上面就让咱们具体看看GaussDB(for Redis)是如何满足上述刻薄要求的。 3 解决方案特色平台应用GaussDB(for Redis)的次要流程1)特色生产(抽取、解决、存储) 离线特色(动态特色):定时调度Spark作业,从各种数据仓库、数据湖中提取数据,进行特色工程解决后,存入GaussDB(for Redis) 。 实时特色(动静特色):Flink生产Kafka,或流式存储中的数据,继续更新到GaussDB(for Redis)中。 2)特色生产 线上推理:模型曾经部署到生产,开始承接业务,须要低时延,高并发的生产数据,从GaussDB(for Redis) 中读取数据。 线下训练:GaussDB(for Redis)存有最新的特色数据,OBS中存有全量的特色数据。 1)对于应用动态特色的较为简单的模型,能够间接从OBS中获取特色应用。 2)对于应用实时特色的场景(如实时举荐零碎),由Flink从Kafka中实时获得用户申请记录,并从GaussDB(for Redis) 查问获得特色,将记录和特色拼接成训练样本,存储到文件中,供线下训练应用。 特色平台对GaussDB(for Redis)的外围诉求联合上述业务场景,总结特色平台对GaussDB(for Redis)的外围诉求如下: GaussDB(for Redis)满足特色平台诉求的要害计划1)业务接口 GaussDB(for Redis)兼容社区Redis5.0接口,反对和Spark/Flink Connector的对接,很好的满足了业务的应用需要 2)稳定性 GaussDB(for Redis)采纳自研内核,解决了社区Redis的fork,oom等老大难问题,具备了企业级利用的稳定性 3)可靠性 数据零失落:逐条命令实时落盘,底层三正本冗余存储,无数据失落危险 数据强统一:基于GaussDB公共的共享存储部件DFV,实现三正本强统一,多点拜访无脏读危险 4)老本 GaussDB(for Redis)实现数据的主动冷热拆散,采纳内存+SSD的混合存储计划,大幅升高了客户的应用老本。依照VMALL的特色体量测算,亿级用户,每个用户的特色数量是数K-数10K,GaussDB(for Redis)一年的费用仅3W出头,如果选用社区Redis,费用在20W+ 5)性能 GaussDB(for Redis)采纳多线程架构,并且所有节点能够同时反对写入,因而能够较好满足批量灌库的高吞吐写需要。读方面,基于冷热拆散计划,热数据常驻内存提供稳固低时延;冷数据读波及IO替换,存在肯定长尾,但可满足VMALL业务要求(目前VMALL线上GaussDB(for Redis)实例读时延均匀0.16ms,P99 0.4ms,P9999 1.5ms) 6)可扩展性 基于计算存储拆散架构,底层数据可被任一节点拜访,扩容过程不产生数据拷贝搬迁,因而速度极快;计算节点扩容分钟级实现,存储扩容秒级实现,RTO < 10秒 综上,与社区Redis相比,GaussDB(for Redis)提供了更稳固的应用体验,更牢靠的数据存储,更低廉的应用老本和更便捷的扩大能力,是更适宜像VMALL特色平台这样大规模电商大数据利用的企业级Redis服务。因而,VMALL特色平台最终抉择GaussDB(for Redis)作为特色数据的存储服务。 4 上线后成果目前VMALL已实现一期的特色数据迁徙,包含“特色生产”业务中的“Spark离线特色生产”,以及“特色生产”业务中的“线下训练Flink特色查问”,已迁徙到GaussDB(for Redis)。 ...

October 15, 2021 · 1 min · jiezi

关于华为云:华为hcia题库有哪些内容华为HCIA认证考试多少分及格

说起华为hcia题会很难吗?置信很多人在这方面都是有点懵的。大家能够先理解下对于华为hcia题库有哪些内容?以及华为HCIA认证考试多少分及格?上面让认证大使的小编跟大家解说下吧。 一、华为hcia题库有哪些内容? 1、以下对于华为RAID2.0+技术,形容正确的是:(多选) A. 硬盘域中每个存储层的硬盘类型雷同 B. 硬盘的空间被划分成固定大小的块 C. 用户能够为存储池(storage pool)中的每一个存储层别离设置“RAID策略” D. grain作为数据迁徙的最小粒度和形成Thin LUN的根本单位 [答案]ABC 华为hcia题库 2、以下哪些选项不是FC SAN环境中必须的组件:(多选) A. 存储设备 B. FC 交换机 C. FC HBA D. Windows操作系统 [答案]BD 3、SmartThin是华为OceanStor V3存储系统提供的一项按需分配存储资源的存储空间治理技术,基于虚拟化 技术,SmartThin缩小了物理存储资源的部署,最大限度的进步了存储空间的利用率。 A. 对 B. 错 [答案]A 4、以下对于华为RAID 2.0+技术中的硬盘域的形容,谬误的是: A. 一个硬盘域是一组硬盘 B. 一个硬盘只能属于一个硬盘域 C. OceanStor V3存储系统能够创立一个或多个硬盘域 D. 硬盘域中,硬盘的类型是雷同,硬盘的大小和转速须要保持一致 [答案]D 5、云计算的商业模式有:(多选) A. IaaS B. PaaS C. SaaS D. MaaS [答案]ABC 6、华为OceanStor V3 SmartTier个性可用于将数据搁置到指定的磁盘类型上。 A. 对 B. 错 bbs.hh010.com [答案]A 二、HCIA考什么内容? HCIA和HCIP认证考试题型一样,由单选、多选和判断题三种题型形成,题目数数个别为50~70题。目前华为提供中英文二种考试,英文考试在寰球公布,中文考试仅在中国大陆公布。HCIA定位于中小型网络的根本配置和保护,考试内容包含但不限于:网络基础知识,风行网络的根本连贯办法,根本的网络建造,根本的网络故障排除,华为路由替换设施的装置和调试。考试时长个别为1小时,失常来说足够答完所有的题目。 华为hcia题库 三、华为HCIA认证考试多少分及格? 华为HCIA认证考试满分是1000分,及格是600分,通过难度不大,但仍须要具备相应根底阶段的技术常识。

October 12, 2021 · 1 min · jiezi

关于华为云:DCI架构是如何解决DDD战术建模缺点的

摘要:将DCI架构总结成一句话就是:畛域对象(Object)在不同的场景(Context)中表演(Cast)不同的角色(Role),角色之间通过交互(Interactive)来实现具体的业务逻辑。本文分享自华为云社区《实现DCI架构》,作者:元闰子 。 前言在面向对象编程的理念里,应用程序是对事实世界的形象,咱们常常会将事实中的事物建模为编程语言中的类/对象(“是什么”),而事物的行为则建模为办法(“做什么”)。面向对象编程有三大根本个性(封装、继承/组合、多态)和五大根本准则(繁多职责准则、凋谢关闭准则、里氏替换准则、依赖倒置准则、接口拆散准则),但晓得这些还并不足以让咱们设计出好的程序,于是很多方法论就涌现了进去。 近来最火的当属畛域驱动设计(DDD),其中战术建模提出的实体、值对象、聚合等建模办法,可能很好的领导咱们设计出合乎事实世界的畛域模型。但DDD也不是万能的,在某些利用场景下,依照传统的战术建模/面向对象办法设计进去的程序,也会存在可维护性差、违反繁多职责准则等问题。 本文介绍的DCI建模办法能够看成是战术建模的一种辅助,在某些场景下,它能够很好的补救DDD战术建模的一些毛病。接下来,咱们将会通过一个案例来介绍DCI是如何解决DDD战术建模的这些毛病的。 本文波及的代码归档在github我的项目:https://github.com/ruanrunxue... 案例思考一个普通人的生存日常,他会在学校上课,也会趁着寒假去公司工作,在工作之余去公园玩耍,也会像普通人一样在家吃喝玩乐。当然,一个人的生存还远不止这些,为了解说不便,本文只针对这几个典型的场景进行建模示例。 应用DDD建模依照DDD战术建模的思路,首先,咱们会列出该案例的通用语言: 人、身份证、银行卡、家、吃饭、睡觉、玩游戏、学校、学生卡、学习、考试、公司、工卡、下班、上班、公园、购票、玩耍接着,咱们应用战术建模技术(值对象、实体、聚合、畛域服务、资源库)对通用语言进行领域建模。DDD建模后的代码目录构造如下: - aggregate: 聚合 - company.go - home.go - park.go - school.go- entity: 实体 - people.go- vo: 值对象 - account.go - identity_card.go - student_card.go - work_card.go咱们将身份证、学生卡、工卡、银行卡这几个概念,建模为值对象(Value Object): package vo// 身份证type IdentityCard struct { Id uint32 Name string}// 学生卡type StudentCard struct { Id uint32 Name string School string}// 工卡type WorkCard struct { Id uint32 Name string Company string}// 银行卡type Account struct { Id uint32 Balance int}...接着咱们将人建模成实体(Entity),他蕴含了身份证、学生卡等值对象,也具备吃饭、睡觉等行为: ...

October 11, 2021 · 6 min · jiezi

关于华为云:沈抚示范区华为云杯2021全国AI大赛圆满落

摘要:以赛促学,赛教联合!驱动AI产业凋敝倒退本文分享自华为云社区《云聚沈抚 · 智赢将来!沈抚示范区·“华为云杯”2021全国AI大赛圆满闭幕》,作者:灰灰哒。 近日,由沈抚改革翻新示范区与华为、上海交通大学三方独特单干主办的《云聚沈抚 · 智赢将来!沈抚示范区·“华为云杯”2021全国AI大赛》闭幕式暨颁奖典礼在沈抚示范区白沙岛壹号展示中心圆满召开。此次大赛是面向全国的人工智能交换大赛,汇集了人工智能畛域的优秀人才,主办方心愿借此机会联结参赛企业、开发者及合作伙伴,搭建了一个技术交换、人才培养、产业交融、时机共创的AI生态平台。 沈抚示范区·“华为云杯”2021全国AI大赛闭幕式暨颁奖典礼 凋谢AI能力,用智能推动企业翻新作为面向全国举办的行业顶级人工智能利用翻新赛事,总决赛现场邀请到了省科技厅领导、沈抚示范区领导、行业领导单位、华为高级技术专家、高校传授专家、头部行业企业专家等嘉宾缺席现场。 沈抚示范区党工委委员、治理委员会副主任尹明在收场致辞中示意,数字经济已成为推动中国经济增长的新引擎,而人工智能是作为撑持数字经济倒退的重要信息技术。沈抚改革翻新示范区着眼于科技驱动翻新,把倒退人工智能作为优先策略抉择,踊跃筹划,加紧布局,被动单干,密集发力,致力于打造面向全国的人工智能前沿翻新平台、利用场景标杆。通过组织沈抚示范区·“华为云杯”2021全国AI大赛,以赛促学,产教联合,推动人工智能技术落地的具体实际口头,吸引科技型企业落户守业,促成沈抚改革翻新示范区数字经济高速倒退,买通了人工智能先进技术从迷信翻新到落地利用的残缺闭环,也打造了“数字辽宁、智造强省”的“样板间”。 沈抚示范区党工委委员、治理委员会副主任 尹明 华为云人工智能畛域副总裁史扬示意,这是一场面向全国的人工智能交换赛事,是三方“构筑AI生态平台,助力人工智能产业高速倒退”的一次理念符合,又是一场政企教交融,端云协同,“线上+线下”买通,以赛促学,推动人工智能技术走向自立自强的具体实际口头。华为云始终致力于升高AI的开发门槛和利用门槛,推动AI在千行百业的落地。 华为云人工智能畛域副总裁 史扬 上海市高等教育学会工程实际教学业余委员会副秘书长范成杰示意,人工智能技术在寰球范畴蓬勃发展,对人们的生产与生存形式带来了重要影响。倒退人工智能畛域的前沿科技,造就人工智能畛域的将来人才,无疑是咱们建设创新型国家,实现从“跟跑”、“并跑”到“领跑”的战略规划。沈抚示范区·“华为云杯”2021全国AI大赛的胜利举办,进一步为参赛企业、开发者及合作伙伴搭建技术交换、人才培养、产业交融、时机共创的AI生态平台,以赛促学、产教联合,打造AI赋能人工智能人才培养新榜样。 上海市高等教育学会工程实际教学业余委员会副秘书长 范成杰 沈抚示范区·“华为云杯”2021全国AI大赛的胜利举办,把各个领域和行业的优良人工智能翻新团队和开发者聚焦在了一起,提供了一个AI技术交换与分享的平台,继续摸索人工智能利用场景,践行华为“用得起、用得好、用得释怀”的“普惠AI”理念,站在行业和整合人工智能生态的角度,帮忙更多的企业、合作伙伴,打造简略易用的开发式AI平台,助力AI产业和生态的飞速发展。 技术大牛齐聚一堂,巅峰对决圆梦赛场沈抚示范区·“华为云杯”2021全国AI大赛的举办,在于挖掘一批人工智能畛域的优良开发者与翻新团队,寻找更多优良的人工智能技术,摸索人工智能在不同场景中的利用实际。 自大赛正式开赛以来,吸引了全国20家企业,以及上海交通大学、复旦大学、中国科学技术大学、同济大学、西安电子科技大学、北京理工大学、华东理工大学、桂林电子科技大学等多所出名高校学生参加。 为激励宽广参赛选手赛出好问题,两条赛道别离设置一等奖、二等奖、三等奖。除此之外,大赛主办方还为参赛选手提供了 AI 开发平台 ModelArts、AppCube、华为云DevCloud、云计算等技术方面的学习材料和操作领导,华为云技术专家通过社群、社区、技术沙龙等提供在线赋能与技术答疑。 通过强烈比拼和严格评比后,两条赛道的冠军团队怀才不遇。在无人车挑战赛中,上海交通大学的试试就试试团队摘取了大赛的一等奖,同样来自上海交通大学的SRC2021和Jesca两支队伍荣获二等奖,北京理工大学的上网不涉密、跑得快和华南理工大学的法外狂徒之无证驾驶六个月三支队伍荣获三等奖。 无人车挑战赛颁奖 在人工智能利用翻新大赛中,华为NB队凭借《基于纳米柔性传感器和 MEMS 加速度计的智能手势辨认与控制系统》摘取一等奖,内储物智能检测与Free 梦之队凭借《内储物非接触式量化检测的热成像智能解决方案》和《基于数据穿插剖析的帕金森检测零碎》荣获二等奖,大连锐动和智创团队以《AI 人体静止剖析零碎》和《基于AI研发的中国新型仿生纳米止血生物资料》取得了三等奖。 人工智能利用翻新大赛颁奖 较量完结之后,参赛选手纷纷表示,通过加入此次AI大赛,与业界一流的选手进行比拼,岂但学习到了很多实用的技术,使得本人的专业技能有了很大的晋升,而且通过深刻交换,摸索出了更多AI利用场景的实际,为AI产业高速倒退,奉献了本人的一份力量。 以赛促学,赛教联合!驱动AI产业凋敝倒退以赛促学、赛教联合,摸索人工智能技术和利用场景,推动AI在不同行业落地实际,是本次大赛的终极目标。 从赛场到公路,从云端到产业,这场面向人工智能交换与学习的全国性赛事,即是一次残缺的产学研相结合的过程,更是摸索人工智能技术在实在利用场景问题上的解决方案,为参赛企业、开发者及合作伙伴搭建技术交换、人才培养、产业交融、时机共创的AI生态平台,继续用AI赋能企业翻新的一次AI业界盛会。 点击关注,第一工夫理解华为云陈腐技术~

October 8, 2021 · 1 min · jiezi

关于华为云:探究数字内容生产商机把握未来内容生产脉搏

摘要:数字内容在影视行业意味着什么,将来的发展趋势如何,蕴含着哪些商机?9月24日,在华为全联接2021“数字内容云上生产,共创影视产业新高地”专题演讲上,弗若斯特沙利文大中华区执行总监郭铭受邀带来征询行业的观点。本文分享自华为云社区《探索数字内容生产商机,把握将来内容生产脉搏》,作者:音视频大管家。 9月24日,在华为全联接2021“数字内容云上生产,共创影视产业新高地”专题演讲上,华为云媒体服务深刻解读了全新公布的数字内容生产线解决方案,并分享优良实际案例,携手行业大咖,独特探讨数字内容云上生产技术,推动影视产业翻新倒退。数字内容在影视行业意味着什么,将来的发展趋势如何,蕴含着哪些商机?弗若斯特沙利文大中华区执行总监郭铭受邀带来征询行业的观点。 郭铭认为,影视数字内容不仅仅包含整部影片,也包含影片中的数字角色形象、空间场景、道具,更包含制作环节的模型、材质、以及现场拍摄中的相干数据,诸如静止捕获、面部表情驱动的元数据等可共享、可重复性应用和批改、产生持续性价值的内容资源。这意味着,将来一部电影的收益,并不仅局限于票房与前期视频网站的销售,影片中的数字内容作为一种潜在价值,有可能在将来的行业单干与电影的新我的项目开发中,再次取得价值重构的机会。 例如,迪斯尼和漫威在影片《蜘蛛侠》中用数字三维技术构建了“纽约城”这个空间场景数字内容,在《复仇者联盟》《复仇者联盟4》中,通过部分细节的批改后被不同水平的反复利用,并通过数字化表演被赋予新的意义,大大晋升了影片的制作效率,同时也保障了故事的连续性。 在影视行业,数字内容将来倒退出现智能化、云化、增值服务多元化、数字内容普及化的趋势。智能化:目前数字内容制作行业还是以人工制作与筛选为主,近年来,得益于人工智能技术的倒退冲破,数字内容的制作过程失去无效简化,制作效率失去肯定的晋升,数字内容正朝着智能化、便捷化、精细化和多样化的方向倒退。将来,随着数据的累积以及算法的倒退,高级人工智能将颠覆传统的数字内容的生成模式,从人工制作转变为全智能化生成数字资产的模式。 云化:随着数字内容体量的迅速增大,线下制作已无奈满足数字内容日益增长的计算机及存储需要,通过云上算力可解决数字内容生产品质及效率的问题。另外,因为目前数字内容不足无效的数字内容版权保护以及规范化治理,在很大水平上影响了数字内容自身被非法反复利用,产生持续性价值。 依靠于云上协同平台,可能为数字内容生产方提供一站式数字资产治理服务,推动数字内容价值的共享和价值流动;另一方面,也为内容的使用者提供了查找和预览平台,使得数字内容在实现持续性价值的同时,制作老本得以无效管制。 增值服务多元化:数字内容因体量大且资源扩散难以寻找,不利于搜寻和应用。分类标注以及定制化批改等增值服务,可进步数字内容复用率,一方面帮忙生产者促成数字资产变现,另一方面推动使用者实现数字资源的疾速匹配。 普及化:随着数字内容的技术壁垒的升高以及智能终端的遍及,不仅只有业余的生产机构和技术人员,每个人都能够成为数字内容的生产者、创造者。在这种趋势下,数字内容的规模将会越来越大,价格也会趋于便宜化,有助于催生新业态,比方沉迷式教育等倒退,利用该畛域扩大至短视频、潮玩等新兴畛域。在数字内容普及化的潮流之下,数字内容平台将减速数字内容的流通,建设数字内容产业园能够一站式提供全流程服务,是数字内容将来倒退的一个重要形式。 点击关注,第一工夫理解华为云陈腐技术~

September 30, 2021 · 1 min · jiezi

关于华为云:万亿养老市场如何抢占商机云巢智慧康养物联网加速器三招化解ISV痛点

摘要:云巢智慧康养物联网加速器,围绕ISV的种种痛点,提供疾速上云、资源共享、商业单干等多方面的反对,助力企业成长,共建智慧康养物联网生态。本文分享自华为云社区《万亿养老市场如何抢占商机?云巢智慧康养物联网加速器,三招化解ISV痛点!》,作者: 技术火炬手 。 家喻户晓,智慧养老行业的市场需求旺盛,但实际上能抓住商业机会的企业少之又少。以直面客户需要的ISV来说,他们在软硬件、上云、以及最终的商业变现方面,都面临着层层的挑战。有想法、有技术的ISV,很可能因为其中某一个环节难以畅通,折戟沉沙。 近期,华为云联结合作伙伴推出的云巢智慧康养物联网加速器(点击报名立享福利),就围绕ISV的种种痛点,提供疾速上云、资源共享、商业单干等多方面的反对,助力企业成长,共建智慧康养物联网生态。 硬件定制化太难怎么办?首先是硬件的难题,物联网行业对于硬件的价格和功耗始终都比拟敏感,如何洽购或者自研适合的硬件产品是不少ISV苦恼的问题。而养老行业的特殊性,对硬件的状态、品种、安全级别都有更高的要求。 硬件定制市场上的计划品质参差不齐,而且老本居高不下,很难切实解决硬件定制难题。设施集中管理方面, 比方来源于不同厂家的智能手表和睡眠仪因为数据存储形式不同,数据就无奈集中管理,关联剖析艰难;设施与零碎对接方面, 比方新的视频定位设施与养老院旧的零碎对接不足对立数据规范,零碎对接效率低、老本高。有时候,ISV还须要安顿设施工程师驻守现场监控与保护设施,消耗更高的人力老本。 为此,云巢加速器提供了绝对齐备的硬件解决方案,买通硬件定制研发的各个环节,齐全围绕ISV业务场景定制硬件。 以下图的居家养老科技解决方案为例,从门磁感应、烟雾报警到房间内的红外探测、起夜感应灯,以及老人佩戴的血氧手表、胸卡定位器,都能够针对具体需要和场景定制。 云巢加速器会先剖析ISV需要,安顿技术专家对接,因地制宜,提供残缺的我的项目解决方案,包含残缺的IoT连贯反对,智能硬件定制开发。最初从上述需要登程,对接配套硬件生产厂家,缩小中间环节老本节约,保障产品质量和生产效率。 另外,云巢加速器也提供200款与智慧康养相干的硬件标品, 例如智能手表、智能手环、睡眠监测仪、智能拐杖、人体红外定位检测报警器等。其中多款医疗硬件产品已通过医疗认证。 退出云巢加速器的搭档,可收费支付硬件设施试用, 体验后盾管理系统;购买或更新硬件设施时,还可享受华为云合作伙伴提供的价格优惠, 同时可享接入费及后盾管理费等费用减免。 云巢加速器还支持软件利用的疾速开发,ISV可能通过H5将利用疾速嵌入到APP、小程序中, 满足不同终端利用的开发需要,实现利用疾速开发。 如何让所有设施一键接入上云?明确智慧康养的硬件之后,下一步要解决的就是上云的难题。因为智慧康养设施品种和接入场景多,存在不同的接入网络和协定,导致对立接入上云艰难。设施接入后,数据采集的可靠性也无奈保障,音讯并发太高还会导致流量老本激增。当解决方案整体上云后,如果数据无奈灵便流转,数据孤岛化也会影响后续的商业利用。 为此,华为云的IoTDA提供了极简接入,2条AT指令上云,接入效率晋升10倍,设施上电即上云。反对亿级海量联接和百万级高并发,可保障大量设施稳固在线。并反对10+支流原生协定,30+行业协定,10种接入形式,笼罩各类接入场景。标准化的平台与设施调用接口,不便客户疾速集成利用与设施在数据流转方面,1路数据采集10路散发流转,反对多种协定对接多应用服务器,实现按需数据推送。举个例子,当ISV要构建居家养老场景下的智能煤气检测,只有将智能硬件通过IoTDA接入上云,煤气检测器即可在室内煤气浓度超标的时候,将数值上报到物联网平台,触发设置好的设施联动规定,主动关联到无线推窗期把窗户关上,起到通风的作用,并第一工夫告诉老人的家属。 综上,在云巢加速器,ISV可借助IoTDA将衰弱设施(心率、血氧、睡眠监测个)、安全设备(定位、放走丢设施、SOS等)接入到一个平台, 反对海量设施数据牢靠采集上云,让数据按需自在流转,并提供丰盛API便捷治理和近程管制设施。 基于及时精确的上传传感数据,使得养老机构能取得客户群体的生存需要与衰弱危险预警,养老社区服务及时响应。 短少技术和资源反对,商业化变现怎么办?随着云计算的疾速倒退,基于云构建业务计划成为常态化。在智慧康养方面,云上构建利用的老本更低,可扩展性更强,可迁移性更高,物联网硬件的大规模部署连贯成为可能。同时,云厂商的AI、大数据和平安等能力,也能升高ISV的运维老本和难度。 瘠田云创打算是华为云面向技术合作伙伴推出的一项联结计划构建打算,ISV可基于华为云60+种高阶云服务进行与智慧康养相干的利用构建,目前曾经有600+家企业退出打算,实现230+个利用构建。在9月刚完结的全联接2021上,华为云发表在2022年将投入1亿美元降级瘠田云创打算。 退出云巢加速器的ISV即可优先申请华为云瘠田云创打算,享受该打算的各项搀扶政策。具体包含在利用构建过程中,华为云将提供DTSE(解决方案架构师)反对,由专家7x24领导,解决构建认证过程遇到的问题。 在此期间,ISV还可依据构建计划获取肯定额度的华为云资源测试券反对,节俭计划的测试、验证过程中的破费。 目前,云巢加速器的云芯科技通过瘠田云创打算技术搀扶, 5天工夫就实现了云上部署,另一家蓝色衰弱科技只用了2天工夫。其中,蓝色衰弱科技还取得了3万元的测试券,由华为云帮忙顺利完成测试对接。 不仅仅是云上迁徙和利用构建的反对,在云巢加速器,ISV还能加入线下的高级开发者训练营——鲁班会, 与企业CTO、首席架构师一道学习交换,同时链接商业单干机会点。 同时,通过瘠田云创打算的计划认证后,ISV会取得由华为云颁发的使能技术认证证书, 失去华为云背书,在商业竞争中抢占先机。而且在云巢加速器,华为云会和ISV共享线上+线下营销资源,与搭档共享市场共建品牌,并通过严选销售体系帮忙ISV取得更多商机,将产品、利用和服务疾速变现。 当初点击报名退出云巢智慧康养物联网加速器,可享受硬件折扣、云资源优惠,提交利用构建计划还能取得云资源搀扶和技术领导、计划认证通过取得使能技术认证证书,疾速实现商业变现。心动不如口头,连忙退出吧! 点击关注,第一工夫理解华为云陈腐技术~

September 29, 2021 · 1 min · jiezi

关于华为云:华为云GaussDBfor-MySQL20全新升级三大技术大揭秘

摘要:9月23日,在华为全联接2021主会场,华为高级副总裁、华为云CEO、消费者云服务总裁张安全发表“深耕数字化,所有皆服务”主题演讲,并公布了GaussDB(for MySQL)2.0全新版本及分享了GaussDB数据库三大核心技术。本文分享自华为云社区《华为云公布GaussDB(for MySQL)2.0全新版本,助力企业业务翻新》,作者:GaussDB 数据库。 9月23日,在华为全联接2021主会场,华为高级副总裁、华为云CEO、消费者云服务总裁张安全发表“深耕数字化,所有皆服务”主题演讲,并公布了GaussDB(for MySQL)2.0全新版本及分享了GaussDB数据库三大核心技术。 张安全示意:“数据库是企业外围交易业务与要害数据处理的基石,华为保持策略投入GaussDB系列数据库10多年,联合云原生和AI技术打造了高性能、高可用、高扩大等极致能力。本次公布的华为云GaussDB(for MySQL)2.0全新版本通过整合华为云计算堆栈能力,实现了云栈垂直集成力量的最大化,同时推出的GaussDB三大核心技术,进一步推动企业数字化降级。” 华为高级副总裁、华为云CEO、消费者云服务总裁张安全发表演讲 华为云GaussDB(for MySQL)2.0全新降级作为华为云推出的新一代高性能企业级分布式数据库,GaussDB(for MySQL)基于存算拆散架构,齐全兼容MySQL,最高反对128TB的海量存储,可实现超百万级QPS吞吐,反对跨AZ部署,数据0失落。既领有商业数据库的性能和可靠性,又具备开源数据库的灵活性。 此次推出的GaussDB(for MySQL)2.0全新版本,在原有根底上深度整合了华为云计算堆栈的独特能力,在性能、可用性、扩展性等方面都进行了翻新,如通过并行查问PQ技术和算子下推NDP技术晋升查问场景的性能,实现了云栈垂直集成力量的最大化,让算力更快更猛,也更好解决客户海量数据负载场景难点,助力企业客户业务翻新。 华为云GaussDB三大核心技术揭秘华为在数据库畛域深耕多年,具备深厚的数据库技术积攒,GaussDB目前已在1500+金融政企与泛互联网标杆大客户规模商用。GaussDB历经金融客户严苛场景考验,一直进行技术创新和贴合业务场景,提供了极致的数据库服务能力。 在千行百业的锻炼和自主翻新中,华为云GaussDB推出了以下三大技术升级: 简单查问场景优化。通过算子下推技术,实现大规模查问场景中,将90%的逻辑计算在分布式存储层实现,大幅度降低了网络I/O提早,充沛开释了云计算算力,在TPC-H测试中,相比社区版本性能最高晋升了34倍。秒级伸缩,利用0感知。反对Serverless依据数据容量主动伸缩,存储主动打散负载压力,无需分库分表。云原生多主架构。通过分布式全并行架构提供极致的吞吐量性能,反对多节点写入,能够轻松应答海量高并发数据处理,晋升高可用能力。华为云GaussDB的翻新不是简略的单点技术创新,而是与客户一起积极探索,独特设计更贴合用户场景的数据底座服务能力,真正实现技术与业务更好交融,做到降级有道。面向未来,华为云GaussDB心愿能与企业共成长,一起拥抱云化,共创数字化倒退成绩。 更多精彩内容,欢送点击链接回顾:https://live.huawei.com/huawe... 点击关注,第一工夫理解华为云陈腐技术~

September 26, 2021 · 1 min · jiezi

关于华为云:华为云开天aPaaS-上线服务千万开发者使能行业场景化创新

摘要:9月25日,华为云在华为全联接2021公布四大生态策略,并发表2022年投入1亿美元降级瘠田云创打算。华为云开天aPaaS正式上线,实现教训即服务,使能行业场景化翻新。本文分享自华为云社区《华为云开天aPaaS 上线,服务千万开发者,使能行业场景化翻新》,作者:技术火炬手。 9月25日,华为云在华为全联接2021公布四大生态策略,并发表2022年投入1亿美元降级瘠田云创打算。华为云开天aPaaS正式上线,实现教训即服务,使能行业场景化翻新。 华为云寰球生态部总裁康宁在主题演讲中示意:“华为云致力于成为智能世界云底座,秉承‘以客户为核心’,与搭档共建、共享开天aPaaS,构筑企业应用散发云市场,聚合千行百业利用,服务千万开发者,激发有限商业潜能!” 公布四大生态策略,共建华为云生态 华为云寰球生态部总裁康宁发表主题演讲 康宁介绍,面向客户痛点,聚焦行业的典型利用云化需要,华为云生态体系建设将从四个方面加大投入: 第一,服务千万开发者加大开发者工具链投入,通过加强IDE和零低码协同,晋升开发体验。 通过翻新IDE内核和AI智能技术的加持,华为云CloudIDE能够提供晦涩、高效云上开发体验,已成为数十万开发者的生产力工具。将把AppCube和WeLink两个服务的入口和能力深度交融,为开发者关上数字新世界的入口。优化AppCube零代码开发体验,进一步升高门槛,无论是业务专家还是业余开发者都能够从WeLink开放平台进入AppCube进行开发;AppCube提供海量连接器,让开发者能更便捷地应用华为云能力,施展设施和常识的最大价值。 第二,凋谢翻新华为云开天aPaaS平台能力,将华为本身数字化转型的教训凋谢为云上服务,联结搭档共建行业aPaaS。 第三,聚合千行百业的利用SaaS,继续投入资金和技术力量,帮忙搭档做好利用开发、上云迁徙与继续经营,减速云原生与SaaS转型。 第四,构建极致的利用散发、购买与服务体验,打造最佳企业应用散发平台。此外,华为云将云市场能力服务化,帮助客户构建生态体系。目前已为上海城市数字治理利用市场提供反对,助力城市数字化转型。 瘠田云创打算三大降级,与开发者独特成长康宁在演讲中示意,开发者是华为云帮忙客户解决问题,实现价值的外围力量。面向开发者,华为云共提供13类云服务、128个Kits、超过3万个API,同时打造了14类开发工具和5个学习反对平台。 为了更好地服务千万开发者,华为云在本次流动上发表,2022年将投入1亿美金,对瘠田云创打算进行三大降级: 第一,范畴降级。打算的服务对象扩充到所有通过实名认证的企业开发者、高校开发者和集体开发者; 第二,服务降级。新增开发者知识库与专属技术支持通道,开发问题12小时内响应,48小时内闭环。华为云在寰球范畴的100多个翻新核心设置了开发者技术支持工程师,为开发者提供面对面的就近服务; 第三, 权利降级。新增集体激励以及业余的开发者认证。开发者能够取得云服务资源、流动门票、培训课程、认证考试券等权利,并提供包含云原生、人工智能、大数据、挪动开发、物联网在内的5个方向的业余开发者认证。 华为云开天aPaaS上线,使能行业场景化翻新随着各行各业数字化转型的深刻,华为云心愿将本身及搭档的行业教训以服务的形式提供给客户,疾速满足行业利用场景的开发需要。华为云云服务产品组合管理部部长方国伟发表开天aPaaS正式上线,他示意:“开天aPaaS,是华为云行业aPaaS,以开发者为外围,提供全流程、一站式开放平台,聚合行业能力,实现教训即服务,使能行业场景化翻新。” 华为云云服务产品组合管理部部长方国伟介绍开天aPaaS架构 华为云开天aPaaS聚合了128个Kits,超过2万个API,架构蕴含能力层、市场层、工作台三个局部: 能力层,聚合行业畛域Kit,将API、SDK和行业常识积攒,一起变成一个个Kit,放到华为云上。市场层,通过资产核心积淀搭档资产, 实现商品交易变现,商品状态有API/SDK、行业数据模型、行业AI算法等,为行业客户提供服务。工作台,让多种Kits能力一起应用,疾速集成各类利用,晋升开发者的开发和应用体验。华为消费者云服务HMS Core平台部总经理望岳 华为消费者云服务HMS Core平台部总经理望岳介绍,终端云在挪动互联网畛域的寰球优良实际目前已通过开天aPaaS凋谢进去,实现能力共享、生态共享。 目前华为云开天aPaaS已构筑了金融、电商、互动媒体、汽车出行、医疗衰弱等多域能力。以金融领为例,开天aPaaS能够提供了包含平安隐衷爱护、便捷的体验以及AI创新能力。电商方面,通过华为的推送、AI和AR等能力,满足电商开发个性化需要,让交互更简略。汽车出行畛域,华为提供包含地图导航、司乘平安以及车联网内容生态的能力。此外,华为云还与中康医药单干提供笼罩从医药研发、生产到批发的全生命周期的能力,使能医药产业减速数字化转型。 将来,华为云开天aPaaS打算在工业互联网和工业软件,城市和公共事业以及互联网服务能力上聚焦投入,实现“教训即服务”。华为云期待与更多的搭档“凝心聚力、共筑开天”,使能行业场景化翻新。 华为于2021年9月23-25日在线上举办华为全联接2021,大会以“深耕数字化”为主题,汇聚业界思维首领、商业精英、技术大咖、先锋企业、生态搭档、利用服务商以及开发者等各方,探讨如何深刻行业场景,把数字技术与行业常识深度联合,真正融入政企的主业务流程,解决外围业务问题,催生体验晋升、效率晋升以及模式翻新;并公布场景化的产品与解决方案,分享客户搭档的最新成绩与实际,构筑凋谢共赢的衰弱生态。 点击关注,第一工夫理解华为云陈腐技术~

September 26, 2021 · 1 min · jiezi

关于华为云:华为云首席产品官方国伟没有人拥有看到未来的水晶球云上突围之路如何走

摘要:当下云倒退有待冲破的并不是技术问题;当初为什么是华为云的最佳时机;以不变应万变,什么是云产品布局的三个要害出发点;生态对于云的意义是什么;一起来听技术大咖聊聊云的故事。本文分享自华为云社区《华为云首席产品官网国伟:没有人领有看到将来的水晶球,云上解围之路如何走?》,作者:华为云社区精选。 华为外部有个学习栏目叫【专家大讲堂】,有个四年前的演讲视频特地引人注目。这几年工夫里,一直有员工搜寻观看并留言:“远见卓识!当初回头来看这个演讲,最近几年云服务畛域的一些争议和弯路,其实方老师当年曾经讲得十分分明了。” 带着微小的好奇,咱们关上了这位演讲专家方国伟的履历。 毕业于清华大学计算机系的他,曾负责构建了微软中国的第一个云计算演示核心,也是亚马逊AWS中国的第一个技术人员,是国内最早开始推动云计算概念、技术和业务的践行者之一。在与云同行的数十载期间,方国伟在团队里曾被亲切地称说为“云计算一哥”。 现在的方国伟,负责着华为云首席产品官的职位。本期华为云社区《云享人物·大咖面对面》,邀约到了这位技术大咖,让咱们一起听他聊聊云的故事。 1、云最有待冲破的不是技术,而是心理和利益曾几何时,有人质疑云服务是新瓶装旧酒,有的人认为是大势所趋。十年河东,十年河西,当咱们的生存产生天翻地覆变动的同时,云也悄悄间扭转了传统产业。事实证明,云时代究竟以不可逆的态势席卷而来。 方国伟是其中的见证者,也是推动者。从那个特地的2008年开始,他就一头扎进了这个行业,起起伏伏的13年里,他始终深信:云计算是经济法则和技术倒退到肯定阶段的必然产物,是ICT行业倒退的方向,是大趋势,这其中私有云又会占据主导地位。 往年4月,IDC 公布的《寰球及中国私有云服务市场(2020年)跟踪》报告显示,2020年寰球私有云服务整体市场规模(IaaS/PaaS/SaaS)达到3124.2亿美元,同比增长24.1%。中国私有云服务整体市场规模达到193.8亿美元,同比增长49.7%,寰球各区域中增速最高。 这是一个处于快速增长,且后劲有限的庞然巨物,然而即便如此,仍然有许多企业在张望,不敢轻易踏入到这条流经将来的技术河流中,认为业务上云充斥了太多的变数。 在几年前的采访中,方国伟曾说过这样一句话:“云计算最有待冲破的不是技术,而是心理和利益。”现在再谈到这个问题,他给出了雷同的答案。 一个新事物的呈现,必然会撬动既有的利益格局。很多传统企业有本人的数据中心,由外部团队负责基础设施运维。一旦采纳私有云的形式,团队自身的利益会受到损失,比方工作量缩小或者间接被裁撤,由此造成的利益侵害是上云的“隐形”阻碍。 但换个思路看,利益再调配能够导向更好的后果,当传统企业把IT底层的基础设施交给业余的云厂商,就能够从昂扬的硬件保护老本中抽离。让既有的人力集中力量去做应用层的业务翻新,这是一个利大于弊的长期布局。 而心理上也始终存在认知上的误区,“比方很多人对私有云的安全性还是持狐疑态度,感觉不如自建数据中心释怀,但大部分状况下这种认知是谬误的。” 大的私有云厂商往往有弱小的平安团队来爱护客户的数据信息安全,有成熟的平安合规解决方案。然而对于单个企业来说,它在平安上投入的资源绝对无限。这次要就是心理上的问题,须要工夫去消解。就像电商倒退初期,买家会放心钱付了货没收到,前期担保领取零碎解决了这个问题。同样,上云的心理疑虑也须要在技术上做更多的工作,这也是云厂商前期要深刻思考的。 归根结底,对于传统企业来说,上云是趁势而为的必选项。所以,在云计算倒退的下一个要害节点中,如何让这些大型传统企业可能批量、释怀的上云至关重要。 方国伟强调,这是华为云的最佳机会。 2、华为云六大要害基因,真正帮到传统企业上云“云实质上就是ToB的服务,这恰好是华为最善于的,从传统运营商业务到企业业务,服务好政企是刻在咱们的基因中。”方国伟示意这些教训弥足珍贵,它们能够无缝匹配到政企的上云中,这是其一。 在以后的私有云市场,华为云既不是做电商起家,也不是纯正的互联网软件公司,业务与上云的客户和合作伙伴的抵触起码,这种平安、中立、可信的定位,是其二的劣势。 第三,云的倒退方向是软硬一体,云外面会有越来越多的专用硬件,云厂商对底层软硬件的构建也领有了更多的控制权,从鲲鹏、昇腾处理器、擎天加速卡到其余各种硬件,华为原先在ICT行业积攒的硬件翻新教训能够间接通过云平台服务客户。 “搭档云是咱们十分unique的模式, 和搭档一起建云的这个模式,简直没有其余云厂商在做。” 早些年,华为就摸索和客户单干构建公有云,这也是做搭档云的根底。现在,华为云能够将私有云的全栈能力部署到客户本地,并通过在线集中运维或本地化运维为他们提供云服务,这是华为云服务能力在客户机房的延长。 方国伟具体解释道,以华为云为外围,建设一个涵盖不同场景的云平台,辐射到搭档、边缘侧、客户侧等等。用华为大云连贯各个搭档云、边缘云,最终实现对立体验的分布式云联盟。就像去国外出差,尽管手持中国运营商的手机,但其实是由当地的运营商来提供服务,从应用角度看是齐全无感知的。 再比方华为云的专有云解决方案,它能够在私有云中从物理层面隔离出专属资源池,让计算资源、存储资源仅供客户独享专用。这些都是针对客户特定场景的翻新优化,灵便匹配政企组织架构和业务流程,用翻新的技术手段,实现用户视角的一朵云,更好满足他们的需要,释怀上云。 除此之外,全球化的业务部署能力、与消费者云协同所具备的挪动化能力,这些都是华为云的独特所在。 然而时机总是和挑战并存的,当华为云的模式里既有私有云、搭档云,相应的研发、产品治理的协同就是一个挑战,方国伟也在思考如何从产品角度做好协同,充分发挥ToB的传统劣势。 3、所有从用户诉求登程,没有水晶球能够看到将来方国伟在华为很重要的一个工作就是云产品的布局,这是一个既宏观又具体的工作。谈及这个“艰巨”的工作,他坦言,“没有人有水晶球能够看到将来,但从用户的诉求上兴许能做一些趋势的判断。” 就像贝索斯当年思考电商的倒退,不须要搜索枯肠去猜想将来会产生什么变动,而是要看有什么货色是不变的,这里的不变就是人们的诉求:更多的产品抉择、更快的配送、更便宜的价格。 这个理念同样实用于云产品,方国伟认为云产品的倒退就是要满足: 1、从产品布局的角度解决大企业业务都要上云的问题;2、人都是有惰性的,云产品要设计的更好用,比方写的代码更少,配置更自动化;3、更便宜或更好的性价比是永恒的命题。 诸如Serverless的呈现、低代码工具的风行,都验证了这些个性。所以在布局产品的过程中,如果能够牢牢抓住这三点,也能更灵便地适应云服务市场上的客户的需要。 去年,华为云首次向业界提出了云原生2.0的概念,这也是方国伟在竭力推动的要害布局之一。和CNCF对云原生定义稍有不同的是,他认为这个词的本意指的是利用或服务从一开始基于云平台设计和构建的,即“生于云,长于云”, 这里的基于云平台就是利用云平台所提供的产品和服务。从这个层面看,是否应用了容器、Kubernetes等技术并不是判断云原生的要害规范。 在华为内网的一篇文章中,方国伟进一步解释了这个概念:当初咱们说的云原生架构、网络和硬件都是针对云场景或云环境来设计和构建的,从而区别之前企业IT的场景和需要。比方传统的盒子式防火墙产品,在云场景下就略显疲软,因为云平台要求的扩展性更高,要有多租、动静调整配置和分布式部署的能力。 所以云原生2.0意味着,除了容器、Kubernetes能够提供更细粒度,更灵便的资源调度之外,云平台上还有大量可能帮忙用户疾速构建利用的服务,比方帮用户治理和开掘数据智能的服务,帮忙构建万物互联的服务。当初的云原生就是要充分利用云上的各种服务能力,云平台到了以“利用为核心”的阶段。 立而不破,时尚的概念不仅仅是互联网企业的专属,传统企业齐全能够解脱历史包袱,依据理论状况向云原生的模式改革。方国伟置信通过云原生2.0,更多的政企都可能成为新云原生企业,从“ON Cloud”模式逐步转变为“IN Cloud”模式,实现数字化转型改革的指标。 基于云原生2.0,他强调华为云后续将加大在Serverless上的投入,并且会把云原生2.0和分布式云、边缘云相结合,从最开始齐全基于资源集中的核心云模式走向云边协同的分布式云模式,让云更好的满足客户在时延、网络老本以及数据安全方面的须要。在往年9月底的2021华为全联接大会(HC)上,华为云也会围绕云原生2.0公布一些相干的产品。 4、另一个战场:生态与开发者谈起将来云厂商的竞争,方国伟摊开手笑了笑,他倒不是十分放心。 线上公开市场的竞争,很难存在真正的垄断,各家的产品服务都是摆在台面上购买应用,兴许有的入场机会早,抓住了晚期的流量红利。“但云涵盖的产品十分广,竞争往往是综合性而非单点的。”方国伟例举了几个要害的点:用户体验、数据安全、合规和治理、可靠性和稳定性、老本管制、服务水平、生态(包含合作伙伴生态和开发者生态)。 比方大企业可能对稳定性更敏感,小企业更看重老本管制、是否有自动化的服务,大家的考量是不一样的。但最优良的云厂商,就像学生时代的第一名,根本没有学科短板,各方面的倒退平衡且优良。 也正是考查综合竞争力,新技术的冲破很难带来颠覆性的市场变动。如方国伟所言,“尽管单个技术的冲破有助于进步竞争力,但云是一种新的服务形式,新的技术和利用的推出,只会让云服务更加丰盛,云模式实质短期不会发生变化。” 这其中不得不提的是生态建设。因为在上云后,除了耗费计算资源,越来越多的用户会应用云的软件服务,包含存储、数据库、IoT、AI等等,这些产品的背地是一个个一般的开发者。所以,极简的开发工具,高效便捷的开发流程,也是云厂商竞争的战场。 方国伟婉言道,“上云的合作伙伴最关怀的也是能不能在这个生态里赚到钱。”同样地,华为云能够把原先做ToB的硬件生态的教训体系,从线下迁徙到线上,并且和既有的消费者云生态做好协同和整合。 “所以,咱们会更加器重生态和开发者。” 包含会针对具体行业的一些具体场景提供撑持使能服务,进步开发者的效率,帮忙他们疾速开发利用。 方国伟走漏,在HC期间会有一些重磅的公布,比方有的传统企业须要开发直播APP,咱们就要通过成熟的产品撑持这些传统企业的互联网利用开发。 当然,这只是冰山一角,水面下的惊喜,大家能够敬请期待。 5、好风凭借力,时代造人,人亦成就时代狄更斯的《双城记》中有一段经典的开篇,这是最好的时代,也是最坏的时代。前一句实用于拥抱云的企业,后一句实用于旧调重弹来不及转身的企业。 但对于开发者来说,云时代就是最好的时代。“推动人类社会后退次要靠两个货色,一个是能量,一个是信息。信息时代让信息的价值失去极大展示,我认为当初以及在可预感的将来,都是技术人员的春天,咱们能够产生微小的价值推动社会提高。” 方国伟本人的经验正是最佳的注脚,在技术的洪流中,趁势而为,成为云的见证者,也是要害的参加主导者,与酷爱的事业一路同行。 那么,开发者作为推动云倒退的个体,又该如何抓住时代的时机呢? “选对趋势,选好赛道,而后肯定要有一技之长,或者说一针捅破天的能力。”现在地利和天时都有了,就看一技之长是否齐全施展进去。在这一点上,方国伟也谈到了技术人员在技术之外的三个要害能力: 第一是造就业务视角(business sense)看问题的能力, 要了解和承受在企业中技术实质上是为业务服务的,技术匹配业务,所以心态上肯定要摆正。打个比方,企业和学校不一样,因为在企业是公司付钱让你做技术,学校是你付钱做技术。 第二是沟通的能力, 个别认为沟通能力强就是日常的伶牙俐齿,然而除口头表白之外,写邮件、写报告、乃至演讲,都是沟通能力的出现。把才华通过产品施展进去,再由各种沟通渠道来表白出现。 第三是同理心, 实质上就是要有换位思考或者将心比心的能力,它能够很好地帮忙咱们解决日常问题,更好的了解客户需要,也能进步沟通成果。 云疾速倒退的十多年,行业经验了一轮轮洗牌,起起落落之间,身处在技术浪潮中的每个独自的个体,无论是集体还是企业,都得走出舒服区,敢于自我反动,创始第二增长曲线。 采访的最初,方国伟很是虚心地总结,“我很侥幸,在云计算这个浪潮中施展本人的专长,做本人喜爱的事件。” 时代造人,人亦成就时代。 彩蛋“静止是身材的锤炼,浏览是大脑的锤炼。”方国伟保持健身20余年,精神状态和身材治理在咱们看来都很不错。 对于浏览这个喜好,他解释到:“计算机要发挥作用须要:算法+数据。人的大脑就是一个生物的、碳基的计算机,一些算法是与生俱来的(在咱们DNA中连续下来的),一些算法是须要先天去构建的。学习、思考就是构建这个算法的过程。我崇奉一生学习理念,而浏览是老本最低,最不便的一种学习形式。” 同时,为大家举荐他最近在读的一本由UC Berkeley传授Matthew Walker写的书《Why We Sleep》。“有一样货色,它能进步你的记忆力,减少你的魅力;让你放弃苗条,升高食欲;爱护你不得癌症和老年痴呆;不让你感冒和伤风;升高你心脏病、心梗和糖尿病的危险。会让你感觉更高兴,不抑郁,不缓和。” ...

September 14, 2021 · 1 min · jiezi

关于华为云:只需3步快来用AI预测你爱的球队下一场能赢吗

摘要:作为球迷,咱们有时候心愿本人领有预测将来的能力。本文分享自华为云社区《用 AI 预测球赛后果只需三步,看看你爱的球队下一场能赢吗?》,作者:HWCloudAI。 还记得今年夏天的欧洲杯吗?来自不同国家和地区的24支球队开展了总共51场的精彩对决。欧洲杯作为世界顶级的体育赛事,也是引起了全世界球迷的宽泛关注,置信有很多国内的球迷在那段时间也是没少熬夜观看球赛。作为球迷,咱们有时候心愿本人领有预测将来的能力,可能在较量开始前提前预知哪支球队将能博得较量的胜利,这听起来很酷,那么如何能力做到呢? 咱们晓得,影响足球比赛输赢的因素有很多,要想预测比赛结果就要综合利用多方面的数据进行剖析,比方队伍是处于主场还是客场、对阵的单方球队在过来较量中的数据、举办赛事的节令等等。单凭人工对这些数据分析是很难进行正确预测的,这个时候就能够利用以后非常风行的AI技术,通过构建机器学习模型,从大量的历史数据中开掘有用的信息,从而帮忙咱们实现对足球比赛后果的预测。 机器学习、AI,听起来就很高大上,让人望而生畏。确实,如果是在几年前,开发者想通过机器学习的办法实现某一具体案例,不仅须要具备丰盛的数据分析、数据处理、特色工程等各方面常识,还要从头开始一行一行编写代码,没有足够强的数学功底、数据分析和编程能力是很难做到的。 那么有的小伙伴就要问了,我对机器学习很感兴趣,但相干常识理解的不多,有没有什么方法可能疾速入门,亲手实现一些机器学习案例呢?当然能够啦,时代曾经变了,随着以后AI技术高速倒退,呈现了许多AI云服务平台,用户只须要简略理解一些根底的AI常识,就能够轻松实现AI模型的开发、训练和部署全流程。 华为云ModelArts就是泛滥AI平台中十分优良的一款产品,以机器学习为例,ModelArts中提供了可视化机器学习建模工具MLS,用户能够通过鼠标的利落拽实现以少代码甚至零代码的形式构建一个残缺的机器学习模型,这让本来极为简单的机器学习建模过程变得像搭积木一样简略。上面就让咱们一起看看,如何基于MLS实现足球赛后果预测。 首先,咱们进入华为云ModelArts控制台,在开发环境中抉择Notebook创立MLS实例(详见“创立并关上基于MLS引擎的Notebook实例”),创立后进入Notebook并点击下图中的红框进入MLS资产开发界面。 MLS是通过一系列算子实现机器学习建模过程中的数据读取、数据分析、数据处理、特色工程、模型工程等操作,每个算子的实质就是可能实现特定性能的代码段。MLS中已为用户提供了大量预置算子,笼罩了机器学习建模过程中的大部分操作。当然,如果预置的算子无奈满足具体案例的需要时,用户也可依据须要编写自定义算子实现本人想要的性能。 之后,将不同的算子按肯定规定进行连贯就能够组成一条算链,运行算链即可实现机器学习建模中的各个步骤,是不是十分方便快捷呢?上面就来演示一下如何利用MLS构建一个足球比赛预测的机器学习模型。 如上图所示,先读取数据并做一些简略的数据处理,因为本案例目标是心愿从历史数据中学习以实现对将来的预测,这里过滤出晚期的较量数据用于机器学习模型的训练,并抉择近期的较量数据用于测试模型的有效性。足球比赛后果预测是一个典型的二分类问题,这里抉择机器学习中罕用的逻辑回归分类算法进行训练、测试以及分类后果评估,并将训练的模型保留。按图中所示将相应的算子拖拽至右侧画布并连贯后即实现了算链的构建,之后点击上方按钮一键运行,期待算子变为绿色后即示意运行实现。 至此咱们曾经实现了足球比赛后果预测的机器学习建模过程,之后就能够利用训练好的模型对还未进行的赛事进行比赛结果预测了。 从下面的案例咱们能够看到,利用华为云ModelArts的MLS工具能够十分便捷地实现机器学习建模。除此之外,对于AI开发者来说,丰盛的资源也是必不可少的,毕竟大家都心愿能在前人的根底上进行开发工作,而不是去做一些反复造轮子的事件,那么这里就不得不提一下华为云的AI常识&实训社区AI Gallery了。 如图所示,AI Gallery中提供了大量的AI算法、模型、数据、Notebook实例和各种AI课程等等,笼罩了许多支流的AI利用场景,用户能够依据本身的业务需要在这里找到相应的资源,间接订阅就能够开始应用了,快来抉择本人感兴趣的案例体验AI开发的乐趣吧。 AI Gallery 足球比赛预测案例传输门:从零开始利用机器学习训练欧洲杯赛事预测模型(Pyspark)欧洲杯赛事预测_逻辑回归点击关注,第一工夫理解华为云陈腐技术~

September 13, 2021 · 1 min · jiezi

关于华为云:华为云与北大BIOPIC联合发布蛋白质多序列比对开源数据集

摘要:近日,华为与北京大学生物医学前沿翻新核心(BIOPIC)、北京大学化学与分子工程学院、深圳湾实验室高毅勤传授课题组联合推出蛋白质多序列比对(Protein MSA)数据集本文分享自华为云社区《华为云与北大BIOPIC联结公布蛋白质多序列比对开源数据集》,作者: MKT 黄不正。 近日,华为与北京大学生物医学前沿翻新核心(BIOPIC)、北京大学化学与分子工程学院、深圳湾实验室高毅勤传授课题组联合推出蛋白质多序列比对(Protein MSA)数据集,心愿在标准化的数据集根底上,撑持钻研人员开发先进的AI模型,加深对蛋白质构造、性能和进化的认知,并进行蛋白设计与革新。此数据集将公布于华为云AI Gallary平台,相干代码及数据集阐明将依靠于华为全场景AI计算框架MindSpore进行开源凋谢、定期扩大与保护,旨在为全世界相干的产、学、研团队提供优质的数据共享解决方案。 本次开源的Protein MSA数据集齐全笼罩最新版本(2021年2月公布)的UniRef50数据库中的蛋白质序列,采纳学术界的“金规范”搜寻办法,对约0.5亿条蛋白序列进行了充沛的MSA搜寻与比对(MSA均匀深度大于1000),是目前世界范畴内规模最大、参考数据集最新、覆盖度最广的开源蛋白质MSA数据集(之前最大的开源MSA数据集蕴含10万个蛋白MSA)【1】。 人类已知的蛋白质序列曾经超过4.4亿条,但仅凭这些蛋白质单序列数据库,很难理解蛋白之间的关系。Protein MSA数据库是一个对不同蛋白质序列之间的关系进行了标记的大规模“关系型”数据库,被标记为关联的蛋白质序列之间的类似度、进化关系、渐变所在位点的散布等信息对蛋白质构造和性能的预测极为重要。 为了更好地服务于跨畛域的钻研人员,Protein MSA数据集将被组织成具备多重状态的数据格式。原始数据集(近30T)将以UniRef系列数据库【2】和UniClust数据库【3】的规范文本模式存储,并依照序列长度进行宰割与压缩。为了便于AI畛域的钻研人员间接应用,Protein MSA数据集还会将文本格式的数据集转化为浮点数张量类型压缩存储,并对已有的AI框架如MindSpore进行数据接口的反对。 高毅勤传授示意:“咱们激励并期待来自生物信息学、数据迷信和AI钻研等畛域的专家和人才充沛碰撞与单干,引入、改良或设计全新的AI模型,来充沛地开掘Protein MSA数据集中所暗藏的‘天然的机密’”。 从迷信的角度看,MSA的数量和品质很大水平上影响了目前最先进构造模型的预测速度和精度,而且产生MSA的非参数化算法仍是诸多蛋白预测办法中决定速度的次要步骤之一。因而,Protein MSA数据库自身能够作为这些构造预测模型的预训练资料,用来开掘序列信息甚至疾速生成新的序列特色,这对解决钻研、设计蛋白质中所面临的高变异序列和孤儿序列等问题具备微小的潜在价值。 此次数据库的公布,依靠于华为云AI Gallery平台,可能充沛保障国内外用户对于数据集的拜访和下载,并提供可继续更新与裁减的先进数据保护计划以及上游AI利用与部署的相干反对,交融了产、学、研相结合的钻研模式的劣势。此外,华为也与北京大学高毅勤课题组联合开发并开源了首个国产分子动力学软件MindSponge。将来,华为将牵手更多的学术科研界合作伙伴,在资料、生物、医药等更宽泛的科学计算畛域打造数据推动的钻研新模式。 附: 数据集开源阐明:https://gitee.com/mindspore/m... 数据集下载地址:https://marketplace.huaweiclo... 【1】AlQuraishi, Mohammed. "ProteinNet: a standardized data set for machine learning of protein structure." BMC bioinformatics 20.1 (2019): 1-10. 【2】Suzek, B. E., Wang, Y., Huang, H., McGarvey, P. B., Wu, C. H., & UniProt Consortium. (2015). UniRef clusters: a comprehensive and scalable alternative for improving sequence similarity searches. Bioinformatics, 31(6), 926-932. ...

September 13, 2021 · 1 min · jiezi

关于华为云:华为云认证题库哪里有华为认证哪个级别好呢

华为认证考试当初比拟风行,很多行业内的从业人员都想通过这个考试,获取相应的证书。取得华为认证证书能够晋升集体能力,华为云认证题库哪里有?华为认证哪个级别好呢?上面认证大使就来给大家具体介绍下吧。 一、华为云认证题库哪里有? 华为云认证题库网上有很多资源,不过有些网站的题目内容不齐全。小编比拟举荐认证大使。认证大使题库资源丰盛,涵盖各个认证考试的内容,大家能够依据本人的需要来下载。认证大使网站上还有很多对于华为认证考试的相干材料,大家能够关注下。 华为云认证题库 二、华为hcie认证须要考哪些? 首先要加入口试考试,完结之后要加入实验室和面试考试。 口试考试的通过率十分高,只有你下载到题库,基本上就能够通过考试。 如果是实验室考试,还有面试,大部分的同学会加入培训班,因为培训班基本上就会给你实在的考题,把这个实在的考题在实验室一直的练习,也就可能让你顺利通过实验室和面试考试。 三、华为认证哪个级别好呢? 1.Hcia是华为最入门级别的这个认证,个别转行如果要做业余的网络工程师,这个证书含金量不够。因为最入门级别的认证通常也就代表着你刚刚了解和东的设施的操作根底的配置,也就是个刚入行的程度,所以像华为的这个认证来说的话,个别考试的绝大多数都不是业余从事这方面或者都是一些在校大学生考的比拟多一点。 而如果你的指标是要做业余的工程师,要做业余的高级网络工程师,那么这个认证你要学,然而考试网工技巧他人集体感觉还是算了,因为考完之后你要做业余的工程师拿这个证书,大概率是找不到工作的,因为太入门级别了。华为云认证题库 2.接着来说一下华为的hcip 华为的hcip这个认证华为官网就叫做高级网络工程师了,一般来说对于转行找工作的敌人,其实考这个证书是最合适的,因为这个价格既不是太贵也不是齐全没有用,它刚好是一个比拟适中的一个认证,而且转行把这个技术学完,考到证书,基本上90%状况下,你转行都是没有任何问题的。 所以一般来说对于转行的敌人,如果你的资金估算无限,或者说你想疾速的先转行,而不是花太长的工夫去钻研技术,你是一个实用主义者的话,那么玩空气小编倡议你学完加上考试,其实两个月三个月你基本上就能转行胜利,等你有了工资等你入了行业之后,而后你再缓缓考更高级别的。 3.最初来说一下华为最高级别的hcie,专家级别的认证。 华为的这个最高级别的hcie基本上也就是计算机网络行业最高端的一个认证,这个认证的含金量比拟高,然而它比拟耗费你的工夫,如果你是零根底,至多也要筹备4~6个月的工夫来消化这方面的常识和筹备题库和筹备考试,所以它须要的是工夫和金钱。

September 6, 2021 · 1 min · jiezi

关于华为云:华为云PB级数据库GaussDBfor-Redis揭秘第13期如何搞定推荐系统存储难题

摘要:GaussDB(for Redis)轻松搞定举荐系统核心存储,为企业级利用保驾护航。本文分享自华为云社区《GaussDB(for Redis)揭秘第13期:如何搞定举荐零碎存储难题?》,作者:高斯Redis官网博客 。 一、举荐偏差引发的思考七夕过后,笔者的一个敌人遇到了尴尬事:当女友点开他的购物APP,居然自动弹出一系列举荐:玫瑰包邮、打动哭了、浪漫小夜灯……回忆七夕那天,礼物并没有呈现,于是问题呈现了:从实招来,你送谁了? 为了帮忙友人重建信赖,笔者进行了一番技术调研:这肯定是“举荐零碎”出了偏差。 举荐零碎是一种信息过滤零碎,它可能疾速剖析海量用户行为数据,预测出用户爱好,从而进行无效举荐。在商品举荐、广告投放等业务中,举荐零碎责任重大。依据亚马逊2019年度报告,其40%的营收来自外部稳固的举荐零碎。 在本文开篇的例子中,正是因为举荐零碎问题,才导致了难堪的局面。笔者决定力挺友人,用牢靠的常识让人服气! 二、举荐零碎长什么样通常来说,在一套成熟的举荐零碎中,分布式计算、特色存储、举荐算法是要害的三大环节,缺一不可。 上面介绍一类残缺的举荐零碎,在零碎中GaussDB(for Redis)负责外围的特色数据存储。该零碎也是华为云诸多客户案例中较为成熟的最佳实际之一。 第一局部:获取特色数据 原始数据采集点赞、珍藏、评论、购买……这些行为都属于原始数据,他们随时都在产生,因而数据量宏大。经由Kafka、Redis Stream等流组件向上游传递,或存入数仓,期待前期提取应用。 分布式计算原始数据离散、含意含糊,无奈间接给算法应用。此时就要进行大规模的离线、在线计算,对数据加工。Spark、Flink都是典型的大数据计算组件,其弱小的分布式计算能力是举荐零碎不可或缺的。 特色数据存储通过加工的数据也就是特色、标签,是举荐算法所需的贵重数据源。在特定场景下,也能够称之为用户画像、物品画像。这部分数据有着重复共享、复用的价值,不仅能用于训练算法模型,还能为生产环境提供服务。 确保特色数据的牢靠存储,是举荐零碎中极为要害的一环。 第二局部:生产特色数据 线下模型训练有了要害的特色数据,业务就能够开始训练算法模型。只有充分利用特色库,以及最新行为数据,一直打磨举荐算法,这样能力晋升举荐零碎整体程度,最终带给用户更好的体验。 线上推理预测算法模型训练完结后,将被部署到线上生产环境。它将持续利用已有的特色存储,依据用户的实时行为进行推理,疾速预测出与用户最匹配的优质内容,造成举荐列表,并推送给终端用户。 三、举荐零碎的存储难题很显然, “特色数据”在整个零碎中起到了要害的连接作用。因为KV模式的数据抽象与特色数据极为靠近,因而举荐零碎里往往少不了Redis的身影。 在上述零碎的计划中,数据库选型为GaussDB(for Redis),而不是开源Redis。起因是开源Redis在大数据场景下还是存在不言而喻的痛点: 1. 数据无奈牢靠存储举荐零碎其实心愿既能应用KV数据库,又能释怀将数据短暂保留。但开源Redis的能力更侧重于数据的缓存减速,而不是数据存储。而且开源Redis毕竟是纯内存设计,即便有AOF长久化,但通常也只能秒级落盘,数据的保留并不牢靠。 2. 数据量上不去,老本下不来波及举荐的业务往往用户体量也不会小,随着业务倒退,也会有更多的特色数据须要保留。实际上,雷同容量的内存与极速SSD相比,价格贵10倍以上都很失常。于是,当数据量达到几十GB、几百GB,开源Redis会变得越来越“烧钱”,因而个别只当做“小”缓存应用。除此之外,开源Redis本身fork问题导致容量利用率低,硬件资源有很大的节约。 3. 灌库体现不佳特色数据须要定期更新,往往以小时或天为周期进行大规模数据灌入工作。如果存储组件不够“皮实”,大量写入造成数据库故障,将导致整个举荐零碎产生异样。这就可能造成开篇提到的难堪用户体验。 开源Redis抗写能力并不强,这是因为集群中有一半节点是备节点,它们只能解决读申请。当大批量写入到来时,主节点容易出问题,引发连锁反应。 实践上,架构设计并不是越简单越好,如果能够,谁不想应用一种既能兼顾特色数据KV类型、老本敌对、性能又有保障的牢靠数据存储引擎? 四、相见恨晚,遇见GaussDB(for Redis)与开源Redis不同,GaussDB (for Redis)基于存算拆散架构,为举荐零碎这一类大数据场景带来要害的技术价值: 1. 牢靠存储 数据命令级落盘,在底层存储池中三正本冗余存储,真正做到了0失落。 2. 降本增效 高性能长久化技术+细粒度存储池,帮忙企业将数据库应用老本升高75%以上。 3. 抗写能力强 多线程设计+全副节点可写,抗写能力足够弱小,从容应对Spark灌库压力和实时更新。华为云企业级数据库GaussDB (for Redis)提供稳固、牢靠的KV存储能力,正是举荐系统核心数据的极佳选型。 五、完满连接,实现想存就存的自在其实,在Spark后端接入Redis曾经成为一种支流计划,而应用Flink从Redis中提取维度表也是很常见的用法。它们也都提供了用于接入Redis的连接器。GaussDB(for Redis)齐全兼容Redis协定,即开即用,用户随时都能够疾速创立实例并接入业务。 1. Spark-Redis-ConnectorSpark-Redis-Connector完满实现了Spark RDD、DataFrame到GaussDB(for Redis)实例中String、Hash、List、Set等构造的映射。用户可应用相熟的Spark SQL语法轻松拜访GaussDB(for Redis),实现特色数据灌库、更新、提取等要害工作。 应用办法非常简单: 1)当须要读取Hash、List、Set构造到Spark RDD时,别离只用一行即可搞定: 2)而当举荐零碎进行灌库或特色数据更新时,能够按如下形式轻松实现写入: 2. Flink-Redis-ConnectorFlink这款计算引擎风行水平不亚于Spark,它同样有成熟的Redis连贯计划。应用Flink提供的Connector或联合Jedis客户端,都可轻松实现Flink到Redis的读写操作。 以应用Flink统计单词频次的简略场景为例,数据源通过Flink加工后,便可轻松存入GaussDB(for Redis)中。 六、结语大数据利用对外围数据的存储有着很高的要求,云数据库GaussDB(for Redis)领有存算拆散的云原生架构,在齐全兼容Redis协定的根底上,同时做到了稳定性、可靠性的全面当先。面对海量外围数据存储,它还能为企业带来相当可观的老本节约。面向未来,GaussDB(for Redis)极有后劲成为下一个大数据浪潮的新星。 七、附录本文作者:华为云数据库GaussDB(for Redis)团队 杭州/西安/深圳简历投递:yuwenlong4@huawei.com GaussDB(for Redis)产品主页:https://www.huaweicloud.com/p... ...

September 3, 2021 · 1 min · jiezi

关于华为云:华为认证级别有哪些级别分类考HCIP还是考HCIA

想必大家都分明,咱们所理解的华为认证其实都是华为公司创立而来的,也是这个行业内惟一的,同时也是笼罩了全ICT畛域,上面就随小编来理解一下华为认证级别吧。 华为认证级别有哪些级别分类 依据ICT从业者的学习和进阶需要,华为认证分为3个等级,别离是:工程师级别、高级工程师级别和专家级别。 1、 HCIA 华为认证ICT工程师:示意通过认证的人员具备装置、配置、运行 ICT 设施,并进行故障排除的能力。 通过HCIA口试即可。 证书有效期:3年 考试地点:Pearson VUE考试核心 华为认证级别 2、HCIP 华为认证ICT高级工程师:示意通过认证的人员具备丰盛的 ICT 常识和实际能力。 18个月内通过HCIP的一门或多门口试即可。 证书有效期:3年 考试地点:Pearson VUE考试核心 3、HCIE 华为认证ICT专家:示意通过认证的人具备 ICT 畛域专业知识和丰盛实践经验。 18个月内通过HCIE的三门考试(口试、试验、面试)即可。 证书有效期:2年 考试地点:Pearson VUE考试核心(口试)& HCIE考试核心(试验与面试) 华为hcip报名及考试 HCIP有规定的考试工夫,个别为一个小时。考试在窃密的环境中进行。 依据考试科目,题目数量不等,个别为五十至七十题;题型为单选、多选、判断,HCIP考试不蕴含上机考试。 要留神:考试极具挑战性,它不仅仅是单纯的记忆,它要求报考者解决理论工作中呈现的问题。 考试是通过在线计算机考试形式进行的,要求按先后秩序答复问题,不容许报考者对问题作任何"标记"和返回某道试题。 在考试实现之后,报考者会收到一份问题报告单,带有考试部门提供的基准分数以及特定考试的通过分数。 华为认证级别 考生可通过Pearson VUE网站注册并预约相应考试,实现考试付费(费用领取反对信用卡、考试劵、现金三种形式)后,在约定的工夫内准时到达预约的Pearson VUE考试核心加入口试。 考HCIP还是考HCIA? 从这些知识点来看,HCIP要把握的内容更多更深,HCIA会比拟根底。一般来说HCIP差不多就相当于一个中级网络工程师,通常代表领有2~3年的网络工程师的教训可能纯熟华为的网络设备的配置保护和调试。尽管说HCIP的难度会比HCIA的大,然而整体并不会十分难,考试也只是口试,所以如果你想考华为认证,倡议能够间接尝试HCIP甚至是HCIE,这两者的含金量会比拟高,也更有利于晋升本人退职场上的竞争力,如果你是零根底,其实问题也不大,能够学好了HCIA的内容再学HCIP,间接考HCIP就能够了。

September 2, 2021 · 1 min · jiezi

关于华为云:华为云严选上新啦高效准确的数据同步方案来了

摘要:英方软件i2Stream产品服务已上架华为云严选商城啦!近期,上海英方软件股份有限公司(简称“英方软件”)发表退出华为云瘠田云创打算,同时基于i2Stream(数据流复制管理软件)产品服务,联结提出GaussDB数据同步解决方案,并胜利入驻华为云严选商城,通过华为云平台进一步拓宽商业变现之路,实现更大商业胜利。 随着金融行业海量数据增长和线上业务零碎一直拓展,金融客户的数字化挑战逐步降级。其需要也不再局限于数据安全、业务双活等,而是更多地关注数据处理的时效性和准确性。 针对客户需要,英方软件推出的i2Stream产品基于数据库SQL语义级复制技术,通过全同步导出源库的数据字典和自动化增量同步,可能实现异构数据库、大数据平台、音讯队列等平台间的数据同步和散发,很好的满足了金融客户对数据处理的高效性和准确性要求。 i2Stream面向不同的数据库,采纳日志抽取剖析和数据库数据流实时同步技术,将数据发送至不同的指标端数据库、音讯队列、大数据平台、文件等。在数据同步的过程中,能实现全量、增量同步无缝连接,且整个过程源端、指标端均为关上状态,利用可无间断对外服务。i2Stream通过部署 Kafka 音讯引擎,作为音讯直达通道, 使得其架构更具灵活性,尤其很好反对同一源数据对接多个不同指标库。该产品宽泛实用于大数据平台数据同步、异构数据库同步等场景,并凭借弱小的实时同步能力在富国基金、海通证券等企业成功实践。 △基于openGauss数据复制全景图 为了更好助力金融及其它行业用户迎接数字化转型降级,英方软件联结华为云GaussDB(for openGauss)数据库,推出了全新的异构数据库和GaussDB同步解决方案,通过联合单方产品的技术劣势,为证券、银行等金融行业用户提供了更疾速、更灵便的两地三核心数据库数据同步计划。 △基于openGauss的两地三核心数据同步计划 该计划可通过对数据库日志文件的采集、解析、传输、执行等操作,无效实现 GaussDB(for openGauss)到 GaussDB(for openGauss)之间的数据实时同步,以及各类数据库与 GaussDB(for openGauss)之间的数据互通,满足用户异/同构数据库、大数据平台及非结构化数据的实时同步需要,帮忙更多的金融用户突破“数据孤岛”,实现扩散、异构数据的疾速汇聚,减速金融及其他行业的数字化转型和服务降级。 目前,英方软件i2Stream产品服务已上架华为云严选商城,想体验更高性能、高效同步、高准确性的数据同步服务,欢送移步华为云官网。 点击关注,第一工夫理解华为云陈腐技术~

September 1, 2021 · 1 min · jiezi

关于华为云:为了让医院把医护还给患者他们用了这个…

摘要:医疗改革和医疗信息化推动过程中,用更加便捷的技术和治理形式来加重医护人员的工作量,让医护人员有足够的工夫去关心病患始终是医疗改革的指标之一。本文分享自华为云社区《华为云DevCloud全流程一体化研发,揭秘医院数字化转型实际》,作者:麻利的小智。 中国作为人口大国,就医难的问题始终困扰着宽广民众,医院里人满为患、诊室外排着长长的队伍仍然是中国医院里的一条 “ 亮丽的风景线 ” 。每接待一位患者,除实现本院临床工作工作外,还须要实现患者的全副医疗、护理记录,这无疑减少了医护人员的工作量和患者的等待时间。医疗改革和医疗信息化推动过程中,用更加便捷的技术和治理形式来加重医护人员的工作量,让医护人员有足够的工夫去关心病患始终是医疗改革的指标之一。 湖南提灯医疗科技有限公司成立之初就把眼光锁定在医生、护士及患者就医过程中的痛点和难点上,志在为医院提供一套智慧护理零碎为外围的解决方案。 2016 年 5 月,提灯智慧护理零碎 1.0 版本正式上线,受到了医护人员的欢送,同时新的需要不断涌现,须要继续更新产品;面向的用户也从护士逐增至医生、护理部、院领导、患者及家属;客户端从电脑 WEB 和手持 PDA 延长至平板电脑、互联网电视、电子交互大屏等智能终端;笼罩的业务从院内临床护理延长至院外连续护理业务,并拓展电子病历等医生业务。随着服务能力的日益丰盛,用户数量及新需要的一直减少,提灯研发运维团队人数一直减少,在开发迭代、交付与运维等方面遇到了诸多难题,如何进步开发、交付和运维效率,成为提灯研发团队面临的最大挑战。 一、提灯医疗研发情况及面临的问题• 研发工具多,构建 CI/CD 平台艰难提灯研发团队应用禅道进行需要 - 我的项目 - 测试 -Bug 治理, Coding 做代码托管, DaoCloud 编译构建和容器的公布部署,这些平台基本上可能实现研发流程的笼罩,但研发过程中须要频繁切换各个平台、平台之间又不能集成进行间断操作和对立治理,导致研发各个环节脱节,各个团队间难以高效协同。 • 多我的项目协同开发,对研发治理提出更高的要求随着业务范围的扩大,提灯护理零碎分解成多个子项目,包含:提灯智慧医疗、提灯护士、提灯医生等,我的项目数量的减少导致我的项目管理者很难统计整体我的项目的进度,从而对我的项目进度难以把控。 • 我的项目成员增多,成员奉献量统计简单而艰难无效的绩效治理可能起到对团队成员的激励作用,因为我的项目多,成员多,一位成员负责多个我的项目的事务,不同成员参加各个研发我的项目的深度和阶段也不尽相同,提灯我的项目成员的奉献量统计简单而艰难,很难做到主观公正的绩效评定。 • 团队成员忙于各种盘根错节的事务,研发效率低下日常工作中,开发人员将近 50% 的工夫破费在各个部门人员沟通,构建、部署环境配置等非研发事务上,重大影响了研发事务的进行,研发效率低下。 二、华为云 DevCloud 解决方案针对提灯研发团队面临的问题,华为云 DevCloud 提供了一站式麻利开发与继续交付的整体解决方案。 提灯医疗应用华为云 DevCloud ,可能全量治理产品研发、运维和施行体系,全面笼罩医疗业务场景,高质量满足医院客户的个性化需要,推动提灯继续地提供符合临床须要的翻新利用,应用功效出现如下: • 研发全流程笼罩,轻松实现 CI/CD华为云 DevCloud 买通了开发前、开发中和开发后的各个研发环节,从需要治理、项目管理、开发、测试、 Bug 治理、公布以及前期的零碎运维,全流程傻瓜式操作,极大地晋升了产品团队、研发团队和施行经营团队的合作效率,可极速响应医院客户的紧急多样化需要。应用华为云 DevCloud 后,实现了研发全流程笼罩、研发交付运维一体化,以前是三周迭代一次,当初能够做到大版本两周迭代一次、小版本一周迭代一次。 • 多我的项目看板,多我的项目协同开发,可视化集体奉献,项目管理简略高效通过华为云 DevCloud 提供的我的项目级、多我的项目级的治理看板,提灯项目经理直观查看各个我的项目进度,横向拉通比照各个我的项目进度,及时做出决策,把控我的项目整体进度。防止因某个或某几个我的项目延后而影响整体我的项目交付。 我的项目看板可针对每个成员在多我的项目中的综合贡献度进行统计和出现,提灯我的项目管理者通过查看治理面板的 “ 人员投入统计 ” 作为绩效考评的参考值,考评后果主观公正,失去员工认可,无效激发员工积极性。 • 可视化价值流动,让开发颠三倒四为了增强从需要到产品过程的正当管控,依据提灯理论研发场景,设置了 “ 新建 ” 、 “ 进行中 ” 、 “ 已解决 ” 、 “ 测试中 ” 等一系列研发阶段,并对整个研发流程与每个阶段的产物进行了标准,每日站立会议依据上一日工作进展及时更新事务状态,这一动作无效解决了以往通过口述或 excel 表格等形式取得的停顿信息不清晰,导致我的项目停顿状态含糊的问题。在麻利开发的价值驱动下,提灯医疗研发流程环节有序进行,实时跟进、无效推动。 ...

September 1, 2021 · 1 min · jiezi

关于华为云:不再隐瞒了训练千亿参数模型的法宝告诉你们

摘要:盘古的训练以「昇腾AI处理器」为基座,同时借助了「CANN 异构计算架构」,让硬件算力得以充沛开释,大大缩短了训练工夫!2021年4月,“华为云盘古大模型”一炮走红AI人工智能畛域。如果你问:明明明明明白白白喜爱他,但他就是不说,白白喜爱谁?你的伙伴可能还要犹豫3秒钟,而盘古却能轻松地答复出:明明!诸如此类的「中文同词不同义」的疾速语义辨认也仅仅是它的神通广大而已。当先的语言了解和模型生成能力,这个大网红霎时被贴上了“最靠近人类中文理解能力”、“寰球最大中文语言(NLP)预训练模型”各类标签。标签不是白帖的,在AI畛域,大智慧就意味着大模型,他背地的“千亿参数”、“TB 级内存模型”相对是他胜利的法宝!模型大,意味着数据也大,你想到如何训练出这样大的模型了么?盘古的训练以「昇腾AI处理器」为基座,同时借助了「CANN 异构计算架构」,让硬件算力得以充沛开释,大大缩短了训练工夫! 什么是CANN?以晋升用户开发效率和开释昇腾AI处理器极致算力为指标,昇腾CANN(Compute Architecture for Neural Networks)是华为针对AI场景推出的异构计算架构。它对上反对业界支流前端框架,向下对用户屏蔽系列化芯片的硬件差别,以丰盛的软件栈性能满足用户全场景的人工智能利用诉求。 以后CANN曾经公布到3.0的版本,对立编程架构,同时反对推理+训练的端、边、云全量场景,实现三大使能。 使能全场景:通过反对业界支流AI框架,反对14+种支流操作系统,实现一次开发,全场景各种硬件状态和运行环境的灵便部署。 使能极简开发:通过对立编程接口AscendCL(Ascend Computing Language),为开发者屏蔽底层处理器的差别,反对开发者只须要把握一套API,就能够全面利用于昇腾全系列芯片+推理、训练全场景。 使能极致性能:通过软硬协同优化,亲和昇腾的图编译技术,以及超过1200个高性能算子,来开释昇腾芯片的磅礴算力。 CANN的凋谢能力:CANN为开发者提供算子开发、模型开发、利用开发的全流程开发体验,可笼罩全场景利用。• 算子开发• DSL语言开发接口:提供了一套基于内存的开发接口,处理器上的指令映射和调度是主动实现的。开发者仅须要关注算子的数学逻辑计算,不须要理解硬件细节,即可开发出高性能的算子。依据统计能够满足60%以上算子开发需要。• TIK语言开发接口:提供了一套比拟齐备的基于处理器外部Buffer可见的编程语言,开发者能够自行决定搬进搬出数据量的大小,从而充分发挥芯片的能力,晋升开发算子的性能。• 模型开发• 反对多种模型开发框架MindSpore,TensorFlow, PyTorch, ONNX 等• 反对通过标准化的Ascend IR(Intermediate Representation)接口隔离下层框架差别,进行间接构图和模型开发• 利用开发• 提供一套规范的AscendCL编程接口,晋升用户APP编程效率 CANN的硬核技术:• 高性能算子库:反对包含TensorFlow、Pytorch、Mindspore、Onnx框架在内1200+算子,开发者间接基于内置算子即可开发模型。• 主动交融技术: 反对基于算子、子图、SCOPE多维度的主动交融,反对动静DSL交融,可无效缩小计算节点,缩短计算工夫,让昇腾AI处理器霎时减速。 • 异构部署调度框架:充分利用昇腾芯片的异构执行单元,将不同的计算任务分配给最合适的计算引擎,高效协同异步流水,晋升计算工作整体效率。• 高效的内存生命周期治理算法:兼顾内存的充沛复用以及数据交换的效力,实现资源与效率的平衡。• 预置的业界支流模型库:华为昇腾Model Zoo提供100+支流模型的代码以及相应的调优参数example,为开发者提供货架式的参考实现,详细信息参见:https://www.hiascend.com/soft... • 高性能的图下沉执行框架:将所有计算下沉到芯片,缩小Host CPU与芯片之间的交互工夫,实现高性能的训练和推理。• 高性能动态图调度:反对基于异步流水的单算子执行框架,反对灵便的H2D、D2H交互,解决PyTorch等框架下动态图模式的高性能运行问题。• 业界当先的智能调优:反对基于强化学习、遗传算法、CostModel等多种智能调优算法,提供算子级或者图级调优抉择,为用户提供主动的极致性能调优体验。 CANN的5.0版本会给你带来更多设想,理解更多信息,请拜访昇腾社区。 点击关注,第一工夫理解华为云陈腐技术~

August 31, 2021 · 1 min · jiezi

关于华为云:华为认证考试试题是怎样的华为认证的优势有哪些

华为认证指的是华为公司推出的一系列技术认证,它有很多的级别,比方高级,高级认证等,那么华为认证考试试题是怎么的?华为认证的劣势有哪些呢?上面就来介绍一下。 华为认证考试试题是怎么的? 01、借你借你一双慧眼吧,让你把这纷扰看得清清楚楚......(多选)管理员打算将172.16.4.32/29 网段中的IP地址调配给主机,上面选项中的哪些IP地址是管理员能够调配给主机的IP地址? A.172.16.4.32 255.255.255.240 B. 172.16.4.33 255.255.255.248 C. 172.16.4.34 255.255.255.240 D. 172.16.4.35 255.255.255.248 答案:BD 华为认证考试试题 02、是时候展示真正的技术了!...... (多选)管理员在排查生成树网络的故障时,截取出了某台交换机的GE0/0/1端口的生成树状态信息,显示如下: ----Port1(GigabitEthernet0/0/1)---- Port Protocol :Enabled Port Role :Designated Port Port Priority :128 Port Cost(Dot1T ) :Config=100 / Active=100 Designated Bridge/Port :32768.4c1f-cc4f-26df / 128.1 Port Edged :Config=default / Active=disabled Point-to-point :Config=auto / Active=true Transit Limit :147 packets/hello-time Protection Type :None Port STP Mode :STP 下列说法正确的是: A. 该端口开销规范为Legacy。 B. 该交换机的优先级应用的是默认值。 C. 管理员应用stp path cost命令批改过此端口的开销值。 ...

August 30, 2021 · 1 min · jiezi

关于华为云:挑战倒计时互联网大赛华为命题加速高阶能力提升

摘要:还未加入“互联网+”大赛华为命题的同学“码”上报名晋升高阶能力吧!人生倒退的效率与品质可能达到何种境界,很大水平取决于社会价值创造力。 1、高阶能力 让将来更美妙社会价值创造力次要由学科知识能力、外围能力和组织职务能力三种高阶能力所形成。这三种高阶能力既是人类推动社会倒退的次要力量,也是社会组织提拔人才的次要指标。 对于大学生而言,无论是抉择待业、守业还是报考硕士博士,将来所有门路的倒退,实质都是由高阶能力所驱动。因而高阶能力的成长,是每个人发明美好未来的重中之重。 在对大量实现了优异职业与人生倒退的大学生进行深度长年钻研后,发现他们都是在大学期间投入了足量工夫加入了特定高价值流动,从而大幅度晋升了高阶能力。 2、“互联网+”大赛 疾速晋升高阶能力“互联网+”大赛恰好是荟萃整合了18种以上高价值流动的较量。加入“互联网+”大赛,不仅幻想、情怀和能力能失去疾速降级,还能播种惯例环境下难以企及的,足以影响命运的宝贵资源,从而开启更高维度的簇新人生。用心参赛,高阶能力和将来倒退都将产生质的飞跃。 往年的“互联网+”大赛在原有赛道的根底上进化出了一条新赛道——产业赛道。往年教育部首次试点产业命题赛道,由行业龙头企业将极高价值的企业工作转化为命题我的项目,让志存高远、谋求卓越的年轻人组团挑战。 产业赛道华为命题笼罩鲲鹏、昇腾AI、华为云、CT、消费者云、OpenHarmony等,命题涵盖操作系统、数据库、AI利用等。 华为装备了专家团队,以云矩阵模式为参赛团队全程辅导,提供关联重要常识与技术的答疑解析,还为命题我的项目钻研、策动、执行、管控等关键步骤,配套提供了剖析调试、模仿经营、项目管理和团队协同等多种先进软件和工具,以此减速参赛者思维和能力极限冲破。 华为多重资源的反对,让参赛者的产业高阶能力体系能在短短100到200小时的参赛过程产生超过天然状态3至6年的飞跃。 报名将于8月31日完结,还未参赛的同学“码”上报名晋升高阶能力吧!点击进入赛事页面,查看赛事详情。 作为第七届“互联网+”大赛的深刻参与者,华为为大学生参赛者提供了2000元华为云无门槛代金券,可购买6大畛域20+云产品资源。更有参赛秘籍、往届大赛集锦回顾级华为云开发者学习材料等多重权利和福利。还等什么,快扫描小程序二维码支付全套攻略吧! 点击关注,第一工夫理解华为云陈腐技术~

August 30, 2021 · 1 min · jiezi

关于华为云:云小课|想实现资源全自动备份看完这篇秘籍不再蕉绿

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要:在给备份零碎设置“闹钟”的时候,有时会遇到没有依照预期执行的状况。本文将带您理解如何在华为云云备份服务实现资源的主动备份,解放双手~本文分享自华为云社区《【云小课】根底服务第87课 想实现资源全自动备份?看完这篇秘籍,不再蕉绿~》,作者:阅识风波。 华为云云备份(Cloud Backup and Recovery,CBR)能够为云服务器ECS、BMS,云硬盘EVS,文件系统SFS Turbo,以及IDC数据中心的文件集、数据库等进行手动备份或者主动备份,性能非常弱小。 有小伙伴在应用云备份过程中,给备份零碎设置了“闹钟”,心愿零碎能够主动在设置的工夫点对资源进行备份,并且主动删除过期的备份。然鹅~理论应用的时候,零碎有时仿佛并没有像咱们设想中的那样执行。 这个“闹钟”不听命令,好蕉绿~怎么办呢?如何解决呢? 明天小编就带你走进备份策略的小课堂,一节课包会~从入门走向精通~ 设置适合的存储库容量尽管本节课介绍的是如何设置策略,然而~如果想让策略可能失常运作,那么适合的存储库容量,也是很要害滴! 有些时候,策略设置的没问题,然而因为存储库容量过小,存储库装不下产生的备份,是会导致策略不依照预期执行的。 那么,如何依据咱们的策略,来设置咱们的存储库容量呢? 这时候就掏出小编小本本上记的存储库容量计算公式啦: 存储库容量(GB) =(磁盘容量(GB) + 备份保留时长(天) / 备份周期(天) 磁盘每日变动数据量(GB)) 120% 阐明:如果保留策略为按份数保留,也能够通过换算为保留时长进行计算。例如,某公司每天进行1次备份,保留份数设置为7份,则能够换算为保留时长为7天。 例如:如某金融公司A领有一台800GB的云服务器,曾经应用200GB。计算时须要应用磁盘容量而非使用量,取800GB。每天的数据变动量大概在10GB左右,该公司打算的备份策略为每天凌晨02:00和早晨20:00共进行2次备份,备份保留时长为1个月。则该公司购买的云服务器备份存储库大小能够通过公式进行估算: 存储库容量=(800+30/(1/2) 10)120%=1680GB 如果曾经买了存储库,看了公式发现容量不够咋个办?没关系,扩容存储库,一键搞定!然而目前临时不反对缩容存储库,不要扩太多哦~如果切实是想缩容,能够新购小号的存储库,将备份资源迁徙过来也是阔以滴~ 适合的存储库容量,能力装下策略执行产生的所有备份~如果存储库大小不适合,可能就会呈现备份执行失败,备份没有依照保留规定删除等等的状况呢。 设置适合的存储库容量,是策略失常运作的首要条件之一哦~ 设置策略设置策略就像设置闹钟,次要参考策略参数表格实现设置即可。 备份规定备份周期:设置在哪天备份,能够每周的每天备份,也能够隔天备份。这里能够看到小编的备份规定设置为每周一、周四、周日的早晨11点备份一次,那么一周就会产生3个备份。 备份工夫:在备份的那天的几点备份,这里小编设置了在23:00进行备份,目前只能设置整点哦~ 备份得越频繁,产生的备份越多,所须要的存储库容量越大。 保留规定保留类型:能够抉择按数量、按工夫或者永恒保留。 规定详情:因为下面设置的备份规定,一周只备份3个,小编也只想保留一周产生的备份,保留规定也就只设置保留3个。 高级选项:能够设置日备份规定等。这里小编设置了周备份规定,在一周保留3个备份的根底上,确保每周最新产生的1个备份都会保留。因为高级选项和保留类型局部是不抵触的,能够两者同时设置。 如果明天是30日,则这个策略的执行状况如下图:  标注工夫的日期,为产生备份的日期。 灰色工夫的备份曾经被删除。 绿色工夫的备份被保留下来。 如果不设置周备份规定,则将只会有25日、26日和29日的备份会保留下来。 但也须要留神以下几点: 备份 工夫倡议设置得宽松一些,否则可能会有备份跳过的危险。阐明:某磁盘的备份策略设置的备份工夫点为:00:00,01:00,02:00。在00:00时,磁盘开始进行备份,因为磁盘此次备份增量数据较大,或者该时间段同时执行的备份工作较多,该次备份工作耗时90分钟,在01:30时实现备份。则01:00的备份工夫点会跳过,在02:00时再执行备份,将只会产生两个备份。 设置 备份工夫和复制备份的工夫时,尽量在确保备份策略执行结束备份工作已实现后再执行复制策略,否则可能会呈现复制备份失败的状况。备份时,不会对备份资源造成任何性能影响。但为了尽量保障备份数据的完整性,最好设置凌晨且磁盘没有写入数据的工夫进行备份。策略设置完了别忘了将它绑定到想主动备份的存储库上~绑定胜利了,记得确认“闹钟”是“开启”的状态哦! 结语个别状况下,在设置适合的存储库容量和策略后,“闹钟”就会主动依照设定进行运作,不须要手动进行干涉。 当然,偶然会有意外状况产生。比方: 策略执行期间批改保留规定,则可能会呈现备份没有被主动删除的状况,具体起因能够参考云备份的常见问题“保留策略批改后为什么没有失效?”遗记把策略绑定至存储库、遗记关上策略……存储库绑定了新的资源,开了主动绑定遗记扩容存储库…………莫急,咱们找到根因,见招拆招! 因为存储库容量有余导致主动备份失败,咱们能够扩容存储库,或者调整策略的频率,缩小存储库绑定的资源数量……在主动备份前,查看策略的开启和绑定状况……批改保留规定导致的不主动删除,能够手动将旧策略产生的备份删除………… 大家如果还碰到什么意外状况,欢送在评论区跟小编吐槽哦~ 获取对于云备份的常识,欢送戳戳这里~ [点击关注,第一工夫理解华为云陈腐技术~](https://bbs.huaweicloud.com/b...)

August 27, 2021 · 1 min · jiezi

关于华为云:华为hcie题库有多少题华为认证hcie面试需要注意什么

在华为认证的三个等级考试中,高级考试绝对简略一些,然而它的含金量绝对不是很高,含金量最高的就是华为hcie认证了,这个考试如果只凭集体自学的话,是很难通过考试的,因而对于筹备加入华为hcie认证考试的同学来说,是须要加入培训的,这样能力保障一次性通过考试,那么华为hcie题库有多少题?华为认证hcie面试须要留神什么呢?上面就给敌人们具体的阐明一下这些问题。 华为hcie题库有多少题? 华为hcie题库数量不一。次要起因是不同方向的认证题库数量不一样,其次题库是会随着版本的降级而变动的。比方有的方向的题库数量为320题左右。 HCIE口试考试一共有60道题,试卷的题型为单选题、多选题、以及判断题。考试的工夫为90分钟,总分1000分,只有达到了600分就是通过了,目前考试的语言有中文、英文、西班牙语以及法语。 口试啊,如果纯为应酬考试,背题就行了,毫无难度,但要持续往下考,就要了解知识点了。 怎么抉择华为hcie培训机构? 1、老牌权威,信用保障 华为hcie培训机构,要有丰盛的培训教训,有一套独特的IT互联网技术人才培训体系。 2、专业课程,贴心服务 华为hcie机构要可能依据考生们的状况,设计了最为业余和系统化的课程及学习打算,并有资深班主任、助教老师全程跟踪学员学习进度。通过行业大牛、精英们的亲自授课解说,让你事倍功半,火速拿证。与其余单纯靠视频授课、学员听课来进行培训的机构不同。单纯的讲课,学员只能获取理论知识,不具备针对性,学员只是全面的通过填鸭式教学进行记忆,成果不佳。而思博提供的是全方位、定制化、专业化的培训和服务。 3、多种形式,助你胜利 优质的华为hcie培训机构通过直播授课+录播温习+收费重修+讲师、助教二对一答疑+班主任全程跟踪+阶段测试+课件文档环境PPT全提供+考试辅导+题库解说+考前测试+待业举荐等各种形式,全方位的来辅助你学习,晋升本人。 华为认证hcie面试须要留神的5个中央 1、扎实的hcie课程专业知识 没有业余扎实的hcie认证课程常识,后面口试和试验这两个环节也很难通过,所以对于早曾经通过口试和lab试验的学员来说,这些都是小问题了,但这作为面试要留神的中央,小编还是要说一下,毕竟面试起来也会跟专业知识无关。 2、我的项目交付能力和教训 如果有加入过hcie培训的小伙伴,在做面试辅导的时候应该会听老师讲过,在华为认证hcie考试面试的问题中,会有一个对于lab试验考试的问题,如果试验的时候你曾经吧试验环节都搞清楚了,面试中答复这个问题也是轻而易举的。 3、集体抗压能力以及自信心 加入hcie考试压力是十分大的,尤其到了面试环节,后面的都通过了,在这个环节又是极具挑战性的一个环境,站在两个不意识业余考官背后,被人盯着发问问题,这个时候体现进去的自信心十分重要,就当是平时演练一样,自信的答复考官发问的问题,后面的环节都通过了,常识扎实也就没什么问题了。 4、逻辑能力和临场应变能力 在实际过程中,你会发现会遇到很多突发状况,作为一名网络工程师,须要有清晰的头脑思维,曾经在短的工夫内想出可行性计划,这个能力在面试这个环节是十分重要的。 5、清晰明了的表达能力 具备了抗压能力、自信心、逻辑能力和临场应变能力,在答复问题的时候,在你相熟的畛域里能清晰明了的把心中的答案表达出来,hcie面试这个环节就没什么为题了。 华为hcie题库有多少题?以上就给大家介绍了华为hcie题库的问题,华为hcie题库外面的试题还是比拟多的,大家在临考之前,肯定要做下华为hcie题库外面的试题,它对于大家获得现实的问题有很大的帮忙,另外,大家在加入华为hcie认证考试面试的时候,也须要留神一些技巧和办法。

August 26, 2021 · 1 min · jiezi

关于华为云:云小课-华为云KYON之VPC终端节点

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要:在华为云KYON(Keep Your Own Network)企业级云网络解决方案中,VPC终端节点借助VPN或者云专线,实现线下IDC内的利用无需弹性公网IP,间接通过内网拜访云上服务,为企业线下业务疾速迭代和上线提供更平安、更便捷的云服务反对。本文分享自华为云社区《【云小课】根底服务第81课 华为云KYON之VPCEP》,作者:阅识风波。 华为云KYON(Keep Your Own Network)企业级云网络解决方案,打造极简麻利的上云之路,助力企业极简布局,麻利迁徙,无缝交融,是企业上云的不二之选。 企业业务迁徙上云之后,线下IDC与云上服务互相独立,资源无奈共享。若用户心愿线下IDC可能应用丰盛且功能强大的云上服务,则须要反复购买公网进口,拜访效率较低,也容易造成资源节约。 华为云KYON基于VPC终端节点(VPC Endpoint,VPCEP)服务,借助虚构专用网络(VPN)或者云专线(DC),实现线下IDC内的利用无需弹性公网IP,间接通过内网拜访云上服务,为企业线下业务疾速迭代和上线提供更平安、更便捷的云服务反对。 VPCEP是什么?VPCEP反对在同一区域内,建设跨VPC的便捷、平安、私密连贯通道,使得与该VPC相连的线下IDC无需弹性公网IP就可能拜访云上资源。 VPCEP由“终端节点服务”和“终端节点”两种资源实例组成。 终端节点服务:由云服务(DNS、OBS等)或用户公有服务(ECS、ELB或者BMS)配置而成,能够被终端节点连贯和拜访。终端节点:用于在VPC和终端节点服务之间建设私密连贯通道。当线下IDC借助于VPN或者云专线连通VPC后,利用该VPC中创立的终端节点,能够通过内网拜访终端节点服务(云服务、用户公有服务)。 线下IDC通过VPCEP拜访云上资源如图所示: 利用终端节点1,IDC能够通过内网拜访云服务(如OBS、DNS等)。利用终端节点2,IDC能够拜访VPC 1内的云资源(如ECS)。利用终端节点3,IDC能够跨VPC拜访VPC 2的云资源(如ELB)。VPCEP有什么劣势?性能优异每个网关节点可提供百万级对话,满足多种利用场景需要。即创即用VPCEP资源实例秒级创立,疾速失效,迅速响应,不便用户应用。低成本、高效率IDC无需占用用户公网资源,通过内网直连云上资源,升高应用老本,且拜访时延小、效率高。高安全性用户可能通过终端节点私密地连贯到终端节点服务,防止透露服务端相干信息所带来不可知的危险。VPCEP如何配置?三步实现IDC通过VPCEP拜访云上资源: 本示例以IDC通过内网拜访OBS为例进行介绍,其中,DNS和OBS对应的终端节点服务已由零碎创立,无需进行创立终端节点服务的操作。 舒适小提示: 如果待拜访的云上资源为用户公有服务(例如ECS、ELB或者BMS),则在购买终端节点之前,须要先将用户公有服务创立为终端节点服务,详情请参考创立终端节点服务。 第一步:购买连贯DNS的终端节点 为了实现将IDC拜访OBS的申请解析到对应的终端节点,须要购买连贯DNS类型终端节点服务的终端节点。 第二步:购买连贯OBS的终端节点 为了实现IDC通过终端节点拜访OBS服务,须要购买连贯OBS类型终端节点服务的终端节点。 第三步:拜访终端节点 通过配置DNS转发规定和路由,实现IDC通过内网拜访OBS。 须要进行如下配置: 1.在IDC配置DNS转发规定,实现将IDC对OBS的拜访申请转发至DNS对应的终端节点。2.配置IDC节点到专线网关或VPN网关的DNS路由。3.配置IDC节点到专线网关或VPN网关的OBS路由。 详情请参考拜访OBS。 戳这里,查看具体的VPC终端节点帮忙文档。 点击关注,第一工夫理解华为云陈腐技术~

August 26, 2021 · 1 min · jiezi

关于华为云:云小课-详解华为云独享型负载均衡如何计费

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要:华为云独享型负载平衡,实现多种规格实例资源独享,不仅提供牢靠的性能报障,而且反对IPv6双栈,多可用区灵便部署。在收费公测期间,受到宽广用户的欢送和好评。本文分享自华为云社区《【云小课】根底服务第74课 详解华为云独享型负载平衡如何计费》,作者:阅识风波 自2021年4月1日起,弹性负载平衡独享型实例在不同Region分批次开始免费。 本文将围绕用户比拟关注的计费问题,具体介绍华为云独享型负载平衡如何免费。 独享型ELB的计费模式是什么?独享型负载平衡以后反对按需计费模式。 此处的按需,艰深来讲,是指用户结合实际业务状况,对ELB实例规格、应用时长等方面的需要,具体会波及到哪些参考指标呢,请持续往下看。 独享型ELB的免费我的项目有哪些?免费我的项目,又叫计费项,就是指用户应用ELB都须要领取哪些费用。 独享型ELB的计费项包含实例费用和LCU费用两方面。 实例费用,依据用户的独享型实例理论应用时长(准确到秒)计费。LCU费用,LCU(Loadbalancer Capacity Unit)是用来掂量独享型ELB解决流量能力的指标,解决能力越强,LCU费用越高。具体包含以下内容: 举个简略的例子,咱们很多人都会应用手机接打电话、上网冲浪等等,手机卡的月租费用好比是ELB的实例费用;手机套餐费用则相当于是LCU费用,而手机套餐中的通话时长、短信数量、上网流量等便相当于LCU的新建连接数、并发(最大)连接数、每秒查问数等指标。 独享型ELB计费项的免费规范是怎么的?实例费用,ELB实例单价:0元/小时。收费的?Yes!手机套餐免月租的感觉~ LCU费用,LCU单价:0.0417元/小时·个。什么意思? 后面说的有点深奥,还是没明确LCU到底是什么? 脑子里仍然一团毛线,我又怎么晓得本人须要买多少个LCU呢? 简略来说,不同的实例规格对应不同的套餐包,不同的套餐包折算成不同的LCU数。也就是说不同的实例规格被折算成不同的LCU数。例如下表中,网络型“小型 I”实例规格折算的LCU数为10。 以后独享型实例提供了四层套餐包和七层套餐包,两种套餐包能够叠加应用,用户能够依据不同的业务场景,抉择适宜本人业务的套餐包。 具体能够参考下表的“折算LCU数(个/AZ)”列。 独享型ELB的费用怎么计算?讲了这么多,接下来具体说一说独享ELB实例的费用到底如何计算。 计费公式:ELB费用=实例费用+LCU费用 实例费用(元)=实例单价(元/小时)*应用时长(小时)LCU费用(元)=LCU单价(元/小时·个) LCU数量(个)应用时长(小时)划重点:套餐包折算LCU数,指在单个AZ中,基于LCU的不同指标折算为不同数量的LCU。所以,如果抉择多AZ时, LCU数量=套餐包折算LCU数*AZ数 假如您抉择了四层“小型 I”(10 LCU)套餐包和七层“小型 II”(20 LCU)套餐包,并且在两个AZ部署了独享型负载平衡实例。 那么您的独享型ELB实例应用24小时的费用为:0元+60.048元=60.048元 特地阐明(1)如果用户创立的ELB实例绑定了公网IP,将会收取公网IP的费用以及公网IP所消耗的带宽费用。 (2)弹性公网IP的计费信息请登录华为云官网查看弹性公网IP产品价格详情。 购买独享型ELB实例,在3个AZ多活部署独享型负载平衡实例,抉择四层“中型 II”带宽包和七层“大型 I”带宽包,并绑定1000Mbit/s带宽的按需按带宽计费的弹性公网IP。应用24小时的费用是多少呢? 戳这里,立刻体验华为云独享型负载平衡。 点击关注,第一工夫理解华为云陈腐技术~

August 24, 2021 · 1 min · jiezi

关于华为云:鲲鹏基础软件开发赛道openLooKeng赛题火热报名中数十万大奖等您来收割

随着云计算、物联网、挪动计算、智慧城市、人工智能等畛域的倒退,各类利用对大数据处理的需要也产生着变动。以实时剖析、离线剖析、交互式剖析等为代表的计算引擎逐步为各大企业行业倒退所看重。作为鲲鹏产业生态的一部分,以“让大数据应用更简略”为愿景,具备跨源跨域高性能剖析能力的大数据查问剖析引擎openLooKeng,更令人非常期待。 何为openLooKeng?openLooKeng(源自驰名数据学家华罗庚学生)——是一款开源的对立高效的数据虚拟化引擎,是一个应答PB级别大数据量场景的大数据查问剖析引擎,提供高效、跨源、跨域的大数据计算能力。 openLooKeng反对在任何地点(包含天文上的近程数据源)对任何数据进行原位剖析,反对数据摸索和即席查问,具备100+毫秒至分钟级的近实时时延,而无需挪动数据。 · 极简的数据分析体验 openLooKeng具备弱小的生态反对,目前已兼容十几种支流数据源,提供对立的SQL查问规范,让大数据分析更轻松。 · 弱小的跨云、跨数据中心利用能力 面对简单的大数据应用场景,openLooKeng具备弱小的数据虚拟化引擎,向下买通物理壁垒,防止数据搬迁,打消数据孤岛 · 灵便易拓展 通过openLooKeng Connector适配即可实现自定义数据源治理,弱小的数据源兼容能力,采集变连贯,数据零搬迁,让数据应用更不便。 鲲鹏根底软件开发赛道之openLooKeng 赛题等您来挑战 大数据技术未然成为当下根底软件的重要组成部分,为了进一步推动信创(信息技术利用翻新产业)产业转型降级,建设良好的技术生态。2021信创“大比武”鲲鹏根底软件开发赛道,面向openEuler、openGauss、openLooKeng三大开源社区畛域设置赛题,其中openLooKeng赛题有2个: 赛题 1:openLooKeng 审计日志性能加强从平安角度来看,openLooKeng引擎须要反对记录所有的操作类信息,以做审计目标。目前openLooKeng 提供了一个根本的审计日志框架,但采集的信息不够全面,须要对其进行性能加强。 赛题 2:openLooKeng SQL历史记录查问性能加强从集群治理的角度看,openLooKeng 反对用户查看SQL 执行的历史记录。但SQL 历史记录目前还存储在治理节点的内存中,一旦集群重启,SQL 历史记录会被清空。咱们能对其改良,所有历史SQL 记录能够长久化并按条件查问。其次,以后web UI 治理SQL 日志的用户体验能够进一步欠缺。 什么样的作品能拿高分?本次赛题次要从根底性能、性能、文档完整性、测试、易用性、设计/架构等几个维度进行评分。其中根底性能的实现占了40分;易用性、设计/架构别离占据20分,其余维度各10分。从赛题和评分维度来看,须要关注重性能的开发与实现。如果在赛题工作的根底上加以翻新拓展,还能减少评分比重。 当然,您能够听听openLooKeng开发工程师是怎么解读本赛题题目,心愿对您有帮忙。 视频观看地址:2021信创大赛鲲鹏赛道 | openLooKeng社区赛题解读 大赛将最终逐出一等奖1名,奖金100,000元;二等奖2名,奖金50,000元;三等奖3名,奖金20,000元;优胜奖4名,HUAWEI Mate40;代码合入奖6名,HUAWEIMatePad11。其中,openLooKeng将取前2名升级“大比武”总决赛角逐最终大奖。 赛程介绍本次2021信创“大比武” ·鲲鹏根底软件开发赛道的工夫安顿:报名和作品提交工夫截止到8月31日,鲲鹏赛道初赛截止9月15日,9月30日进行决赛,最终在10月举办信创“大比武”总决赛。 报名形式点击报名页面或扫描二维码报名2021信创“大比武”。 扫码增加社区小助手,备注“信创大比武”即可退出“信创大赛-openLooKeng交换群”。 点击关注,第一工夫理解华为云陈腐技术~

August 20, 2021 · 1 min · jiezi

关于华为云:网络货运平台要智能安全的数据底座少不了

摘要:基于安全可靠的华为云数据底座,“超好运”APP构建了一站式生态物流平台。提起现代最为高效的送货形式,非驿骑莫属,一骑绝尘,倍道而进,把物件带给远方的亲人。但因为生产力不够发达,运输的时效性、安全性等诸多问题难以解决。时移世易,当下热门的快递物流行业的前身竟然是驿馆和镖局,侥幸的是,咱们能够站在今人智慧的肩膀上,同时拥抱数字化时代,引领快递物流行业朝着更智能、更高效的方向演进。 当下物流行业以平安高效送达为准则,对传统物流行业提出了更高要求。首先要解决货与人、人与配送路线及工夫的信息采集与流程治理,其次须要构建规范化平台,透明化、平安保障下运输,最初是升高经营老本,超高效配送。因而,智慧物流、可视化追踪成为当下物流行业倒退的关键点。于是,福建小道成物流科技有限公司旗下的“超好运”APP(以下简称“超好运”APP)应运而生,依靠互联网平台整合配置运输资源,在网络货运行业迅速成长为行业翘楚。 平安可信的数据底座,为智慧物流夯实根底网络货运行业智慧物流的建设离不开以云计算为根底的数据底座,数据库作为数据的载体,其建设更是重中之重。传统数据库因为存在无奈弹性扩大、运维老本高、数据安全难保障等问题,无奈顺利的撑持智慧物流的建设,基于华为云遵守数据中立准则,福建小道成物流科技有限公司携手华为云数据库寻求数字化转型。 业务疾速上线,降本增效针对挪动APP应用程序,华为云数据库PostgreSQL提供牢靠且经济高效的数据存储,客户只需领取PostgreSQL实例费用,无需购买和装置任何软硬件,升高应用老本。客户可依据业务状况一键按需购买,分钟级即可搭建起部署工作,在线分钟级实现计算和存储资源扩容,实时监控告警,高效运维,是互联网场景利用首选。 数据中立,平安可信数据是企业的重要策略资源,对于黑客来说同样意味着微小价值,华为云遵守数据中立准则,为客户打造平安可信的服务。在数据防护层面,华为云数据库具备全套平安解决方案,提供欠缺的平安管控机制和审计追踪,高可用的异地容灾环境,定期备份复原和回收站性能等能力,全方位保障数据的安全可靠,杜绝数据失落危险,同时帮忙客户免予黑客勒索。 免运维,聚焦外围业务倒退华为云数据库PostgreSQL具备监控报警能力,可自定义监控指标与告诉策略,及时理解云数据库 PostgreSQL服务运行状况。同时搭配应用华为云数据管理服务 DAS,可全方位对数据库进行智能监控与诊断优化,实现智能运维。 智能货运布局节约老本,效率大幅晋升基于安全可靠的华为云数据底座,“超好运”APP构建了一站式生态物流平台,通过科技伎俩让平台的货主依据须要去找到适合范畴内的司机,同时货车司机也能在全国范畴内找到全国物流货源市场,最终实现司机、货主在平台上自在自主交易。同时,实现物流行业在“人、车、物、网、链”五个环节都能正当无效地整合各自劣势的资源。大大节约了工夫老本、人力老本,在肯定水平上也升高了运输危险,标准了运输流程。 将来,网络货运将是物流市场的主体模式,“超好运”APP将最大限度优化资源配置,储备富余的运力,满足市场各方物流需要。同时通过物流大数据,为各行业的生产和服务,提供精准倡议,既满足日常生产,又能疏导翻新生产,延长产业链,拓宽服务链。 数字化时代,云计算、大数据为物流行业提供了宏大的数据信息整合技术,而人工智能和大数据分析技术的联动,是新一轮产业改革的外围驱动力,将晋升物流行业辨认、经营、调度、决策的智能程度,实现物流全过程的智慧作业。华为云数据库将继续为智慧物流行业提供高效稳固、安全可靠、免运维的便捷服务,从而推动物流行业的疾速倒退。 PS:值此华为云828企业上云节,云数据库MySQL、PostgreSQL低至8.28元,全场包年2折起,助力企业降本增效、减速上云,生产满额送华为Mate 40,更有8280元上云大礼包等你支付,更多优惠详情请移步华为云数据库分会场。 点击关注,第一工夫理解华为云陈腐技术~

August 17, 2021 · 1 min · jiezi

关于华为云:十分钟带你了解CANN应用开发全流程

摘要:CANN作为昇腾AI处理器的发动机,反对业界多种支流的AI框架,包含MindSpore、TensorFlow、Pytorch、Caffe等,并提供1200多个根底算子。2021年7月8日,第四届世界人工智能大会在上海召开。华为轮值董事长胡厚崑在开幕式发表演讲,其中提到:华为推出了异构计算架构CANN(Compute Architecture for Neural Networks),CANN作为昇腾AI处理器的发动机,反对业界多种支流的AI框架,包含MindSpore、TensorFlow、Pytorch、Caffe等,并提供1200多个根底算子。同时,CANN具备凋谢易用的ACL(Ascend Computing Language)编程接口,并提供了网络模型的图级和算子级的编译优化、主动调优等性能。CANN对上反对多种AI框架,对下服务AI处理器与编程,是晋升昇腾AI处理器计算效率的要害平台。 如何了解CANN,如何应用CANN,特地是如何基于CANN凋谢易用的ACL编程接口实现神经网络的疾速部署呢? 置信咱们大部分开发者对于训练一个模型并不生疏,但对于将该模型部署到边缘侧,做成一个利用落地,去产生价值(或者叫帮你赚钱?),可能就不是特地分明了。但,一旦谈到能够帮你去帮你赚钱,我置信你肯定会感兴趣的,对吗? 什么?赚钱!说到这个事儿,我就晓得你不困了哈! 咱们发现在昇腾社区上曾经提供了不少可在线体验的案例,这些案例岂但能够在线体验成果,还能够进行在线试验,同时凋谢了源代码,能够通过开源社区提供的资源进行学习并给基于这些案例进行二次开发,真真正正的体验、学习、开发三步走啊! 那么咱们抉择一些有意思的案例带大家学习下基于CANN的昇腾AI利用开发过程,明天要给大家介绍的就是这个可能吸引到你的卡通图像生成利用,无论是丑陋的小姐姐还是可恶的小萌宠都能帮你秒级生成,如下图,抉择预置图片或者是上传本人的私照,点击“立刻生成”即可体验。 首先介绍下如何找到该利用: 进昇腾社区https://www.hiascend.com/ 开发者->利用案例,Ok,你曾经能够看到那个狗狗了,案例题目是“卡通图像生成”,点击进去你就看到了。 体验就不说了,右边抉择须要解决的图片,也能够上传本人的图片,而后点击生成就能够了,图片会上传到华为云昇腾AI计算资源上,推理后再回传到前端展现,相隔千里却仍能提供秒级体验,这里要给个大赞! 那么接下来言归正传,带你理解基于CANN的利用开发流程。残缺开发流程如下: 0) 工程筹备 硬件:服务器及推理卡准备就绪, 装置操作系统,配置网络。 训练后的模型:Caffe、MindSpore、TensorFlow模型; 1)模型转换 离线模型:Ascend310算子列表, ATC转换工具。 2) 算子开发及调试 自定义算子开发:TBE DSL,TBE TIK等算子开发工具。 3) 业务开发及调试 ACL接口:资源初始化,数据传输,数据预处理,模型推理,数据后处理等。 4)性能调优 性能优化:瓶颈剖析,内存优化,模型优化等。 看起来还挺简单的,对吧??然而咱们呢,是来解决主要矛盾的(先实现利用开发),其余的优化过程(精度、性能等)留着当前缓缓消化,来日方长,不是么? 废话不多说了,假设模型咱们曾经有了,也合乎咱们的需要,模型呢也是昇腾AI处理器曾经反对的模型(无需做算子开发),咱们当初要做的就是了解模型,剖析其前处理过程(给模型筹备数据),后处理过程(后果展现),进行模型转换失去离线模型,而后就是代码开发了(其实就是调用CANN ACL的各种API实现模型加载、推理的过程而已), 这里选用python,CANN的pyACL用起来。 总结一下,在本例中咱们只须要搞定如下过程: 了解模型 2. 模型转换 3. 基于CANN ACL接口进行代码开发 1、了解模型Yang Chen、Yong-Jin LIU等人提出的算法 CartoonGAN: Generative Adversarial Networks for Photo Cartoonization基于GAN网络,迭代训练生成器和判断器,由判断器提供的对抗性损失束缚,最终将天然图片转换为具备卡通格调的图片,成果惊艳。 下图为卡通图像生成的整体框架: 以Generative Adversarial Networks(GAN)为根底,其架构包含一个生成器(Generator)和一个判断器(Discriminator),通过迭代训练两个网络,由判断器提供的对抗性损失束缚,最终使得网络可能将天然图片转换为具备卡通格调的图片后果,并且放弃原图片的内容信息。 图1 卡通图像生成整体架构 生成器构造生成器采纳自编码器,为全卷积构造,包含编码器如图3,解码器如图4。 图3 编码器构造 图4 解码器构造 编码器输出为实在图片,其架构由7×7的卷积核,步长为1的卷积层开始,随后紧跟两个步长为2的降采样块,进行特征提取,对格调图片生成有用的信息将在这个过程中被提取。而后紧接4个残差块(Residual Block),用来重建内容特色。 ...

August 17, 2021 · 1 min · jiezi

关于华为云:高可用架构演进之单元化

摘要:华为云IoT提供了一站式的物联网利用开发的根底能力,这些能力做到高可用是十分不容易的,那到底是怎么做到的呢?本文分享自华为云社区《【云驻共创】高可用架构演进之单元化》,作者:咸蛋超人。 单元化是高可用架构当中的一个杀手锏。本文次要是想重点分享一下高可用架构演进之单元化,总共分为三个局部: 华为云IoT是如何了解高牢靠、高稳固的 。华为云IoT的架构是怎么做的,单元化的一些理念和实际。单元化技术能力在产品上是如何应用的。物联网平台是使能数字化的基础设施首先摘取了三组分析师的报告,咱们能够看出,物联网的平台曾经变得越来越成熟,2021年整个物联网连贯规模将达到70亿,三分之二的企业曾经在采纳IoT。 这些数据背地意味着整个物联网平台包含整个物联网技术都利用在咱们生存的方方面面。咱们这些年说的十分多的就是数字化,其实数字化时代与信息化有什么不同?信息化是以人与流程为主轴的,而数字化很大的增量,其实就是以物为外围的OT数据,所以数字化的根底物联网是十分外围的局部,物联网平台也是整个数字化的重要基础设施。 那说到基础设施,咱们会想到的例如水、电、煤。基础设施应该是具备一些特点的: 能够开箱即用,很容易地使用在各种场景。要高可用,做为基础设施如果是不高可用的,意味着在下面构建的利用或者场景都很难牢靠。就是可继续,即要保障业务的连续性。稳定性是目前物联网客户最大诉求 去年对一些物联网的开发者做过一次调研,论断是开发者最关怀的还是稳定性。在这里分享一个案例,有一家企业规模比拟大,研发实力也很强,就抉择了自研的物联网平台。整个物联网平台做好了,性能很ok,就偶然一些不稳固,基本上重启、修复还是能够用的。但有一天,忽然整个全网的设施就无奈连贯了,重启、扩容,重复折腾了将近一天也没有定位到问题所在。起初寻求华为云IoT的帮忙,问题的次要起因是它的负载平衡,它自身设置有问题,架构伸缩性也有问题,物联网设施规模比拟大的时候流量一抖动,触发了连贯风暴。这个企业的架构师分享了一个观点,他们过来在做这种架构的时候,更多思考的是人工成本和服务器老本,疏忽了机会成本,也就是零碎不牢靠带来的业务损失,他们过后一天服务中断造成的业务损失其实是超过了应用物联网平台十年的老本,所以作为架构师,做计划的时候更应该关注稳定性。 物联网平台的高可用挑战 稳定性这么重要,是不是就把它做好就能够了?是的,如果做好了的确是能够的,然而,做好这件事并不是那么容易,物联网平台具备专业性以及独特性的挑战,次要体现如下: 1. 物联网的架构物联网的业务跟咱们生存、民生、生产都是非亲非故的。过来整个互联网根本在生产上倒退起来的。生产互联网当初进入物联网时代,物联网小到出行,如果下班赶时间,共享单车开不了锁,会对生存产生一些影响。工厂里,因为物联网平台的不稳固影响工厂的生产造成复工停产甚至在还会危及到人生的平安。所以他对高牢靠的要求要高于生产互联网的。咱们过来技术的倒退,大部分的中间件都是在生产互联网的根底上构建进去,当初很多产品的SLA都要求达到99.9%甚至更高。 2. 物联网的场景物联网场景很大的特点就是碎片化十分重大。操作系统的碎片化是挪动互联网时代的一个痛点,咱们互联网时代的端其实更多,它的操作系统更不对立,资源受限,所以端的差异化十分重大。有些嵌入式的端的协定站不残缺,云端会收到很多奇形的报文,甚至是死循环,对云端发动疯狂的连贯。物联网还有一个最大的场景威逼,就是连贯风暴。很多时候设施都是长连贯的,像十万百万千万甚至一亿的设施连贯进来,一断网或者是网络有些抖动,所有的设施忽然掉线而后忽然蜂涌而至的向平台发动连贯,就像咱们生存中的踩踏事件,尤其在接连的时候,是非对称加密的,对资源的耗费十分大,交付十分多,所以这种连贯风暴忽然暴发的时候服务器的压力是十倍甚至更高的。这些都是对平台会产生极大的一个挑战。 3. 物联网的平安平安威逼大有两个特色,第一是对黑客来讲做这件事的引诱比拟大、利益比拟大;第二是物联网的这种链路比拟长,绝对来讲很容易有平安难度也比拟高,在端上会有一些单薄的环节,所以绝对来讲攻打的难度也会低一点。 4. 物联网的运维排查物联网网络问题须要十分业余的技术,一些自建平台做好了性能,当网络不稳固设施多的时候,稳定性就会降落,出了问题难以定位和疾速复原。 华为云IoT一站式提供了高可用的物联网服务 华为云IoT过来近一年SLA做到了99.99% 。提供了一站式物联网平台服务,那到底提供了哪些服务呢?咱们从设施的上云之路一起来看一下。 首先,做物联网开发必定是离不开设施的。设施的开发须要操作系统,能够应用华为LiteOS操作系统也能够应用其余操作系统。而后应用SDK进行接入,能够抉择直连或通过IoT边缘接入。接着会面临选择网络的问题,像wifi、2g/3g/4g等 。如果抉择无线网络,华为云还有寰球SIM连贯服务,它能够提供eSIM地面写卡能力,能够依据你的需要去跟更换运营商,十分不便。 这个设施就具备了接入的前提,接下来是设施发放服务。 咱们在开发的时候在生产的时候不晓得设施将来会连贯到哪里,可能是连贯北京也可能连贯在广州或者是海内。那咱们能够设施发放的服务在设施首次接连的时候来依据你设定的策略,发放到不同Region的物联网平台。 那这个发放做完了咱们设施就能够接入了。华为云IoT提供了一些多协定的接入能力,还提供了一些联动等设施的全生命周期的治理能力。数据上来当前如果想到其余的云产品也能够通过流转服务流转到其余的产品上,也能够流转到数据分析服务。数据分析服务提供了温、冷、热的数据处理的能力。还有资产模型,能够做一些虚设点的计算,如果要深层次的去应用你的数据也能够应用咱们的AMQP把数据定位到你本身的利用外面去。 好的架构是高可用的重要前提华为云IoT提供了一站式的物联网利用开发的根底能力,这些能力做到高可用是十分不容易的,那到底是怎么做到的呢?首先作为一个高可用前提是要一个好的架构,蕴含了四个十分要害且具备通用性的特色: 1. 限流降级后面也提到物联网连贯风暴是很大的威逼,那限流就十分要害了。 限流有多维度的限流,可分为单机的,设施级的、产品级的、租户级的,还有依据间连限流、上报限流、订阅限流。还有自适应降级,一些状况下须要优先保障一些重要的业务,会把一些像运维这方面做一些降级。2. 弹性伸缩对于一些异样做限流,但对于一些正当的业务增长,则须要弹性能力。弹性这块就须要底层部署调度做得十分好,资源要可能柔性伸缩,但资源伸缩的前提是架构也能程度的扩大。 3. 容灾咱们晓得零碎不可能做到百分之百,难免会有可能呈现一些异样,所以咱们会须要容灾。当初华为云IoT的产品单个Region都是具备3 Az的容灾。AZ咱们个别叫可用区,实际上是一个隔离的数据中心,AZ跟AZ之间的这个物理间隔个别在100公里以内,他们的时延个别是2~3毫秒。多AZ容灾基本上一个数据中心出现异常了,对业务也没什么影响。再高级一点就是多Region容灾,会更加简单而且老本也比拟高。 4. 单元化想做一个高可用的零碎,单从架构做好也是不够的,还波及到设计、编码、测试、运维,甚至包含一些流程制度,这是一个体系化的事件。 横向单元化——构建平行的多单元能够联结提供服务咱们传统的模式是繁多集群,外面有很多的实例。当把繁多集群拆分成很多的单元,一些实例会去共享一个单元,也有一些实例会独占一个单元,就是依据产品设计去决定的。那这样就造成一个多单元的集群,它又有什么长处呢? 1. 隔离就像水密舱,它能无效地管制爆炸的半径,防止级联的故障,所以在这种状况下能无效的十分无效地隔离故障 2. 可扩大它能够满足百亿的规模,物联网很多场景,设施之间是不能够交互的,这就决定了很多产品是能够很好的去做Partition的,有些企业想做一个百亿的规模,咱们能够用100个1亿的单元形成。设计1个反对1亿设施的单元,绝对来讲难度更容易,零碎也更容易做到牢靠。 3. 无效的去利用一个灰度的策略变更最容易出问题的中央,但通过单元化这种技术,把一个集群拆成十几二十几个,甚至百个单元,就是以单元级别做灰度的,可能更无效的管控变更的危险。 4. 亲和因为绝对来讲依据咱们肯定的分区来说,单元列的数据相关性会更高,所以缓存的命中率也会更高,基本上的热点数据,数据都被绝对集中起来,所以它对性能上也是有很大的帮忙。 纵向单元化——从私有云到智能站点构建多单元既然有横向单元化,那也有纵向的单元化。咱们在私有云上有物联网平台,混合云上有华为云Stack,它是部署在客户的现场,个别是几个机柜、几十台物理机这样的规模。想要轻量一点就能够应用华为云的智能站点,只须要一个机柜,三台物理机起,能够部署在客户的机房,甚至部署在办公区域,这是构建了一个纵向的单元。像工厂这种场景,数据量比拟大,会心愿就近解决数据,因为这样比拟快,而且更牢靠,缩小了公网的依赖,还能无效地缩小数据上云,能够在本地做解决。像这三种状态有不同的利用场景,它们能够独立的部署,齐全自制,就是说咱们的业务场景能够选一个单元去做这样的事件,选一个状态,也能够实现单元联结,能够协同。 IoT单元的定义后面介绍了这么多单元,那么华为云IoT的单元是怎么定义的?华为云IoT单元职责的定义是一个独立残缺的业务解决闭环,它是能够独立部署、独立去做业务的。那又有什么特色呢? 它存储是独立的,不会呈现两个单元共用一份存储的状况。计算是独特的。网络也是独立的,私有云上咱们每个单元都是一个独立的网络。流量尽可能的去关闭,防止流量外溢。私有云一个单元属于一个Region。私有云一个单元至多3AZ部署。IoT单元间的协同单元很大的一个劣势就是在单元之间的协同,有几种典型的协同: 第一种就是联结。联结是通过正当的Partition做分区,通过多个单元构建一个更大的业务,例如用10个1000万的单元构建1个1亿的业务或者是用10个亿的单元构建10亿的业务。 第二种是容灾。容灾就是单元和单元之间通过数据的转发,两个单元能够做多活,这是一种高可用的场景。 第三种是级联,通过很多单元层层级联构建一些简单业务。比方城市物联网平台,城市的业务当中有区级的、市级的、省级的、厅级的物联网平台,这么多的物联网平台像一个一个烟筒一样。华为云IoT的物联网平台,无论市区的、省厅的到最初通过整个级联,构建互联互通,造成一个整体的计划。 单元化实现的挑战单元化有很多劣势,但单元化也非常复杂,实现的难度比拟高,那他有哪些挑战呢。 第一个运维挑战很大。只治理几个集群的时候,公布、装置部署、运维也比拟容易的,当治理起十个甚至上百个单元的时候挑战就来了。怎么装置,怎么降级,怎么确保单元能无效的去运维起来。这对工具、自动化的要求是十分高的。 第二个大的挑战就是分区的调度。当存在单元不平衡问题时,要思考怎么无效的分区,怎么定Partition策略,怎么保障单元平衡,这会波及到一些数据的迁徙。 第三块就是协同复杂度很高。级联很好,然而级联自身协定和策略怎么去制订,这么多单元,数据一致性怎么去保障。 单元化的全景图这是华为云IoT单元化的一个全景,既有横向的也有纵向的,形成了多单元的联邦协同。它的核心理念是,任一单元的接入能够做到设施全域协同。如果某个业务场景的特色决定临时不应用私有云,应用智能站点。有一天,感觉本地解决能力不够了,或者想借云端的算力做一些更高级的剖析,那能够在私有云上开一个实例,也不须要做什么代码开发,数据只有做一些简略的配置就能够平滑的上私有云。又或者是某个私有云业务,设施接进来了,有一天须要本地更快的解决,或者是节俭一些流量的时候,能够在这个根底上再加选只能站点或者华为云Stark,那也不须要做太多的代码革新就能够新增一个单元来做业务。只有咱们想达到的,不必放心通过什么形式什么状态接入进来,只有你做过这样一个接入,咱们最初能都能保障设施的全域协同。最终是使用这种单元技术通过不同的组合满足一些高可用、高容量、高性能的需要。 设施接入服务多实例类型,让联接按需定制单元化在华为云IoT产品上有什么体现呢?咱们设施接入服务有多实例的一个状态,它能够让联接按需定制。华为云IoT设施接入服务有三个版本,根底版、标准版和企业版。根底版和标准版其实就是多个实例共享多个单元。企业版是一个实例独占一个单元,它是独立的VPC,有独立的网络,反对公/私网的对接。 华为云IoT多状态部署,让联接无处不在纵向单元化体现的就是华为云多状态部署。一共有4种的这种状态。 私有云反对一级设施的接入,开箱即用,有多种实例,能够按需抉择实用的场景。华为云Stack,服务器部署在客户的现场,能满足一些行业对网络合规的要求以及一些大型企业想建本人数据中心的诉求,它的设施规模个别是千万级。智能站点,它十分轻量,基本上一个机柜三台服务器即可。适宜百万级设施的接入。能够云边协同,云端能够近程运维。边缘网关,业务时延低于50ms。本文整顿自【华为云社区内容共创者炽热招募中】第五弹:回绝躺平,踮脚够上生存小美妙!看直播写博客,赢好礼! 点击关注,第一工夫理解华为云陈腐技术~

August 17, 2021 · 1 min · jiezi

关于华为云:在openEuler上做开发这个大赛拿出30万寻找开源的yyds

摘要:为鲲鹏产业生态的一部分,在服务器操作系统层面,开源操作系统openEuler更是令人期待。本文分享自华为云社区《在openEuler上做开发?这个大赛拿出30万寻找开源的yyds》,作者:技术火炬手。 多元计算的需要日益增多,人工智能的下一阶段还在摸索,5G、IoT正拉开万物互联的帷幕…在这个信息飞速发展的时代中,操作系统始终是最外围的根底软件之一。随着根底硬件性能的晋升、软件生态的构建,操作系统也将占据要害位置,更是成为信息技术利用翻新产业(简称信创)产业的重要力量。 在近几年对操作系统开源的摸索中,华为踊跃投入力量,比方在挪动终端操作系统方面华为公布了鸿蒙OS,而作为鲲鹏产业生态的一部分,在服务器操作系统层面,开源操作系统openEuler更是令人期待。 openEuler: 书写操作系统的中国故事家喻户晓,鲲鹏计算产业基于华为鲲鹏处理器构建全栈IT基础设施、行业利用及服务。基于鲲鹏计算平台,华为将其服务器操作系统开源,开源后命名为 openEuler。 作为全场景协同的对立操作系统,开源操作系统openEuler曾经涵盖了根底减速库、虚拟化、内核、驱动、编译器、OS工具、OpenJDK 等组件,具备高度的生态可用性。面向未来企业场景,打造全场景协同、云端一体化、满足业务翻新需要的One OS,为多样性架构开释算力。 openEuler 20.09,强化零碎支流能力自开源以来,openEuler曾经公布了三个版本,别离是20.03 LTS、20.09 和 21.03。其中 20.03 LTS 是长保护周期版本,也是被泛滥的 OSV 和合作伙伴所宽泛应用的社区版本。20.09 和 21.03 则是两个翻新版本。 20.09作为第一个翻新版本,对openEuler的一系列支流能力进行了较大规模的优化,在这个版本中,有两个新个性值得关注: iSula:推动云原生世界的容器新引擎openEuler 20.09版本全面降级了容器技术我的项目iSula中的通用容器引擎 iSulad。 iSula 是全量的容器软件栈,包含了引擎、网络、存储、工具集与容器操作系统;而iSulad作为其中轻量化的容器引擎,能够为多种场景提供灵便、稳固、平安的底层撑持。 回到打造iSula容器引擎的背景。云原生时代,容器技术在某些场景中也出现了一些有余,例如支流的 Docker 等容器引擎的特定用例。在这种状况下,针对端侧和IoT环境,华为的iSula容器团队做了一个大胆的决定,应用C/C++ 来量身打造一套轻量级的容器引擎。 对于C语言来说,JSON的解析和生成十分的麻烦,根本原因是因为C语言不反对反射,没方法对JSON做动静解析和生成。然而,容器引擎中又波及了大量的JSON解析和生成,在冷兵器与热兵器的PK | iSula与JSON的奋斗中,就为大家讲述了iSula 容器团队为了更好的和JSON进行谐和相处,所做的一些致力。 因为iSulad是用C/C++开发的容器引擎,因而具备了不同于Docker的劣势,具备轻、灵、巧、快等特点。不受硬件规格和架构的限度,底噪开销更小,可应用领域更为宽泛。在严苛的资源要求环境下,轻量模式下的iSulad自身占用资源极低(< 15M),再联合上非凡的轻量化镜像,能够达成极致的资源占用成果。iSulad我的项目的指标是成为通用的端、边、云平台一体的容器引擎,可提供对立的架构设计来满足云、IoT、边缘计算等多个场景的利用。 StratoVirt:下一代虚拟化技术近年来,泛滥互联网巨头都曾经开始踊跃拥抱云原生。容器作为一种先进的虚拟化技术,未然成为了云原生时代软件开发和运维的规范基础设施。那么,如果想要更好地摸索云原生的将来,对于操作系统的爱护必不可少。openEuler 20.09版本退出了StratoVirt下一代全场景虚拟化平台,实现了一套架构对立反对虚拟机、容器、Serverless三种场景。可能帮忙用户在轻量低噪、软硬协同、Rust语言级平安等方面具备关键技术带来竞争劣势。 StratoVirt具备极大的竞争力,别离在于: 采纳 Rust 语言,反对 seccomp,反对多租户隔离,提供可信平安运行环境;具备 <50ms 的启动性能,<4M 的内存底噪,极致性能和轻量,实用端、边、云等多样场景;X86 VT,鲲鹏 Kunpeng-V 等多体系硬件加速虚构引擎反对;ms 级设施扩缩能力,为轻量化负载提供灵便的资源伸缩能力;设施模型可扩大,反对 PCI 等简单设施标准,兼容 QEMU 软件生态;多种计算、网络,存储减速计划反对,异构算力灵便协同除此以外,虚拟化个性和内核个性的加强、编程语言JDK8 加强、编译器GCC 优化等个性加持下,openEuler 20.09打造了鲲鹏生态通向将来的“魂”。 鲲鹏根底软件开发赛道之openEule赛题等你来战不难发现,前沿与生态,正在成为openEuler的两大特色。为了更好推动openEuler生态建设,信创“大比武”鲲鹏根底软件开发赛道,面向openEuler、openGauss、openLooKeng三大开源社区畛域设置赛题。openEuler赛题有2个: 赛题1:利用 iSula 容器引擎构建云原生信创解决方案应用Kubernetes + iSula 构建云原生的信创解决方案,应用但不限于 Kubernetes 等编排工具,以开源计划进行构建,并且需提供自动化的部署措施,可进行自动化的验证,造成具备商业化的解决方案。 赛题2:利用StratoVirt 虚拟化引擎构建云原生或公有云的信创解决方案应用 Kubernetes + StratoVirt构建云原生或公有云的信创解决方案,应用但不限于 Kubernetes、OpenStack 等工具,以开源计划进行构建,并且需提供自动化的部署措施,可进行自动化的验证,造成具备商业化的解决方案。 ...

August 12, 2021 · 1 min · jiezi

关于华为云:华为认证报名费是多少如何准备华为HCIP网络工程师考试

当初华为的认证考试十分多,不同的认证有不同的要求,同时也对应着不同的报名费,那么华为认证报名费是多少?如何筹备华为HCIP网络工程师考试呢?上面认证大使就给敌人们说说。 华为认证报名费是多少? 一、华为认证有三种,HCNA、HCNP、HCIE。HCNA只有一门口试;HCNP有三门口试;HCIE有口试、试验、面试。华为所有的实践考试包含NA、NP以及IE口试,均在各地的VUE考试核心,超级网工也是考试核心。 华为认证报名费 二、HCNA级别的报名费用是:200USD;HCNP级别的报名费用是:路由替换方向,无线技术方向,网络安全方向,云计算方向、存储技术方向,每门160USD;其中无线网络是两门,其余是三门。VC、CC只须要加入一门考试300USD;HCIE级别的报名费用是:口试,300USD+试验和面试8000人民币;面试补考5000人民币。 三、VUE是美国的寰球最大的专门从事考试的公司之一。它收的钱是美元。所以,规范的华为考试费用都是美元。如果你到各地的考试核心注册,实收的价格会比汇率算进去高一些,没有对立的规范,大概高出100-300人民币。 如何筹备华为HCIP网络工程师考试? 如果当初你是零根底的小白,你依然须要从华为最根底的高级网络工程师的内容开始温习,甚至你还须要补充一下计算机网络操作的根底,而后间接从华为的设施和考试纲要温习。循序渐进地开始学习就能够了。在先天的考试中,你须要熟练地浏览相干的题库,而后去参加考试。 考试能够在当地考场报名。基本上省会一线城市有很多考场,间接在当地考试,个别一两天就能实现这三门课程。 华为认证报名费 加入华为HCIP考试对学历和年龄有什么要求吗? 华为认证网络工程师考试是一种商业考试行为,其考试组织由华为公司进行。因而,他没有太严格的准入条件。一般来说,只有你18岁以上,因为大多数18岁以上的人都会学习这些网络技术。而后学历没有限度,也就是说,只有你成年18岁,对本人的行为有能力负责,只有你付钱,就能够参加考试。 华为认证报名费是多少?以上就给大家介绍了对于华为认证报名费用的问题,大家在筹备华为认证考试的时候,就须要做好充沛的筹备,最好是加入培训,具体的能够征询认证大使。

August 4, 2021 · 1 min · jiezi

关于华为云:云图说|云上应用监控神器应用性能监控APM20

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要: 利用性能治理服务APM是实时监控并治理云利用性能和故障的云服务,提供业余的分布式应用性能剖析能力,帮忙运维人员疾速解决分布式架构下的问题定位和性能瓶颈等难题,为用户体验保驾护航。您还在为利用性能监控而懊恼吗? 华为云推出利用性能监控APM2.0版本,只需为利用装置一个探针,APM利用监控就可能对该利用进行全方位监控,帮忙您实现全栈式性能监控和端到端全链路追踪诊断,疾速解决分布式架构下问题定位和性能瓶颈剖析难题,让利用治理更轻松高效。 指标监控、调用链、拓扑图全新改版,更多功能,欢送解锁。 点击“理解更多”,华为云利用性能治理APM服务等着您! 点击关注,第一工夫理解华为云陈腐技术~

July 28, 2021 · 1 min · jiezi

关于华为云:云图说|ROMA演进史一个ROMA与应用之间不得不说的故事

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要: 华为云ROMA源自华为本身实际,聚焦数字化资产全生命周期治理,提供利用的开发、托管、运维和集成等一站式能力,基于实际疾速构建行业使能服务,升高数字化零碎老本,帮忙客户构筑数字化利用平台。本文分享自华为云社区《云图说|ROMA演进史:一个ROMA与利用之间不得不说的故事》,作者:阅识风波。 华为云ROMA 经验了从1.0到2.0的演变,ROMA有哪些成员?ROMA能做什么?你想晓得的都在这里~ 条条大路通ROMA,个个利用都接他~ 点击“理解更多”,华为云ROMA等着您! 点击关注,第一工夫理解华为云陈腐技术~

July 26, 2021 · 1 min · jiezi

关于华为云:华为云GaussDBfor-openGauss推出重磅内核新特性

摘要:华为云新一代金融级分布式数据库GaussDB(for openGauss)正式推出了Ustore存储引擎、基于Paxos协定的DCF高可用组件等多个重大内核新个性。数字化时代,技术迭代更新比以往任何时候都要来得迅猛一些,数据库技术也在这股技术浪潮中迸发出微小的倒退张力,而作为数据库技术灵魂的内核技术也随之实现了跃迁式倒退。 华为云数据库从来器重内核技术研发,领有丰盛的数据库内核研发教训,并继续构筑了一系列极具竞争力的内核个性。近期,华为云新一代金融级分布式数据库GaussDB(for openGauss)正式推出了Ustore存储引擎、基于Paxos协定的DCF高可用组件等多个重大内核新个性,为企业级用户打造了稳固高性能的存储引擎、高可用的内核能力,以翻新技术为抓手,进一步推动企业数字化转型。 Ustore存储引擎翻新,数据频繁更新下性能仍旧稳如泰山Ustore存储引擎,又名In-place Update存储引擎。In-place Update中文意思为原地更新,是GaussDB(for openGauss) 内核新增的一种存储模式。GaussDB(for openGauss) 内核以后应用的行引擎是Append Update(追加更新)模式。追加更新对于业务中的增、删以及HOT(Heap only tuple) Update(即同一页面内更新)有很好的体现,但对于跨数据页面的非HOT UPDATE场景,垃圾回收不够高效。 而Ustore引擎将最新版本的“无效数据”和历史版本的“垃圾数据”拆散存储,最新版本的“无效数据”存储在数据页面上,并独自开拓一段UNDO空间,用于对立治理历史版本的“垃圾数据”,因而数据空间不会因为频繁更新而收缩,垃圾回收效率更高。Ustore引擎采纳NUMA-Aware的UNDO子系统设计,使得UNDO子系统能够在多核平台上无效扩大;同时采纳多版本索引技术,解决索引清理问题,无效晋升了存储空间的回收复用效率。 图1:Ustore数据存储示意图:数据在原page页,undo通过指针独自治理 总之,在这种设计思路下,相比原有垃圾数据清理机制,Ustore数据存储能带来更高性能、更高效率,空间利用更充沛,整体零碎运行更加安稳,适应更多业务场景和工作负载。 利用实际方面,Ustore存储引擎已在局部客户现场进行了POC测试,体现出稳固牢靠的数据库服务能力,达到了预期的成果。 基于Paxos协定的高可用DCF组件翻新,确保数据强统一和高可用除了Ustore存储引擎外,GaussDB(for openGauss)还推出了基于Paxos协定的DCF高可用组件,该组件使得GaussDB(for openGauss)在保证数据一致性的同时,在高可用方面可进一步失去加强,包含: (1)通过自仲裁、多数派选主能力解脱第三方仲裁组件,极大缩短RTO工夫,且可预防任何故障下的脑裂双主; (2)反对节点同步、同异步混合部署的多集群部署模式; (3)晋升主备间节点日志复制效率,晋升零碎的最大吞吐能力。 图2:Paxos原理示意图 借助GaussDB(for openGauss)的DCF高可用组件,用户不仅能够免去零碎脑裂的危险,还能够晋升可用性。 面向未来,GaussDB(for openGauss)将基于AI自治技术,在Ustore存储引擎、Paxos协定自选主等要害个性方面继续构建更智能、更平安、更高效的技术能力,并从千行百业数据库利用的最紧迫问题和久远需要登程,一直在核心技术上进行冲破,为客户打造更当先、更优质的数据库服务。 【重磅流动预报】8月18日,以“数造将来”为主题的第12届中国数据库技术大会(即DTCC2021)将在北京隆重召开,现场特设华为云GaussDB专场,届时将为您解读GaussDB系列数据库及外围能力,分享GaussDB行业最佳实际。另外,GaussDB迁徙工具新品UGO目前正在炽热公测中,欢送返回华为云官网收费体验>>https://www.huaweicloud.com/p... 点击关注,第一工夫理解华为云陈腐技术~

July 16, 2021 · 1 min · jiezi

关于华为云:云图说|一张图看懂一站式DevOps利器华为云DevCloud

阅识风波是华为云信息大咖,善于将简单信息多元化出现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您疾速上手华为云。更多精彩内容请单击此处。 摘要: 华为云DevCloud是面向开发者提供的一站式云端DevOps平台,从需要下发到代码提交与构建、测试与验证、部署与运维,买通软件交付的残缺门路,提供软件研发托管运维端到端反对。随着时代的转变,企业正在面临不确定性挑战。云原生成为应答不确定性的平台根底,DevOps成为新的研发模式。 华为云DevCloud,华为公司30年研发教训背书,提供成套的实践实际+便捷的工具撑持,并预置了最佳实际,帮忙企业实现DevOps转型。 如此DevOps利器怎能不先睹为快~ 点击下方“理解更多”,华为云DevCloud等着您! 点击关注,第一工夫理解华为云陈腐技术~

July 14, 2021 · 1 min · jiezi

关于华为云:MindSpore模型精度调优实战常用的定位精度调试调优思路

摘要:在模型的开发过程中,精度达不到预期经常让人头疼。为了帮忙用户解决模型调试调优的问题,咱们为MindSpore量身定做了可视化调试调优组件:MindInsight。本文分享自华为云社区《技术干货 | 模型优化精度、速度我全都要!MindSpore模型精度调优实战(二)》,原文作者:HWCloudAI 。 引言:在模型的开发过程中,精度达不到预期经常让人头疼。为了帮忙用户解决模型调试调优的问题,咱们为MindSpore量身定做了可视化调试调优组件:MindInsight。咱们还梳理了针对常见精度问题的调试调优指南,将以“MindSpore模型精度调优实战”系列文章的模式分享进去,心愿能帮忙用户轻松定位精度问题,疾速优化模型精度。 回顾MindSpore模型精度调优实战系列点击跳转链接→技术干货 | 更快定位精度问题!MindSpore模型精度调优实战(一)。 本文是系列分享的第二篇,将给出罕用的精度调试调优思路。本系列分享假如您的脚本曾经可能运行并算出loss值。如果脚本还不能运行,请先参考相干报错提醒进行批改。 遇到精度问题时,罕用调试调优思路如下: 查看代码和超参查看模型构造查看输出数据查看loss曲线查看精度是否达到预期代码是精度问题的重要源头,查看代码重在对脚本和代码做查看,力争在源头发现问题(第2节);模型构造体现了MindSpore对代码的了解,查看模型构造重在查看MindSpore的了解和算法工程师的设计是否统一(第3节);有的问题要到动静的训练过程中才会发现,查看输出数据(第4节)和loss曲线(第5节)正是将代码和动静训练景象联合进行查看;查看精度是否达到预期则是对整体精度调优过程从新扫视,并思考调整超参、解释模型、优化算法等调优伎俩(第6节)。此外,相熟模型和工具也是很重要的(第1节)。上面将别离介绍这些思路。 01精度调优筹备1.1 回顾算法设计,全面相熟模型精度调优前,要先对算法设计做回顾,确保算法设计明确。如果参考论文实现模型,则应回顾论文中的全副设计细节和超参抉择状况;如果参考其它框架脚本实现模型,则应确保有一个惟一的、精度可能达标的标杆脚本;如果是新开发的算法,也应将重要的设计细节和超参抉择明确进去。这些信息是前面查看脚本步骤的重要依据。 精度调优前,还要全面相熟模型。只有相熟了模型,能力精确了解MindInsight提供的信息,判断是否存在问题,查找问题源头。因而,花工夫了解模型算法和构造、了解模型中算子的作用和参数的含意、了解模型所用优化器的个性等模型因素是很重要的。入手剖析精度问题细节前,倡议先带着问题加深对这些模型因素的理解。 前,要先对算法设计做回顾,确保算法设计明确。如果参考论文实现模型,则应回顾论文中的全副设计细节和超参抉择状况;如果参考其它框架脚本实现模型,则应确保有一个惟一的、精度可能达标的标杆脚本;如果是新开发的算法,也应将重要的设计细节和超参抉择明确进去。这些信息是前面查看脚本步骤的重要依据。 精度调优前,还要全面相熟模型。只有相熟了模型,能力精确了解MindInsight提供的信息,判断是否存在问题,查找问题源头。因而,花工夫了解模型算法和构造、了解模型中算子的作用和参数的含意、了解模型所用优化器的个性等模型因素是很重要的。入手剖析精度问题细节前,倡议先带着问题加深对这些模型因素的理解。 1.2 相熟工具MindInsight功能丰富,倡议用户简略浏览MindInsight教程(https://www.mindspore.cn/tuto...),理解次要性能。定位精度问题时,倡议使能summary训练信息收集性能,在脚本中退出SummaryCollector,并应用训练看板查看训练过程数据,如下图所示。Summary性能的使用指南请见 (https://www.mindspore.cn/tuto...),训练可视性能的使用指南请见(https://www.mindspore.cn/tuto...) 。 当您须要在线调试模型时,请参考此链接使能调试器性能: https://www.mindspore.cn/tuto... 02查看代码和超参代码是精度问题的重要源头,超参问题、模型构造问题、数据问题、算法设计和实现问题会体现在脚本中,对脚本做查看是定位精度问题很有效率的伎俩。查看代码次要依赖代码走读,倡议应用小黄鸭调试法:在代码走读的过程中,急躁地向没有教训的“小黄鸭”解释每一行代码的作用,从而激发灵感,发现代码问题。查看脚本时,要留神查看脚本实现(包含数据处理、模型构造、loss函数、优化器等实现)同设计是否统一,如果参考了其它脚本,要重点查看脚本实现同其它脚本是否统一,所有不统一的中央都应该有充沛正当的理由,否则就应批改。 查看脚本时,也要关注超参的状况,超参问题次要体现为超参取值不合理,例如 学习率设置不合理;loss_scale参数不合理;权重初始化参数不合理等。MindInsight能够辅助用户对超参做查看,大多数状况下,SummaryCollector会自动记录常见超参,您能够通过MindInsight的训练参数详情性能(如下图)和溯源剖析性能查看超参。联合MindInsight模型溯源剖析模块和脚本中的代码,能够确认超参的取值,辨认显著不合理的超参。如果有标杆脚本,倡议同标杆脚本一一比对超参取值,如果有默认参数值,则默认值也应一并比对,以防止不同框架的参数默认值不同导致精度降落或者训练谬误。 03查看模型构造在模型构造方面,常见的问题有: 算子应用谬误(应用的算子不适用于指标场景,如应该应用浮点除,谬误地应用了整数除);权重共享谬误(共享了不应共享的权重);权重解冻谬误(解冻了不应解冻的权重);节点连贯谬误(应该连贯到计算图中的block未连贯);loss函数谬误;优化器算法谬误(如果自行实现了优化器)等。倡议通过查看模型代码的形式对模型构造进行查看。此外,MindInsight也能够辅助用户对模型构造进行查看。大多数状况下,SummaryCollector会自动记录计算图,通过MindInsight,用户能够不便地对计算图进行查看。模型脚本运行后,倡议应用MindInsight计算图可视模块查看模型构造,加深对计算图的了解,确认模型构造合乎预期。若有标杆脚本,还能够同标杆脚本对照查看计算图,查看以后脚本和标杆脚本的计算图是否存在重要的差别。 思考到模型构造个别都很简单,冀望在这一步就能发现所有的模型构造问题是不事实的。只有通过可视化的模型构造加深对计算图的了解,发现显著的构造问题即可。前面的步骤中,发现了更明确的精度问题景象后,咱们还会回到这一步从新查看确认。 注1:MindInsight反对查看SummaryCollector记录的计算图和MindSpore context的save_graphs参数导出的pb文件计算图。请参考咱们教程中的“计算图可视化”局部理解更多信息(https://www.mindspore.cn/tuto...)。 注2:脚本迁徙工具能够将PyTorch、TensorFlow框架下编写的模型转换为MindSpore脚本,请拜访教程(https://www.mindspore.cn/tuto...) 以理解更多信息。 04查看输出数据通过查看输出模型的数据,能够联合脚本判断数据处理流水线和数据集是否存在问题。输出数据的常见问题有: 数据缺失值过多;每个类别中的样本数目不平衡;数据中存在异样值;数据标签谬误;训练样本有余;未对数据进行标准化,输出模型的数据不在正确的范畴内;finetune和pretrain的数据处理形式不同;训练阶段和推理阶段的数据处理形式不同;数据处理参数不正确等。MindInsight能够辅助用户对输出数据、数据处理流水线进行查看。大多数状况下,SummaryCollector会自动记录输出模型的数据(数据处理后的数据)和数据处理流水线参数。输出模型的数据会展现在“数据抽样”模块,数据处理流水线参数会展现在“数据图”模块和“数据溯源”模块。通过MindInsight的数据抽样模块,能够查看输出模型的(数据处理流水线解决后的)数据。若数据显著不合乎预期(例如数据被裁剪的范畴过大,数据旋转的角度过大等),能够判断输出数据呈现了肯定的问题。通过MindInsight的数据图和数据溯源模块,能够查看数据处理流水线的数据处理过程和具体参数取值,从而发现不合理的数据处理办法。 如果有标杆脚本,还能够同标杆脚本对照,查看数据处理流水线输入的数据是否和以后脚本的数据雷同。例如,将数据处理流水线输入的数据保留为npy文件,而后应用numpy.allclose()办法对标杆脚本和以后脚本的数据进行比照。如果发现不同,则数据处理阶段可能存在精度问题。 若数据处理流水线未发现问题,能够手动检查数据集是否存在分类不平衡、标签匹配谬误、缺失值过多、训练样本有余等问题。 05查看loss曲线很多精度问题会在网络训练过程中发现,常见的问题或景象有: 权重初始化不合理(例如初始值为0,初始值范畴不合理等);权重中存在过大、过小值;权重变动过大;权重解冻不正确;权重共享不正确;激活值饱和或过弱(例如Sigmoid的输入靠近1,Relu的输入全为0);梯度爆炸、隐没;训练epoch有余;算子计算结果存在NAN、INF;算子计算过程溢出(计算过程中的溢出不肯定都是无害的)等。上述这些问题或景象,有的能够通过loss体现进去,有的则难以察看。MindInsight提供了针对性的性能,能够察看上述景象、主动查看问题,帮忙您更快定位问题根因。例如: MindInsight的参数分布图模块能够展现模型权重随训练过程的变化趋势;MindInsight的张量可视模块能够展现张量的具体取值,对不同张量进行比照;MindInsight调试器内置了品种丰盛,功能强大的查看能力,能够查看权重问题(例如权重不更新、权重更新过大、权重值过大/过小)、梯度问题(例如梯度隐没、梯度爆炸)、激活值问题(例如激活值饱和或过弱)、张量全为0、NAN/INF、算子计算过程溢出等问题。调试器应用教程: https://www.mindspore.cn/tuto... 大多数状况下,SummaryCollector会自动记录模型的loss曲线,能够通过MindInsight的标量可视模块查看。loss曲线可能反映网络训练的动静趋势,通过观察loss曲线,能够失去模型是否收敛、是否过拟合等信息。 大多数状况下,SummaryCollector会自动记录模型参数变动状况(默认记录5个参数),能够通过MindInsight的参数分布图模块查看。如果想要记录更多参数的参数分布图,请参考SummaryCollector的histogram_regular参数(https://www.mindspore.cn/doc/...),或参考HistogramSummary算子(https://www.mindspore.cn/tuto...)。 张量不会被自动记录,如果想要通过MindInsight查看张量的具体取值,请应用TensorSummary算子 (https://www.mindspore.cn/tuto...)。 上面联合loss曲线的常见景象介绍应用MindInsight进行精度问题定位的思路。 5.1 loss跑飞loss跑飞是指loss中呈现了NAN、+/-INF或者特地大的值。loss跑飞个别意味着算法设计或实现存在问题。定位思路如下: 回顾脚本、模型构造和数据,1)查看超参是否有不合理的特地大/特地小的取值, 2)查看模型构造是否实现正确,特地是查看loss函数是否实现正确, 3)查看输出数据中是否有缺失值、是否有特地大/特地小的取值。 察看训练看板中的参数分布图,查看参数更新是否有显著的异样。若发现参数更新异样,能够联合调试器定位参数更新异样的起因。3. 应用调试器模块对训练现场进行查看。1)若loss值呈现NAN、+/-INF,可应用“查看张量溢出”条件增加全局监测点,定位首先呈现NAN、+/-INF的算子节点,查看算子的输出数据是否会导致计算异样(例如除零)。若是算子输出数据的问题,则能够针对性地退出小数值epsilon防止计算异样。 2)若loss值呈现特地大的值,可应用“查看过大张量”条件增加全局监测点,定位首先呈现大值的算子节点,查看算子的输出数据是否会导致计算异样。若输出数据自身存在异样,则能够持续向上追踪产生该输出数据的算子,直到定位出具体起因。 3)若狐疑参数更新、梯度等方面存在异样,可应用“查看权重变动过大”、“查看梯度隐没”、“查看梯度过大”等条件设置监测点,定位到异样的权重或梯度,而后联合张量查看视图,逐层向上对可疑的正向算子、反向算子、优化器算子等进行查看。 5.2 loss收敛慢loss收敛慢是指loss震荡、收敛速度慢,通过很长时间能力达到预期值,或者最终也无奈收敛到预期值。相较于loss跑飞,loss收敛慢的数值特色不显著,更难定位。定位思路如下:1. 回顾脚本、模型构造和数据, 1)查看超参是否有不合理的特地大/特地小的取值,特地是查看学习率是否设置过小或过大,学习率设置过小会导致收敛速度慢,学习率设置过大会导致loss震荡、不降落; 2)查看模型构造是否实现正确,特地是查看loss函数、优化器是否实现正确; 3)查看输出数据的范畴是否失常,特地是输出数据的值是否过小 察看训练看板中的参数分布图,查看参数更新是否有显著的异样。若发现参数更新异样,能够联合调试器定位参数更新异样的起因。3. 应用调试器模块对训练现场过程查看。1)可应用“查看权重变动过小”、“查看未变动权重”条件对可训练(未固定)的权重进行监测,查看权重是否变动过小。若发现权重变动过小,可进一步查看学习率取值是否过小、优化器算法是否正确实现、梯度是否隐没,并做针对性的修复。 2)可应用“查看梯度隐没”条件对梯度进行监测,查看是否存在梯度隐没的景象。若发现梯度隐没,可进一步向上查看导致梯度隐没的起因。例如,能够通过“查看激活值范畴”条件查看是否呈现了激活值饱和、Relu输入为0等问题。 5.3 其它loss景象若训练集上loss为0,个别阐明模型呈现了过拟合,请尝试增大训练集大小。 06查看精度是否达到预期MindInsight能够为用户记录每次训练的精度后果。在model.train和model.eval中应用同一个SummaryCollector实例时,会自动记录模型评估(metrics)信息。训练完结后,能够通过MindInsight的模型溯源模块查看训练后果精度是否达标。 6.1 查看训练集上的精度若训练集上模型的loss值、metric值未达到预期,能够参考以下思路进行定位和优化: 回顾代码、模型构造、输出数据和loss曲线,1)查看脚本,查看超参是否有不合理的值 2)查看模型构造是否实现正确 ...

July 13, 2021 · 1 min · jiezi

关于华为云:华为云薛浩媒体业务进入全面云化时代云原生成为必然选择

摘要:近日,华为云TechWave云原生媒体服务专题日在线上胜利举办。华为云音视频服务正式降级为华为云媒体服务,降级背地的驱动力是什么?代表着华为云在音视频,媒体行业哪些新的布局?华为云媒体服务产品部总经理薛浩,在专题日上做了全面解读。本文分享自华为云社区《华为云薛浩:媒体业务进入全面云化时代,云原生成为必然选择》,原文作者:音视频大管家 。 近日,华为云TechWave云原生媒体服务专题日在线上胜利举办。华为云音视频服务正式降级为华为云媒体服务,降级背地的驱动力是什么?代表着华为云在音视频,媒体行业哪些新的布局?华为云媒体服务产品部总经理薛浩,在专题日上做了全面解读。 媒体业务在疾速变动,从传统的纸质媒体,到广播电视,从PC互联网时代的图文、VOD下载,到挪动互联网的短视频、直播流行,以及迅速衰亡的互动视频和云游戏,还有VR/AR、全息影像、Metaverse也正在走入事实。 制约媒体产业倒退的“三座大山”一是在媒体生产畛域,从2009年的阿凡达,到2019年的阿丽塔,让人惊艳的画面背地,是所需的算力呈指数级增长。与此同时也面临内容生产效率极其低下、制作岛出现碎片化的散布等问题。另外,高质量内容文件越来越大,依赖人工和硬盘传递,费时费力。这些问题极大限度了媒体内容的规模化生产。 二是在媒体散发畛域,依据业余机构预测,寰球流量5年减少12倍,高质量、互动类视频成为增长主力。流量增长的背地同时面临挑战:昂扬的带宽老本、互动要求更实时,以后网络结构简单、彼此割裂,互通艰难。 三是在媒体应用领域,视频分享成为支流,同时根底翻新单薄,业务同质化重大,新业务翻新越来越难。其外围起因是VR/AR产业门槛比拟高,波及到多个畛域协同翻新。如何连贯多个畛域的技术创新,缩短产业链差距,是每个媒体从业者应该思考的问题。 从音视频到媒体服务,云原生成为必然选择要解决 “三座大山”,解决制约媒体产业倒退的关键问题,云原生成为惟一的解决门路,因为云计算、AI等技术带来了先进的生产力,将极大晋升媒体行业生产和散发效率。 在媒体生产畛域,华为云推出全流程的媒体生产服务,利用云原生技术,扭转媒体生产方式:在拍摄阶段,提供虚构拍摄和3D拍摄的服务,冲破人和物理的限度,让优质内容生产能够随时随地进行;在制作阶段,通过极速上传,实时渲染和转码,大幅缩短制作周期,同时提供云制作服务,通过云桌面实现媒体生产工具的全在线化,实现多人同时近程编辑操作;在发行阶段,提供云发行的服务,轻松一键,即可公布到多渠道,实现传输即发行,爱护知识产权,杜绝盗版。 在媒体散发阶段,须要思考体验、效率和老本等多方面因素,依据不同业务达到最优均衡。基于此,华为云重构了媒体网络,即通过对立架构,达到寰球宽泛笼罩,并实现从应用层、传输层到网络层的三层解耦, 反对Full-mesh全向散发。在资源方面,采纳分布式边缘和容器化部署,反对灵便扩大,实现多协定高效反对和资源规模复用,分时错峰和智能调度。在利用方面,提供毫秒级超低时延直播,并自研拥塞管制等算法,实现弱网环境的牢靠传输。同时基于SLA,智能QoS保障,实现网络自动化运维。通过端、边、云协同,利用华为全栈的技术劣势,为客户提供更高效、更高质量的媒体散发服务。 针对媒体利用翻新,华为云倡议以云为根底底座,把各种数字化能力串接在一起造成规模化继续翻新。华为云基于本身实际,交融了华为在算力、媒体、通信、AI以及端边云协同等技术积攒,把通过18万华为人应用打磨过的优良利用华为云会议,以服务化的形式,向业界凋谢共享,使能行业翻新。受害于云,华为云会议不仅提供业余的会议服务,成为国家级会议首选,还可能作为PaaS服务被集成到多个行业利用场景,麻利开发,灵便翻新,赋能行业。 媒体AI是媒体业务的洼地,正扭转着媒体的生产开发和利用形式。华为云基于盘古大模型,也在一直晋升媒体AI能力,帮忙媒体业务实现更高效率和更佳体验。 华为云原生媒体服务,与行业独特成长在媒体业务奔流向前的同时,云原生成为必然趋势。华为云从音视频降级到云原生的媒体服务,首先基于华为云寰球基础设施,利用云原生技术,重构媒体网络,打好媒体基石,其次专一于媒体生产与解决,散发和利用三大场景,提供高质量媒体服务,帮忙业界晋升媒体生产和散发效率。最初以技术创新,融于千行百业的降级与倒退浪潮,和行业搭档、客户一起成长。云原生媒体服务冀望和大家携手单干,一起用技术创新,推动行业降级,实现更高效率,发明更好体验,更好地迎接将来世界。 点击关注,第一工夫理解华为云陈腐技术~

July 8, 2021 · 1 min · jiezi

关于华为云:云图说|华为HiLens云上管理平台-花样管理多种端侧设备

摘要:华为HiLens作为端云协同多模态AI开发利用平台,反对对接和治理多种端侧计算设施,帮忙用户开发多模态AI利用并下发到端侧设施,实现多场景的智能化解决方案。本文分享自华为云社区《【云图说】第214期 华为HiLens云上治理平台 花色治理多种端侧设施》,原文作者:阅识风波。 华为HiLens作为端云协同多模态AI开发利用平台,反对对接和治理多种端侧计算设施。HiLens Kit作为端云协同多模态AI开发套件,反对云上开发,端侧部署,反对注册在华为HiLens进行设施治理。已注册在华为HiLens的设施,能够在华为HiLens平台全方位治理设施,包含技能治理、设施日志查看、固件治理、设施告警、摄像头治理等。 点击“理解更多”,ModelArts Pro 服务等着您! 点击关注,第一工夫理解华为云陈腐技术~

July 8, 2021 · 1 min · jiezi

关于华为云:云图说|应用魔方AppCube揭秘码农防脱神器

摘要: 利用魔方(AppCube)是华为云为行业客户、合作伙伴、开发者量身打造的一款低代码开发平台。通过AppCube可轻松构建专业级利用,翻新得心应手,麻利超乎设想。本文分享自华为云社区《云图说|利用魔方AppCube:揭秘码农防脱神器》,原文作者:阅识风波 。 随着人工智能、物联网、区块链等畛域飞速发展,传统行业在向互联网化转型的过程中,对软件技术的要求越来越高,软件实现越来越简单,软件构建技术难度以指数级增长。 如果持续沿用传统的软件开发形式、交付能力,无论如何都是无奈满足这些海量、系统、善变的软件需要的。 华为云推出的利用魔方 AppCube充分考虑了开发者和企业用户的痛点,提供了高效率的低码利用开发平台。所谓低码是指用户少写代码、写大量代码甚至不写代码,通过拖、拉、拽的形式即可轻松构建专业级利用,翻新得心应手,麻利超乎设想。 点击下方“理解更多”,华为云利用魔方 AppCube服务等着您! 点击关注,第一工夫理解华为云陈腐技术~

July 6, 2021 · 1 min · jiezi

关于华为云:GaussDBfor-Redis揭秘Redis存算分离架构最全解析

前言:本文依据华为云NoSQL数据库架构师余汶龙,在往年的中国零碎架构师大会SACC上的演讲整顿而成,内容如下。 本次分享的纲要分成如下四个局部: 什么是GaussDB(for Redis)?为什么抉择存算拆散设计与实现竞争力总结什么是GaussDB(for Redis)1.1 开源Redis有哪些毛病?要答复什么是GaussDB(for Redis)(下文简称高斯Redis)的问题,首先要从背景讲起。开源Redis是个十分好的KV缓存,但随着各种业务的蓬勃发展,数据规模、吞吐规模、业务复杂度的一直回升,开源Redis暴露出诸多问题: 1.AOF收缩问题开源Redis的定位是缓存,但为了满足业务的宕机数据疾速复原,减少了AOF日志来实现肯定的长久化性能。惋惜在Redis的设计里,并没有一个转储文件机制来耗费AOF,而是通过AOF重写,来一直的去重合并旧日志。而该重写机制须要一次fork调用,该调用会带来内存翻倍、性能阻塞等问题。 2.快照备份问题随着业务对Redis的依赖越来越重,数据备份也变得十分重要。家喻户晓,Redis架构并非MVCC构造,因而想要备份数据,不免须要乐观锁定之后,拷贝内存数据。不过Redis作者设计了一个copy on write的计划,即调用fork,创立出子过程进行数据拷贝,防止了用户态加锁。然而,这个过程其实会在内核侧加锁,仍然会给业务性能带来显著抖动。 3.主从脱节问题开源Redis采纳主从高可用架构,数据采纳异步模式传输。因而主宕机之后,很容易造成数据失落或不统一。此外,当主节点写入压力较大时,单线程的主从复制很可能无奈追平增量数据,就会导致buffer沉积,进一步还可能呈现写失败甚至OOM的劫难。尽管Redis可能通过长期生成快照并同步大文件,来尝试追平主从微小差别,但如前文所述,此时又会引发fork系列问题。 4.fork问题fork其实是个十分重的零碎调用,尽管是写时拷贝,然而通常也会给他预留一倍的内存。fork工作时还须要加锁拷贝过程页表等信息,对业务的影响十分之大。上述3个问题的背地都有fork的因素,通常须要DBA采纳敞开主节点AOF、敞开主节点备份等简单运维伎俩来防止。但在主从频繁切换、节点数很多的场景下,运维是十分艰难的。甚至在主从脱节场景,实践上毫无办法躲避。 5.容量问题开源Redis不适宜大规模应用,有两个重要因素限度了其扩展性。首先是fork限度了Redis的垂直扩大能力(Scale Up),数据量越大,fork越慢,对业务的影响就越大,因而单个Redis过程可承载的数据量十分无限。其次,低效率的gossip集群治理限度了其程度扩大能力(Scale Out):因为节点数越多,其故障发现的工夫越长,并且外部通信的网络风暴成几何级数减少,导致大集群简直不可用。 1.2 业界有哪些解决办法?以上就是各大企业在开源Redis的生产实践中,实在碰到的经典问题。这些问题限度了开源Redis的大规模利用。因而,近年来业界提出了十分多的解决方案,见下图。 实质上,Redis是一种KV存储,依照场景其实能够进一步划分为两大阵营:缓存与长久化。 缓存场景:个别用来寄存秒杀、热点事件的数据。比方微博热搜,这类数据是有有效期的,而且可丢。 长久化场景:在用Redis做缓存的时候,因为其接口简略、功能丰富,大家必然心愿将更多重要数据也长久化寄存到Redis,比方历史订单、特色工程、地位坐标、机器学习等。这类数据的数据量往往很大、有效期也很长、个别不可丢。 缓存场景比较简单就是开源Redis,长久化场景业界已有十分多自研产品,比方360的ssdb/pika,阿里的tair,腾讯的tendis,当然华为云的高斯Redis也属于自研的长久化Redis。 这里也补充另一个做长久化的理由,从老本思考,256G内存条价格比256G的SSD磁盘高了将近30倍,在可用容量上也有微小差别。 1.3 华为云数据库的解法是啥?华为云数据库团队汲取开源Redis的教训,抉择了自研长久化Redis,即明天分享的配角——高斯Redis。它的一句话定位是:反对Redis协定的NoSQL数据库,而不是缓存。它有两个跟业界齐全不一样的个性: 存算拆散。高斯Redis基于华为外部自研分布式存储DFV,提供弱小的数据存储能力,包含强统一、弹性扩缩容等高级个性。DFV为何物?它是华为全栈数据服务的基石,比方文件EVS、对象OBS、块存储,还有数据库族、大数据族,都依赖于此,能够设想它的弱小及稳定性。多模架构。实际上高斯Redis是多模数据库Gauss NoSQL的一员,Gauss NoSQL提供了全栈的分布式KV引擎、用户态文件系统、存储池等技术,只须要在接口上封装Redis协定,即可轻松实现一个全新的NoSQL产品。相似的,咱们还提供了MongoDB、Cassandra、InfluxDB等NoSQL引擎。2. 为什么抉择存算拆散?在云原生概念铺天盖地的明天,数据库也逐渐走向云原生,而它的云原生有一个重要特点就是存算拆散。存算拆散也代表了数据库上云的最新趋势。 第一代数据库服务:通过下图能够看到,传统IDC建设时,数据库架设在裸金属之上,因为数据库服务的敏感特殊性,DBA或者研发须要关怀机型的抉择、磁盘Raid阵列、组网,甚至洽购等诸多事项。 第二代数据库服务:随着虚拟化技术的遍及,应用型业务大量上云,数据库也开始上云搬迁,最简略的方法是在虚拟机或容器中运行一个数据库服务即可。这样做的长处很显著,但毛病有两个:一个是通用云盘都是3正本,加上数据库下层的多正本,资源节约重大;另一个是备机资源节约,平时无奈提供服务。除此以外还有云盘IO性能等问题存在。 第三代数据库服务:基于存算拆散架构,将数据库服务分成CPU密集的计算层和IO密集的存储层。数据的正本治理齐全交给存储层,计算层实现无状态转发,既能施展云的弹性劣势,又能全负荷分担。不过毛病也很显著,即基于旧架构革新难度大。 采纳存算拆散架构之后,数据库服务就是个分而治之的思维:计算层负责服务化、产品化的各种解决,全程无状态;而存储层,就专一于数据自身的保护,包含正本、容灾、硬件感知、扩缩容等等。 3. 设计与实现接下来讲整体设计与实现,首先是软件架构。高斯Redis计算层的模块如下,次要有cfgsvr、proxy、datanode。连贯计算与存储资源的有RocksDB和GeminiFS(自研用户态文件系统),别离负责将kv数据转成sst文件和负责将sst文件下推到DFV的对象存储池中。 接下来是组网设计。一个租户申请的数据库资源,被咱们以反亲和的形式,散布在不同的物理机容器上,都属于同一个租户的雷同VPC下。不同用户的数据库资源尽管也有可能共享同一台物理机,然而因为VPC隔离,保障了数据隔离。另外,计算层的数据库资源是独占容器的,而存储层资源是共享物理硬件的。 接下来解读容灾架构。既然高斯Redis定位是数据库而不是缓存,那它看待数据的态度是庄重的:既实现了region内的3AZ容灾,也提供了跨Region的容灾。 Region内的容灾,实现了一个容忍AZ级故障的高可用计划。在此故障下,数据仍然放弃强统一状态,这对企业级利用提供了十分弱小的数据安全保障。这套架构的可靠性指标能够满足RPO为0,RTO小于10s的规范。 具体的实现原理是,依赖DFV的3正本强统一复制能力,计算层也做3AZ的反亲和部署。当用户的一条数据通过proxy写到datanode1上,datanode1通过GeminiFS的用户态文件系统,调用DFV的SDK找到一个local az的DFV存储节点,和一个间隔最近remote az的DFV存储节点,组成多数派,写胜利后即返回给用户。这样的架构下,不论是计算还是存储的AZ级故障,都对数据的安全性没有任何影响。 接下来持续讲跨Region级别的容灾。高斯Redis除了提供上述3AZ的强统一计划以外,还提供跨Region级别的容灾,也就是两个实例间的异步容灾。这套计划里,咱们减少了一个Rsync-Server的模块,用来订阅主实例上新增的日志,再把日志反解编码成相应的格局,转发给对端的备实例,由备实例回放即可。这套计划,能够实现双向同步、断点续传、抵触解决等等。其中抵触解决,针对不同的Redis数据结构,采纳不同的解决算法,保障最终一致性。 4. 竞争力总结最初一节是对高斯Redis的劣势总结,次要包含:强统一、高可用、冷热拆散、弹性伸缩、高性能。 首先是强统一个性。这一点次要受害于DFV的3正本机制,因而写入高斯Redis的数据,在客户端收到回复时,数据就已是3正本强统一的。强统一能力对业务实现十分敌对,不须要忍耐数据的不统一、不须要校验数据。而开源Redis数据采纳异步复制,因而主从之间总是有个差别buffer,如果掉电,这部分数据就会失落,且在大压力写的时候,还会产生buffer沉积,重大的时候,会导致OOM。因而,高斯Redis的强统一是个十分重要的特点,能为业务提供前后一致的状态,不必放心开源Redis主从切换后的数据一致性问题和失落问题。 第二个个性是高可用。 高可用是数据库的根本能力,这里之所以要再次强调,是因为高斯Redis的可用性跟其余数据库不同,它做到了可承受N-1个节点故障。实现原理受害于共享存储DFV:当某一个计算节点产生故障挂掉,其保护的slot路由信息,会被剩下的节点主动接管。因为不波及底层数据的迁徙,这个接管过程十分快。以此类推,能够承受N-1个节点故障,且不影响全副数据的读写。当然,计算节点缩小会对性能造成肯定影响。 第三个个性是冷热拆散。开源Redis的一个经典应用场景是配合MySQL做冷热拆散,但这须要业务实现代码负责实现冷热数据交换,并保护其一致性,这个交付逻辑比较复杂。而高斯Redis实现了它本人的冷热拆散,即用户刚写入的和常常拜访的数据,都被当做热数据加载到内存中,而非频繁拜访的数据则会被淘汰到长久化存储中。因而应用了高斯Redis的业务,不再须要从业务层写代码保护冷热替换逻辑,并且能够失去更好的一致性。 第四个个性是弹性伸缩。采纳存算拆散之后的高斯Redis,能够做到按需扩容,即计算不够扩计算,存储不够扩存储。计算资源的扩容也很简略,后面曾经提到,这个过程其实不波及数据的拷贝搬迁,只波及到元数据的批改,即把相应的slot路由信息(不超过1MB)迁徙到新增的节点上即可实现,因而速度是十分快的,秒级实现。而存储资源的扩容更简略,因为底层采纳共享存储,大多数状况进行逻辑扩容,这只须要用户在管制台上批改配额即可实现,不波及到任何数据的搬迁和拷贝。当然也有碰到物理扩容的情景,这种情景个别是咱们运维提前发现警戒水位,在这之前做平滑的迁徙扩容,该过程对用户通明无感知。 第五个个性是高性能。存算拆散的架构看似比拟重,链路比较复杂,实则在硬件采纳、软件优化上,能够做的更大胆更激进,比方RDMA网络、用户态协定、长久化内存等等。因而受害于这些专属的存储设备,加上咱们的计算层全负荷分担架构(不引入从节点,因而性能轻松翻倍),在比照友商的数据量大于内存的存储场景下,咱们的性能体现很好。另外,比照开源Redis,在数据小于内存的点查场景下,咱们的性能也有很大劣势,当然范畴查问还待优化中。 5. 结束语以上就是本次分享的对于高斯Redis的全部内容,更多内容请参考高斯Redis官网博客:官网博客 和高斯Redis官网首页:官网首页 。 点击关注,第一工夫理解华为云陈腐技术~

June 30, 2021 · 1 min · jiezi

关于华为云:全球软件大会华为前端工程师分享华为云官网的智能化实践

摘要:在第七届寰球软件大会上,华为软件开发工程师禹继波和开发者聊了聊华为云官网的智能化实际, 次要集中在内容经营的内容生产、内容解析、内容质检、内容散发、内容生产和用户反馈等6个流程,以及在此过程中遇到的业务痛点。本文分享自华为云社区《华为云官网智能化实际的五大要害动作【寰球软件大会技术分享】》,原文作者:技术火炬手 。 互联网每时每刻都在产生海量的内容,来自睿亚的报告显示:中国互联网60秒内产生了420万条语音音讯,830万条共享视频,416万次搜寻查问,165万次微博拜访。 面对如此多的内容,咱们应该如何做好网站内容经营呢? 在第七届寰球软件大会上,华为软件开发工程师禹继波和开发者聊了聊华为云官网的智能化实际, 次要集中在内容经营的内容生产、内容解析、内容质检、内容散发、内容生产和用户反馈等6个流程,以及在此过程中遇到的业务痛点。 并着重介绍了华为云如何利用AI算法和模型提供自动化的能力,升高人力老本,晋升了内容品质和内容散发的效率。 如何判断内容品质,高效内容散发的要害又是什么?数字化时代,流量是网站内容经营的要害,而高质量的内容和高效的内容散发带来的良好体验是流量晋升的根底。一个负面的例子是印度媒体在报道性侵事件中误用了普京的照片,侧面的例子是新闻、电商、视频类网站利用举荐和搜寻进行内容散发。 那华为云官网作为内容网站是怎么做的呢? 首先介绍下华为云内容生命周期和内容经营的流程,华为云官网内容经营共分为6个阶段:内容生产、内容解析、内容质检、内容散发、内容生产和用户反馈。官网的页面、文档、音视频图片首先进行内容解析和了解,通过内容审核后由经营人员散发到现网,最终用户在华为云官网进行内容生产后将相干意见反馈到内外部平台。 在内容经营过程中,咱们的痛点蕴含以下局部: 大量的多媒体(音视频、图片等)内容须要深入分析语义,能力判断内容品质,进行无效的散发,耗时耗力;内容公布数据量大,更新频繁,大量的内容质量检查耗费的人力大,效率低;传统的经营配置的形式,不能满足简单客户群体的个性化需要,容易升高用户趣味,导致用户散失;最终用户的拜访体验,不能失去无效的采集、剖析和闭环,不利于产品体验的疾速改良。针对以上问题咱们次要通过智能化的计划来解决各个阶段的业务痛点,包含: 在内容解析环节,利用OCR、ASR、NLP等技术主动提取内容的结构化信息,升高人工成本;在内容审核环节,利用NLP技术和华为云Moderation服务,进行机器审核;在内容散发环节,利用内容的结构化(TDK、标签、类别等)信息,以及智能举荐、智能搜寻等相干技术晋升内容散发的效率和准确性,晋升用户体验;在用户反馈环节,利用NLP相干技术进行情感剖析和声音分类,及时处理、闭环,并继续造成产品改良倡议。上面具体介绍华为云智能经营相干实际。 官网智能化经营实际的要害动作首先介绍一下华为云官网智能经营的整体架构,架构比较简单,蕴含几个要害分层。 首先最底层为根底服务层,咱们所有业务都是基于华为云服务构建,包含AI相干的OCR、ASRC、NLP、RES、ModelArts,大数据相干的DLI、MRS等,以及根底的SQL和NoSQL存储服务;在根底服务层下面的是外围数据层,包含用户画像、行为数据,物品信息等数据;中间层是咱们的的特色工程和算法模型层,算法模型次要集中在NLP、智能举荐、智能搜寻相干算法。再下层咱们构建了服务组件用于撑持不同的业务场景,包含画像和标签组件、策略管理排序组件、AB测试和日志采集组件等;最顶端的下层利用场景次要有千人五面、举荐、搜寻、舆情和智能问答等。 我将重点介绍智能化实际的一些要害动作。 要害动作1:内容解析在内容解析阶段,咱们利用华为云的OCR和ASR技术提取图片和音视频的文本,便于下一步自动化的内容审核;同时咱们利用NLP相干技术提取文本的关键字、摘要、标签、分类、主题等结构化信息,用于搜索引擎优化和内容散发阶段的模型训练。 要害动作2:内容质检内容通过文本提取和语义了解后,咱们借助自动化伎俩进行内容质检,包含文本纠错、内容审核和规范性查看。其中文本纠错提供了基于拼音的纠错、基于N-Gram子串的接错、基于语言模型的纠错的能力,因为业务须要定期的更新关键词、语料,并进行模型定时更新。 内容审核对接了华为云的Moderation服务,它具备文本、图像、视频的审核能力,业务只有定期的更新敏感词库即可。除此之外,还有规范性查看,包含404死链、TDK信息、货币单位等,采纳的计划次要是爬虫服务和规定引擎。 要害动作3:内容散发-智能举荐在内容散发阶段,咱们次要引入了智能举荐和智能搜寻,智能举荐是通过智能化的伎俩,基于用户物品画像,以及用户行为预测用户趣味,实现内容找人、精准举荐,晋升转化率。 华为云智能举荐的零碎架构如下:基于离线的OBS数据,采纳DLI的离线解决抽取用户物品画像、用户行为信息,采纳DLI的离线解决进行特色工程、召回和排序模型训练。训练后公布到提供在线推理能力的ModelArts平台。 同时咱们也反对实时的举荐能力,业务通过DIS通道上传用户和物品信息并实时更新用户和物品画像,再由DIS通道对接实时行为,进行用户趣味标签更新,并召回实时举荐后果集。最初,用户拜访官网页面时,通过申请ModelArts接口放回排序后的举荐内容。 要害动作3:内容散发-举荐算法业界的举荐算法绝对曾经比拟成熟,咱们采纳了罕用的召回和排序算法,召回局部包含:协同过滤和趣味匹配,排序局部次要采纳了LR和DeepFM。其中LR的长处是模型简略、高效、计算量小,毛病是无奈解决多个特色之间的关系。DeepFM的长处是:交融了低阶和高阶的特色,特色越多越精准。 最终,智能举荐为业务带来不少晋升成果,比方内容的散发效率由小时级晋升到分钟级,内容推送的覆盖率晋升到90%+。 除此之外,官网产品、流动举荐的点击率、注册和购买转化率以及社区首页博客举荐的点击率都失去了晋升。 在内容散发的智能举荐上,咱们也总结了几点心得体会: 对于数据量小的业务场景,优先选择模型简略、解释性强的算法上线,疾速优化并通过AB测试疾速验证算法的成果;充分利用用户的近线和搜寻行为,因为近线代表着用户的实时趣味,搜寻个别可能代表用户的内容述求,对于业务的指标晋升会比拟好;在举荐场景中,没有任何算法是万能的,须要联合场景、联合用户和业务特点和数据分析的后果,抉择适合的算法。要害动作4:内容散发-智能搜寻智能散发另一个要害措施是智能搜寻,从数据统计和右侧热力求剖析得出,用户搜寻后果更加关注结构化的卡片局部,以及排名靠前的文章,越往后关注度越低。因而咱们搜寻优化次要集中在以下几个方面:1. 卡片智能召回;2. 搜寻召回优化;3. 搜寻排序优化。 卡片智能召回在卡片智能召回局部,咱们次要利用FastText模型,预测用户搜索词对应的卡片类别(文本分类)。其中输出层是组成query的单词的向量,输入层是softmax层,次要输入预测的卡片和概率。 同时,咱们对暗藏层做了构造优化,原构造采纳叠加均匀的形式,尽管计算速度快,然而存在信息失落,因而将暗藏层改为拼接后全连贯embedding的形式。 基于深度语义模型RNN-Attention-DSSM的召回优化咱们利用RNN-Attention-DSSM模型进行搜寻召回优化,传统的ES查问都是基于关键词匹配的查问召回,对于关键词不匹配然而语义统一的无奈召回。DSSM模型通过Query和Doc的海量曝光点击日志,用DNN把Query和Doc表白为低维语义向量,再通过 cosine间隔来计算两者的语义向量间隔,最终训练出语义类似度模型。RNN-Attention-DSSM则是对DSSM的进一步优化,通过RNN和Attention机制思考了语句的上下文特色。 RNN-Attention-DSSM模型如下:最上层是典型的DSSM层,依据查问和正向、负向文档的向量间隔计算语义类似度,并进行softmax。训练的指标是使得查问下正向文档的概率最高。下方左侧是个典型的GRU网络,右侧是典型的Self-Attention模型。 咱们的训练数据如下:正样本为Query点击的Doc,负样本是从Query未点击的Doc中随机抽取,正负样本比例为1:4。Query输出是用户查问内容,Doc输出是档题目+书籍名。 基于学习排序算法Ranknet的排序优化同时咱们利用Ranknet模型对搜寻召回后果进行排序优化,将相关性高的doc放在靠前的地位,进步搜寻后果准确性和用户体验。Ranknet模型属于pairwise办法,不关怀某个doc与query的相干水平的具体数值,而是将所有的doc排序问题转化为求解任意两个doc的先后问题。即:应用 doci比docj更相干、docj比doci更相干以及两者相干水平相等,共三个类别,并别离应用{1, -1, 0}作为对应的类别标签。 如上图,Ranknet算法流程为:左侧依据用户的查问和召回的文章提取特色,而后由一个DNN网络计算出每个文档的分词,再将文档的分值两两求差值,之后通过sigmoid函数将数值束缚在(0,1)之间。 最右键标注数据,以后采纳的是每篇文档的点击次数,将文档的点击次数进行两两比拟,小的为-1,相等的为0,大的为1。而后再将比拟值进行线性化,将值缩放到[0,0.5,1]的方位。模型训练的指标是将模型得出的比拟值和标签数据两两比拟的值尽量靠近,模型训练采纳的是穿插熵损失函数。 咱们智能搜寻也带来了不错的成果,无论是卡片智能召回,还是排序优化,都晋升了Top1000和Top5000的搜寻点击率 下一步咱们打算是首先进一步晋升排序模型离线指标,依据业务了解和特征选择丰盛特色集,找出更多与相关性相干的特色;其次是辨别长短词查问,针对短查问构建独自的训练模型,晋升短查问语句排序准确性;最初是基于NLU进一步开掘用户的搜寻用意,解决用户搜寻用意不明确的问题。 要害动作5:体验闭环-情感剖析和声音分类对用户体验问题的剖析和改良,是产品体验继续改良的重要形式。咱们次要利用NLP技术剖析用户情感,并对体验问题进行分类和散发解决,相干逻辑视图如下: 内外部声音接入后,通过数据去重和荡涤解决后存入数据库中,再由NLP等能力进行情感剖析和声音分类:对于负面声音及时收回舆情告警,对于产品的体验问题和需要别离通过Bug单和需要单跟踪和闭环。同时咱们也有对应的经营治理平台进行舆情配置、重点舆情跟踪、情感反馈和看板数据出现。这一块采纳的模型也比较简单:底层是一个Bert的预训练模型,上游外接了一个分类模型。 最终,咱们的成果数据如下: 1、负面情感剖析的准确率达到95%+; 2、情感剖析的工作量极大升高,人力数量缩小; 3、负面情感解决的效率由小时级晋升到分钟级; 4、依据体验问题分类,推动云服务实现50+无效改良倡议闭环。 心得体会是:1、类别定义尽量明确、易辨别,缩小二义性;2、标注语料小批量高频率提供,抽样质检,准确率低于95%打回从新标注。 工程化实际总结咱们的工程化实际比较简单:基于华为云ModelArts一站式开发平台,构建数据处理、模型训练、模型治理、部署的能力,并基于DGC的定时调度,构建模型继续训练和公布的能力。 为了让内容经营更加智能,咱们以后正在做的还包含: 基于华为云NLP盘古大模型预训练的能力,优化文本分类和信息提取的准确性;依据华为云产品关键词和新的性能个性,利用AI算法智能生成文章内容;基于内容深度语义开掘和结构化信息,建设华为云内容的关联关系,构建内容的对立生命周期治理,并基于关联关系构建常识图谱,进行智能举荐和搜寻;基于页面视觉、信息含量和语义深度的多任务文章品质打分,晋升内容品质。福利理解华为云官网智能化实际的要害措施后,大家是否有播种或者有问题想交换呢,欢送在原文评论区留下你的问题或感想,咱们将抽取3条,请专家与你1V1交换(原文传送门在此), 并且送出开发者大礼包一份。 本次,还有两位华为的专家给大家带来网站高可用保障计划和前端低代码实际的分享,他们也答复了开发者关怀的问题,例如网站高可用保障的最佳计划,低代码平台的选型等等。欢送扫码观看视频。 最初,附上华为前端研发工程师郭晓在本次寰球软件大会上的技术分享PPT,点击【华为云官网智能化实际的五大要害动作】可在文末下载查看。 点击关注,第一工夫理解华为云陈腐技术~

June 30, 2021 · 1 min · jiezi

关于华为云:经典永流传华为云媒体-AI-让老电影焕发新生

摘要:近日,在华为云TechWave寰球技术峰会(人工智能&数据)上,马栏山视频文创产业园首席专家周苏岳受邀发表演讲《经典永流传,媒体 AI 让老电影焕发新生》,分享与华为云原生媒体服务单干的媒体AI在老电影修复方面的利用。本文分享自华为云社区《华为云媒体 AI,实现黑白老电影的黑白梦》,原文作者:音视频大管家 。 近日,华为云TechWave寰球技术峰会(人工智能&数据)在上海胜利举办。AI技术分论坛以“AI技术创新,减速行业智能降级”为主题,邀请到行业嘉宾分享了AI在互联网媒体、医疗、环境等行业的落地实际。马栏山视频文创产业园首席专家周苏岳受邀发表演讲《经典永流传,媒体 AI 让老电影焕发新生》,分享与华为云原生媒体服务单干的媒体AI在老电影修复方面的利用。 华为云围绕马栏山园区企业视频从制作到公布全流程业务场景,搭建了马栏山视频产业云,满足视频生产、制作、散发等各个环节的云服务需要。在修复经典影视畛域,通过引入AI修复加强和上色技术,解决胶片及磁带保留劣化及过后拍摄技术限度造成的问题,与纯人工相比,处理速度可进步100+倍;而引入混合云平台,使得计算和存储资源池可能有限动静扩容,极大晋升效率,降低成本。 周苏岳指出,利用媒体AI做老电影的修复,特地是黑白视频上色方面,难度比咱们设想的要大很多,以他曾负责的黑白电影《雷锋》上色为例,次要有两大难点:第一、搜寻空间大,计算复杂性高;第二、色彩语义信息简单,模型建设艰难。在AI分论坛上,周苏岳示意,要解决这两大难题,次要是使用多GPU并行计算,建设AI主动上色 + 人工改正 + AI迭代优化上色的自学习迭代上色工艺;另外,造成整体到部分的迭代优化流程,空间尺度上,通过筛选框定点优化部分色彩,时间尺度上,通过色彩流传算法优化间断帧之间的色彩成果。 马栏山视频文创产业园首席专家周苏岳 电影《雷锋》的修复,解决了AI神经网络主动学习与上色的3大难题:不同帧之间的色彩时序一致性;单帧图片内的色彩空间协调性;物品对象的色彩语义一致性。周苏岳也坦诚道,AI视频上色还面临很多挑战,比方在静止及光影变动显著时,存在因为焦点不实导致的轮廓辨认精度不高而色彩溢出,少部分物品如衣领、红领巾等色彩匹配谬误,多人物场景下极少数物品色彩漏上等问题。 周苏岳还分享了华为云原生媒体服务如何高效地帮忙马栏山5G高新视频公共服务云平台在影视剧生产、广电制播及融媒体经营等多场景利用。将来,马栏山视频文创产业园与华为云将进一步增强单干,在筛选框定点优化部分色彩、关键帧色彩流传算法、以及模型层面减少物体追踪及上色束缚方面进行针对性攻关,以解决以后AI零碎存在的两个次要问题:以后模型在低分辨率图片(480P)上训练不适应高清和4K视频上色;光影变动导致全局灰度变动,色彩相似性变得含糊。预计明年将会有更优良的AI工艺生产的经典影视作品跟大家见面。 华为深耕音视频畛域30多年,领有1000多项音视频算法专利,在5G、IT基础设施、智能终端、芯片等方面全栈当先。华为云原生媒体服务,在老旧视频修复和标清/高清视频的超高清转置方面,有着丰盛的教训,目前已与国内多家媒体平台以及产业园区达成单干,失去业界的宽泛认可。将来云上内容制作正在成为趋势,华为云原生媒体服务将继续深耕影视制作畛域,为推动中国影视工业数字化降级、促成整个电影产业倒退打造松软的云服务平台。 在近日举办的华为云TechWave云原生媒体服务专题日上,华为云原生视频服务正式降级为华为云原生媒体服务,专题日深度解读三大产品畛域-“媒体生产”,“媒体散发”,以及“媒体利用”。看华为三十年媒体技术积攒如何为传统业务赋予新的竞争力,拓展新赛道,激活行业生产力。点击链接理解更多云原生媒体服务干货看点。https://www.huaweicloud.com/about/techwave_video.html 点击关注,第一工夫理解华为云陈腐技术~

June 26, 2021 · 1 min · jiezi

关于华为云:华为云官网前端的技术演进与低代码实践

摘要:从浏览类页面到治理类页面,看华为云官网如何依据业务场景分阶段构建低代码平台,晋升页面迭代效率。本文分享自华为云社区《华为云官网前端的技术演进与低代码实际【寰球软件大会技术分享】》,原文作者:技术火炬手 。 前端团队演进往往会经验组件化、配置化、可视化的阶段,而低代码是团队演进中的一个必然结果。 在第七届寰球软件大会上,华为前端研发工程师郭晓,分享了华为云官网如何依据业务场景分阶段构建低代码平台,晋升页面迭代效率的实际心得, 以下是现场演讲内容速记。 前端团队面临的三大难题为什么低代码一词近期如此炽热,在日前的Qcon大会上也有5个以上低代码相干的分享,根本原因还是近年来前端团队遇到的一些问题。 首先是页面数量的激增, 依据IDC在2020年中国ICT市场趋势论坛中发表的演讲,近几年,数字经济的倒退将孕育出超过5亿个新利用/服务,这与过来40年间呈现的利用数量相当。数字经济的高速倒退须要传递海量的信息,而前端页面作为传递信息的一个重要途径,数量也在激增。 其次是前端人力不足,早早聊大会近期针对535位团队主管进行的一项考察显示,这些团队年内冀望招聘总计超过9000名前端,但理论只招到了大概5000人,不到预期的60%,而且从人才市场的数据看,前端人力的增速从14年就开始逐渐降落,前端的新鲜血液在逐年缩小。需要变多,人力持平或缩小,问题曾经非常明显。 最初是需要激增带来的运维压力, 前端业务需要大部分来自经营和产品,和业务的强关联性导致了需要的不稳定性。 一个已上线的页面很可能须要依据一个轻微的调整从新走上线公布流程,耗时耗力。而且,页面数量过多后,一些传统的通过人力的内容质量检查会十分吃力,上线页面的品质很难失去保障。 那么,在此背景下,团队如何进行技术演进? 技术演进之路:从刀耕火种到可视化最开始前端处于原始的“刀耕火种”阶段,只有有html,css,js三大基座,页面都能堆进去。慢慢的,咱们开始把一些罕用的办法抽成办法库,通用的组件规整到组件库,并且联合工程化思维进行一些模块的复用,即组件化阶段。这个期间,尽管还是编写代码,但代码的复用开始晋升我的项目的效率。 组件化前期,咱们发现在很多业务场景下,一些组件常常组合在一起,组件库中开始呈现业务组件。比方页面中常常会有这样的楼层,上方居中一个主题目一个副标题,上面几个卡片,每个卡片有个背景图而后一段形容。那咱们就构建这样的大颗粒组件,不便复用。 随着组件粒度的加大和业务组件的增多,新增简略页面需要所要写的代码会变的越来越少,常常只须要引几个组件,传一些参数就行,因为很多逻辑曾经封装到组件外面。此时,咱们把组件和参数写到配置文件中,再写一套解析逻辑(渲染引擎),将配置文件中的内容解析为指标代码。这样,后续只需保护一个配置文件,初步进入了配置化的阶段。 在配置化阶段,编写DSL无需感知技术栈和业务流程,最终渲染的成果齐全由渲染引擎管制。此时咱们能够将配置文件的保护权限裸露进来给利用侧的开发:咱们保护渲染引擎,组件库,由利用侧的开发保护配置文件。这样就缩小了团队和业务的耦合性,进一步节约了人力。 思考到利用侧不肯定须要开发,同时也为了利用化的体验,咱们能够提供一个让用户拖拽组件并且编辑的页面,将用户在界面的操作后果转为DSL,这样最终用户不须要感知DSL也能生成最终页面。简略的操作使得非开发也能把握,于是慢慢造成了谁的需要谁本人实现的场面。 能够看到,咱们在开发流程中,一直的抽取公共能力,并且形象业务流程,最终达到了低代码,无代码的能力凋谢,极大的升高了前端团队的保护压力。 业界有很多相似演进的例子,至此,低代码也缓缓进入大家的视线。 低代码平台如何选型?低代码在海内起步较早,这个概念也是海内率先提出,outSystem和mendix等企业的低代码平台早已占据大半江山。国内倒退较晚,几年前才有第一个商用的低代码平台,但现在已呈百家争鸣之势,包含华为也推出了AppCube。 低代码的“低”能够从两方面了解: 一是利用生产成本升高, 低代码不仅是指开发过程中写更少的代码,也是指利用部署老本等整体流程老本的升高。 二是利用生产的技术门槛升高, 底层业务逻辑,技术栈的屏蔽使得非专业开发人员在简略的IT培训后也能疾速投入利用生产。 那在低代码浪潮中,一个前端团队如何抉择? 首先看前端团队是否肯定须要低代码平台。据估计,中小型企业 95%以上的场景能够用低代码平台搭建,而大中型企业也有70%以上的场景能够由低代码平台搭建。刚刚咱们也提到,低代码是前端团队技术演进过程中一个必然结果,所以低代码平台是必须的。 问题随之而来,是间接购买应用还是自研呢?咱们从扩展性、易用性和人力老本三个维度进行了比拟。 扩大和易用性性方面,如果购买业界平台,只能应用它们裸露的平台能力,尽管平台会凋谢一些定制能力,但并不能满足华为云官网简单业务的须要。老本方面,从开发到上线整个流程的平台,蕴含了数据模型、UI、逻辑、流程的低代码构建,构建的人力老本高。 如果团队规模较小或者业务场景较为对立或者团队还处于组件化阶段,我倡议应用业界平台,比方华为云的AppCube,省时省力。 但如果团队较大,业务场景简单,且团队演进曾经在配置化或者可视化阶段,那自研一套短暂来看会更好。因为当企业或者组织倒退到肯定水平当前,肯定会逐渐放弃各种外购的部件,构建自研能力,以适配本身组织的须要。 对于咱们团队来说,思考到扩展性的重要性高于人力老本,因而咱们抉择自研一套低代码平台。 那华为云官网是如何进行低代码实际的? 华为云官网低代码实际华为云官网次要蕴含三类页面: 浏览类页面, 如产品介绍页、文档页,此类页面的特点是以楼层为维度,页面组件多以卡片、文字、图片为主,楼层间互相独立,交互也比拟少,语言是基于xtpl的。 治理台页面, 如账单核心,外部治理页,因为以图表页面为主,这类页面的交互比拟固定,包含搜寻,增删改查等,语言是vue。 购买类页面, 如流动页、价格计算器,这类页面多出现产品规格,页面交互比较复杂,语言同样是vue的。 这其中,浏览类和治理台类页面大略占90%以上。 在低代码实际中,华为云官网的总体目标是实现面向经营和开发者的高效利用生产平台,咱们外部称作HPA,平台的性能蕴含但不仅限于数据模型、逻辑、UI、流程的低代码或者无代码生成。 依据业务背景,咱们将指标初步分为两个阶段,首先是针对浏览类页面,实现浏览类页面的无码化生成,同时,构建平台能力,实现页面从生产到公布的无码化。 第二阶段,针对治理台类页面,加强平台的无码化能力,将页面的低代码生成拓展到数据模型,逻辑和流程维度。 阶段一:浏览类页面低代码化最先低码化的是浏览类页面,因为这类页面数量多,消耗人力大,而且页面形成比较简单,低代码的老本绝对较低。咱们对于UI低代码的构建形式是先组件化,再配置化,最终实现可视化。 组件化其中,组件化的关键在于解决页面的共性和定制性。 浏览类页面的共性是以楼层为维度,并且楼层间独立。定制性在于局部页面会有一些非楼层组件,比方浮窗或少许全局逻辑。 咱们先按不同的定制性将页面进行分类,造成一些页面模板,比方通用页面模板以及其余一些产品页面,新闻页面的模板。页面模板往往蕴含了页头页尾,以及方才提到的页面定制逻辑,比方官网服务保障页,用的就是只蕴含页尾的通用页面模板。 而后是解决共性局部,咱们把页面按楼层拆分,官网服务保障页面能够由5类组件组成,组件2和3都是步骤条组件,能够复用。咱们将页面的定制性收编到不同的页面模板中去,共性局部就是能够复用的一个个楼层组件。 配置化组件化后,就是如何用配置化信息形容页面。配置信息里蕴含页面模板、页面构造、页面数据和依赖信息。 页面模板形容页头页尾和页面定制信息。页面构造形容用了哪些楼层组件以及组件的程序,用户在画布上拖拽组件或者删除组件其实都是在批改页面构造文件。同时,页面构造也记录了楼层组件和页面数据的关联性。 页面数据则是形容了楼层组件具体的配置数据,用户在画布上的组件内容编辑,就是在调整页面数据。 最初加上楼层组件和三方件的版本依赖信息,再通过DSL渲染引擎就能够渲染出最终的html页面 可视化页面配置化后,便是思考最终用户如何通过交互界面生成配置化信息。 下图为页面构造编辑和页面数据编辑的示意图,页面构造编辑是从画布右边的组件市场中拖拽组件到页面指定地位。其中组件市场的组件是通过本地IDE开发而后通过npm公布上传。页面数据编辑是点击指标组件后,在弹出的组件编辑框中进行编辑操作,组件编辑框采纳相似JSON-schema的语法定义在组件中,编辑实现后能够抉择公布,预览等性能。 页面拜访公布时,画布会将页面配置数据寄存到后端数据库,后续通过对立数据微服务调用。 在现网拜访时,如果CDN生效回源,BFF会依据页面url去对立数据微服务获取以后页面的页面配置,蕴含页面模板,页面数据以及依赖信息。而后依据依赖信息去OBS获取对应的楼层组件内容,再依据BFF挂载的DSL渲染引擎渲染出最终页面。 预览态和运行态的区别在于是否有CDN,而后这些数据信息都是前端传给BFF的,不须要BFF去对立数据微服务取。 HPA平台1.0下面次要介绍了浏览类页面从组件化到可视化过程以及最终运行态的成果。但作为平台能力,后盾和基础设施的撑持也十分重要。 咱们第一阶段做出的HPA平台的模块图次要有四层。 基础设施层是华为云云服务、数据库RDS、云搜寻CSS、对象存储OBS、Redis,分布式音讯告诉,一站式AI开发平台ModelArts。 微服务层提供了用户权限治理,配合工作流,音讯告诉指定该用户能够编辑哪些页面,编辑当前须要给谁审核;内容质量检查和灰度测试作为页面上线前的品质和款式格调的报障;内容治理就是上文提到的对立数据微服务接口。 数据中台层是BFF依据url或者调用参数返回渲染好的页面。 前端画布层次要蕴含组件市场、资产治理、利用治理、版本治理和页面编辑。这里的利用治理还比拟广义,只限于UI。版本治理性能次要提供了页面的回退,比照等性能。 阶段一总结HPA1.0上线后,获得了显著的成果。咱们目前保护了大概100个楼层组件,也有些定制的楼层组件,基本上笼罩了官网所有浏览类页面。从经营的使用量也能够看出对开发侧的工作量缩小,经营人员均匀大概在平台中自助变更6000次。 而且,公布流程也大幅简化,很多变更不须要再通过需要传递给开发再转测上线,能够经营自主操作,从天级降落到小时级。最初,主动全面的内容查看也大幅晋升了页面的品质。 在获得显著功效的同时,也必须留神到仍存在一些可优化的点。比方DSL是为了渲染浏览类页面,场景比较简单,那后续解决治理台类页面会很吃力,须要加强;其次,这100个楼层组件是须要开发在本地IDE保护的,绝对公布周期仍然较长;最初,不足无码化的流程编排能力,如果新增权限组配置流程简单。 因而,咱们持续进入阶段二,以治理台页面低代码为业务目标,加强平台能力。 ...

June 26, 2021 · 1 min · jiezi

关于华为云:华为云数据库GaussDBfor-Cassandra揭秘第二期内存异常增长的排查经历

摘要:华为云数据库GaussDB(for Cassandra) 是一款基于计算存储拆散架构,兼容Cassandra生态的云原生NoSQL数据库;它依附共享存储池实现了强统一,保证数据的安全可靠。本文分享自华为云社区《华为云数据库GaussDB(for Cassandra)揭秘第二期:内存异样增长的排查经验》,原文作者:Cassandra官网 。 背景介绍华为云数据库GaussDB(for Cassandra) 是一款基于计算存储拆散架构,兼容Cassandra生态的云原生NoSQL数据库;它依附共享存储池实现了强统一,保证数据的安全可靠。外围特点是:存算拆散、低成本、高性能。 问题形容GaussDB(for Cassandra)自研架构下遇到一些挑战性问题,比方cpu过高,内存透露,内存异样增长,时延低等问题,这些也都是开发过程中遇到的典型问题。剖析内存异样增长是一个比拟大的挑战,内存的异样增长对于程序来说是一个致命的问题,因为其可能触发OOM,过程异样宕机,业务中断等后果,所以对内存进行正当的布局应用及管制就显得尤为重要。通过调整cache容量,bloom过滤器大小,以及memtable大小等等,实现性能晋升,读写时延改善等成果。 在线下测试过程中发现内核在长时间运行后,内存只增不减,出现异常增长的状况,狐疑可能存在内存透露。 剖析&验证首先依据内存应用,将内存分为堆内和堆外两个局部,别离进行该两块内存的剖析。确定有问题的内存是堆外内存,进一步对堆外内存剖析。引入更高效的内存管理工具tcmalloc,解决内存异样增长问题。上面为具体分析验证过程。 确定内存异样区域应用jdk的jmap命令和Cassandra的监控(配置jvm.memory.*监控项)等办法,每隔1min采集jvm的堆内内存及过程整体内存。 启动测试用例,直到内核的整体内存达到下限。剖析采集到的堆内内存和过程内存变动曲线,发现其堆内内存仍放弃绝对稳固,未呈现始终继续上涨,但期间内核的整体内存依然在继续上涨,两者的增长曲线不符。即问题应该产生在堆外内存。 堆外内存剖析验证glibc内存治理应用pmap命令打印过程的内存地址空间散布,发现有大量的64MB的内存块和许多内存碎片,该景象与glibc的内存调配形式无关。堆外内存的应用和过程整体的内存增长趋势相近,初步狐疑该问题是由堆外内存导致。加之glibc偿还内存的条件刻薄,即内存不易及时开释,内存碎片多,猜想问题和gblic有关系。当内存碎片过多,闲暇内存节约重大,最终过程内存的最大使用量会呈现超过预期打算最大值的可能,甚至呈现OOM。 tcmalloc内存治理引入tcmalloc内存管理器,代替glibc的ptmalloc内存治理形式。缩小过多的内存碎片,进步内存应用效率,本次剖析验证采纳gperftools-2.7源码进行tcmalloc的编译。运行雷同的测试用例,发现内存仍在继续上涨,然而上涨幅度较之前升高,通过pmap打印出该内存地址散布状况,发现之前的小内存块和内存碎片显著减小,阐明该工具有肯定优化成果,印证了后面提到内存碎片过多的猜想。 然而内存异样增长的问题依然存在,有点像是tcmalloc的回收不及时或者不回收导致。实际上tcmalloc的内存回收是比拟 "reluctant" 的,次要是为了当再次须要内存申请时能够间接应用,缩小零碎调用次数,进步性能。基于此起因,下来进行手动调用其开释内存接口releasefreememory。发现成果不显著,起因临时未知(可能的确存在没待开释的闲暇内存)。 手动触发tcmalloc的releasefreememory接口为验证该问题,通过设置cache容量的形式进行。 先设置cache的容量为6GB,而后将读申请压起来,使cache的6GB容量填满批改cache的容量为2GB,为疾速是内存开释,手动调用tcmalloc的releasefreememory接口,发现没有成果,揣测采纳tcmalloc之后,内存依然始终上涨不上涨的起因可能与该接口的无关。在releasefreememory接口外部的多个中央记录日志,而后启动过程再次测试,发现一处报错是在进行零碎调用madvise时有呈现失败。代码地位:报错日志信息: 通过该处的调用失败,剖析代码。发现tcmalloc的内存开释逻辑是“round-robin”,即两头有一个span开释失败,则后续待开释的span被终止,releasefreememory逻辑调用完结。这个就和后面的景象吻合,执行完releasefreememory接口后根本没有成果,发现每次都是在开释了几十MB时,因为该接口的调用失败导致开释逻辑终止。再次剖析该零碎调用madvise失败起因。通过给内核的该办法打patch,发现其失败起因是因为传入的地址块对应的内存状态是LOCKED状态。导致系统调用失败,报错为非法参数。内存为LOCKED状态,和该状态相干的有代码调用mlock零碎办法、零碎的ulimit配置。剖析相干代码未发现异常点。查问零碎ulimit配置,发现max locked memory 为unlimited。批改其配置为16MB,重启Cassandra过程,再次测试,发现内存开释效果显著。持续运行测试,发现内存继续上涨的状况隐没。在业务继续存在的状况下,内存会上涨到最高,不再上涨,放弃安稳,合乎内存打算使用量。业务压力缩小甚至进行后,内存呈现迟缓降落趋势。解决&总结引入tcmalloc工具,优化内存治理。比拟优良的内存管理器有Google的tcmalloc和Facebook的jemalloc等批改零碎的max locked memory参数配置。正当调配过程须要应用内存的最大值,并预留肯定容量,对于不合乎预期增长的内存须要进一步剖析。内存相干问题和程序相关性较强。零碎的要害配置需谨慎,要评估其影响。同时排查了相似的所有配置。 减少releasefreememory的命令,后端进行调用,优化tcmalloc hold内存不开释问题。不过releasefreememory命令的执行会锁整个pageHeap,可能导致内存调配申请被hang,所以须要小心执行。 后端减少可动静配置tcmalloc_release_rate的参数,来调整tcmalloc将内存交还给操作系统的频率。该值的正当范畴是[0-10],0示意永远不交还,值越大,示意交还的频率越高,默认值是1 结语本文通过剖析开发过程中遇到的内存增长问题,应用更优良的内存管理工具,以及更细粒度的内存监控,更直观的监控数据库运行期间的内存状态,确保数据库安稳高性能运行。 点击关注,第一工夫理解华为云陈腐技术~

June 25, 2021 · 1 min · jiezi

关于华为云:搞定研发知识管理你的企业就能跑快一步

摘要:随着时代的疾速倒退,越来越多的人意识到常识的重要性,常识治理最大限度地实现了常识资源的共享和交换。在研发团队,常识治理更是促成企业在市场上的决胜因素之一。本文分享自华为云社区《华为云DevCloud还有这些性能,轻松解决研发常识治理难题》,原文作者:灰灰哒。 随着时代的疾速倒退,越来越多的人意识到常识的重要性,常识治理最大限度地实现了常识资源的共享和交换。在研发团队,常识治理更是促成企业在市场上的决胜因素之一。 然而在日常的研发治理过程中,还是有这些难题困扰着咱们: 不足跨区域、跨部门的信息共享合作机制。不足信息分享伎俩,造成信息灵通,妨碍资源的再利用,影响办公效率。短少常识编辑与分享时的权限设置与治理性能,容易造成数据透露。重大的非结构化常识内容信息孤岛,文档检索速度迟缓,损耗企业的人力工夫老本。自行本地化部署的设施洽购、开发、运维老本昂扬,治理常识的全生命周期存在极大艰难。面对这些难题,大家是否会感觉有点不知所措呢?不必慌,华为云DevCloud为大家提供了一套残缺的研发常识全生命周期管理工具,笼罩了常识采集、常识结构化、常识创作、团队合作、常识检索、常识分享等各个常识治理环节,帮忙研发团队实现研发常识的积淀。 上面,让咱们一起来看华为云DevCloud知识库如何解决常识治理难题? 一、平安可信、治理全面的常识全生命周期治理从常识采集、利用、创作、协同、分享全方面反对常识全生命周期治理,且提供结构化常识图谱,精准常识流举荐,突破信息孤岛,利于常识共享。 常识全生命周期治理 轻松常识采集 注:该性能预计在下半年隆重上线,敬请期待。 二、高效合作,轻松分享反对多人在线协同编辑,多人即时探讨,在线文档批注,辞别传统、低效的信息处理模式。 多种源自华为优良实际提炼的专业知识模板,助你一键实现专业知识创作。 基于文档粒度的权限管制,平安可信但又高效、便捷。通过权限管制邀请具备资格的用户进行协同编辑,且能够分享给内部用户浏览、共创。 主动保留历史版本,还能够体验电影般回放编辑记录。 可通过手机微信等工具扫描文档右下角二维码在手机端查看文档,买通PC与挪动端的链接。 三、功能强大的活文档提供图片、表格、链接、音视频等多种媒体插入文档,让文档真正的活起来。 四、平安、弱小、传输疾速的存储管理:PB级数据存储,百亿级文件治理,文件切片技术缩小冗余,升高存储老本。文件上传,下载专属CDN减速,秒级快传。 应用步骤:点击具体我的项目-进入wiki即可开始应用 这么多精彩实用功能, 快来点击链接体验吧。 点击关注,第一工夫理解华为云陈腐技术~

June 7, 2021 · 1 min · jiezi

关于华为云:华为云IoT设备接入服务全体验

摘要:华为云IoT设施接入服务,海量设施,一键接入,你值得领有!本文分享自华为云社区《【云驻共创】Huawei Mate 40产线直击之 华为云IoT设施接入服务全体验》,原文作者:启明 。 前言:在开始本文之前,咱们先问问本人上面两个问题: 问题一:物联网缓缓渗入千行百业,其疾速倒退已成必然,然而在倒退的过程中有没有什么挑战呢? 问题二:目前在智能制作行业很多物联网设施,都是依赖边缘网关的,也即,通过边缘网关来接入物联网,那么为什么要应用边缘网关呢?边缘网关有什么益处呢? 咱们将通过上面的文章,来一一解答。 一、物联网带来的时机经考察数据显示,目前曾经有60%的企业,当初正在应用或者是行将部署IoT业务;有24%的企业IT估算,会用于IoT相干的一些投资;同时,曾经有63%的企业,通过IoT的部署,曾经播种十分丰富的回报。物联网在经济中正在施展着越来越重要的作用。对于物联网的更多的数据能够见下图: 同时,咱们能够看到,在理论生存当中,也遍布了物联网的身影:智慧抄表、智慧路灯、智慧井盖、车联网、智慧批发、智慧门店……物联网曾经深深的渗入到各行各业,并且推动着相干行业的数字化转型,引领着行业做着十分深远的改革。 回顾历史,咱们能够总结发现,在互联网经济中,一共有三波“浪潮”: 第一波:信息服务业数字化,次要是在2000年至2015年。互联网公司的倒退,通过互联网软件数字化,曾经推动了相干的行业进行物联网转型。而这,曾经是过来式了;第二波:服务产业数字化,集中在2014-2020年,次要是以电信、银行、政府、医疗、出版、批发等等为代表的传统服务+互联网技术进行着数字化。这一阶段曾经根本实现;第三波:实体经济数字化,从2015年至今。其中包含咱们最为关注的制造业、能源、交通、农业等等波及到民生的一些大的行业的变动,这是正在产生改革的一波“浪潮”。从国家的十一五/十二五布局到十三五的布局,到近期热议的“新基建”,都在推动制造业产业降级。可目前我国制造业规模宏大、但大而不强,自主创新能力有余,该如何晋升呢?数字化转型正是晋升制造业竞争力的要害路径。 二、物联网带来的挑战物联网带来的红利无疑是微小的,然而同时,也带来也肯定的挑战: 挑战一:让“物”谈话在让“物”谈话的过程中,咱们的要害挑战在于: 大量现存设施未被数字化;多样化设施、各行业协定、各行业通信形式不同;设施要求低功耗、低成本;设施平安问题突出。咱们目前让设施入网的最罕用的就是传感器。传统的传感器只是模仿信息量的记录,无奈对记录进行剖析解决。因而,第一步,须要将传感器所有的感知数字化,用十分主观的数字来表白诸如温度、压力、地位等等信息。同时,咱们须要在传感器可能感知的根底上,让它“学会表白”,也就是网络化,通过连贯上网,让“物物相连”。先数字化,而后网络化,这是让“物”谈话的第一步。 挑战二:让“物”说一种话让“物”说一种话的要害挑战在于: 百万种数据元素,不足规范和标准;多样化数据格式;各厂商“烟囱式”倒退,数据孤岛林立,数据互通艰难。目前的一些设施,因为行业不同,生产厂家也是不同的,比方路灯、井盖、水表等等,都是不同的厂家生产的。那么,在生产过程中,它们所应用的协定、接入形式有可能都是不一样的,就相当于不同国家的人,没有对立的语言,齐全无奈沟通。因而,咱们须要在各种设施之间,“架起桥梁”,让它们说同一种话,这也就是咱们的“物模型”,或者“产品模型” 。让数据标准化,对立物模型,让“物”说同一种话。 挑战三:让“物”说有价值的话让“物”有价值的话的要害挑战在于: 海量数据带来算力、存储问题;实时流、时序、离线、多维分析简单;行业利用场景简单;商业闭环、价值变现和调配问题。如何让数据变得有价值,是制造业面临的一个微小挑战。海量的数据呈现之后,咱们须要从各个方面去剖析:工夫维度、冷热数据、有价值的数据和没有价值的数据等等,从而失去一个残缺的数据分析,进而可能对“物”进行决策,让数据有价值。 以上即是物联网面临的次要的挑战。能够看到,“万物互联”并不是一件简略的事件。而回归到制造业,在制造业的数字化落地过程中,企业发现,数据的量十分大,流通起来十分艰难,数据采集的周期也十分短,根本以秒为单位。同时,数据如何应用,都曾经被限度。因而,具体到制造业,数字化的过程中还有如下问题: 无奈做个性化定制:全因素采集十分艰难;无奈网络化协同:多域数据流买通难;无奈智能化生产:数据大、维度多剖析难;无奈服务化延长:产品智能化服务开发难。三、华为云IoT设施接入服务解读(一)设施接入服务解决方案架构图:互联网的用户,都有一个根本的认知,那就是“数据不会凭空产生”。数据都是通过采集进而上报上来的。华为云IoT设施接入服务,即是进行数据采集工作的一个工具,或者说,平台。以下是华为云IoT的物联网解决方案架构图: 华为云IoT云服务,以LiteOS为操作系统,赋能设施以“感知”的能力,同时,通过SDK让设施有网络化的能力;设施网络化之后,通过网关等形式接入华为云IoT的物联网平台(包含设施接入服务、设施发放服务、寰球SIM联接以及数据分析服务等等),进行数据上报、命令下发等操作;再通过API形式,连贯到物联网利用,打造智慧交通、智慧城市、智慧园区等等各种智慧场景。当然整个框架外面也有很多华为云其余的服务,比方数据库等等,来撑持下层物联网利用的应用。 其中,设施接入服务,提供海量设施的接入和治理能力,配合华为云其余服务同时应用,帮忙客户疾速端到端构筑满足要求的物联网解决方案。其包含多网络接入、设施联动规定、产品模型开发等等性能,通过这些微服务,为设施接入提供一个整体服务治理能力。 (二)华为云IoT设施接入服务通信模型 让“物”谈话,只是一个拟人的修辞手法,咱们实际上要做的,是要让设施应用一种通信形式进行“沟通”。那么咱们要如何将一个设施形象进去进行剖析解决呢? 首先,是属性上报。通过相干的协定解析,属性上报之后,基于模型治理,会把设施的属性分成属性、命令、事件和通明的音讯模式,而这些,咱们又能够通过schema的模式进行形容;而在下层利用,咱们也会依照这样的模型进行相干的解决。 接下来,咱们具体介绍一下设施接入服务的各个能力。 1、产品模型(Profile):对立的数据&通信模型上述这样的一个对立的数据模型是如何造成的呢?这里引入了一个“编解码插件”的概念。具体的形式如下: 定义产品:这里有两种形式进行定义:形式1:设施厂商通过SP Portal在线编辑Profile; 形式2:设施厂商获取平台提供的样例Profile,依据本身业务进行批改,生成本人业务所需Profile; 疾速生成插件插件生成:平台提供开发者Portal,通过开发者Portal基于本人定义的Profile,疾速生成插件; 插件部署:对于实现的插件反对一键疾速部署; 价值对于下层利用价值:升高下层利用对设施治理复杂度,通过在平台规模不同厂家的数据,造成对立的Profile,下层利用毋庸感知不同设施的差别; 对设施厂商价值:毋庸批改设施代码,通过插件适配不同企业的诉求,升高设施厂家的保护复杂度。 2、规定引擎:数据流转&设施联动咱们再来结识一下设施接入的另一个弱小的性能:规定引擎。通过规定引擎,咱们能够把上报的数据上传到相干的服务(比方数据分析服务等等),引发多设施协同(揭示、告警告诉、状态报告等等)。 3、构筑边云协同、泛接入、可信的智能IoT边缘服务: IoT边缘,即除了提供云端的能力以外,通过边缘也会构筑大量的能力,包含泛接入能力、本地自治、行业利用等等。特地须要介绍一下,泛接入能力可能满足除了一些绝对规范的协定接入以外,还能提供一些公有协定的接入。在边缘之上,也会集成后面说的行业插件能力。通过这种第三方行业插件的能力,可能接入各种各样的设施。 4、基于规定的设施联动,边云协同实现多场景业务自定义 边缘侧的设施联动,能够和云端的IoTDA接入服务做对立的协同。 5、网络异样时提供本地自治能力,确保业务连续性 本地自治的能力很好了解。一般来说,当网络异样的时候,边缘的站点,是贴近设施的。贴近设施的时候,依据本人的治理能力,为接入的设施提供服务,也就是说当网络边缘站点跟云端的网络出现异常状况的时候,能够通过本地自治治理,可能保障业务的连续性。 四、华为云IoT设施接入服务疾速接入&演示接下来,联合一个产线的设施来理论演示一下设施是如何接入物联网平台的。咱们须要筹备的物料有: 边缘网关(Atlas500)边缘网关集成规范MODBUS协定PLC(镭雕机,含设施网关MODBUS Sever和采集器)接入到边缘网关边缘网关集成公有设施接入协定(集成对应协定解析的容器/过程服务)PLC(贴片机)采纳公有TCP协定染指到边缘网关具体流程:1、进入IoTDA服务:https://www.huaweicloud.com/p... 2、进入设施接入服务页面,创立产品: 通过控制台的产品页面,能够事后从属性、服务、设置的命令、事件等等每个维度去定义每一种产品,以下简略介绍比拟重要的几个产品模型: IoT边缘:edge_node,创立产品并定义相干产品模型。每个模型的属性,对应一个服务的类型,如edge_access,即是负责MODBUS的设施接入镭雕机:LaserMarkingModbus。模型较为简单。通过镭雕机上报雕刻的速度、电流和LED灯等等。镭雕机的设施网关:modbus_server。次要用来设置与MODBUS设施对接的相干的参数,比方连贯类型、鉴权、IP地址端口等等信息。贴片机:Mounter1。较为简单,外面除了根本的信息,如产品版本、产品名称、加工程序名等等,还包含如加工后果、设施状态、压缩空气气流等等所有波及到贴片工艺相干的一些参数3、进入“设施”: “设施”里的HDC2021 Training就是本次实验所需的设施 在“设施”的概念里,“设施”是分层级的,HDC2021 Training所属产品是咱们之前定义的“edge_node”,同时,它又有两个子设施:training_server(镭雕机)和MountDevice0425(贴片机)。 4、注册子设施:在HDC2021_Training/training_server下注册Modbus子设施 抉择产品:进行数据采集配置增加子设施,并点击“确定”:实现以上就是一个简略的设施接入的演示。华为云IoT平台除了能够应用网关接入,还能够采取直连(MQTT)的形式,对硬件没有非凡的要求,大家有工夫能够自行返回进行体验。 五、华为云IoT设施接入服务小结回顾咱们在一开始提出的问题,咱们在通过这一阶段的解说之后,能够做出这样的答复: 问题一:物联网缓缓渗入千行百业,其疾速倒退已成必然,然而在倒退的过程中有没有什么挑战呢? 答:后面说过的三大挑战:让“物”谈话,让“物”说同一种话,让“物”说有价值的话。也即,让设施数据化、网络化、标准化,同时须要有数据分析能力,让数据可能价值最大化。 问题二:目前在智能制作行业很多物联网设施,都是依赖边缘网关的,也即,通过边缘网关来接入物联网,那么为什么要应用边缘网关呢?边缘网关有什么益处呢? 答:边缘网关对网络可靠性、安全性的加强,是十分无利的,同时可能加强本地多个单设施的本地闭环也有这显著的益处。 通过上述的解说和试验,咱们能够看到华为云IoT设施接入服务提供海量设施连贯上云、设施和云端双向音讯通信、批量设施治理、近程管制和监控、OTA降级、设施联动规定等能力,并可将设施数据灵便流转到华为云其余服务,帮忙物联网行业用户疾速实现设施联网及行业利用集成。 一起来体验一下吧~ 本文整顿自【华为云社区内容共创者炽热招募中】第四弹:耕耘五月,步履不停!查看流动详情:https://bbs.huaweicloud.com/b... 点击关注,第一工夫理解华为云陈腐技术~

June 4, 2021 · 1 min · jiezi

关于华为云:五大新品两大黑科技看华为云如何升级基础设施让用户躺平

摘要:继在业界首次提出“分布式云×云原生”云基础设施新范式后,华为云进一步对计算、存储、网络等根底能力进行全面降级,公布全新一代计算实例C7、独享型ELB等五大新品,并面向实景三维建模、4K影视云制作等畛域公布全新场景化解决方案。本文分享自华为云社区《五大新品+两大黑科技,华为云基础设施全面降级》,原文作者:华为云头条。 5月31日,华为云TechWave云基础设施专题日胜利举办。继在业界首次提出“分布式云×云原生”云基础设施新范式后,华为云进一步对计算、存储、网络等根底能力进行全面降级,公布全新一代计算实例C7、独享型ELB等五大新品,并面向实景三维建模、4K影视云制作等畛域公布全新场景化解决方案。此外,专题日更首次解密华为云瑶光的技术架构,和革命性容器集群CCE Turbo背地的黑科技。 计算、存储、网络全系新品首发,构筑最佳云化底座此前,华为云提出云基础设施新范式,致力通过“分布式云×云原生”来助力企业疾速实现全面云化、领有全栈智能的能力。计算、存储、网络等根底能力,是云原生基础设施的底座,也是分布式云在不同部署状态下,不可或缺的要害能力。 华为云基础设施全景图 本次专题日,华为云根底能力迎来全面降级: 计算:公测公布全新一代通用计算增强型云服务器C7。作为华为云C系列旗舰级云服务器,C7基于华为云擎天架构并首次搭载英特尔最新一代Ice Lake处理器,相较上一代整机最大算力晋升50%以上、提供高达128核的超大实例规格,实现性能、平安、可靠性等全维度降级,为企业提供更优算力抉择;存储:为SFS Turbo弹性文件服务降级全新分布式缓存性能,性能晋升5倍,为渲染、AI训练等高IO密集型业务场景提供高达100万IOPS和160Gbps带宽的文件性能;Data+近数据计算也带来全新图形化工作流编排能力,从“代码化”开发方式降级至“图形化”的拖拽应用,均匀开发效率晋升7倍;网络:商用公布独享型ELB,单实例四层负载平衡并发数高达2000万,当先业界十倍性能,率先反对全国范畴多AZ多活,提供更强可靠性;面对企业多地区、多VPC互通的复杂性问题,公布全新CLOUD WAN解决方案,让VPC、VPN、专线、云连贯等服务即插即用,打造全域极简互联的云网络。此外,华为云携手瞰景科技公布异构计算三维建模联结解决方案,建模性能晋升30%,单次测量即可达到精度要求;同时公布4K影视云制作解决方案,提供云上高性能算力和海量存储空间,为4K节目制作效率晋升30%。 首次解密华为云瑶光、容器集群CCE Turbo背地黑科技华为云分布式云基础设施,提供一朵分布式云实现全场景笼罩、一张分布式网络满足便捷平安接入、统一运行环境构建无差别体验、一套管理体系应答精细化企业治理。来自中图云创的技术总监陈云森示意:“中图云创通过本地部署智能边缘小站IES,实现VR设施极致低时延的同时,更可节俭30%的带宽老本,为读者提供‘全景新浏览’沉迷式的翻新体验。” 华为云分布式云基础设施产品组合 为实现万级规模分布式云站点的对立管控,真正做到客户视角“一朵云”,华为云在技术上提前布局,于2019年公布了国内首个分布式云操作系统——华为云瑶光,实现全域资源供应极优,多样性算力应用极简。技术架构层面,瑶光蕴含六大要害子系统: 华为云瑶光分布式云操作系统技术架构 华为云瑶光可实现对多元硬件、分布式云站点和全域资源的治理,并已率先实现对x86、鲲鹏、昇腾等多样性算力的兼容,通过自研DQA算法实现对网络服务质量、计算资源老本、云站点资源平衡度的别离建模,业务时延优化40%、老本优化33%;多指标优化子系统负责容量布局、负载预测和算力举荐等,通过自研METRO多维时序预测算法,可晋升40%负载预测准确率;为了匹配动静业务诉求,华为云瑶光建设了蕴含机型设计、容量布局等全链路仿真平台,算法迭代频率高达20万次/天,大规格供应量晋升40%,实现自学习与自调优。华为云最新公布的革命性容器集群CCE Turbo,计算、网络、调度全方位减速的背地蕴藏多项黑科技: 1. 计算减速:基于擎天架构的软硬协同能力,CCE Turbo业界独家实现容器卸载,让集群资源100%用于业务,集群性能晋升40%,老本优化30%;2. 网络减速:全新云原生网络利用Trunkport技术让容器直通VPC,将原有的“容器+虚拟机”二层网络变为一层,网络连通效率倍增,网络时延升高40%;3. 调度减速: 基于Volcano的大规模、分布式及智能调度能力,不仅实现每秒调度1万容器,还将在线与离线业务共集群部署,并依据利用特色智能调度、削峰填谷,晋升集群利用率200%。 VIPKID后端研发高级专家慈轶恒示意:“应用CCE Turbo后,音视频业务集群性能晋升40%,交互时延升高40%,不仅晋升了用户体验,还节俭业务老本约43%。” 将来,华为云将基于“分布式云×云原生”的云基础设施新范式继续翻新,助力企业疾速实现全面云化与全栈智能,共赢数字化新时代。 点击关注,第一工夫理解华为云陈腐技术~

June 3, 2021 · 1 min · jiezi

关于华为云:华为云携手马栏山文创园助力湖南广电荣获国家广电总局多项大奖

摘要:人工智能利用翻新大赛智能剪辑类赛道中荣获一等奖的“5G高新视频AI智能剪辑平台”,是芒果无际、5G高新视频多场景利用国家广播电视总局重点实验室联结华为云独特打造的AI智能剪辑平台本文分享自华为云社区《华为云携手马栏山文创园助力湖南广电荣获国家广电总局多项大奖》,原文作者:音视频大管家。 近日,由国家广电总局举办的首届广播电视和网络视听人工智能利用翻新大赛(MediaAIAC)和首届高新视频翻新利用大赛颁奖典礼在CCBN峰会上隆重举行,通过赛期推优、初赛、决赛多轮强烈角逐,湖南广播电视团体旗下芒果无际科技有限公司(以下简称芒果无际)从上千家参赛单位中怀才不遇,在智能剪辑类、智能内容审核类、虚拟现实视频类、超高清视频类四个热门赛道中荣获大奖。此次大赛作为业内顶级的媒体技术角逐舞台,是广播电视和网络视听机构以及网络视听行业优良企业在技术实力和创新能力上的一次精彩出现。 右二:芒果无际科技有限公司(5G高新视频多场景利用国家广电总局重点实验室)产品负责人王学哲下台领奖 华为云作为马栏山视频文创产业园产业云的云底座供应商,长期关注与反对园区企业尤其是湖南广播电视团体强烈的翻新诉求,在音视频AI技术利用以及虚构内容制作畛域继续联结翻新。此次人工智能利用翻新大赛智能剪辑类赛道中荣获一等奖的“5G高新视频AI智能剪辑平台”,是芒果无际、5G高新视频多场景利用国家广播电视总局重点实验室联结华为云独特打造的AI智能剪辑平台,该平台基于多层次多模态视频内容了解,多粒度多模态音视频内容检索,以及固化专家教训的智能视频内容创作,将视频创作者从反复琐碎的内容素材检索、汇聚、优化的过程中解放出来,进而专一于创作自身,极大晋升视频创作效率。 人工智能利用翻新大赛一等奖颁奖现场 面对视频制作畛域的升级换代,实现科技赋能媒体翻新,华为与湖南广电5G高新视频多场景利用重点实验室联结成立钻研核心,联结研发虚构制作(Virtual production),打造包含VR/AR、云渲染、高精度虚拟人、LED墙、虚实镜头无缝交融、体积视频、虚构物体互动等技术在内的虚构内容制作平台。在本次高新视频翻新利用大赛中获奖的“虚构演唱会全景视频播放计划”,是该钻研畛域围绕虚构演唱会场景发展的云端全景视频制作与播放解决方案,其特点一是虚构内容场景的交融买通,把虚构的演唱会三维场景与全景VR实体视频买通,晋升观众的视场、观看自由度,进而晋升用户的观看体验。二是改变传统的全量传输计划,采纳全新的全景视频传输架构与办法,升高传输和编解码压力,晋升演唱会全景视频播放体验。三是革新了传统视频的大后期制作状态,前期前置,实时成镜,极大地升高了节目制作的老本与工期。 马栏山视频文创产业园作为国家级文创产业园,受到国家、省市各层面领导的关注与器重,汇聚了业界宽泛的内容制作生态,并对将来的文创畛域与产业进行洞察。目前马栏山文创园在马栏山基地构建二期音视频畛域的技术底座,继续打造规模化的虚构制作技术能力;并对园区的翻新龙头企业进行政策搀扶与歪斜,与湖南广播电视团体和华为云强强联合,放慢技术创新,使视频创作逾越时空限度,充沛开释创作者的设想空间,打造虚实联合的全新视听享受。 点击关注,第一工夫理解华为云陈腐技术~

June 2, 2021 · 1 min · jiezi

关于华为云:云小课-华为云KYON之L2CG

摘要:本文介绍KYON独创的L2CG,买通大二层网络,反对企业携带私网IP间接上云,让业务麻利迁徙,大幅升高企业上云的复杂度和老本。同时反对虚拟机粒度迁徙,让企业上云过程中无需迁徙整个子网。本文分享自华为云社区《【云小课】根底服务第75课 华为云KYON之L2CG》,原文作者:云小萌 。 华为云KYON(Keep Your Own Network)企业级云网络解决方案,打造极简麻利的上云之路,助力企业极简布局,麻利迁徙,无缝交融,是企业上云的不二之选。企业业务迁徙过程中,存在局部IP硬写入在配置文件而难以批改,且大型企业经常须要屡次迁徙,能力实现整体业务上云,在迁徙过程中业务面临网络中断的危险。 啊.....这可真是让人头秃! 贴心的华为云已为您备上KYON解决方案,让您上云无忧! KYON独创L2CG,买通大二层网络,反对企业携带私网IP间接上云,让业务麻利迁徙,大幅升高企业上云的复杂度和老本。同时反对虚拟机粒度迁徙,让企业上云过程中无需迁徙整个子网。并基于云上云下二层互通能力,保障业务连续性,当迁徙呈现未知问题时,可随时反向迁徙。 二层连贯网关是什么?二层连贯网关(Layer 2 Connection Gateway,以下简称L2CG)是一种虚构隧道网关,可基于云专线网络建设云上与云下之间的二层网络,解决云上和云下网络二层互通问题,容许您在不扭转子网、IP布局的前提下将数据中心或公有云主机业务局部迁徙上云。 通过云专线,建设的是云上与云下的三层网络通道,要求云上与云下子网网段不重叠。而当数据中心与云上子网网段雷同,且须要云上与云下服务器在该雷同子网网段互通时,您就能够通过二层连贯网关来解决云上与云下二层网络通信问题。 二层连贯网关组网图如图所示: 二层连贯网关作为虚构公有云的隧道网关,与用户本地数据中心侧的隧道网关对应,可基于云专线网络使虚构公有云与用户数据中心之间建设二层网络。 二层连贯可将虚构公有云的子网接入到二层连贯网关中,并指定二层连贯网关与企业数据中心侧的隧道网关建设连贯,使虚构公有云的子网与企业数据中心侧的子网建设二层通信。 二层连贯网关的黑科技能力华为云独创的L2CG大二层技术领有很多黑科技能力,使企业应用的上云迁徙更加便捷平安。 举个例子 假如您要将线下IDC的某个服务器(10.0.0.3)迁徙到云上,须要放弃IP地址不变,且云上云下同子网(10.0.0.0/24)服务器依然能够放弃二层互通。 传统混合云网络配置中,通过专线/VPN可实现三层网络互通,但如果须要将本地业务迁徙至云上,只能将子网整体迁徙,且云上云下子网网段不能重叠、云上云下同一子网不能互通。 这个时候,您就能够应用L2CG的黑科技能力来实现上述目标啦~ 预置资源如下: L2CG具体有哪些黑科技能力呢?总结一下~ 黑科技能力一:放弃公有IP不变云上云下通过专线三层互通,迁徙过程中云上云下不在同一子网,利用就必须更换IP和子网了。但在企业中存在很多老的利用,局部IP写死在配置文件中,难以批改。 通过大二层技术,云上云下同子网,老利用能够间接带着原有IP上云! 黑科技能力二:按IP粒度迁徙一个子网中散布多个利用。传统的迁徙计划是依照子网整体迁徙,但如果用户须要细粒度的管制,分批次迁徙,就无能为力了。 基于L2CG大二层技术,能够实现按IP粒度迁徙,虚拟机一台一台迁徙,想迁几台迁几台! 黑科技能力三:迁徙过程网络不中断个别,在一个子网中,同时会有多个相关联的利用,利用之间有二层通信的诉求。迁徙过程中如果不能保障二层通信,那业务连续性就无奈保障了。 基于大二层网络技术,迁徙过程仍可放弃在同一子网中,通信不受影响。迁徙完结后,进入混合云模式,一部分利用在云上,一部分在原有的数据中心,即能够爱护数据中心的数据安全,又能够共享云上丰盛的服务能力和弹性资源! 二层连贯网关如何配置?如何配置线上线下大二层网络?仅需以下五步: 第一步:创立云专线 创立一个云上和云下的三层网络通道,能够华为云专线。 第二步:购买二层连贯网关 在云上指定VPC和云专线的本端子网创立一个二层连贯网关,生成本端隧道IP。 第三步:建设连贯 在云上指定接入子网和远端隧道IP创立二层连贯。 第四步:配置远端隧道 在云下数据中心的网关设施上配置VXLAN隧道。 第五步:业务迁徙 能够应用华为云主机迁徙服务,将线下业务迁徙上云。 获取更多二层连贯网关信息,请戳这里。 点击关注,第一工夫理解华为云陈腐技术~

May 25, 2021 · 1 min · jiezi

关于华为云:解密华为云FusionInsight-MRS新特性一架构三湖

摘要:华为云平安网关产品总监郭冕在“华为云TechWave云原生2.0专题日”上发表《华为云FusionInsight MRS,一个架构实现三种数据湖》的主题演讲,分享了智能数据时代的数据湖发展趋势、MRS云原生数据湖技术创新实现一个架构构建离线、实时、逻辑三种数据湖,以及业务实际中的胜利案例等。本文分享自华为云社区《华为云FusionInsight MRS云原生数据湖,一架构三湖,解密华为云FusionInsight MRS组件新个性》,原文作者: IT老磨。 5月20日,华为云平安网关产品总监郭冕在“华为云TechWave云原生2.0专题日”上发表《华为云FusionInsight MRS,一个架构实现三种数据湖》的主题演讲,分享了智能数据时代的数据湖发展趋势、MRS云原生数据湖技术创新实现一个架构构建离线、实时、逻辑三种数据湖,以及业务实际中的胜利案例等。 进入智能数据时代,业界建设数据湖的十大共识 通过数十年的疾速倒退,大数据处理技术已日渐成熟,围绕数据仓库、数据湖衍生技术多如繁星,业界在多年的摸索之中,也对将来数据湖状态有了十个重要共识,湖仓一体成为智能数据湖的首选架构。为应答智能数据时代对大数据技术提出的新挑战,华为云FusionInsight MRS云原生数据湖进行全面降级,引入了Hudi、ClickHouse热门组件,增强了自研的HetuEngine虚拟化引擎,同时新增IoTDB时序解决的能力,拓展数据使能利用的边界。 华为云FusionInsight MRS云原生数据湖 华为云FusionInsight MRS云原生数据湖为政企客户提供湖仓一体、云原生的数据湖解决方案,构建一个架构可继续演进的离线、实时、逻辑三种数据湖,撑持政企客户全量数据的实时剖析、离线剖析、交互查问、实时检索、多模剖析、数据仓库、数据接入和治理等大数据利用场景,使政企客户高效用数、简化用数,助力政企客户实现一企一湖、一城一湖,业务洞见更准,价值兑现更快。 离线数据湖:提供交互式、BI、AI等多个计算引擎,采纳OBS实现存算拆散,使得云原生数据湖的架构更灵便。反对单集群2万+节点的超大规模,通过集群联邦,可反对10万+规模。反对滚动降级,保障要害业务降级不中断。实时数据湖:通过Hudi反对ACID数据实时增量入湖、ClickHouse毫秒级OLAP剖析等构建实时更新解决能力,使得供数时效从T+1到T+0。逻辑数据湖:HetuEngine提供跨湖、跨仓、跨云的协同剖析,实现湖仓一体,缩小80%数据搬迁,协同剖析提效50倍。一架构三湖新个性,笼罩数据分析全流程Hudi:增量实时入湖,实现数据入湖时效快、开发易、性能高、资源利用率更高传统数据湖不反对数据更新,导致数据采纳T+1离线解决模式,齐全无奈满足灵便多变的业务诉求,针对数据时效性问题,华为云FusionInsight MRS云原生数据湖引入Hudi。 Hudi能够反对数据更新、数据删除,还有ACID保障,保证数据实时入湖更新操作。它提供多种视图,包含读优化视图、增量视图、实时视图,能够对不同的剖析利用提供不同的视图,基于这些技术可轻松实现增量表、拉链表,镜像表这些数据存储模型。引入Hudi后,带来四大显著效果: 数据时效更快:在业务零碎,通过CDC的零碎实现分钟级数据入湖,数据时效性从T+1到T+0。解决性能更高:面对数据有删除、更新的场景下,传统采纳Hive更新形式,仅解决一行数据也可能须要对整个表,至多要对整个分区进行解决,引入Hudi后处理效率晋升10倍+。开发更简略:对于开发人员来说,传统数据入湖不反对更新或者删除,开发人员需新建长期表,将数据处理后再进行笼罩,对同一个工作可能须要写很多代码去实现,有了Hudi的加持之后,做一个数据更新的操作就跟应用数据库一样简略,单条语句即可实现。资源利用率更高:传统T+1的模式并不是24小时跑工作,而是在早晨进行批量加工,早上出报表,整个处理过程中,计算高峰期仅早晨跑批的工夫,而资源却是依照高峰期的计算需要来配比,导致白天的资源利用有余,引入Hudi后,数据实时采集入湖,把入湖解决的工作扩散到全天的过程,实际上把整个资源耗费的顶峰和低峰抹平掉。某金融客户基于Hudi构建数据湖,数据入湖时延降至分钟级,且白天资源利用率晋升2倍+,数据处理效率晋升50%,开发人员通过单条语句即可实现开发,简化开发难度。 ClickHouse:实时OLAP引擎,实现报表全自助高性价比的实时剖析传统的OLAP引擎因其解决能力无限,数据个别依照专题或者主题进行组织后再与BI工具对接,导致BI用户和提供数据的数据工程师脱节。比方BI用户有一个新的需要,所需的数据没有在专题集市中,须要将需要给到数据工程师,以便开发相应的ETL工作,这个过程往往须要部门间协调,工夫周期长,合作效益低。 当初,华为云FusionInsight MRS云原生数据湖能够将所有明细数据以大宽表的模式加载ClickHouse,BI用户能够基于ClickHouse大宽表进行自助剖析,对数据工程师供数要求少,甚至在面对大部分新需要时,无需从新供数,开发效率和BI报表上线率都会失去极大晋升。同时,ClickHouse在一张表里的数据分析可达毫秒级。 基于ClickHouse实现自助BI在华为外部实际也取得了很好的成果。华为团体HIS数据湖原来基于传统OLAP引擎建模,受限于开发效率,几年才上线了几十个报表。在引入Clickhouse后,三个月工夫开发上线了400+报表,业务上线效率晋升50倍。目前,华为外部ClickHouse的整体应用规模曾经达到2000+节点,数据量规模达10+PB,日增数据量100TB。 HetuEngine:数据虚拟化引擎,冲破天文限度,突破数据“墙”随同企业倒退与数字化转型的需要,企业业务越来越简单,翻新需要越来越高。单系**立工作难以满足业务的变动需要,企业内可能同时存在多个湖、多个仓、多个零碎,但传统计划烟囱式建设,湖仓之间、多引擎之间无间接的互联互通能力,须要通过ETL数据来回搬迁,造成数据流转链路长,数据多份冗余,产生数据孤岛。零碎多份数据冗余也难以保证数据的一致性和可靠性。 为了让数据应用更简略,跨湖协同更容易,解决湖仓数据割裂的问题,华为推出了数据虚拟化引擎HetuEngine,实现跨湖、跨仓和云上、云下、多云协同剖析的能力,冲破天文限度,突破数据“墙”,跨湖协同剖析效率晋升50倍,跨仓协同剖析缩小80%的零碎间数据搬迁同步,剖析性能从分钟级晋升至秒级。 金融某行通过引入HetuEngine数据虚拟化引擎,在数据湖查问剖析方面该行晋升了并发能力,仅1/5的资源即可反对45并发,峰值并发最大达200QPS,均匀时延优化到8秒;在湖仓协同剖析方面,通过HetuEngine买通数据湖与数仓间的数据壁垒,湖仓协同剖析性能从分钟级晋升至秒级,同时缩小80%的零碎间数据搬迁同步,大大晋升数据治理效率。 IoTDB:时序数据库,云边端协同轻松构建时序数据集市时序数据具备两大特点:在端、边、云都有解决,时序数据采集后不须要更新。传统时序解决计划中,在端、边、云采纳不同的技术栈,异构的技术栈必将带来数据处理的复杂性。清华大学开发的时序数据库IoTDB(又称时序引擎),通过对立的时序数据文件格式TsFile,实现一份数据兼容全场景,一套引擎买通云边端、一套框架集成云边端。华为跟清华大学放弃严密的单干,最新公布的IoTDB集群版本,就是华为与清华主导开发的一个版本。 在上海、成都、重庆等城市均已采纳IoTDB治理地铁监控数据,本来144辆列车须要9台服务器,当初仅需一个IoTDB实例即可满足要求,测点的采样时延也从原来的500ms降至200ms,日增4140亿数据点治理,大大晋升资源利用率。 结语目前,华为云FusionInsight MRS云原生数据湖携手800+生态搭档,已服务于3000+政企客户,广泛应用于公用事业、金融、运营商、能源、医疗、制作、交通等行业。 点击关注,第一工夫理解华为云陈腐技术~

May 25, 2021 · 1 min · jiezi

关于华为云:技术干货-基于MindSpore更好的理解Focal-Loss

【本期举荐专题】物联网从业人员必读:华为云专家为你具体解读LiteOS各模块开发及其实现原理。 摘要:Focal Loss的两个性质算是外围,其实就是用一个适合的函数去度量难分类和易分类样本对总的损失的奉献。本文分享自华为云社区《技术干货 | 基于MindSpore更好的了解Focal Loss》,原文作者:chengxiaoli。 明天更新一下恺明大神的Focal Loss,它是 Kaiming 大神团队在他们的论文Focal Loss for Dense Object Detection提出来的损失函数,利用它改善了图像物体检测的成果。ICCV2017RBG和Kaiming大神的新作(https://arxiv.org/pdf/1708.02... 应用场景最近始终在做人脸表情相干的方向,这个畛域的 DataSet 数量不大,而且往往存在正负样本不平衡的问题。一般来说,解决正负样本数量不平衡问题有两个路径: 1. 设计采样策略,个别都是对数量少的样本进行重采样 2. 设计 Loss,个别都是对不同类别样本进行权重赋值 本文讲的是第二种策略中的 Focal Loss。 实践剖析论文剖析咱们晓得object detection按其流程来说,个别分为两大类。一类是two stage detector(如十分经典的Faster R-CNN,RFCN这样须要region proposal的检测算法),第二类则是one stage detector(如SSD、YOLO系列这样不须要region proposal,间接回归的检测算法)。 对于第一类算法能够达到很高的准确率,然而速度较慢。尽管能够通过缩小proposal的数量或升高输出图像的分辨率等形式达到提速,然而速度并没有质的晋升。 对于第二类算法速度很快,然而准确率不如第一类。 所以指标就是:focal loss的出发点是心愿one-stage detector能够达到two-stage detector的准确率,同时不影响原有的速度。 So,Why?and result? 这是什么起因造成的呢?the Reason is:Class Imbalance(正负样本不均衡),样本的类别不平衡导致的。 咱们晓得在object detection畛域,一张图像可能生成成千上万的candidate locations,然而其中只有很少一部分是蕴含object的,这就带来了类别不平衡。那么类别不平衡会带来什么结果呢?援用原文讲的两个结果: (1) training is inefficient as most locations are easy negatives that contribute no useful learning signal;(2) en masse, the easy negatives can overwhelm training and lead to degenerate models. ...

May 24, 2021 · 2 min · jiezi

关于华为云:云小课|DSC帮您管数据保障您的云上数据安全

摘要:华为数据安全核心,积攒华为云多年数据教训,整合云上各类数据源,搭载数据安全黑科技,通过深度行为辨认引擎,助您轻松治理云上数据。本文分享自华为云社区《云小课 | DSC帮您管数据,保障您的云上数据安全》,原文作者:云平安佳人。 云上数据分布在哪里,如何治理这些数据,如何辨认数据危险,您须要全貌感知! 华为云汇聚各服务平安数据,重磅推出数据安全核心,助您轻松实现数据分级分类,用户异样形为辨认,行为轨迹可视化。 信息技术突飞猛进,科学技术澎湃倒退。数据曾经具备和水、电等日常所需物资等同重要的战略地位,是企业的外围资产和赖以生存的命根子。 2020年3月,国标GB/T 37988-2019《信息安全技术 数据安全能力成熟度模型》明确指出数据安全的治理须要基于以数据为核心的治理思路,从组织机构业务范围内的数据生命周期的角度登程,联合组织机构各类数据业务倒退后所体现进去的平安需要,发展数据安全保障。 随着国家大数据策略的一直推动和深入,做好数据安全治理势在必行,同时也存在一些挑战。 挑战一:咱们很难在繁多的数据安全能力中去构建适宜本人的平安体系,业界也不足具备建设指导意义的数据安全产品。挑战二:云上的数据安全能力始终是扩散在各个服务之中,例如VPN、平安组、SSL证书以及诸如ECS、RDS、OBS等集成的加密能力,导致数据安全能力不集中。因而,数据安全核心致力于汇总扩散的数据安全能力,从租户角度登程提供对立视角,构建数据安全全生命周期,实现数据的对立治理。 追随小课的脚步,一起学习如何通过DSC服务实现数据的全方位治理吧~~ 增加资产到DSC,实现数据全生命周期治理应用DSC前,您须要购买DSC,戳这里~~ 步骤 1 购买数据安全核心后,进入DSC治理控制台。 步骤 2 实现云资产委托受权。 步骤 3 增加资产。在OBS资产列表右上角,单击“批量增加”,增加OBS、数据库和大数据资产。 步骤 4 在左侧导航树中抉择“数据安全总览”,进入数据安全总览页面,监控数据全生命周期各个阶段的实时状态。 ----完结 更多对于DSC的性能,戳这里,进行理解吧~~。 点击关注,第一工夫理解华为云陈腐技术~

May 21, 2021 · 1 min · jiezi

关于华为云:如何成为云原生技术高阶玩家华为云最近做了这件事

摘要:为进一步推动云原生技术的遍及,帮忙宽广技术爱好者疾速把握云原生相干技能,华为云云原生团队重磅推出《华为云云原生王者之路集训营》系列课程。十年云计算浪潮下,DevOps、容器、微服务等技术飞速发展,云原生成为潮流。2020年华为云在业界率先提出了云原生2.0的理念,将企业云化从“ON Cloud”推动到“IN Cloud”,成为“新云原生企业”,新生能力与既有能力立而不破、有机协同,实现资源高效、利用麻利、业务智能、平安可信。 为进一步推动云原生技术的遍及,帮忙宽广技术爱好者疾速把握云原生相干技能,华为云云原生团队重磅推出《华为云云原生王者之路集训营》系列课程。 5月,华为云将推出《华为云云原生王者之路集训营》的第一阶段——《云原生黄金集训营》,集训课程聚焦云原生技术体系以及容器、Kubernetes、Istio等外围云原生技术常识,让学员具备云原生零碎根底治理入手能力。次要面向群体蕴含:计算机、软件工程等业余的大学生,波及Kubernetes、Istio等技术的利用开发者等宽广云原生技术趣味爱好者。 亮点1:系统化课程,进阶化晋升本集训营课程分为黄金、钻石和王者三阶段,从云原生基础知识介绍到最佳实际解说、底层原理和计划架构深度分析,层层深刻,可满足不同云原生技术根底和学习指标人群的需要。 亮点2:选取典型利用场景,实践实际相结合本集训营课程还将实践与实际相结合,精选数十个企业典型利用场景,作为学员上机实际案例,帮忙学员将所学技术疾速与企业业务相结合,服务于企业生产。 亮点3:华为云资深专家领路,回绝低效集训营讲师团队次要由华为云云原生团队外围架构师和资深工程师组成,包含多名CNCF社区的maintainer、committer,深度参加了多个CNCF社区我的项目的设计和开发,具备丰富的云原生技术积攒和教训。 亮点4:专属学习交换圈,教辅相伴,升阶无忧打造集训营专属学习交换群,学习助手贴心督学,全程跟进学员学习停顿,实时反馈记录学员学习疑难,动静治理学员学习积分状况,教辅相伴,升阶无忧。 亮点5:学练考一站式、多元化学习体验集训营围绕学练考一站式学习体验进行设计,蕴含干货课程学习、沙箱试验体验、微认证,同时还配套了开营直播、讲师在线答疑、小助手贴心督学等环节,极大丰富学员的学习体验。 本集训营除了有权威架构师为您精心打造干货课程,还匹配了直播+大咖答疑+专属交换群+论坛互动等多元化学习形式,当然当初报名,更有机会赢HUAWEI FreeBubs Pro、HUAWEI WATCH FIT等多重好礼! 通过集训营结营赛,赢取结业证书。邀请好友报名集训营,学习课程,赢码豆换好礼;实现课程打卡赢取HUAWEI FreeBuds Pro 真无线耳机(冰霜银)、HUAWEI WATCH FIT(曜石黑) 智能静止手表、SKG 颈椎按摩仪 K6 红色、华为手环 4e 生机款(赤矿红)等精美好礼;观看开营直播赢取特美刻智能保温杯(彩色)。最初,集训营开始后,所有报名课程的用户都能够享受“CKA/CKAD/CKS证书独自购买9折优惠”,“CKA/CKAD/CKS证书套购8.5折优惠”哦!~华为云云原生王者之路集训营报名形式:登录“华为云学院”,从 “云原生王者之路集训营”流动页进入,点击“立刻报名”即可报名胜利。心动不如口头,快去报名吧! 点击关注,第一工夫理解华为云陈腐技术~

May 19, 2021 · 1 min · jiezi

关于华为云:云小课-大数据融合分析GaussDWDWS轻松导入MRSHive数据源

摘要:通过建设GaussDB(DWS)与MRS的连贯,反对数据仓库服务SQL on Hadoop,以表面形式实现Hive数据的快捷导入,满足大数据交融剖析的利用场景。本文分享自华为云社区《【云小课】EI第17课 大数据交融剖析:GaussDB(DWS)轻松导入MRS-Hive数据源》,原文作者:Hi,EI 。 大数据交融剖析时代,GaussDB(DWS)如需拜访MRS数据源,该如何实现?本期云小课带您开启MRS数据源之门,通过近程读取MRS集群Hive上的ORC数据表实现数据导入DWS。 筹备环境已创立DWS集群,需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内,确保集群网络互通。 根本流程本实际预计时长:1小时,根本流程如下: 1、创立MRS剖析集群(抉择Hive、Spark、Tez组件)。 2、通过将本地txt数据文件上传至OBS桶,再通过OBS桶导入Hive,并由txt存储表导入ORC存储表。 3、创立MRS数据源连贯。 4、创立内部服务器。 5、创立表面。 6、通过表面导入DWS本地表。 一、创立MRS剖析集群1、登录华为云控制台,抉择“EI企业智能 > MapReduce服务”,单击“购买集群”,抉择“自定义购买”,填写软件配置参数,单击“下一步”。 2、填写硬件配置参数,单击“下一步”。 3、填写高级配置参数如下表,单击“立刻购买”,期待约15分钟,集群创立胜利。 二、筹备MRS的ORC表数据源1、本地PC新建一个product_info.txt,并拷贝以下数据,保留到本地。 100,XHDK-A-1293-#fJ3,2017-09-01,A,2017 Autumn New Shirt Women,red,M,328,2017-09-04,715,good205,KDKE-B-9947-#kL5,2017-09-01,A,2017 Autumn New Knitwear Women,pink,L,584,2017-09-05,406,very good!300,JODL-X-1937-#pV7,2017-09-01,A,2017 autumn new T-shirt men,red,XL,1245,2017-09-03,502,Bad.310,QQPX-R-3956-#aD8,2017-09-02,B,2017 autumn new jacket women,red,L,411,2017-09-05,436,It's really super nice150,ABEF-C-1820-#mC6,2017-09-03,B,2017 Autumn New Jeans Women,blue,M,1223,2017-09-06,1200,The seller's packaging is exquisite200,BCQP-E-2365-#qE4,2017-09-04,B,2017 autumn new casual pants men,black,L,997,2017-09-10,301,The clothes are of good quality.250,EABE-D-1476-#oB1,2017-09-10,A,2017 autumn new dress women,black,S,841,2017-09-15,299,Follow the store for a long time.108,CDXK-F-1527-#pL2,2017-09-11,A,2017 autumn new dress women,red,M,85,2017-09-14,22,It's really amazing to buy450,MMCE-H-4728-#nP9,2017-09-11,A,2017 autumn new jacket women,white,M,114,2017-09-14,22,Open the package and the clothes have no odor260,OCDA-G-2817-#bD3,2017-09-12,B,2017 autumn new woolen coat women,red,L,2004,2017-09-15,826,Very favorite clothes980,ZKDS-J-5490-#cW4,2017-09-13,B,2017 Autumn New Women's Cotton Clothing,red,M,112,2017-09-16,219,The clothes are small98,FKQB-I-2564-#dA5,2017-09-15,B,2017 autumn new shoes men,green,M,4345,2017-09-18,5473,The clothes are thick and it's better this winter.150,DMQY-K-6579-#eS6,2017-09-21,A,2017 autumn new underwear men,yellow,37,2840,2017-09-25,5831,This price is very cost effective200,GKLW-l-2897-#wQ7,2017-09-22,A,2017 Autumn New Jeans Men,blue,39,5879,2017-09-25,7200,The clothes are very comfortable to wear300,HWEC-L-2531-#xP8,2017-09-23,A,2017 autumn new shoes women,brown,M,403,2017-09-26,607,good100,IQPD-M-3214-#yQ1,2017-09-24,B,2017 Autumn New Wide Leg Pants Women,black,M,3045,2017-09-27,5021,very good.350,LPEC-N-4572-#zX2,2017-09-25,B,2017 Autumn New Underwear Women,red,M,239,2017-09-28,407,The seller's service is very good110,NQAB-O-3768-#sM3,2017-09-26,B,2017 autumn new underwear women,red,S,6089,2017-09-29,7021,The color is very good 210,HWNB-P-7879-#tN4,2017-09-27,B,2017 autumn new underwear women,red,L,3201,2017-09-30,4059,I like it very much and the quality is good.230,JKHU-Q-8865-#uO5,2017-09-29,C,2017 Autumn New Clothes with Chiffon Shirt,black,M,2056,2017-10-02,3842,very good2、登录OBS控制台,单击“创立桶”,填写以下参数,单击“立刻创立”。 ...

May 18, 2021 · 3 min · jiezi

关于华为云:引荐好友成为推广者还能拿额外奖励华为云引荐奖励计划来啦

摘要:处分推广打算全新降级,不仅举荐客户购买云产品最高获取34%现金返利,邀请好友退出云推官独特推广,成为团长还能够额定享受10%实物返利,最高返利比例中转44%!现阶段的程序员的支出状况,外界始终有“程序员35岁就就业”的说法。如何让本人在职业生涯能挣更多的钱,是程序员们须要思考的?股票、炒房、基金...甚至炒鞋也成为了一种理财形式,程序员更须要在本人相熟的畛域进行减少收益。 其实,在咱们身边会看到有的程序员利用本人的一些空余工夫在网上接一些“私活”,尽管这种形式能在短时间失去一些支出,但集体会耗费很大的精力。有的程序员更是退出了“炒币”一组,幻想一夜暴富,但不晓得的其实大家都是“韭菜”。所以程序员还需一个在本人懂的畛域,来获取更多的支出。比方华为云的“团长流动”。 “团长流动”是华为云5月上线新玩法:举荐好友成为推广者成单就能拿到高额的推荐处分! 处分推广打算全新降级,不仅举荐客户购买云产品最高获取34%现金返利,邀请好友退出云推官独特推广,成为团长还能够额定享受10%实物返利,最高返利比例中转44%! 团长推荐流动是什么? 先带您理解处分推广打算处分推广打算——流量/技术/人脉变现的推广流动通过退出处分推广打算,举荐身边的好友/公司/客户购买华为云产品,即有机会享受最高34%的现金返利,举荐30天内关联期的所有新购订单皆可计入举荐范畴,每月最高可获取8万元的现金返利(这是成为团长的前提,首先您本人得先退出华为云处分推广打算) 团长推荐打算——邀好友一起推广,享团员红利您退出推广打算后,邀请身边的好友一起退出推广,即可成为团长的身份,好友即成为本人的团员;月度底下团员的所有举荐金额即可计入为您的团长业绩,依据金额相应地获取处分。因此,邀请来的团员越多,获取高额处分的机会也就越大哦 如云推官小华邀请了本人的好友A/B/C/D/E五人一起退出推广,5月份所有团员总共举荐了25,000元,则团长小华可获取2,500元的处分礼品~ 加入团长推荐流动有什么益处?成团前先退出推广成为云推官——最高享受34%返利,每月最高8万元推荐敌人退出推广后降级为团长——再额定享受10%返利,叠加比例高达44%推荐好友退出推广,为好友带来额定创收路径,您和好友双双获利团长流动适宜哪些人群?IT从业者们公司技术负责人/CTO/CEO/洽购人员各类中小软件开发工作室网站站长/博客主们所有有理解云产品、身边有用户须要购买云产品的,都能够退出。十分欢送大家退出华为云推广,参加5月团长推荐流动 对团长流动还有纳闷不知如何解决?扫描下方二维码,增加华为云处分推广打算小助手企业微信,专属小助手答疑解惑,手把手教您操作!助手小哥哥会一步一步为您答疑处分推广打算内容,团长流动内容,帮助您实现举荐! 既能给敌人举荐一个技术变现的好渠道,又能失去精美的实物处分,机不可失,快来参 加华为云团长推荐流动吧! 点击关注,第一工夫理解华为云陈腐技术~

May 13, 2021 · 1 min · jiezi

关于华为云:SecSolar为代码捉虫让你能更专心写代码

摘要:在“更强壮、更平安”的路上,CloudIDE又迈出了要害的一步:推出了代码平安检测服务SecSolar,以轻量插件的模式,为代码“捉虫”,帮忙企业和开发者在DevOps(开发运维一体化)过程中内置平安,让利用“天生平安”。本文分享自华为云社区《为代码“捉虫”,华为云公布代码平安检测服务SecSolar》,原文作者:华为云头条 。 在华为开发者大会2021(Cloud)上,华为常务董事、华为云CEO、消费者业务CEO余承东公布了能够让开发者实现“程序本人写程序”幻想的智能编程工具——华为云CloudIDE,并阐明CloudIDE让代码更强壮、更平安。 在“更强壮、更平安”的路上,CloudIDE又迈出了要害的一步:推出了代码平安检测服务SecSolar,以轻量插件的模式,为代码“捉虫”,帮忙企业和开发者在DevOps(开发运维一体化)过程中内置平安,让利用“天生平安”。 ▲用户可在CloudIDE插件市场搜寻“SecSolar”进行装置编辑 SecSolar,是华为孵化和演进了20多年的代码平安检测服务,内置了华为长年的研发平安积攒,蕴含了数十个代码平安标准,笼罩CWE典型平安问题、OWASP TOP10编码类平安问题,并有累计上万个查看场景,为企业和开发者提供“华为级”的系列代码平安检测能力,及时发现代码中的平安问题。本次上线CloudIDE的插件,次要性能为: 对单个文件或整个我的项目目录进行代码平安检测,发现单个文件和整个我的项目中呈现的平安问题。对批改的代码文件,在保留时触发代码平安检测,及时查看批改后的代码是否存在平安问题。▲保留文件时触发代码平安检测编辑 反对按《华为C/C++语言编程标准 V5.0》、《华为Java语言编程标准 V5.0》和《华为JavaScript语言编程标准 V2.0》进行代码平安检测,指出违反平安标准的代码。这些标准是华为在华为终端、智能汽车和华为云等宏大业务场景下积攒进去的贵重实际,都随着SecSolar以及后续相干云平安服务的推出,陆续向企业和开发者凋谢。▲反对支流开发语言的代码平安标准的检测编辑 反对告警的查看,包含告警形容、修复倡议、谬误用例和正确用例等,双击告警即可定位到具体代码,高效闭环检测进去的平安问题。▲查看告警信息 编辑 除SecSolar外,华为云在2021年还将推出设计平安、隐衷合规和测试平安等服务,整体组成华为云研发平安服务SecDev: 在需要设计阶段,通过威逼建模和隐衷合规问题剖析服务,辨认需要和零碎架构中的隐衷泄露等平安危险,并提供通用威逼消减计划; 在代码开发和构建阶段,通过代码平安检测服务,提供业界罕用破绽,以及通用或者行业独有的代码平安标准的平安问题检测; 在利用测试阶段,通过平安测试服务,提供Web破绽、主机破绽和开源二进制等的破绽扫描能力。 华为云研发平安服务SecDev的能力也将深度交融到华为云DevOps平台——DevCloud中,为用户提供自动化的代码平安检测和利用破绽扫描流水线能力,让企业不便的实现DevSecOps(开发运维平安一体化)理念,在利用开发过程中就内置了平安爱护,让利用“天生平安,健康成长”,成为企业的竞争力。 点击关注,第一工夫理解华为云陈腐技术~

May 13, 2021 · 1 min · jiezi

关于华为云:华为中国生态大会2021举行在即GaussDB将重磅发布5大解决方案

摘要:企业数字化转型热火朝天,云成为数字化与新基建的要害因素,数据成为智能时代新的生产资料和企业数字化的生命,而数据库则是撑持数据生命线的底座。本文分享自华为云社区《华为中国生态大会2021举办在即,GaussDB将重磅公布5大解决方案》,原文作者:神思胖 。 企业数字化转型热火朝天,云成为数字化与新基建的要害因素,数据成为智能时代新的生产资料和企业数字化的生命,而数据库则是撑持数据生命线的底座。 因其重要性,数据库被誉为“软件皇冠上的明珠”,属于专家密集型的行业,须要云服务商长期继续投入大量专家与科研人才,软硬件全栈协同晋升竞争力。华为云GaussDB数据库布局寰球,保持长期策略投入10+年,汇聚了一批海内外数据库畛域顶级大咖,以及1000+数据库专业人才,构筑了弱小的研发力量,同时立足华为云原生全栈能力,整合华为公司多元畛域教训,基于多年的存储与RDMA高速网络等底层硬件的积攒和软硬协同,打造了稳固牢靠、极致性能的数据库服务。 数据库召唤凋谢的生态,华为云GaussDB以市场为导向,遵循“一套架构、两个生态”的理念,反对多元生态,保持生态凋谢。GaussDB基于对立的计算存储拆散架构,实现生态兼容、档次解耦、数据交融等能力,冲破了传统数据库能力瓶颈,在性能、扩展性、可用性、容量、生态凋谢等方面均体现出极致的能力劣势。 GaussDB兼容华为自有openGauss生态与支流开源数据库生态(如MySQL、MongoDB、Redis、InfluxDB等),防止了客户从一个关闭生态走向另一个关闭生态;反对关系型与非关系型数据库,面向金融政企客户提供了极致性能、高牢靠、高扩大、高平安等数据库能力,让企业应用基于云原生能力变得更麻利高效,业务更快速增长。 此外,基于多年的企业客户服务教训与华为本身对云化、数字化的了解,华为云GaussDB还精心为政企客户打造了传统商业数据库一站式上云解决方案,从数据库选型到迁徙上云,再到云数据库运维治理,每个环节GaussDB都提供了贴心的服务,让企业客户真正做到“选型安心、迁徙释怀、治理省心”。 数据库生态建设从来不是欲速不达的事件,它须要落实到每个产业、每家公司、每位开发者,是一项长期而艰巨的工作。为更好促成数据库生态的凋敝倒退,华为云GaussDB制订了一套残缺的数据库生态打算,踊跃携手合作伙伴共创凋谢、单干、共赢的数据库生态;踊跃与高校单干,启动GaussDB人才培养;提供培训认证,以数据迷信驱动行业利用。 5月17-18日,华为中国生态大会2021行将在深圳会展中心举办,华为云数据库CTO庄乾锋将在现场具体分享和解读GaussDB的产品力和生态打算,并联结5家合作伙伴重磅公布5大解决方案,更多精彩内容,敬请返回大会现场凝听!华为云GaussDB期待与每一位有能力、有抱负的生态搭档一起,合力相融,能力共进,开释更大生态潜能,在时代新局下共育新机,共赢价值,共享凋敝! 华为中国生态大会2021报名通道已开启,咱们期待与您相见! 点击关注,第一工夫理解华为云陈腐技术~

May 13, 2021 · 1 min · jiezi

关于华为云:华为云PB级数据库GaussDBfor-Redis揭秘第十期GaussDBfor-Redis迁移系列上

摘要:本期将具体介绍社区版Redis、kvrocks和Pika到GaussDB(for Redis)的迁徙本文分享自华为云社区《华为云PB级数据库GaussDB(for Redis)揭秘第十期:GaussDB(forRedis)迁徙系列(上)》,原文作者:高斯Redis官网博客 。 GaussDB(for Redis)是一款基于计算存储拆散架构,兼容Redis生态的云原生NoSQL数据库,基于共享存储池的多正本强统一机制,反对长久化存储。在保障数据库的高兼容、搞性价比、高牢靠、无损扩容等特点的同时,GaussDB(for Redis)团队针对不同的数据库产品,为用户提供了多种数据迁徙计划,本期将具体介绍社区版Redis、kvrocks和Pika到GaussDB(for Redis)的迁徙。 1、Redis到GaussDB (for Redis)的迁徙社区版Redis作为十分受欢迎的内存数据库,因具备性能高,数据结构丰盛等长处,失去宽泛应用。GaussDB(forRedis)是兼容Redis生态的长久化数据库,不仅提供优良的读写性能,还提供数据长久化能力,依靠超前的零碎架构,以极低的老本保障了数据三正本强统一个性,能够防止社区版Redis须要fork、老本低等问题。 1.1 迁徙原理应用华为云自研的迁徙工具drs-redis进行源端Redis到指标端GaussDB(for Redis)的迁徙。迁徙过程中,drs-redis伪装成源端Redis的从节点运行,与源端Redis建设连贯后,触发Redis的主从同步。源端Redis生成RDB文件,传输给drs-redis实现全量同步。而后发送缓冲区保留的所有写命令到drs-redis实现增量同步。 drs-redis迁徙工具接管并解析源端Redis的RDB文件,将解析后的数据通过redis命令的形式发送到GaussDB(for Redis),而后以命令流传的形式将增量数据也发送到GaussDB(forRedis),实现迁徙。 1.2 前提条件部署迁徙工具drs-redis。保障迁徙工具drs-redis、源端Redis和指标端GaussDB(for Redis)网络互通。1.3 操作步骤正确批改drs相干配置文件。清理迁徙程序中可能的遗留数据。启动drs,跟踪日志,确保迁徙正确进行。1.4 应用须知drs-redis伪装成源端Redis的从节点,只读取源端的全量数据和增量命令,无数据受损危险。源端减少对drs-redis写数据的流程,因而性能会有轻微影响。GaussDB(for Redis)反对多个数据库,若源端是单节点Redis,须要保留多个数据库时,能够在GaussDB(for Redis)侧开启namespace性能,防止将多个数据库的数据迁徙到同一空间,造成数据失落。如果之前源端不存在从节点,源端会新增replication-buffer来缓存增量命令。问题:redis主从同步的replication-buffer是ring buffer,若写入buffer太快,会笼罩掉未发送给drs-redis的数据,源端Redis为了数据一致性会被动断开连接,造成迁徙失败。 倡议:迁徙过程中,升高源端Redis写入数据的速率,在低压时间段进行迁徙。配置redis的client-output-buffer-limit参数,适量增大replication-buffer的大小。 1.5 迁徙性能参考环境:源端单节点Redis和迁徙工具drs-redis部署在华为云8U32GB的弹性云服务器上,指标端为4U16GB,3节点GaussDB(for Redis)实例。 场景一: − 源端replication buffer采纳默认值(slave 268435456 67108864 60),该默认值示意缓存积压数据超过268435456bytes(256MB),或超过67108864bytes(64MB)且继续60s,源端会被动断开与从节点的连贯。 − 源端写入速率5MB/s,迁徙过程可继续进行,不会产生源端buffer满造成的同步失败。 − 迁徙工具读取数据的速率和源端写入速率统一。 场景二: − 源端replication buffer不做限度(config set"client-output-buffer-limit" "slave 0 0 0")。 − 源端写入速率10MB/s,容量短缺的状况下,迁徙继续进行。 − 迁徙工具读取数据的速率和源端写入速率统一。 论断: 在华为云环境,应用8U32GB弹性云服务器部署迁徙工具,若源端replication buffer采纳默认值,迁徙可在源端5MB/s的写入速率下进行;若源端对replication buffer不做限度,迁徙可在源端10MB/s的写入速率下进行。 2、Kvrocks到GaussDB(for Redis)的迁徙Kvrocks是一款开源的兼容Redis生态的NoSQL key-value数据库,底层基于RocksDB实现,提供namespace性能反对数据分区。Kvrocks集群治理性能绝对单薄,自建集群时须要与内部组件配合。Kvrocks反对的redis命令也不够全面,例如短少在音讯流和统计场景常常应用的stream及hyperloglog数据结构。 GaussDB(for Redis)以不亚于RedisCluster的兼容度,使用户在利用时无需批改代码,可间接应用,100%兼容原生接口。GaussDB(for Redis)在适配Kvrocks业务的同时,还能克服器治理能力弱、对Redis兼容度不低等毛病。 2.1 迁徙原理应用开源工具kvrocks2redis进行Kvrocks到GaussDB(forRedis)的迁徙,在此基础上,从GaussDB(for Redis)源码层面对Kvrocks的namespace性能进行适配。 迁徙过程分为全量和增量两个阶段:迁徙开始后,先进行全量迁徙,此时对kvrocks打快照,并记录对应的数据版本(seq)。而后解析全量数据文件成redis命令写入GaussDB(for Redis)。全量迁徙实现后进入继续的增量迁徙过程,迁徙工具循环给Kvrocks发送PSYNC命令,将获取到的增量数据一直转发给GaussDB(forRedis),实现增量迁徙 。 2.2 前提条件部署kvrocks2redis到独立主机。确保源端、指标端、迁徙工具之间网络互通。源端Kvrocks实例提前做好数据备份。指标端GaussDB(forRedis)实例清空全副数据。2.3 操作步骤批改迁徙工具配置文件,填入源端kvrocks连贯信息、指标端GaussDB (for Redis) 连贯信息、源端kvrocks namespace到指标端GaussDB(for Redis) DB的映射关系。确保配置文件内容正确。启动迁徙工具。跟踪日志,确保全量迁徙顺利完成,进入继续增量迁徙过程。进行验证。确保数据迁徙后,指标端GaussDB (for Redis) 已正确加载全副数据。待后续业务侧压力转移到GaussDB (for Redis) 后,进行增量迁徙,即手动进行迁徙工具的运行。2.4 应用须知kvrocks2redis须要从Kvrocks提取数据到本地文件,并从中解析出命令发送到指标端GaussDB(forRedis) ,该过程中可能影响源端性能,但实践上不会有数据受损危险。迁徙工具运行过程中,若呈现问题,迁徙工具会主动进行,不便问题定位。GaussDB(for Redis)从安全性角度登程,不提供清库语义命令,因而要在迁徙开始前确保无数据。3、Pika到GaussDB(for Redis)的迁徙Pika是一个可长久化的大容量Redis存储服务,解决了Redis因为存储数据量微小而导致内存不够用的容量瓶颈。但其集群治理性能较为单薄,须要应用twemproxy或者codis实现静态数据分片,数据一致性较弱。同时因为数据全副存储在磁盘中,相比于社区版Redis,性能显著降落。 ...

May 12, 2021 · 1 min · jiezi

关于华为云:5月20日GaussDB将有大事发生

摘要:5月20日,华为云TechWave云原生2.0专题将线上举办,更多云原生翻新技术和丰盛实际还将与大家见面,GaussDB也将再次迎来降级亮相!本文分享自华为云社区《华为云TechWave云原生2.0专题日行将举办,GaussDB再次降级亮相》,原文作者:神思胖。 数据是企业数字化转型的外围之一,并成为智能时代新的生产资料和企业数字化的生命,而数据库则是撑持数据生命线的底座。数据库从作为一个信息系统服务的撑持软件,曾经转变为通过数据库云化来减速实现企业数字化转型,数据库的继续倒退也进入了云原生数据库新阶段,基于对立云基础设施的云原生数据库,将成为企业数字化转型的数据底座。 在刚刚完结不久的华为开发者大会 2021(Cloud)上,华为云CTO张宇昕发表了云原生金融级分布式数据库GaussDB(for openGauss)正式商用,并示意“数据库是承载企业外围交易业务与数据处理的外围基石,云原生数据库须要承载外围业务的高性能,具备弹性扩大、疾速发放、高可用、数据安全等能力。” 华为云GaussDB是数据库团队基于对内外部客户高牢靠、高性能诉求的了解,联合云原生与AI技术倾力打造的数据库品牌,它以市场为导向,保持生态凋谢,兼容华为自有生态openGauss与支流开源数据库生态(如MySQL、Redis、InfluxDB等),防止了客户从一个关闭生态走向另一个关闭生态;反对关系型与非关系型数据库,面向金融政企客户提供了极致性能、高牢靠、高扩大、高平安等数据库能力,让企业应用基于云原生能力变得更麻利高效,业务更快速增长。 基于对立的计算存储拆散架构,云原生数据库GaussDB实现生态兼容,档次解耦,数据交融,冲破了传统数据库能力瓶颈,在性能、扩展性、可用性、容量、生态凋谢等方面均体现出极致的能力劣势。如解决令运维人员非常头疼的热点数据问题;保障数据0失落,故障闪复原等。 此外,基于多年的企业客户服务教训与华为本身对云化、数字化的了解,华为云GaussDB还精心为政企客户打造了传统商业数据库一站式上云解决方案,从数据库选型到迁徙上云,再到云数据库运维治理,每个环节GaussDB都提供了贴心的服务,让企业客户真正做到“选型安心、迁徙释怀、治理省心”。 华为云GaussDB计算存储拆散架构图 5月20日,华为云TechWave云原生2.0专题将线上举办,更多云原生翻新技术和丰盛实际还将与大家见面,GaussDB也将再次迎来降级亮相!华为云专家将从生态、业务两方面为您解读GaussDB策略降级,并深度分析云原生数据库计算存储拆散的外围架构,从利用行业/场景、技术创新、客户案例等方面具体解读GaussDB系列产品。 目前,GaussDB案例曾经笼罩全场景,在1000+大客户规模商用,并继续致力于提供传统商业数据库一站式上云解决方案,减速企业数字化转型。 点击关注,第一工夫理解华为云陈腐技术~

May 10, 2021 · 1 min · jiezi

关于华为云:拥有一个高性能低延时数据库是什么样的体验

摘要:明天咱们就用数据谈话,带你深刻理解GaussDB(for Cassandra)挑战超低价、同时保障高性能哪些事儿!本文分享自华为云社区《数据为证,华为云GaussDB(for Cassandra) 性能晋升背地的那些事儿》,原文作者:高斯Cassandra官网。 在咱们的日常理念中,谋求性价比是最为常见的,然而你晓得购买低配置还能享受高性能、低延时、超低价的数据库有哪些吗?明天咱们就用数据谈话,带你深刻理解GaussDB(for Cassandra)挑战超低价、同时保障高性能哪些事儿! 家喻户晓,有数据的中央就须要用数据库,GaussDB(for Cassandra)最善于在物流、内容散发、视频直播等海量数据的场景中,这样能力施展它的专长。 本次围绕GaussDB(for Cassandra)新推出的2U8G小规格做一组测试并与开源Cassandra进行比照,快来和我一探到底吧。 一、测试工具 二、数据模型 三、测试环境 四、测试步骤4.1 创立表模型创立keyspace: create keyspace ycsb WITH REPLICATION = {'class' : 'SimpleStrategy', 'replication_factor': 3 };进入keyspace:use ycsb;创立usertable: create table usertable (y_id varchar primary key, field0 varchar, field1 varchar, field2 varchar, field3 varchar, field4 varchar, field5 varchar, field6 varchar, field7 varchar, field8 varchar,field9 varchar);4.2 数据筹备阶段nohup ./bin/ycsb load cassandra-cql -P workloads/workload-insert-mostly -threads $THREAD_COUNT -s > $LOG_FILE 2>&1 &4.3 YCSB四种业务模型压测 ...

May 10, 2021 · 1 min · jiezi

关于华为云:华为云官网负责人明哥我们是如何做到门面不倒8个月挑战业界Top-1

摘要: 从自研内容生产平台、云原生实际,智能化到沉迷式、无码化,带你走进华为云官网开发团队,看华为云的前端大佬解读前端畛域新技术?本文分享自华为云社区《华为云官网负责人明哥:咱们是如何做到门面不倒,8个月挑战业界Top 1?》,原文作者:华为云社区精选 。 4月的一个周五黄昏,刚刚完结一场语音会议的明哥,拿起桌上的咖啡,一口灌了上来。同时,翻了翻摊在右手边的笔记本,可能在思考行将抛给他的一些问题。 在华为曾经工作第15个年头的他,目前是华为云官网研发团队的技术负责人,看护着华为云对外的“门面”。 作为技术管理者,有个小习惯,“每天给本人留一些静默工夫,在这段时间内,尽量不解决邮件、工作信息,可能做一些代码开发、review、技术钻研的工作。” 他还习惯把事务性的工作都安顿在前半周,后半周能有绝对残缺的工夫,和团队的架构师、设计师零碎探讨比拟大的技术计划。 在钻研技术这块,明哥喜爱往下走,去看它的底层运行机制,它的源码。他也是 “一万个小时定律”的拥趸者,始终深信积攒足够的工夫和精力,肯定能在技术上有所建树,举一反三。 所以,他能和团队仅用半年多的工夫,实现一次简直不可能的挑战。 再难,官网“门面”不能倒在华为南京研究所露天长梯的二层平台上,始终竖着一块海报板:二战中被打得像筛子一样、浑身弹孔累累的伊尔2飞机,仍然保持航行,终于平安返回。 两年前的那个下午,明哥双手环胸站在办公室的落地窗前,紧紧盯着这块海报,思路却停在十分钟前接到的工作上:他的团队须要在无限的工夫内,实现官网内容生产平台的全副自研重构,且达到业界Top1的程度。 这是一次走出技术舒服圈的挑战,放弃他们十分相熟的技术架构,所有从头开始,好比明明有一条高速公路通往起点,然而你不能走,你得本人新建一条。 这期间,华为云官网团队既要保障日常业务的失常运行,循序渐进解决各种业务需要,又要抽调出足够的人手搭建新的内容平台,工夫紧、人手少、工作重。 在一直的技术研究,重写代码,验证测试后,我的项目的最小可用版本实现了showcase,彼时大家都很有成就感,也感觉终于能缓一缓了。然而一个更紧急的工作再次抛向他们:为了疾速催熟产品,接下来的大促期间将间接应用自研零碎。 此时离大促还有两个月,开发团队除了要分出一部分兵力生产页面(为了确保用户体验,页面要全新设计),还要补齐高并发、高可用、平安可信等产品化所必须的能力。通常,这样的能力个别须要3到6个月,能力打磨欠缺。 明哥和团队只有破釜沉舟,那段时间里,工作板上写满了被拆分的工作细节,新的计划一直笼罩旧的版本,会议室里坐阵的技术专家走了一波,又新来一波……大家回绝斗争,一门心思埋头往前冲。 比方,为了保障生产进去的页面在任何状况下都不能丢,设计团队翻阅了大量材料,与平安、可用性、性能专家屡次探讨和原型验证,而后抉择了最‘冗余’的计划: 页面内容采纳多正本的形式备份到多个不同服务、物理介质上;页面拜访的所有环节采纳多厂商、多节点的形式防止单点故障;构建多个逃生通道,通过一键切换能力,实现流量的疾速切换。最终这套计划胜利应答了屡次突发状况,禁受住了大促的考验。 历时8个月,从我的项目启动到第一个基于自研的内容生产页面诞生,官网团队交出了一份丑陋的成绩单。 “挑战十分大,但咱们胜利了。” 与此同时,他们“顺带”开发了一个PQP页面品质平台, 负责主动查看页面上线前的内容品质,包含页面的404、敏感字词、中英文单词的拼写、图标的设计元素是否符合规范等等。 从接手华为云官网开始,品质就是悬在明哥头上的达摩克利斯之剑。用他的话说,“品质这个货色,不出问题的时候大家不会感觉多重要,凡是产生问题,就会成为人心所向,所谓善战之将无赫赫之功。” 如何保障页面品质稳固,这一点往往是不少前端技术人员漠视的。“咱们找征询公司,合作伙伴问了一圈,大家都没有这样的工具,更多的是靠流程保障,比方发现问题告诉oncall,再逐层找到负责人。尽管管理手段可能运行上来,但效率太低了。” 所以,将这种“人拉肩扛”的问题解决形式,转化为工具能力,做成平台去赋能,再贯通到整个页面的公布流程,是一件成就感与挑战并存的事件。 以后,PQP平台已在华为外部“开源”,包含华为官网在内的80多个网站都曾经接入,用于看护网站的内容品质。 谈及品质,不仅是页面内容的品质,还有官网稳定性的品质。试想,12306的每一次解体,前面是多少用户的吐槽骂声。 为了保护华为云官网的稳定性,他们也针对高可用做了多层保障,比方多正本的容灾备份,数据多活等等,在寰球4个地区的6个机房都安置了华为云官网的服务器,并且洽购了4家不同的CDN厂商确保可能呈现的任何主客观危险,保障零中断。就像剥洋葱一样,剥开一层外面仍然保障完好无缺。 “华为云官网是咱们的门面,控制台、后盾服务或者能够挂,但官网就像上甘岭的那面旗号,哪怕是个光杆司令,我也不能倒,肯定要竖在那里。” 云原生藏在业务里门面不能倒,为了这个指标,华为云官网的架构以及生产公布流程也在一直优化欠缺中。 以前端框架为例,React性能弱小且灵便,Angular有丰盛的组件,Vue简洁易构建,选起来颇有些乱花渐欲迷人眼。 明哥也曾陷入抉择何种技术框架的纠结中,团队通过一番探讨,抉择了一个折中的形式——他们和web能力核心定下准则:根底能力团队保护一套支流技术框架和组件库,各业务团队有本人的选择权,能够间接应用,也能够依据须要抉择其余技术栈,但外围是听从对立的设计规范,达到即便不同技术栈生产的页面也能让用户无感知差别的成果。 正所谓好马配好鞍,让开发人员依据各自看护的业务个性找到最匹配的框架。 那么,如何将这些新、老技术栈,以及不同技术框架生产的页面放在一起出现给用户? 华为云引入了微前端框架,让各个小团队,不同的技术栈都能共生。 微前端的目标是低耦合,它把各模块之间的影响降到最低,各模块能按需应用不同的技术栈,从而升高技术栈切换的老本,确保产品平滑过渡,防止一刀切带来的品质危险。 同时,所有的服务都部署在容器里的,所有皆代码。诸如应用程序、中间件、底层操作系统都被打包成规范的包,不论在什么环境,什么时候部署,模块都是一样的,不会呈现因为零碎、中间件的版本、配置不统一导致研发环境和生产环境状态不同的状况。这也是继续交付、疾速迭代的根底。 大的框架问题解决了,再往前走,还有很多至关重要的细节。 过后网站开发有个很典型的特点:不论是页面性能,还是页面内容的变动,都绕不开发人员,网页上任何一个轻微的变动都得去批改html代码或者CSS脚本。这种状况下,轻易批改一个字,开发需要排下来,小半个月过来了。 那么,怎样才能把开发人员从这些工作里释放出来呢? 所以有了页面生产平台,能够让业务人员自助实现页面批改;有了可视化搭建,拖拽组件即可实现所见即所得的网页制作;有了零碎的内容品质检测平台,可能保障页面的平安上线…… 从人拉肩抗的低效率开发,到现在规范的页面公布流程,华为云官网的架构也进入到一个新的阶段:后盾采纳微服务架构,前端采纳微前端架构,页面上线恪守规范的DevOps流程, 化繁为简,充分利用技术的个性,破除理论业务的瓶颈。 这也是明哥对于云原生的了解,“云原生自身并不能算一套架构,它更像是一个定义,一套方法论。 关上来看,云原生无非这几个要害元素:微服务、DevOps、继续交付、容器化。” 目前,DevOps方面,华为云有一套对立的公布流水线平台,所有服务均通过这个平台公布到生产环境;继续交付方面,华为云官网有65%左右的个性是通过按个性独立公布的,每周都会有几百个个性公布到生产环境上。 让子弹再飞一会儿康威定律里曾提到,组织的架构决定了整体的技术架构。因为华为云的前端和后端组织绝对拆散,单方各司其职,技术沟通中难免会产生一些小的摩擦。 不过,以后端技术浪潮汹涌而来之时,它也在试图用技术去弥合人为起因造成的各种沟通问题。 以Node.js为例,艰深点说它是运行在服务端的JavaScript,让懂JS的前端人员写出简略的后端服务,实现一些接口的拼装。 “通过Node.js,如果一个程序员针对一个简略的需要,从前端到后端都由他本人来实现,因为省去沟通老本以及同步版本公布的动作,效率能晋升30%。” 这就是咱们常说的“大前端”、“全栈开发者”。而全栈能力就是消解一些组织团队互相配合产生的损耗,缩小损耗,天然能够给开发效率、模式带来质的晋升。 谈到开发效率的晋升,时下大火的Serverless正在掀起一场云计算畛域的反动,这场风暴也波及到了前端,对于此,明哥显得审慎很多。 Serverless勾画了一个不须要搭建环境、部署中间件,没有特定应用场景、业务类型,只需部署代码的世界。 这是技术人员的“乌托邦”,但明哥认为以后的Serverless技术有肯定的局限性。开发团队不可能只应用一种技术或者组件,而不少技术或者框架,是须要在中间件、操作系统层面进行剖析调优工作,Serverless目前没有达到这个灵活性和适配性。 “咱们也尝试过利用Serverless进步开发效率,比方把一些后盾执行不敏感、可用性较低的服务部署下来,再通过定时器触发,也能达到肯定成果。然而一旦波及到了全场景,尤其是多部件的解决方案,咱们就不会思考首选Serverless服务。” “可能我比拟审慎,有先进或者新的技术,习惯性察看一阵子,让子弹再飞一会, 技术成熟稳固后再跟上,那个时候也不晚。” “咱们在技术栈抉择这条路上也走过不少弯路,前端团队抉择技术栈肯定要结合实际业务需要,再去察看技术栈的生态是不是继续演进中,随声附和、好高骛远不可取,如果没有适合的,宁愿自研也好过斗争。” 冲破技术标签,视线决定高度回望前端技术的迭代,能够说是瞬息万变,新的框架、组件库层出不穷,新的编程语言一波波袭来…… 涉猎不同技术栈的明哥始终在考虑,技术的目标是什么?在建设华为云官网的过程中,他仿佛找到了答案。 以JAVA为首的后端技术栈,在几十年的迭代中,无论是技术语言,还是框架都趋于稳定。相较之下,前端还朝着技术成熟曲线的峰顶狂奔中,将来也会逐步从百花齐放过渡到一两个成熟稳固框架一统江山,一步步补全整个生态的阶段。 目前一些支流框架实质上也是大同小异,抉择一个畛域或者技术栈深耕,愈往下探,愈会发现其中的一致性法则。 大浪淘沙中,明哥认为比拟有后劲和摸索空间的三个技术方向是沉迷式、智能化以及无码化。 首先是沉迷式的成果,所见即所得的前端正在谋求更丰盛的展示和互动模式。比方工业制作畛域的仿真模仿,能够对孪生的数字模型进行各种测试验证。同样,在前端畛域,也能把产品可视化地出现在网站上,让用户直观地感知解决方案的运作模式。 说到这里,他在空气中比划了一下,“你设想把后盾看不见摸不着的一些组网解决方案搬到前台,很神奇, 但也十分考验后端数据和前端渲染能力的联合,不过咱们正在致力。” 第二个是智能化,华为云官网更多是面向ToB的场景,无论是数据量,还是用户量都绝对较小,所以他们的指标是在小数据量的状况下,达到精准的千人千面智能化举荐,晋升用户的注册转化率。同时,在适合的机会,尝试智能生产广告图或页面。 第三个方向是无码化,当初少数业务人员能够自主生产简略的页面,波及一些简单页面才有开发人员染指。当前,无论是面向经营人员,还是最终用户,越来越多的页面、接口、流程都会通过无码化的形式实现。 ...

May 7, 2021 · 1 min · jiezi

关于华为云:专家解惑-关于华为云盘古大模型你想问的都在这里

摘要:针对外界对盘古大模型充斥了好奇,参加大模型开发的两位华为云专家来为大家答疑解惑。本文分享自华为云社区《专家解惑 | 对于华为云盘古大模型,你想问的都在这里~》,原文作者:HWCloudAI。 4月25日,华为云公布盘古系列超大规模预训练模型,包含30亿参数的寰球最大视觉(CV)预训练模型,以及与循环智能、鹏城实验室联合开发的千亿参数、40TB训练数据的寰球最大中文语言(NLP)预训练模型。 其中,盘古NLP大模型由华为云、循环智能和鹏城实验室联合开发,具备当先的语言了解和模型生成能力:在权威的中文语言了解评测基准CLUE榜单中,盘古NLP大模型在总排行榜及分类、浏览了解单项均排名第一,刷新三项榜单世界历史纪录;总排行榜得分83.046,多项子工作得分业界当先, 向人类程度(85.61)迈进了一大步。 外界对盘古大模型充斥了好奇,在华为开发者大会(Cloud)期间,参加大模型开发的两位华为云专家答复了以下几个大家关怀的问题。 谢凌曦博士专访 Q:作为一个开发者,请问这些预训练模型的易用性如何?应用老本有多高?谢凌曦:预训练模型设计的目标就是为了让大家升高应用老本。模型的预训练过程,老本是比拟高的,但这个老本不须要开发者来承当。而在应用这些大模型的时候,它自身的易用性会使得应用老本进一步升高,达到一个比拟适合的程度。比如说,咱们会开发出一些比拟通俗易懂的Pipeline,如果你是有肯定根底的开发人员,你能够从咱们的Pipeline当中去做更多的定制化的开发,更好地去开释咱们预训练模型的能力。如果你只是一个AI开发小白,想用大模型去做AI简略的开发,咱们也会给你更加通俗易懂的界面,让大家可能用一些利落拽的形式应用盘古大模型。总体来讲,大家在应用预训练模型的时候,计算时长、调参所须要反复的代价等都会被降到很低,总体来讲是对开发者十分敌对的。 Q:对于新入门计算机视觉的人来说,须要把握什么哪些常识能力疾速进入到学习和研发中?谢凌曦:人工智能、计算机视觉,通过几十年的倒退,到当初曾经领有很宏大的常识体系。如果一个初学者想要把这些货色都理解当前再开始做钻研,效率会略微有点低。我给大家的倡议是,你在学习过程当中,能够先找准一个问题。刚开始的时候,这个问题可能是绝对高级的问题,但肯定有具体的场景。比方想做弱监督学习,个别就是遇到某个理论的问题,它的确须要弱监督算法。然而这个时候我是不是肯定要把握全监督能力去做弱监督呢?并不是这样的。你能够先去查阅一些材料,理解以后的弱监督学习办法,它的基线是什么,它的前沿在哪里。而后你就能够开始做一些简略的试验。试验的过程当中,个别会遇到一些艰难或者一些纳闷。解决这些艰难和纳闷的过程,个别就会把你疏导到它的根底,比如说全监督到底是怎么做的。当你有了更多根底当前,回过头来,也会发现你对以后做的算法有了一个更好的了解。 所以我的倡议是大家能够找一本机器学习、计算机视觉这类介绍比拟深刻的教材去看。然而不要局限于这个教材:一边做具体的课题,一边去学习常识,效率会比拟高。 张晓鹏博士专访 Q:盘古CV大模型有哪些胜利的落地?跟业界相比处在什么地位?张晓鹏:视觉预训练CV大模型,联合相干流程化开发,曾经在华为外部以及其余合作项目上,有100+胜利落地,这些方向涵盖了各行各业,包含工业视觉、网络审查、零售商超,以及医疗等场景,都取得了一些相较于之前不应用预训练大模型更高的后果。在某些场景上,比方方才提到的遥感影像宰割,咱们通过设计针对遥感影像的预训练算法,在没有减少额定标注代价的状况下,达到了最多12%的宰割精度晋升。还有另外一个比拟有意思的景象,咱们应用超大规模图像进行的预训练模型具备更好的可迁移性,即间接把这样一个模型,迁徙到了工业质检的缺点上进行推理,咱们十分欣慰地发现,咱们在上游数据集上没有进行任何微调,然而在工业缺点检测上,取得了比之前我的模型不停地高度的优化,甚至利用上游的数据微调更好的后果,这个后果基本上会高出3到4个百分点。这个启发咱们,模型数据一旦够多,其实它的泛化能力可能取得更好的保障。 第二,咱们是国内最早做视觉预训练大模型的公司之一。在国外是Facebook和谷歌从2019年开始在图像上做了一些利用。咱们视觉预训练模型大略从2019年底的时候就开始了,通过自研的一些列改良算法,咱们首次在基于imagNet 的无监督预训练模型线性分类精度上达到了全监督基线的程度,同时在小样本学习上大大当先现有技术,这些都是业界当先的成绩。 Q: 华为的预训练是采纳什么类型数据和学习工作?大模型如何保障端侧性能?张晓鹏:针对视觉图像不同角度,以及不同场景的变动,咱们采取的办法非常简单。一,咱们可能有海量数据集,这个数据集规模曾经达到了亿级甚至十亿级这样的规模,咱们置信这个海量的数据集,它可能建模,咱们理论场景图像的方方面面。另外一个,咱们采取了什么样的学习形式。其实它的一个核心思想,就是2019年开始,比拟火的基于全局的对比度自监督学习办法。 当然咱们在这下面做了很多改良。包含如何来利用弱标签信息,如何把全局的信息拓展到部分来更好建模部分相干关系。同时也会响应方才提到的,如何解决不同视角,不同尺度图像问题,怎么来让它进行高效的建模,这外面就是让它进行不同的数据加强,咱们在预训练算法外面,集成了十余种数据加强办法,让它通过不同的数据加强,使得整个模型具备针对不同数据加强的不变性。 到目前为止,咱们在一个大模型,搭载模型蒸馏、抽取以及行业大模型,咱们当初曾经适配了大略十余种预训练模型。而这十余种模型都是通过咱们一个大模型的抽取,蒸馏所失去的,它在相应的行业上,失去了十分大的精度晋升。同时也极大的缩小了标注代价以及模型迭代周期。 Q:华为的预训练模型是如何联合不同行业常识,解决标注数据大的问题?张晓鹏:举一个咱们在HDC Cloud上公布的国网电力智能巡检的例子,这就是十分典型的利用盘古CV大模型解决行业常识。 在国网电力巡检模型开发的过程中,它有海量的数据,标注十分艰难,咱们做了什么呢?通过咱们的视觉预训练算法,在海量的巡检数据上进行预训练,这个预训练是利用了无人机巡检的数十TB,上百万规模的数量,进行预训练,它的预训练能够看到咱们十分多的数据,它的外在散布。咱们的大模型,模型参数越大,也看了更多的数据,所以说它可能更好的建模无人机巡检过程中的图片的轻微差别。 利用咱们的视觉预训练大模型,它可能提供更好的表征当前,因为它的缺点和失常样本的表征能力更强,咱们在标注代价上,基本上缩小了80%以上,这一块整个在人力上是一个十分大的晋升。除了缩小标注,咱们一个模型能够适配咱们电力行业一百多种缺点,从而让模型迭代周期大大减少,整个迭代效率大略晋升了10倍,咱们在每次迭代过程中反馈给人须要标注的整体的工作量就会越少,通过这两种模式,咱们实现了在电力行业方面,利用咱们视觉预训练模型,极大的晋升了咱们的开发效率。 点击关注,第一工夫理解华为云陈腐技术~

May 6, 2021 · 1 min · jiezi

关于华为云:一文带你了解华为云GaussDB的五大黑科技

摘要:在华为开发者大会2021(HDC·Cloud)中,华为云数据库多位技术专家分享了GaussDB系列数据库全新5大黑科技。本文分享自华为云社区《HDC·Cloud2021,华为云GaussDB在会上都揭秘了啥?》,原文作者:神思胖 。 4月24-26日,华为开发者大会2021(HDC·Cloud)在深圳隆重举办。在名师大讲堂分会场,华为云数据库多位技术专家分享了GaussDB系列数据库全新5大黑科技,包含反对亿级工夫线、千万级tpmC冲破、两地三核心、AI自治等,通过技术创新一直为企业数字化转型注入新动力。 黑科技1:GaussDB(for Influx)反对亿级工夫线随着云计算规模越来越大,物联网(IoT)和运维监控(AIOps)畛域的时序数据呈爆炸式增长,海量时序数据的存储和治理也成为一大难题。为了应答数据收缩带来的治理、监控等挑战,华为云时序数据库GaussDB(for Influx)对内存调配、回收、单查问等性能做了大量优化,同时通过对数据分区分级、专用存储引擎、自适应压缩算法、高性能多维聚合查问、存储剖析告警对立架构等技术的晋升,实现亿级工夫线下零碎写入性能的稳固,大幅超出开源InfluxDB写入能力。 华为云翻新lab数据库专家现场分享 黑科技2:GaussDB(for openGauss)性能冲破1500万tpmC华为云企业级分布式数据库GaussDB(for openGauss)基于计算存储拆散架构,着重构筑传统数据库的企业级能力和互联网分布式数据库的高扩大和高可用能力。作为主打政企外围业务负载的金融级分布式数据库旗舰产品,它通过GTM-Lite技术和分布式优化器提供极致的分布式扩大能力,保障事务全局强统一,性能冲破传统数据库瓶颈,实现 32节点1500万tpmC,在银行业务实测中,性能大幅度当先其余云厂商。 华为云数据库首席产品经理现场分享 黑科技3:GaussDB(for MySQL) 极致备份恢复能力作为华为云新一代高性能企业级分布式数据库,GaussDB(for MySQL) 通过定制的分布式存储系统,反对数据库秒级快照备份;并行高速复制下,实现数据疾速备份和复原;通过冷热数据拆散,实现TB级数据最快20分钟内复原可用,而且反对任意工夫点复原,为数据的安全可靠提供了强有力的保障。 黑科技4:GaussDB与AI联合,让数据库运维更加高效、极简华为云GaussDB通过将AI技术植入到数据库内核的架构和算法中,让数据库治理更加智能与高效。如GaussDB(for openGauss)通过利用AI 技术实现数据库自调优、自诊断、自平安、自运维、自愈等能力。典型场景如慢SQL 发现、索引举荐、基于性能指标的时序预测与异样发现、参数智能调优等,借助 AI 技术能更好地优化数据库的性能,帮助DBA 升高运维难度,晋升运维效率,主动调度均衡资源池。 黑科技5:GaussDB反对跨 AZ/Region 部署,让数据底座更加稳固牢靠在政企客户最为关注的高可用方面,华为云GaussDB提供了多种高可用计划,包含同城AZ内高可用、跨AZ高可用、异地跨Region的两地三核心容灾计划,提供跨AZ的读一致性拜访,多AZ节点必须读到统一的数据,满足金融级监管要求。比方GaussDB(for openGauss)通过独有的Switch Turbo技术,保障了同城AZ内单点故障可能疾速切换,实现RPO=0,RT0小于10秒。 这5大黑科技是华为云GaussDB后退路上的重大新路标,也是华为云GaussDB匠心打造当先数据库服务的重要体现。华为云GaussDB深知,在数字化时代下,企业的业务场景会更加简单,对云数据库的要求会水涨船高,谁能抓住新一轮倒退时机,更快更好晋升技术和服务,就能够在将来倒退中取得更大的主动权。华为云GaussDB会一直积蓄力量,继续打造更与时俱进、更贴合企业场景的数据库服务,进一步减速企业数字化转型。 点击关注,第一工夫理解华为云陈腐技术~斜体

April 30, 2021 · 1 min · jiezi

关于华为云:华为云云原生数据库GaussDB加速创新企业核心数据上云信赖之选

集大会演讲、圆桌探讨、精彩流动及现场直击....一大波华为开发者大会2021干货材料来喽~~!还等什么快快来支付技术福利! 摘要:华为开发者大会(Cloud)上,华为云公布了云原生数据库GaussDB(for openGauss),主打政企外围业务负载的金融级分布式数据库。本文分享自华为云社区《华为云云原生数据库GaussDB减速翻新,企业外围数据上云信赖之选》,原文作者:华为云头条 。 4月25日,在华为开发者大会(Cloud)上,华为云公布了云原生数据库GaussDB(for openGauss),主打政企外围业务负载的金融级分布式数据库。 企业上云的外围是数据库上云,随着业务和数据规模几何级增长,数据流量洪峰一直,业务“始终在线”,无中断的需要,外围数据库上云大势不可逆转。华为云GaussDB(for openGauss),是企业外围数据上云的信赖之选,在性能、可用性、弹性方面全面晋升,并且曾经受金融业务全场景的严苛考验。 华为云CTO张宇昕示意:“数据库是承载企业外围交易业务与数据处理的外围基石,云原生数据库须要承载外围业务的高性能,并具备弹性扩大疾速发放、高可用、数据安全等能力。华为曾经继续策略投入GaussDB数据库10多年,GaussDB是联合云原生与AI的技术倾力打造的数据库,涵盖了关系型与非关系型的全场景业务。GaussDB(for openGauss)这款产品是主打政企外围业务负载的金融级分布式数据库旗舰产品,具备杰出的混合负载高性能、金融级高可用等商用能力。” 华为云CTO张宇昕介绍云原生数据库GaussDB(for openGauss) 云原生数据库GaussDB(for openGauss)减速翻新性能卓越:GaussDB(for openGauss)在交易事务处理方面,通过Numa-Aware技术大幅度降低单节点内CPU跨核的内存拜访时延,同时联合分布式GTM-Lite的分布式强统一与轻量化事务快照,将单节点和分布式性能晋升了5倍。 在简单查问性能方面,次要通过分布式全并行架构提供极致的吞吐量性能。首先通过MPP节点并行,把执行打算动静均匀分布到所有节点;其次利用SMP算子级并行,将单节点内的多个CPU外围做并行计算;最初通过指令级并行,实现1个指令同时操作多条数据,进而大幅度降低查问时延。 在银行理论业务测试中,无论是交易事务处理性能,还是简单查问性能,都大幅度当先于其余厂商。 金融级高可用:GaussDB(for openGauss)为金融政企客户提供同城AZ内高可用、跨AZ高可用、异地跨Region的两地三核心容灾等多种高可用计划,满足金融级监管要求。GaussDB(for openGauss)通过独有的Switch Turbo技术保障同城AZ内单点故障10秒内切换,保障业务的可靠性和可用性。 弹性扩大:GaussDB(for openGauss)具备在线弹性扩大能力,反对1000+超大分布式集群的能力。单集群分片扩大反对数据主动在线实现重散布操作,反对PB级海量事务型存储扩大能力,能够轻松应答海量高并发数据处理和简单查问场景的考验。 数据安全可靠:传统云数据库只能实现数据的传输与存储态加密,GaussDB(for openGauss)作为业界首款纯软全密态数据库,提供丰盛的数据库安全能力,可实现数据从传输、计算到存储的全程加密,从用户认证、角色治理、对象访问控制、动静脱敏、对立审计、全密态等多维度来守护零碎和数据安全,解决数据库云上隐衷泄露及第三方信赖问题。 AI-Native自治,治理智能高效:GaussDB(for openGauss)将AI技术融入分布式数据库的全生命周期,能够实现数据库智能调优、索引举荐、自诊断、自运维等能力,帮助DBA升高运维难度,大幅晋升管理效率。 其中在参数自调优中,以后曾经笼罩了500+重点参数,通过深度强化学习与全局调优算法,联合不同业务负载模型进行针对性调优,相比DBA人工依据教训调优,性能晋升30%的同时,消耗工夫从天缩短到分钟级。在智能索引举荐中,通过启发式举荐算法,实现了语句级和负载级智能索引举荐,将效率从小时级晋升到秒级,并在benchmark测试中实测性能晋升了约40倍。 华为云GaussDB经验金融严苛考验,共建凋谢共赢生态GaussDB(for openGauss)宽泛实用于金融政企外围交易、企业生产零碎、互联网金融、ERP/CRM、办公/OA等业务场景。GaussDB(for openGauss)通过和工商银行长期联创,曾经实现了笼罩银行A类(外围交易系统)到D类(办公、门户零碎)全场景业务的上线考验,稳固服务于上亿客户。 在过来的两年,华为云GaussDB数据库面向70所高校,200家ISV,倒退了10万开发者。此外,通过开源openGauss单机版本,激励更多开发者退出openGauss社区独特凋敝开源生态。在将来3年,华为云GaussDB将和国内超过100所高校单干开设数据库课程。 华为云首先提出云原生2.0,让每个企业都成为“新云原生企业”,华为云云原生数据库GaussDB(for openGauss)将继续注入更当先的技术,为企业数字化转型提供有限可能。 点击关注,第一工夫理解华为云陈腐技术~

April 29, 2021 · 1 min · jiezi

关于华为云:云图说|华为数据安全中心助你保障云上数据安全

摘要:华为数据安全核心,积攒华为云多年数据教训,整合云上各类数据源,搭载数据安全黑科技,通过深度行为辨认引擎,助您轻松治理云上数据。云上数据分布在哪里,如何治理这些数据,如何防数据泄露,敏感信息如何脱敏贮存,版权如何溯源? 您须要全貌感知! 华为云汇聚各服务平安数据,重磅推出数据安全核心,助您轻松实现数据分级分类,异样形为辨认,行为轨迹可视化,搭建数据保护引擎,实现数据动静脱敏,多种合规规定一键匹配辨认,数据水印保障资产惟一归属。 点击“理解更多”,华为云数据安全核心服务等着您! 点击关注,第一工夫理解华为云陈腐技术~

April 29, 2021 · 1 min · jiezi

关于华为云:跨湖跨仓场景下如何实现海量数据分钟级分析

摘要:华为开发者大会2021(Cloud)大会期间,华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博,分享了“跨湖跨仓场景下如何实现海量数据分钟级剖析”主题。本文分享自华为云社区《华为云FusionInsight MRS跨湖跨仓场景下如何实现海量数据分钟级剖析》,原文作者:沙漏。 华为开发者大会2021(Cloud)于2021年4月24日-26日在深圳胜利举办。本届大会以#每一个开发者都了不起#为主题,为泛滥开发者带来一场ICT方面的技术盛宴。 大会期间,由华为技术专家天团打造的《名师大讲堂》系列专题演讲,围绕云原生、大数据、人工智能等话题,探讨技术创新带来的价值,分享翻新实际。其中,华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博,分享了“跨湖跨仓场景下如何实现海量数据分钟级剖析”主题。 华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博演讲 传统大数据平台交融剖析存在数据墙、数据难买通、数据协同慢三大问题随着大数据技术的利用和倒退,数据品种越来越多,散布越来越广,查问场景也越来越简单,尤其在新兴业务中,须要在一个平台上应用离线剖析、实时剖析、图剖析、文本剖析、交互式查问等多种引擎,多元异构的数据交融能力盘活数据,通过数据挖掘开发数据价值,施展数据作为生产因素的作用。而传统大数据平台在应答数据交融剖析时逐步露出疲态,存在如下问题: 多数据源间存在数据墙:Hive、HBase、MPPDB、Oracle….数据组件泛滥,组件间造成“数据墙”;为了应答不同场景的需要,数据反复存储到多个数据组件:Hive(历史数据),HBase(原始数据),MPPDB(专题数据),治理简单,消耗存储空间; 多核心数据难以买通:各类剖析利用只能基于本地数据;用外核心数据做碰撞剖析须要先搬迁到本地,操作简单,效率低;异地数据加工须要在当地部署和保护加工平台,架构简单; 多数据中心难以造成合力:数据集中在主核心,造成主核心负载畸高,分中心却闲暇重大;紧急任务须要迅速解决,却因为分中心数据还未同步,无奈剖析;多数据中心和多集群的计算和扩大能力远远强于单个核心,但因为跨数据中心拜访技术根本处于空白状态,业务只能依附单核心撑持。 简化用数,HetuEngine对立接口,跨湖跨仓跨云协同剖析从数天降至分钟级为了让数据应用更简略,跨湖协同更容易,解决上述三大问题,华为推出了、“HetuEngine”,于2019年11月公布,2020年6月正式开源(开源名称openLooKeng)。HetuEngine是对立高效的数据虚拟化引擎,与大数据生态无缝交融,实现海量数据秒级查问;业界独创多源异构协同,实现一站式SQL交融剖析。 HetuEngine具备如下个性: • 高性能交互式查问:传统大数据通过Hive引擎构建即席查问工作,查问工夫长, HetuEngine通过启发式索引和执行打算Cache,实现秒级查问响应; • 跨湖跨仓跨云交融:传统数据分析需先对立数据格式,HetuEngine可实现不同数据格式间的join,缩小数据搬迁,较传统计划提效30%;传统DC剖析要建手工摆渡数据,HetuEngine可通过DC Connector进行连贯,数据全局可视,协同耗时从数天缩短至分钟级; • 多引擎交融:传统大数据在进行多引擎组件开发时,需波及多组件定制开发,HetuEngine可对立SQL接口拜访大数据,升高用数门槛,开发提效2-10倍。 目前,华为云FusionInsight MRS云原生数据湖为政企提供湖仓一体的解决方案,一个架构可构建三种数据湖:离线数据湖、实时数据湖、逻辑数据湖。其中逻辑数据湖通过HetuEngine提供跨湖、跨仓、跨云对立拜访,缩小数据搬迁,数据高效流动,全域数据分钟级协同剖析,业务上线效率晋升10倍,由周级缩短至天级。 HetuEngine已在各行各业大规模应用,上面一起来看HetuEngine在金融畛域的典型场景实际。 工商银行基于HetuEngine实现即时BI,减速金融数据湖的灵便数据摸索工行金融数据湖承载总行及分行全量原始数据,供全行数据分析师进行数据摸索剖析。目前日查问量5000条,查问数据均匀10亿行,最大可达百亿行,随同数字化转型进入深水区,多样性业务诉求对数据交融剖析提出了更高的要求。 在某些场景中,金融业务须要在数据湖内先应用批处理技术对原始数据加工成专题数据,而后跨集群搬移数据集市,再从数据集市上做BI剖析。传统大数据平台中,SAS等工具通过Hive SQL拜访数据湖数据性能差,均匀响应工夫5分钟~2小时,并发能力有余10,且湖仓数据割裂,将数据加工后加载到OLAP集市,数据链路长,剖析效率和开发效率都很低。 该行通过华为云FusionInsight MRS云原生数据湖提供的HetuEngine,解决了数据湖与数仓间的数据协同剖析问题,防止了不必要的ETL。 通过HetuEngine数据虚拟化实现湖仓互联互通协同剖析;防止不必要的ETL流程,缩小数据搬迁。通过引入HetuEngine数据虚拟化引擎,在数据湖查问剖析方面该行晋升了并发能力,仅1/5的资源即可反对45并发,峰值并发最大达200QPS,均匀时延优化到8秒;在湖仓协同剖析方面,通过HetuEngine买通数据湖与数仓间的数据壁垒,湖仓协同剖析性能从分钟级晋升至秒级,同时缩小80%的零碎间数据搬迁同步,大大晋升数据治理效率。 结语HetuEngine作为对立高效的数据虚拟化引擎,买通了多数据源间的数据墙,实现高性能跨湖跨仓跨云数据交融剖析,同时,HetuEngine提供对立拜访入口,屏蔽了传统简单的拜访接口,并对立应用 SQL 接口,升高大数据应用门槛,简化用数! 华为云FusionInsight MRS云原生数据湖还将继续翻新,做大数字世界黑土地,携手800+ISV为客户提供继续演进的湖仓一体解决方案,能够在一个架构上实现离线数据湖、实时数据湖、逻辑数据湖,在千行百业构筑“一企一湖,一城一湖”。 点击关注,第一工夫理解华为云陈腐技术~

April 29, 2021 · 1 min · jiezi

关于华为云:FusionInsight-MRS你的大数据管家

摘要:4月24日-26日,HDC.Cloud2021在深圳大学城胜利举办,华为云FusionInsight MRS云原生数据湖带来最懂行的大数据解决方案,为政企客户提供湖仓一体、云原生的大数据解决方案,一个架构可构建3种数据湖:离线数据湖、实时数据湖、逻辑数据湖,更有现场沙箱试验和名师大讲堂,一起来细品。本文分享自华为云社区《HDC.Cloud2021 一文回顾华为云FusionInsight MRS云原生数据湖亮点》,原文作者:沙漏。 2021年4月26日,HDC.Cloud2021(华为开发者大会2021)胜利落下帷幕。本次大会,华为云FusionInsight MRS云原生数据湖带着“一架构三湖”的愿景与使命来到现场,与泛滥行业客户、合作伙伴、开发者一起,就如何在5G、AI、IoT高速倒退的当下,用更好的技术创新,赋能千行百业等议题进行深刻的探讨。上面,让咱们一起再次重温本次流动的精彩霎时。 数据使能展区华为云FusionInsight MRS云原生数据湖绽开荣耀 华为云FusionInsight MRS一架“构”三湖 在数据使能展区,华为云FusionInsight MRS云原生数据湖带来最懂行的大数据解决方案,为政企客户提供湖仓一体、云原生的大数据解决方案,一个架构可构建3种数据湖:离线数据湖、实时数据湖、逻辑数据湖,撑持政企客户全量数据的实时剖析、离线剖析、交互查问、实时检索、多模剖析、数据仓库、数据接入和治理等大数据利用场景,使政企客户高效用数、简化用数,助力政企客户实现一企一湖、一城一湖,业务洞见更准,价值兑现更快。 离线数据湖:HetuEngine提供秒级交互式查问能力,数据不出湖,剖析链路短,性能比Impala快30%+,剖析提效10倍+;DLC提供对立的元数据,数据全局可视;HetuEngine提供湖内对立SQL接口:HDFS、Hive、HBase、ES等,简化用数。 实时数据湖:流解决 + Hudi实现数据更新入湖,从T+1到T+0;ClickHouse提供毫秒级实时OLAP剖析能力;Flink提供FlinkSQL能力,批流SQL接口对立,实现流批一体。 逻辑数据湖:HetuEngine提供跨湖、跨仓、跨云对立拜访,缩小数据搬迁,数据高效流动,全域数据秒级协同剖析秒级响应,业务上线效率晋升10倍,由周级缩短至天级。 华为云FusionInsight MRS践行产学研单干,全面推动大数据开源技术倒退,联结清华大学公布了IoTDB时序引擎版本。目前华为云FusionInsight MRS已利用于60多个国家3000+客户,助力政企客户实现一企一湖、一城一湖,业务洞见更准,价值兑现更快! 华为云FusionInsight技术生态工程师黄昊兮解说试验 在华为云FusionInsight MRS云原生数据湖展台的一侧,设有开发者实操的沙箱实验室,华为云FusionInsight技术生态资深工程师黄昊兮,在现场为大家现身授教,讲述“应用MRS Hudi体验实时入湖、应用MRS Clickhouse体验实时OLAP、应用MRS HetuEngine体验跨源跨域剖析能力”三个试验,通过上手实操体验加深了解各组件的个性你,Hudi可能反对数据增量更新,从传统Append 到 Upsert,实现数据实时更新,数据价值开释从T+1转变为T+0;Clickhouse具备毫秒级的OLAP剖析能力,实现数据分析不出湖,解决了传统数据冗余、来回搬迁的问题;HetuEngine提供统一标准SQL对散布于多个地区(或数据中心)的多种数据源实现高效拜访,屏蔽数据在构造、存储及地区上的差别,实现数据与利用的解耦。 华为云FusionInsight MRS云原生数据湖展区 展区不仅领有华为云FusionInsight MRS云原生数据湖一架“构”三湖的个性,更有落地理论利用的沙箱体验,让观展嘉宾在取得大数据前沿技术的同时,播种一份上手操作的亲自体验。 名师大讲堂:畅谈新技术、新价值、新趋势大会期间,由华为技术专家天团打造的《名师大讲堂》系列专题演讲,围绕云原生、大数据、人工智能等话题,探讨技术创新带来的价值,分享翻新实际。其中,华为云FusionInsight MRS云原生数据湖带来两场专家演讲,由华为云FusionInsight解决方案架构师许田立,分享“千级节点的大数据集群如何无业务中断降级”主题,由HetuEngine架构师武文博,分享“跨源、跨域场景下如何实现海量数据分钟级剖析”主题。 千级节点的大数据集群滚动降级,业务无中断华为云FusionInsight解决方案架构师许田立演讲 随着政企数字化倒退,数据湖在政府、金融、运营商、大型企业等中承载越来越多的要害数据分析、解决的业务,在日常降级和保护过程中,对于业务连续性保障的要求也越来越高。 而大数据技术迭代快,传统大数据平台采纳离线降级形式,需断电、重启等操作,降级操作简单,运维繁琐,影响现网业务运行,且大集群降级耗时长,突发故障易中断降级动作,为放弃业务的连续性和技术引领,急需业务不中断的滚动降级能力,确保大集群数据底座的继续演进。 华为云FusionInsight MRS云原生数据湖提供超大规模集群,反对单集群2万+节点规模,并可联邦有限扩容,同时,从500+节点集群的标配开始,华为云FusionInsight MRS云原生数据湖已提供滚动降级能力,截止目前降级成功率为100%。 通过华为云FusionInsight MRS云原生数据湖滚动降级能力,助力政企客户实现大集群分批次、循环滚动降级,业务0中断;故障节点隔离性能确保降级动作的稳固运行,实现7*24小时不间断服务;1000+精细化运维指标及可视化操作简化运维,实现一个架构继续演进。 海量数据跨湖跨仓分钟级剖析HetuEngine架构师武文博演讲 HetuEngine是对立高效的数据虚拟化剖析引擎,与大数据生态无缝交融,实现海量数据秒级查问;业界独创多源异构协同,实现一站式SQL交融剖析,海量数据协同剖析分钟级。 高性能交互式查问:传统大数据通过Hive引擎构建即席查问工作,查问工夫长, HetuEngine通过启发式索引和执行打算Cache,实现秒级查问响应; 跨湖跨仓跨云交融:传统数据分析需先对立数据格式,HetuEngine可实现不同数据格式间的join,缩小数据搬迁,较传统计划提效30%;传统DC剖析要建手工摆渡数据,HetuEngine可通过DC Connector进行连贯,数据全局可视,协同耗时从数天缩短至分钟级; 多引擎交融:传统大数据在进行多引擎组件开发时,需波及多组件定制开发,HetuEngine可对立SQL接口拜访大数据,升高用数门槛,开发提效2-10倍。 结语大幕拉下,并不是起点,而是新一段征程的终点。华为云FusionInsight MRS云原生数据湖将不忘初心,砥砺前行,放弃技术创新源能源,做大数字世界黑土地,携手800+ISV为客户提供继续演进的湖仓一体解决方案,能够在一个架构上实现离线数据湖、实时数据湖、逻辑数据湖,在千行百业构筑“一企一湖,一城一湖”。 点击关注,第一工夫理解华为云陈腐技术~

April 27, 2021 · 1 min · jiezi

关于华为云:CloudIDE为开发者写代码开启加速模式

摘要:华为云CloudIDE,以软件根底技术联合新时代业务场景,给开发者提供更高效、优质的开发体验,帮忙开发者实现业务翻新新动力,以硬核技术重塑云原生开发生产力。本文分享自华为云社区《华为云CloudIDE,重塑云原生开发者生产力》,原文作者:灰灰哒 。 在科技飞速发展的明天,云计算,5G,人工智能等技术已深入生活的方方面面,借由智能设施接入云端的各类利用的应用,曾经成为咱们日常生活的习惯。为了适应疾速呈现的各类生产生存须要,开发者每日将大量需要交付到云端利用,云原生曾经成为以后时代最次要的利用交付形式。云原生开发者的生产力程度,决定了云利用的价值晋升可能性。 开发者工具的改革从第一台迷信计算机呈现以来,人机交互的伎俩就始终在丰盛和倒退。通过最后的打孔纸卡,计算机能够“读懂”预置的程序逻辑,让计算机进入“可编程”年代;主机时代呈现的文本编辑器,带来了更好的语言反对和编辑体验,输出疾速、直观,能够更好的反映开发者的用意,联合独立编译器就能够大规模简单软件开发;随同桌面电脑呈现,利用的数量、用处极大丰富,呈现了将代码工程治理、代码编写、编译构建、运行调试等能力集成在一起的集成开发环境(IDE),开发者生产力失去极大晋升,软件产业进入飞速发展期间;互联时代,新技术层出不穷,软件架构突飞猛进,开发者手中的IDE工具向着轻量化、可扩大、跨平台等方向演进,为创新型开发者提供新的舞台。 云时代,开发者面对的运行环境曾经从本地倒退到云端,利用从“On Cloud”模式倒退到“In Cloud”模式,原生于云,成长于云,立足云端持重倒退。为了交付以云原生为根本状态的利用,开发者须要更容易的获取开发资源,更不便的进入云端设施,更快捷的连贯云资源,更高效的实现价值输入和品质晋升。在此背景下,华为云CloudIDE应运而生,它原生于华为云平台,充分利用华为在计算、网络、存储、平安、智能化方面的技术积攒,有按需获取、开箱即用、功能强大、生态齐备等特点。 华为云CloudIDE次要特点首先,它是一种按需获取的开发工具,开发者通过智能设施拜访华为云CloudIDE即可获取云端的开发环境,外面的编码、调试、运行、预览性能都是能够开箱即用的,不须要通过简单的环境配置。 其次,它对各类高级语言具备良好的开发体验,对于与支流的编程语言如C/C++、Java、Python、NodeJS、GO、PHP等都原生反对,更多语言也能够通过装置插件形式来反对。对于以后新兴的各类编程框架,CloudIDE通过与华为与开发者工具DevStar对接,实现了利用框架和示例工程的复用,防止开发者从零开始。 第三,它能够轻松利用云端资源,IDE中应用的计算资源能够横跨鲲鹏和X86技术架构,能够轻松拜访云端基础设施,能够应用内置能力将开发的利用一键式部署云端,疾速验证能力。 第四,它能够极大晋升开发者创新力。通过凋谢的插件集成机制、开源的插件开发框架、凋谢的API集成接口,配合华为开发者工具的各类代码工程模板,行业开发者能够疾速实现教训和技术传承,利用开发者能够专一于本身业务逻辑和业务翻新。 第五,它深度整合人工智能和云技术,通过智能化编码辅助来晋升开发者在编码阶段的生产效率,尽可能的通过起码的键盘输入打成编码指标,通过云调试技术在多微服务的简单环境下实现如单体软件调试一样的良好体验,疾速定位问题。 新个性公布:智能化代码补全技术和微服务集群调测技术在4月25日的2021 HDC Cloud的大会上,华为云公布了基于华为云CloudIDE的智能化编码工具和云原生调测工具,基于智能化代码补全技术(SmartAssist)和微服务集群调测技术(CloudDebugger)重塑编码和微服务调测生产力。 代码补全是软件开发工具最外围的能力之一,它可能在开发者输出几个字符的状况下,提醒补全整个符号如办法调用、类型名、变量名、类字段、关键字等,在一些常见上下文下,代码补全甚至能够补全整行代码。以后代码补全曾经倒退为联合深度代码剖析和深度学习模型的智能补全技术,联合本地代码分析模型和多个场景化模型,在充沛了解以后上下文片段的根底上,基于语法和语义对所有可能后果进行决策和排序,对补全后果有较好的可解释性和可调节性。 华为云推出的基于加强的代码剖析联合多种特定场景模型的SmartAssist智能补全技术,显著晋升了以下三个方面的能力: 第一,晋升多符号/长后果的补全准确率; 第二,对简单上下文的非显著后果举荐,如生僻的第三方API; 第三,防止举荐过期/弃用/危险的API。而且,SmartAssist是运行于CloudIDE内的本地化技术,操作响应和稳定性十分好,能够极大晋升开发者的编码效率和编码品质。 在多微服务场景下的调测体验和效率,是晋升云原生开发者生产力的重要环节。以后微服务调测次要面临的问题包含:接口测试工作量微小,微服务之间简单的调用关系造成调测重大依赖Mock服务,测试不齐备,多过程并发调试,传统调试伎俩不可行。开发者迫切希望在新场景中重现单体利用开发的便当:直观查看代码上下文,批改内存变量,测试语句执行,直观展现调用堆栈和有针对性的设置断点。 华为云基于独立调试适配服务、智能调试音讯路由、远端代码热替换和基于命名管道的批量音讯传输协定技术打造的CloudDebugger微服务调测技术,实现了云原生开发者梦寐以求的能力: 第一,如单体软件调测般便当; 第二,反对多人同时调测; 第三,多微服务、多版本同时调测;第四,断点、单步跟踪、变量查看一应俱全。 能够说,CloudDebugger是下一代云原生利用开发工具中最重要的效率助推器之一。 华为云CloudIDE反对海量场景CloudIDE生于华为云的衰亡,成长于云原生时代的到来。华为基于鲲鹏倒退第二计算立体,基于昇腾打造科学计算新平台,这些云端算力平台的倒退,以及以后大数据、IoT、智能化、量子计算、区块链等前沿技术的爆发式实用化增长,对开发者应答开发场景的能力提出了新要求。华为云CloudIDE服务以本身技术积攒,利用华为多年积淀的网络、云计算、存储、平安等技术,抓住时代倒退新机遇,以优质体验服务宽广开发者。 鲲鹏开发者能够在线一键式申请CloudIDE鲲鹏原生开发环境,通过内置插件实现鲲鹏组件移植和性能测试。AI开发者能够在CloudIDE内编写和调测训练模型,一键式连贯华为云智能开发平台,实现端到端的模型开发、训练、上线操作。区块链开发者能够一键式拉起CloudIDE,通过内置模板开发区块链合约,并可公布到华为云区块链服务。微服务开发者能够基于已有模板创立微服务,编码、调测、运行、预览都能够在云上实现。云原生开发者能够基于CloudDebugger实现简单多微服务环境下的调测,动静路由网络申请,断点查看变量和堆栈,热替换代码批改验证。华为云量子计算平台能够通过CloudIDE反对研究者开发、训练量子计算模型,而不须要本人筹备海量计算资源。 华为云CloudIDE,以软件根底技术联合新时代业务场景,给开发者提供更高效、优质的开发体验,帮忙开发者实现业务翻新新动力,以硬核技术重塑云原生开发生产力。 戳我理解→ CloudIDE 点击关注,第一工夫理解华为云陈腐技术~

April 27, 2021 · 1 min · jiezi

关于华为云:看从小自带BUFF的他如何用代码降低万物互联的门槛

摘要:3岁下象棋,5岁解方程!他说物联网开发就像打怪玩游戏本文分享自华为云社区《HDC.Cloud2021 | 华为云IoT开发者:用代码升高万物互联的门槛》,原文作者:华为云头条 。 3岁能跟父亲下象棋、5岁能解二元一次方程组、7岁上完一年小学就升初中……1997年出世的张小俭,仿佛是一个从小自带BUFF的“领跑者”。 开发就像玩游戏,挑战永无止境张小俭从小就喜爱学习和摸索,他的数理逻辑能力十分好,所以高考时抉择了过后最热门的通信工程业余,开启了开发者之旅。 大学课余时间他简直都在摸索软件开发。“看见本人写的代码在屏幕上运行,会很开心。”张小俭示意,“开发就像玩游戏,通关胜利时特地有成就感。” 大三面临考研和待业的抉择时,张小俭果决抉择待业,他说:“软件开发的迭代速度太快,学校的常识曾经跟不上行业的倒退。” 于是他找了一家软件开发公司实习,负责社交性能的开发。因为体现异样杰出,毕业时领导邀请他正式入职,但他回绝了,“我想学习更前沿的技术,意识更多的技术大牛。”这也是张小俭来到华为的初衷。 用物联网开发保障出行平安张小俭在华为的第一个我的项目是华为云IoT路网数字化服务。通过物联网技术,打造出一张全息的数字路网,实现全天候、全场景、全域交融的路线实时感知,晋升驾驶平安和路线通行效率,助力主动驾驶规模化商用。 在这个服务开发中,张小俭负责平台短信发送模块的设计。当车辆产生碰撞时,平台实时感知交通事件,并在百毫秒级超低时延内响应,向四周车辆推送预警,同时发送救济信息。 “过后每次进行产品测试都会十分缓和,压力超级大,因为一点误差都关乎人命。”然而很快张小俭就适应了这种压力,“越有挑战性的工作,实现时越有成就感。” 不到一年,路网数字化服务胜利实现我的项目交付,并经验多个版本的迭代。目前曾经笼罩310+通用交通事件,实现多种车路协同场景的平安预警,并在多个我的项目中胜利利用。比方,与四川交投携手打造东北首个智能网联的车路协同测试场;与首发团体等企事业单位单干,在延崇高速上实现了首次协同式主动驾驶的试点;助力无锡打造国内首个城市级车路协同示范区。 升高万物互联的门槛,开发让所有皆有可能数字经济的到来,催生了数百亿设施联接上云的需要,也给物联网技术带来了诸多挑战,如时延大、场景多、并发高、利用适配简单等等。在这样的背景下,张小俭作为开发外围骨干,来到华为云IoT设施接入服务(IoTDA)攻克难关,致力于升高万物互联的门槛,打造华为云IoT亿级联接能力的底座。 过后负责Amqp的他通过屡次剖析设计之后,辨认出了要害需要万级Topic,通过参加社区群和业界专家进行交换,从性能、可靠性等角度对开源组件Pulsar进行全面剖析,在最终商用中实现了Amqp从零到有,现有的http推送,即便在企业http服务器失联或其余场景下,也可保留音讯至少一天,最大1G,企业在平台侧音讯均匀时延降至原来的80%。 当初,华为云IoT曾经接入了3亿+设施,实现了接入场景全笼罩,让设施接入效率晋升10倍。在理论体验时,初中生也能够通过IoTDA轻松地实现设施接入。 在张小俭及其团队主导的开发中,充分发挥Apache Pulsar的泛滥架构设计劣势,反对智慧交通、智慧城市、智慧园区等重大项目打算的施行与落地,华为云IoT取得Pulsar社区2020年社区年度最佳优良案例奖。当谈到将来的时候,张小俭示意:“开发就像玩游戏,通关时很有成就感,但过程很须要耐力。每一个开发者都很了不起,代码就是咱们想对这个世界说的话。” 4月24日-26日,华为开发者大会2021(Cloud)将在深圳举办,开发者能够现场体验华为云IoT的设施极简接入、IoT数字孪生、一站式物联网我的项目交付等外围能力。华为云IoT开发大咖将携手业界搭档,深度分析行业物联网的成功实践,还有神秘大礼包等你来拿哦! 点击关注,第一工夫理解华为云陈腐技术~

April 26, 2021 · 1 min · jiezi

关于华为云:6大新品重磅发布华为云全栈云原生技术能力持续创新升级

摘要:4月25日,在华为开发者大会(Cloud)2021上,华为云保持全栈云原生技术创新,公布五大重磅新品,减速行业全面云化和智能降级。本文分享自华为云社区《HDC.Cloud 2021 | 华为云公布重磅新品,全栈云原生技术能力继续翻新降级》,原文作者:技术火炬手 。 4月25日,在华为开发者大会(Cloud)2021上,华为云保持全栈云原生技术创新,公布五大重磅新品,减速行业全面云化和智能降级。 华为常务董事、华为云业务CEO、消费者业务CEO余承东在主题演讲时示意:“到2025年,寰球企业云技术使用率将达100%。全面云化已不可阻挡,云是ICT产业的将来,也是企业数字化转型的底座,开发者是产业倒退的灵魂。华为将持续凋谢技术创新能力,携手开发者、搭档独特减速行业全面云化和智能降级。” ▲华为常务董事、华为云业务CEO、消费者业务CEO余承东 华为Cloud BU总裁、华为消费者云服务总裁张安全发表,华为云瘠田云创打算正式启动。他示意:“2021年咱们将投入1亿美元,重点赋能SaaS和ISV搭档,提供云资源、技术赋能和商业推广反对。华为云致力成为各行各业利用翻新的黑土地,与寰球开发者共成长。” ▲华为Cloud BU总裁、华为消费者云服务总裁张安全发表华为云瘠田云创打算正式启动 五大云原生新品公布,减速全面云化、全栈智能“4月初,华为云颁布了2021年新品上市打算,本次再公布五大新品,华为云云原生2.0继续翻新降级,助力企业实现全面云化、全栈智能。”华为云CTO张宇昕示意。 华为云此次公布了寰球最大的AI预训练模型盘古大模型、云容器集群CCE Turbo、云原生金融级分布式数据库GaussDB(for openGauss)、可信智能计算服务TICS、下一代云原生利用开发工具CloudIDE。 ▲华为云CTO张宇昕介绍华为云新品 盘古大模型,寰球最大规模预训练模型:华为云公布盘古系列超大规模AI预训练模型,包含30亿参数的寰球最大视觉(CV)预训练模型,以及与循环智能、鹏城实验室联合开发的千亿参数、40TB训练数据的寰球最大中文语言(NLP)预训练模型。后续,华为云还将陆续公布多模态、科学计算等超大预训练模型。在权威的中文语言了解评测基准CLUE榜单中,盘古NLP大模型在总排行榜、分类工作、浏览了解单项均排名第一,刷新三项榜单历史纪录;总排行榜得分83.046,向人类程度(85.61)迈进了一大步。 ▲盘古NLP大模型位列CLUE总排行榜第一 云容器集群CCE Turbo,计算、网络、调度全面减速:计算减速方面,基于华为云擎天架构,独家实现容器组件全卸载,集群资源可100%用于业务解决,联合容器引擎深度优化等技术,将集群性能晋升40%;网络减速方面,Trunkport技术加持的云原生网络,端到端连通工夫缩短一半,无效撑持业务在30秒内扩容1000容器,且容器间通信时延升高40%,帮忙企业安稳应答流量浪涌;调度减速方面,实现每秒调度1万容器,更好地反对企业离线、在线业务大规模混合部署、高效调度,还能依据业务利用模型、拓扑等信息,主动计算工作的最优调度策略,实现集群利用率2倍晋升,降本增效。 云原生数据库GaussDB(for openGauss)减速翻新:GaussDB(for openGauss)是华为联合云原生与AI的技术打造的金融级分布式数据库,具备混合业务负载解决的高性能、高可用、弹性扩大、全密态、AI-Native自治五大要害能力,主打金融政企外围交易、企业生产零碎等要害业务场景。在高性能方面,银行业务实测行业当先。在高可用方面,同城AZ内单点故障RTO<10秒,还提供异地跨Region的两地三核心容灾等多种高可用计划,满足金融级监管要求。在数据安全方面,GaussDB(for openGauss)作为业界首款纯软全密态数据库,提供丰盛的数据库安全能力,可实现数据从传输、计算到存储的全程加密,解决数据库云上隐衷泄露及第三方信赖问题。 可信智能计算服务TICS,构建可信的数据流通价值链:华为云可信智能计算服务TICS具备4大特点:可信高效、平安隐衷、多域协同、灵便多态。商业开发者能够通过TICS,为多个参与方疾速构建互信联盟,将可开发的数据资源范畴从企业扩张到海量的社会数据,通过数据流通发明更大价值。华为云TICS反对跨地区、跨组织、跨行业的多方数据交融剖析和多方联结学习建模,反对数据参与方分布式接入互信联盟;反对对接支流数据源和多种深度学习框架,提供协同优化联邦训练和同态加密算法,实现联邦训练效率5~10倍。 CloudIDE,智能化云原生工具重塑云开发生产力:华为云CloudIDE服务是一款面向云原生的轻量级WebIDE,为开发者提供轻量、极速、智能的编程体验,让开发者能够随时随地,应用任何终端进行在线编程。此次,华为云公布了基于华为云CloudIDE的智能化编码工具和云原生调测工具,并现场介绍如何基于智能化代码补全技术(SmartAssist)和微服务集群调测技术(CloudDebugger)重塑编码和微服务调测生产力。 翻新普惠,减速智能降级主题演讲中,国网重庆永川供电公司、小红书、云原生计算基金会(CNCF)等公司、开源组织别离分享了携手华为云进行智能降级的翻新实际和对于云原生技术的洞察。 华为云与国网重庆永川供电公司单干,盘古CV大模型在无人机电力智能巡检AI模型开发上,绝对于传统开发模式展示了其弱小的劣势。该模型可能以较少的人工标注进行疾速迭代,使得样本筛选效率晋升约30倍;能够做到一个模型适配上百种缺点,代替原有20多个小模型,极大地缩小了模型保护老本,模型均匀精度晋升18.4%,模型开发成本升高90%,真正做到了规模化可复制。 华为云踊跃回馈开源社区,发表云原生多云容器编排我的项目Karmada正式开源,将最新的云原生技术分享给开发者,并打算将Karmada捐献给云原生计算基金会(CNCF)。云原生多云容器编排我的项目Karmada我的项目融入华为及工商银行、小红书、中国一汽等各企业在多云治理畛域的丰盛积攒,为开发者提供详实无效的实际领导与帮忙。 小红书技术部负责人张雷示意:“小红书始终致力为云原生产业倒退奉献本人的力量,心愿通过Karmada我的项目,把小红书构建多云业务的实践经验奉献给社区,让更多企业能享受云原生技术的红利。” CNCF总经理Priyanka Sharma示意:“多云对所有企业用户至关重要,看到华为开源Karmada我的项目并打算捐献给CNCF,我感到非常高兴。” 点击关注,第一工夫理解华为云陈腐技术~

April 26, 2021 · 1 min · jiezi

关于华为云:华为云再变动徐直军任华为云董事长余承东任华为云CEO

SegmentFault 思否音讯,4月9日,来自多个信源音讯称华为外部发文:任命徐直军为华为云董事长,余承东为华为云CEO。同时Cloud BU新增两个副主任,彭中阳和陶景文别离负责企业业务和流程IT。 早在2021年1月27日,余承东被任命为华为云与计算BG总裁、Cloud BU总裁。 一周前的4月2日,华为忽然发表撤销云与计算BG( Cloud&AI BG),原BG里的云业务单元成立独自的一级部门Cloud BU,任命原消费者业务云服务总裁张安全 Cloud BU 总裁。 左徐直军右余承东 徐直军出生于1967年,毕业于南京理工大学,博士。1993年退出华为,历任公司无线产品线总裁、策略与Marketing 总裁、产品与解决方案总裁、产品投资评审委员会主任、公司轮值CEO、策略与倒退委员会主任等,现任公司副董事长、轮值董事长等职务。 余承东出生于1969年,毕业于清华大学,硕士。1993年退出华为,历任3G产品总监、无线产品行销副总裁、无线产品线总裁、欧洲片区总裁、策略与Marketing总裁等。现任华为消费者业务CEO、云与计算BG总裁(兼)、Cloud BU总裁(兼)、智能终端与智能汽车部件IRB主任。 左彭中阳右陶景文 彭中阳为华为董事、企业BG总裁。1997年退出华为,历任华南片区用服工程师、俄罗斯代表处传输项目经理及拓展工程师、北非地区部总裁、中国地区部总裁、公司总干部部部长,企业BG总裁等职务。 陶景文为华为董事、品质流程IT总裁。1996年退出华为,历任产品开发工程师,市场技术处副总经理,国内行销部常务副部长,南部非洲地区部常务副总裁/总裁,寰球行销/营销总裁,终端公司总裁,西欧地区部总裁,品质流程IT总裁等职务。 4月8日华为云颁布新策略 4月8日,华为云CTO张宇昕在第二届华为云TechWave寰球技术峰会上示意:“去年底,华为云公布了云原生2.0的理念和解决方案,失去客户搭档的宽泛认可。2021年,华为云对全栈云原生技术能力继续翻新降级,通过云原生、分布式云相结合,帮忙企业将全栈云原生能力延长到业务须要的每个中央,实现全面云化、全栈智能。” 此外,华为云颁布了2021年系列产品上新打算,重磅公布分布式云全系列产品组合(含智能边缘小站IES等)、新一代计算实例、云原生服务中心OSC、容器镜像仓库SWR、容器洞察引擎CIE、超低时延直播、自在视角、网络研讨会8大系列新品。同时预报了往年行将公布几十款新品,笼罩云基础设施、AI使能、利用使能、数据使能、音视频、平安等畛域。 去年11月17日,任正非在发布会上发表了无关华为云策略与解决方案的讲话,从中咱们能够窥见近期华为云组织构造疾速调整的起因。 题目:《凋谢、单干、自我批评,做容千万家的天下英雄——任正非在华为云策略与解决方案发布会讲话纪要》 注释: 在云计算畛域你只有不想称霸,你的路线就是灭亡;做事要充斥霸气,做人肯定要谦卑。 恨你们没有霸气,有霸气的人又太张扬。世界上平凡就平凡在既有霸气还不张扬。咱们说“林志玲很美”其实就是通知你们咱们高层领导意志曾经对立了,咱们再怎么退让美国的竞争对手也不会饶了咱们的,他太自私了,不如与他竞争。华为为什么不能够很美,当然咱们不是天生的,先天要多致力。 在云的路线上,核心网要从关闭走向凋谢,容千万家你就是天下的英雄,多批评本人,你们能力领导世界。 你们当初做云计算我的项目,平台上要赶超思科,利用上要赶超谷歌。云这个货色,你们明天也不要吹牛,说云、管、端就是清晰的?它可能不依人们意料的那样倒退。咱们肯定要广开言路,要在公司中造就一个敢于拥护咱们的力量,就是你们云队伍外面杀进去一批敢于创新的员工,就像“苹果皮”一样。 华为公司在将来的云外面不晓得会冒出来多少你看不见的首领,别打击,说不定这个人就是梵高,说不定就是贝多芬,怎么能说分明呢?QQ是咱们在新能源扔掉的即时通信,咱们不要,扔掉的一个货色让腾讯做得这么大。咱们为什么不能容忍跟咱们不能走在一条道上的人呢?咱们正在走在大路上,要充满信心,为什么在小路上走的人咱们就不能容忍?谁说小路不能走成大路呢?我就说你们心中要有霸气,当你想称霸这个世界的时候就要可能容得下各种人,各种思维。你想要做霸主就要容得下天下可包容的货色。你们要容忍在核心网外面可能呈现异类人。心愿核心网能真正进去蓝军,真正进去不批准你们观点的人。 蓝军存在于方方面面,外部的任何方面都有蓝军,蓝军不是一个上层组织,上层就没有了。在你的思维外面也是红蓝对决的,我认为人的毕生中素来都是红蓝对决的。我的毕生中拥护我本人的志愿,大过我本人想做的事件,就是我本人对本人的批评远远比我本人的决定还大。我认为蓝军是存在于任何畛域、任何流程,任何工夫空间都有红蓝对决。如果有组织呈现了拥护力量,我比拟乐意容忍。所以要团结所有能够团结的人,独特打天下,包含不同意见的人。进来当前就组成拥护联盟都没有关系,他们只有是技术上的拥护,只有他们不是挑拨离间、歪门斜道,要容许技术上的拥护。百花齐放、百家争鸣,让人的聪明才智真正施展进去。那些踏踏实实做平台的人,他们随着流程降职很快,也不吃亏。这样既有庄重又有活跃,如许可恶的一支队伍啊。你看心声社区搞得多好,百花齐放、百家争鸣,你骂公司照样照登不误,公司基本不会去查哪个人骂公司,何苦做这个事件呢?他们开始百家争鸣,咱们也就睁一只眼闭一只眼。 我始终在讲这个问题,将来云怎么样谁都不晓得,你怎么晓得你走的就是条正确的路线呢?当年定的鲜花必须插在牛粪上,是咱们本人已经有教训,自觉地学习与追随东方公司,咱们指望从天上掉个林妹妹,下不来,连不上,不晓得怎么用,始终到林妹妹变成老太太了,全做好了,能够接进来了,才开始用,那林妹妹没价值了,老了。当初我就说从牛粪上生出鲜花来,与电信就贴近,做一朵云马上卖一朵云,逐步形成七彩云霞。全世界都是从互联网往云这边走,惟一咱们一家从电信往云那边走的,谁胜谁负呢?我没有说人家不正确,走到肯定水平,我也要重新认识本人,不能认为本人就是对的,认为本人找到了一条马克思主义真谛。咱们明天的真谛也是能够被修改的。从核心网尽快地走向云,很快就进去了,马上就能够用了。咱们做了一片云,贴到了中国移动的管道上,贴到了电信的管道上,咱们就用了,咱们没有做很多片云。如果咱们要从天上掉下来个林妹妹,咱们光一片两片云怎么可能活下来?所以咱们走的过程中,不能证实咱们这条路肯定是相对正确的,然而咱们从这里起步了,起步就要走向更加凋谢更加兼容,原本这条路是不正确的,后果因为咱们凋谢兼容之后,反而咱们这条路是正确的,因为咱们这条路曾经不是咱们设想的那条狭路了,这条路曾经同化了。所以你要称霸世界,不能只认死理,你那是僵化。所以说要凋谢,我要有很多解决方案小组、蓝军钻研对手的平台,而后在咱们外部产生头脑风暴,相互吵相互喊,喊完当前他的货色未必采纳,其实它曾经深刻在你的脑袋里。郑宝用一个最大的长处,就是跟你胡搅蛮缠,其实你讲的货色他全听明确了,全听进去了,他还是跟你胡搅蛮缠,回去当前他做的就是你那个货色。咱们当初畅所欲言没有问题,就是人家的货色要渗透到你的脑袋里去。 我当初讲的是要再往前走一步,他人颠覆你的观点,你都要容忍。你当初能够保持,咱们走大路让小路接进来,你怎么会晓得小路当前不会变得比你还大呢?当小路变大的时候你们要有心态能抵赖它,因为你们是首领,你们不是专家。不要总把本人当专家,如同你的儿子改了姓一样,改了姓,DNA还是你的,不要有那么狭窄的心怀,容千万家你就是天下的英雄。 说了这么多就是说咱们心怀要宽阔,肯定要关上这个门窗。核心网的外围就是你们核得很关闭,你们很能耐,但只是你们本人很能耐。如果你们一个人加十个人的能耐,那这个世界还得了,你们就五万个研发人员了,五千人一个人加十个人,人人都升了小官,人人饱和配股都长了,人人工资级别都长了,我管十个人,伍长怎么还能不叫长吗?那你们不就是千夫长了吗?千夫长在秦国就是最大的官了,领一千个兵还得了,你何乐而不为?一个人团结越多的人,一个人才能做小事。核心网就要从明天的关闭走向凋谢,要敢于凋谢,咱们公司所有策略都是在网上颁布的,为什么咱们敢颁布?跟你们讲讲这个观点。 咱们要做好云平台,云业务。咱们很有钱,咱们容许第二平台、第三平台的呈现。因为你不晓得明天搭建的平台是不是最优良、最先进的平台、是效益最高的平台,你不敢说。容许异见,就是策略储备。这个云平台的后退过程中咱们是强调了鲜花要插在牛粪上,来到了传统网络,咱们的云就不能生存。但咱们基于电信网络这个货色做云平台,云马上就能够用。容易促成它的成熟。 信息网络的将来其实就简单化到两个货色,一个是管道一个是云。将来管道的直径至多是太平洋,相对不是黄河长江,在你们的概念中还停留在黄河长江上,这么大水流就行了,最多是洪峰。我认为不是洪峰,我认为是电影《2012》。要看看这就是想像不到的信息网络的将来。所以说“云水谣”,咱们认为管道里流的是水,天上飘的是云,水是比拟有固定形态、有稳固的流动,有严格的程序与代码,而云是飘渺的,时有时无的,变幻多端的。咱们打造的电信管道的平台是要有稳固的水流量的,水是不可压缩的,有正当的治理。然而云在天上变幻无穷,方才还在雷鸣电闪,忽然没有了,变成五彩云霞了。怎么适应将来新世界,我认为华为是不适应的,因为华为绝大多数的人是修万里长城的,踏踏实实做事华为很适合,然而做云华为不适合,你们用过来修万里长城的方法,修完了导弹一来,长城就没有用了。 华为公司这么多年来最大的问题就是不容忍歪门斜道的人,因为咱们砌万里长城砌得太长了,咱们只包容修长城的人,就不容忍天上飘来飘去的几朵云。咱们要用广阔的心怀容得下这个世界,容得下这个世界,世界能力容你,容得你只有在这个世界赚一点点小钱你花都花不完。所以我在你们云这个团队多讲一点话。你们要能多批评本人,你们能力领导世界。 以我为主,增强开发,以人为主,我违心积极合作;我放弃“深淘滩,低作堰”的态度,多栽花少栽刺,敌人遍天下。 单干联盟咱们要致力向思科学习,咱们容许你成长,成长到肯定水平我买过去也行,单干也行,什么形式都能够思考。 咱们还是深淘滩,低作堰,就是咱们不想赚很多的钱,然而咱们也不能老是亏钱。低作堰嘛,咱们有薄薄的利润,多余的水留给了客户与供应链。这样我就能放弃生存能力,你只有活到最初你肯定是最厉害,因为你每次单干的时候都要跟强手竞争,留着活下来的都是蛟龙。活下来你们之间还要竞争,所以活下来不是那么容易的。以我为主,增强开发,以人为主,我违心积极合作,我放弃深淘滩,低作堰的态度。 结束语:挺好的,你们干得不错。咱们千万不要固步自封,天外有天,楼外有楼,谁也预料不到世界云是什么样子。外部、内部就是要心怀放开。不要想到我、我、我,要想到地球、地球,你就在地球中,你要想到你未来对地球有奉献你就感到很光彩就行了。

April 10, 2021 · 1 min · jiezi

关于华为云:新春特辑发压岁钱看贺岁片AI写春联……华为云社区给大家拜年了

春!节!倒!计!时!啦! 农历新年行将到来,冷落的过年气氛逐步洋溢,华为云社区先给大家拜个早年,祝所有小伙伴们新春快乐,牛年大吉! 回望2020年,社区涌现了许多干货满满的技术文章、妙不可言的短视频、精彩纷呈的内容激励流动…… 值此岁末年初,咱们选取其中最好玩、最有料、最“有钱”的内容,打包成五个新春大礼包。无论你是原地过年,还是回趟老家,在这个特地的春节里,就让华为云社区乏味又有料的干货,陪你度过一个幸福的科技年。 也祝大家在新的一年里牛气冲天、升职加薪、技术更上一层楼。 1、Copy攻城狮信手”粘“来 AI 对对联 农历新年将至,用ModelArts训练一个AI对联神器,实现春联主动生成。华为云也推出了AI写春联、送祝福的小程序(微信搜寻『EI体验空间』),一起来感触满满的年味。 2、零代码创立专属聊天机器人,拜年猜谜陪唠嗑 华为云对话机器人产品专家鑫哥,手把手教你零代码创立虚构小伙伴,小白也能疾速上手,过年在家和它唠唠嗑。 【这个春节不远行,云上充电任你赢】来华为云社区,接工作领新年红包啦 华为云社区内容共创者炽热招募中,收费学习大厂材料,晋升内容编辑能力,整顿输入积淀思考,还能赢取红包处分。 1、大型魔幻悲剧贺岁片之包不同的沙雕麻利,看天选之子如何逆袭 华为云DevCloud麻利专家组倾情贡献,独创开发者大男主逆袭降级流剧情:包不同路遇令狐少侠赠秘籍,300页《独孤十剑》不要998,只有50块,教你10种语言“hello world”写法,是骗子还是扫地僧,且看大男主如何从沙雕小白转型为麻利大牛。 2、菊厂老王的一分钟DBA秘籍,专治数据库疑难杂症 菊长数据库技(颜)术(值)担当王大捶,带你一分钟解决数据库上踩过的雷、躺过的坑。比方:数据库内存占用过高怎么办?游戏上线发现性能故障咋办…… 3、DevCloud专家出品:一张卡片学会麻利外围知识点 文章太长看不下去怎么办?常识卡来帮你。常识卡是将一篇麻利&DevOps文章的外围精髓内容汇聚到一张卡片上,涵盖人和组织、工程办法、最佳实际等等,诸如大牛走了,你怕不怕?工作指派没人认领,我要咋整? 4、我的API进阶之路:从被实习生看不起,到成为公司技术委员会副主席 20期小故事,看“我”是如何靠着各种API提供的能力,一路打怪降级,从最后被实习生看不起的“前浪”到起初成为公司技术委员会副主席,并且帮忙市场、经营团队解决了很多业务难题,甚至到最初独立做出了胜利的我的项目,失去投资人的青眼。 5、趣味科普小视频,一分钟带你上云 短视频这么火,上云怎么能少了它,继【云图说】和【云小课】,华为云新的科普系列【云视听】重磅来袭,以轻松风趣的短视频模式,科普上云的常识,助大家轻松上云。 1、【新手入门系列】一站式学练考,轻松入门华为云 从云服务器、块存储到大数据,6门微课带你麻利入门华为云。4个沙箱试验,60分钟即可实现云服务操作现网体验,学完还能取得华为云的职业认证,收费课程,快快退出。 2、【AI业余学习门路】华为云学院重磅打造,2021年不可错过的普惠AI课程 华为云资深AI专家倾囊相授,1 VS 1答疑,带你由浅入深开启AI学习之旅。在这里,你既能理解数学、Python的基础知识,也能够系统地学习机器学习、NLP、生成反抗网络、强化学习等热门AI技术域,春节假期学习充电整起来。 1、从数据库科普到核心技术解读、上云案例分享,全方位分析云数据库 华为云数据库全景科普从数据库选型到业务上云,浅析数据库的前世今生布局十余年,华为云数据库核心技术全公开企业数据上云案例分享2、海量实战经验教你零门槛进场AI开发,无老本累赘玩转AI利用 华为云带你走进人工智能的世界华为云AI技术全揭秘,深度解读关键技术能力玩转AI技术,手把手教你开发趣味AI利用开发者转型记,分享AI开发的酸甜苦辣3、读懂云原生2.0,看它如何重塑业务开发架构 从外围四因素意识云原生走进Cloud Native,华为云带你认知云原生技术的跃迁云原生语境下,如何帮忙企业进行架构优化利用企业级开发,看华为云云原生技术实际最优解云原生架构将来发展趋势4、“端边云”IoT全栈技术大揭秘,开发实战指南带你轻松上手IoT “端、边、云”平面解读华为云IoT产品技术认知IoT产品技术的开发实质听开发者讲述他们的IoT故事小熊派IoT开发板开发实战指南更多技术专题请 点击链接 查看。 点击关注,第一工夫理解华为云陈腐技术~

February 9, 2021 · 1 min · jiezi

关于华为云:春节不远行云上过大年来华为云社区接任务领新年红包啦

华为云社区诚邀更多技术写作人及有志于成为内容创作者、 酷爱技术分享的同学退出华为云社区。 在这里,咱们将独特学习、分享与成长, 共建华为云社区,不辜负这全新的内容时代! 从当初开始, 华为云社区将不定期公布社区内容共创工作, 共创者支付工作并实现, 可获取相应处分! 01.工作介绍▶ 文章编辑整理类:针对音视频、PDF等文件进行文章整顿,准确度高,体现技术重点,造成可读性较强的文章,图文联合,题目具备吸引力,字数依据理论文件内容进行要求。 ▶ 专题内容整顿类:将华为云社区优质内容依照专题类别编辑整理成册,造成合集。 ▶ 内容翻译类:针对海内优质内容进行翻译整顿,准确度高,可读性强。 ▶ 其余更多任务不定期更新。 02.处分依据文章字数、文章品质、文章浏览量等次要指标,华为云社区编辑部进行综合考核,给与稿酬, 50~200元/篇。 第一波工作已来袭!优良的你筹备好接招了吗? 这个春节不远行,宅家充电云上见,工作悬赏看你赢,压岁红包发不停!!! 点此立刻报名 ▶ 工作:将以下5个华为云HDZ专家直播视频+PDF资料编辑整理成为技术文章,每个工作由1人实现。 1.【HDZ研习社】微服务实际暨北京HDZ授旗仪式 点此查看视频 点此下载PDF文件 2.【HDZ研习社】我写的代码合规吗 点此查看视频 点此下载PDF文件 3.【HDZ研习社】学 Python 不走弯路,工程师速成路线 点此查看视频 点此下载PDF文件 4.【HDZ研习社】华为云助力开放平台生态建设 点此查看视频 点此下载PDF文件 5.【HDZ研习社】新基建下的金融科技 点此查看视频 点此下载PDF文件 ▶ 文章内容要求:文章内容需准确度高,体现技术重点,造成可读性较强的文章,文章字数不少于2000字,以Word文档模式输入。 1、文字简练:通过谨严和业余的文字进行文章整顿,不可间接复制速记内容,无错别字; 2、思路清晰:整篇文章逻辑清晰,观点输入精确,语句通顺; 3、构造工整:构造明显,排版工整,文中须要用小标题进行宰割(不能单纯是数字); 4、图文并茂:“一图胜千言”,可能在文中精确的配图,让文章内容更加丰盛; 5、引人入胜:文章题目、内容具备吸引力,抓人眼球,文采好,为加分项。 ▶ 参考案例: 1、 从GaussDB(for MySQL)看全自研数据库的正确打开方式 视频链接:bbs.huaweicloud.com/videos/1034… 文章链接:bbs.huaweicloud.com/blogs/19989… 2、开发者如何抓住时代时机,学好AI? 视频链接:bbs.huaweicloud.com/videos/1034… 文章链接:bbs.huaweicloud.com/blogs/19988… ▶ 报名工夫:2021年2月3日—2021年2月10日 ▶ 报名形式:点此立刻报名 名额有限,先到先得!报名胜利后,工作人员将在2个工作日内进行审核,通过审核后工作人员将与您分割进行任务分配。 ▶ 交稿工夫:2021 年2月28日之前 如有任何问题,可增加华为云社区小助手微信号:bbs_huaweicloud,进行沟通征询。增加微信时请务必备注:内容共创+报名流动时应用的华为云昵称。 还等什么?速来退出华为云社区,原地充电支付新年红包,和我一起吧!

February 4, 2021 · 1 min · jiezi

关于华为云:ModelArts-AI-Gallery与HiLens-Kit联合开发丨行人社交距离风险提示Demo

摘要:本Demo应用YOLOv3_Resnet18模型来检测的视频流中的行人,获取行人坐标(即图中蓝色方框),而后计算所有检测到的人之间的互相“间隔”。前情提要听到行人社交间隔危险提醒是不是感觉有点不太明确,简略来说,就是通过某一角度的视觉信息,判断行人的社交间隔状况,让咱们间接看视频来体会吧。 这是在华为HiLens Kit上部署推理保留的视频,通过计算行世间社交间隔给出“High Risk” 或“Low Risk”的提醒,上面来具体介绍一下。 社交间隔检测介绍本Demo应用YOLOv3_Resnet18模型来检测的视频流中的行人,获取行人坐标(即图中蓝色方框),而后计算所有检测到的人之间的互相“间隔”。这里要留神的是和现实生活中应用的长度单位来掂量间隔不一样的是,在计算机视觉世界中应用的是“像素”,一种简略的办法是依据行人坐标来计算检测到的两个人的质心,也就是依据检测到的指标框的核心之间相隔的像素值作为计算视觉世界中的“间隔”来掂量视频中的人之间的间隔是否超过平安间隔。 Demo次要分为两局部:行人检测和社交间隔计算,大体流程如下: 应用YOLOv3_Resnet18算法检测输出视频或视频流中的所有行人,失去行人坐标,并依据此计算地位信息和质心地位;依据第1步的信息,计算所有检测到的行人的人质心之间的互相间隔;依据上一步计算失去的社交间隔,比照事后设置的平安间隔,从而计算每个人之间的间隔对,检测两个人之间的间隔是否小于N个像素,小于则处于平安间隔,反之则不处于平安间隔。这里应用的是YOLOv3_Resnet18算法来进行行人检测,事实上,可替换为任何一种指标检测算法,只有输入行人坐标合乎本Demo要求程序即可,比方性能更为低劣的YOLOv4,甚至YOLOv5等等,值得一提的是在PC端的实现是基于最新的、训练和推理性能最佳的YOLOv5-s模型实现的,如果须要能够参考本文最上面参考局部的[[1]](https://github.com/ChargedMon... "https://github.com/ChargedMonk/Social-Distancing-using-YOLOv5") 或[[2]](https://github.com/Akbonline/... "https://github.com/Akbonline/Social-Distancing-using-YOLOv5")([1]比[2]更加具体具体,容易上手,举荐应用)。但YOLOv5是基于PyTorch实现的,不不便转换为HiLens须要的om模型应用,庆幸的是能够通过PyTorch——>onnx——>om来应用,这一点我正在尝试,也期待有优良的同学退出进来。 上述的YOLOv3_Resnet18、原版YOLOv3_Darknet53以及最新的YOLOv5算法都能够在ModelArts AI Gallery找到哦,不仅提供了预训练模型,同时也很方便使用,小白也能起送上手,奉上链接: YOLOv3_Resnet18 GPU版本 TensorFlow:https://marketplace.huaweiclo... YOLOv3_Resnet18 Ascend 910版本 TensorFlow:https://marketplace.huaweiclo... YOLOv3_Darknet53 GPU版本 TensorFlow:https://marketplace.huaweiclo... YOLOv3 Ascend 910版本 TensorFlow:https://marketplace.huaweiclo... YOLOv5 GPU PyTorch:https://marketplace.huaweiclo... 怎么样,是不是十分丰盛,抉择多多呀?能够试手一下哦,会发现应用起来也是很简略的,留神ModelArts和OBS破费哦。 本Demo抉择的是第一个——YOLOv3_Resnet18 GPU版本 TensorFlow,因为本Demo只须要对行人进行检测,所以抉择了模型构造简略,训练和推理速度快的YOLOv3_Resnet18,节俭训练工夫,也就是节俭训练老本呀。在训练方面,应用了来自开源行人数据集整顿的数据集,因为只有person这一个标签,相比于COCO数据集80个标签,训练和部署推理更加具备劣势,这里奉上 AI Gallery的数据集链接,没想到吧, AI Gallery不仅有算法,还有数据集,满足你的所有须要,有没有哆啦A梦的口袋的感觉(我抵赖我有一点夸大) Person-4192数据集链接:https://marketplace.huaweiclo... 如果你还想训练蕴含其余类别的状况,比方Person and Car,可参照如下。当然,一般来说,数据集越大,鲁棒性越好,这里的数据集较小,能够自行应用更大的数据集。 实操介绍次要麻烦的局部是行人检测模型的训练,如果为了不便,能够应用基于COCO的预训练模型,在GitHub有很多。这里心愿是从数据集筹备开始,到订阅算法,实现训练,到HiLens Studio调试,并最终部署,体验下基于ModelArts和HiLens Kit的残缺开发流程,因为以前介绍过,这里就不在赘述,详情可参考我的博文——开发教程 | 基于ModelArts与HiLens端云协同开发行人检测与跟踪计划,博文介绍的较为具体,如果有问题,能够分割我。值得注意的是这篇博文是介绍行人跟踪以及行人计数的,如果有趣味的话,能够联合这篇博文与本博文,实现更加欠缺行人检测、跟踪以及社交间隔检测的计划,置信在社交间隔检测的根底上退出跟踪和多种人数统计计划会更加切合实用,性能更加弱小。 对了,我把技能公布到技能市场了,名字是Social-Distancing-using-YOLOv3-HDMI,审核通过后,大家就可能订阅应用了,技能市场会集了官网和第三方开发的技能,可能高效便捷地将本人开发的技能分享给别人应用,而且从分享到别人订阅以及部署到HiLens应用,齐全基于网络实现,十分不便,极大促成了技能的共享。 开发体验整体基于ModelArts和HiLens Stuio 1.5.0开发,参考开源代码实现,很羞愧的是大部分内容都是人家的,自主创新性很少。不过整体开发还是很顺利的,从失去模型到在HiLens Studio调试实现来说,不到一个下午就能搞定了,这是极致效率的体现,这得益于在线IDE HiLens Studio的应用,作为一款线上IDE,提供了开发,调试的残缺性能,甚至能够在线运行调试,间接失去程序运行的可视化后果展现。同时提供了丰盛的模板,基于模板开发,大大提高开发效率。 总的来说,好像在线有了一个本人的HiLens Kit一样,只有连贯到网络,开发HiLens Stduio就能开发了,调试胜利后还能够一键装置到本人的HiLens Kit上,让开发变成一件很爽的事件,而且HiLens Studio也在不断完善中,与我第一次应用最后版本相比,稳定性和性能都有了很大的晋升,比方下图中红色剪头所指局部,就是起初增加的,不便开发者调试,置信研发人员也是付出了不少心血和致力,非常感谢。 ModelArts也在飞快成长,开发环境除了最后的NoteBook,也有了界面和性能更加欠缺的Jupyter Lab,最新测试的在线切换硬件配置,能够进行CPU和GPU,以及不同配置CPU和GPU的在线切换性能,这一点一滴地扭转不便可开发者的应用,拉近了开发者与ModelArts的间隔,置信ModelArts在将来会更加茁壮地成长。 留神的是,我是用的是HiLens Studio根底版,多人共用,所以有时候可能因为资源缓和,导致占用,从而运行出错,这时候能够通过创立官网案例模板运行来判断是否资源占用,一般来说,如果官网模板也运行报错,可能就是资源占用,能够思考应用付费版,但须要额定费用哦。 ...

February 2, 2021 · 1 min · jiezi

关于华为云:挑战多跳知识推理华为云登顶HotpotQA

摘要:华为云语音语义翻新Lab联结华为诺亚方舟实验室在国内权威的HotpotQA评测Fullwiki Setting赛道荣登榜首,在答案含糊准确率和联结含糊准确率(Joint F1)等指标上均达到第一。日前,华为云在常识计算畛域的多跳常识推理问答获得重大进展。基于自然语言解决畛域的当先技术积攒,华为云语音语义翻新Lab联结华为诺亚方舟实验室在国内权威的HotpotQA评测Fullwiki Setting赛道荣登榜首,在答案含糊准确率和联结含糊准确率(Joint F1)等指标上均达到第一。 HotpotQA__评测(Fullwiki Setting赛道)最新榜单(截至2021年1月20日) 作为企业重要的信息载体,数字化文档记录了大量企业常识,如何疾速帮忙企业员工从数字化文档中取得答案,是企业文档保护人员的痛点。为解决此问题,一方面须要较强的浏览了解技术,另一方面还须要构建一套简单的凋谢域问答流程。 HotpotQA评测数据是斯坦福、CMU和蒙特利尔大学联合推出的新型问答数据集,由斯坦福的Manning传授和深度学习三巨头之一的Bengio牵头构建,该数据集由多跳简单问题以及对应的答案组成,同时蕴含佐证证据用来解释答案的起源。在斯坦福此前颁布的SQUAD评测工作中,机器曾经屡次超过人类,该评测仅须要从单个篇章中找到与问题无关的答案即可,故绝对简略。然而,HotpotQA评测须要从整个wikipedia或者多篇文章中找出问题相干的答案,同时要求返回问题到答案的推理链,难度大大增加更具备挑战性。该评测也吸引了来自谷歌、微软、Facebook等出名钻研机构以及CMU、Stanford、华盛顿大学、清华大学、北京大学等出名高校。 挑战多跳常识推理技术高点 HotpotQA评测的难点在于机器要联合多篇文章进行多跳推理能力得出答案,并返回佐证证据。该评测分为Distractor Setting和 Fullwiki Setting两个赛道。Fullwiki Setting相较于Distractor Setting更为简单也更靠近实用价值,须要从整个维基百科文档中抽取文档,而后再从文档中提取段落,最初从段落中抽取答案,而Distractor Setting赛道会提供10篇备选的篇章。如何从大量文档段落中去多跳搜寻候选,而后了解候选段落的内容提取佐证证据成为较量的要害。 华为云联结华为诺亚方舟实验室,提出了新的检索指标hop,用于收集维基百科中暗藏的推理证据,解决简单多跳问题,同时联合beam search对答案进行排序和交融。 从维基百科文本图谱中检索跳转(Hops) 现在,企业面临着数字化、知识化转型,知识化转型重要的关键技术就是常识的了解和推理,该技术对企业常识转型具备重大的意义和推动作用。2020年华为云推出常识计算解决方案,企业能够基于华为云常识计算解决方案打造本人的常识计算平台,用于研发、生产、经营、销售、售后服务等企业外围流程。目前,该计划已在石油、汽车、医疗、化纤、煤焦化、钢铁、交通等行业率先实际。 点击关注,第一工夫理解华为云陈腐技术~

January 25, 2021 · 1 min · jiezi

关于华为云:华为云云原生解决方案再获行业大奖持续引领云原生-20-时代

12 月 18 日,我国软件和信息技术服务产业年度最高规格精英盛会 —— 2020 中国软件大会在北京举办。凭借翻新的技术、当先的产品竞争力以及丰盛的产业落地实际,华为云云原生解决方案荣获 2020 中国软件和信息服务业云畛域最佳解决方案,继续引领云原生 2.0 时代。 华为云利用平台畛域副总裁汪维敏受邀缺席并发表主题为“拥抱云原生2.0,赋能‘新云原生企业’”的主题演讲。 汪维敏示意: “云原生2.0是企业智能降级新阶段,企业云化从‘ON Cloud’走向‘IN Cloud’,成为‘新云原生企业’,新云原生企业既须要让新生能力生于云、长于云,把AI、大数据、边缘计算、视频等新生能力用于企业,同时也须要继承和倒退既有能力,并与新生能力立而不破、有机协同。云原生2.0,让每一个企业都能成为新云原生企业。”汪维敏从资源高效、利用麻利、业务智能等方面解读了华为云云原生解决方案如何赋能新云原生企业智能降级: 1、资源高效: 华为云开创性的提出“以利用为核心”的云原生基础设施理念,反对多元算力,满足不同利用场景的个性化算力需要,基于华为云擎天架构的软硬协同能力,为利用提供极致性能的云原生算力;同时,基于多云治理和边云协同,打造高效、高牢靠的分布式泛在计算平台,并构建包含容器、裸机、虚机、函数多种资源的对立计算平台,让传统企业应用与云原生利用能更好的协同;并以“利用”为核心打造规范、凋谢的企业应用生命周期治理平台,为企业提供一键式部署、可感知利用的智能化调度、全方位监控与运维能力,使利用生命周期治理更高效、智能。 2、利用麻利: 华为云 DevCloud 反对全流程 DevSecOps,3 种开发模式笼罩 7 大开发场景,实现 10 倍效率晋升,让利用开发更麻利;华为云微服务解决方案具备双栈和全场景两大特点,业界最强,让利用治理更灵便;华为云能实现传统利用和云原生利用并存、协同,让利用集成更高效。 3、业务智能: 华为云通过 FusionInsight 及数据使能服务 DAYU,GaussDB 数据库,实现云原生的数据使能,助力企业把数据资源加工为数据资产,AI 能力贯通数据处理流程,实现数据智能化治理;云原生加持的常识计算解决方案和一站式 AI 开发平台 ModelArts 从常识高效、模型高效、算力高效、数据高效四个维度登程,减速行业 AI 落地。 此外,华为在企业平安方面释有近 30 年的技术积攒,能为企业提供技术、产品、平安合规能力教训以及平安治理体系等全方位的平安服务,为新云原生企业保驾护航。 目前,华为云云原生已宽泛服务于泛互联网、政府及公共事业、汽车、制作等十多个行业,并获得了胜利的市场体现,是云原生实际的引领者。除了丰盛的行业实际,华为云在云原生技术与产业倒退方面也是取得了开源组织、产业机构、第三方分析师机构和媒体的高度认可,成为云原生技术与产业倒退的引领者。 为推动各行各业拥抱云原生 2.0,减速数字化转型,成为“新云原生企业”,12 月 30 日,华为云将在深圳“云原生 2.0 技术峰会”,本次峰会各界精英将齐聚一堂,共话云原生的前沿技术,分享行业利用实际,独特探讨“新云原生企业”的成长之道,值得关注。

December 24, 2020 · 1 min · jiezi

关于华为云:在员工四处出差的年末为你准备一份云会议的完美攻略

会议始终在公司工作中承当着重要的责任。 无论是小型会议还是大型会议,都是明确工作、调配工作内容、进行工作反馈的重要存在。 通过2020,想必大部分企业也意识到云会议的重要性,会议一直,工作一直,公司能力兼顾员工向着统一的指标后退。 私有云会议,在提供互联网接入的便利性的同时,简单不稳固的网络环境对实时音视频成果会产生十分间接的影响。同时,数据在互联网上传输,安全性也是客户关注的焦点。尤其波及到跨国、涉外沟通等场景,使得云会议对网络的超强适应性、稳定性以及安全性有更高的要求。这就须要业余的音视频技术以及全面的安全性设计来解决这些问题。 明天小编带了一个云会议利器,让企业云会议再也不愁。 那就是——华为云会议,企业协同办公上云优选,让沟通合作更高效! (购买网址先放这里了:http://t.cn/A6qxalzb) 华为有着近30年的音视频技术积攒,1000多项音视频畛域专利技术,积攒了业界当先的音视频媒体解决技术。华为云会议,基于华为云架构和弱小的音视频媒体技术,解决互联网简单不稳固的网络环境对实时音视频的带来的影响,同时云、管、端全方位的平安防护设计,提供高清、稳固、平安的语音、视频、数据会议。 华为云会议反对电脑、手机、业余视频会议终端、智慧大屏等全系列终端的接入,提供端云协同交融体验,无线投屏、白板共享、多人标注、实时翻译、主动纪要等,带来更加天然交互的文档和数据合作。 这么业余的产品,也不是非得大笔资金投入能力享受哦。好货不怕比,华为云会议为新用户提供 45 分钟的免费版,对华为云会议不理解的敌人们能够纵情注册,试过之后再买,刚好最近华为云推出了“12.12会员节”流动,华为云会议折扣来袭,能为有云会议需要的企业省一大笔钱。 同时,对于不同企业的不同场景需要,华为云会议提供了丰盛的产品类型和套餐类型。首先是能满足许多企业需要的会议产品,比照一般的网络视频会议,华为云会议提供云会议室,能录播会议记录,会议并发、硬件插入、直播云服务也能一键满足,使用产品更为丰盛。 如果公司对于云会议室有更高要求,华为云会议还提供端云协同会议解决方案,联合云会议+业余视频会议终端,具备更交融统一的会议体验。华为云会议宝套餐,只需购买一台会议宝大屏,即买即开明即激活,马上就能应用。比方S 65套餐,能够满足 10 方的会议并发+50方云会议室,服务时长长达一年,在“12.12 会员节”进行购买,还能省下 2600 元。 随着2020年云招商、云签约、云招聘、云公布、云展现等各种云上新场景和新业态的涌现,云会议已成为各行各业高效合作的利器,让业务不受地区限度,顺利开展。 为了能有更加业余和优质的会议体验,强推各家企业购买华为云会议,不谈12.12会员节有优惠,华为家的云会议真的很好用啊!

December 18, 2020 · 1 min · jiezi