关于人工智能:这个国人自研的AI模型开发平台搞深度学习的你还没听说过吗

26次阅读

共计 1490 个字符,预计需要花费 4 分钟才能阅读完成。

之江实验室是浙江省委、省政府深刻施行翻新驱动倒退策略、摸索新型举国体制浙江门路的重大科技翻新平台,明天要介绍的这款开源我的项目就是来自之江实验室牵头的一款人工智能开源开放平台——天枢。

之江实验室自 2018 年 10 月启动人工智能开源平台研发,到 2019 年 1 月获国家发改委我的项目反对,再到 2020 年 8 月开源上线,“之江天枢”团队近百名研发人员,历时 650 余天科研攻关,胜利实现平台第一个版本的研制,并上线具备独特性能劣势的计算框架、开发平台和工具组件。经验了半年多的迭代,当初曾经进化至 v0.3.0 版本,并在 Gitee 上开源。

项目名称: Dubhe

我的项目作者: 之江天枢

开源许可协定: Apache-2.0

我的项目地址:https://gitee.com/zhijiangtianshu/Dubhe

我的项目简介

天枢人工智能开源开放平台 (简称: 天枢平台)是由之江实验室牵头,联结北京一流科技、中国信通院和浙江大学独特自研的人工智能开源平台。整个平台由一站式 AI 模型开发平台、高性能深度学习框架(OneFlow)和模型炼知框架三大子系统组成。

其中,一站式 AI 模型开发平台 (简称: 一站式开发平台)面向 AI 模型生产的生命周期,提供了包含数据处理、模型开发、模型训练和模型治理等性能,不便用户一站式构建 AI 算法。

我的项目架构

我的项目预览

我的项目特点

开发敌对

天枢第一个版本反对从数据管理、模型开发、训练治理到模型治理的全链路性能,数据管理还能实现数据的智能标注与数据加强。

训练高效

之江天枢平台的分布式训练框架反对数据并行、模型并行、流水并行三种并行模式,能依据不同模型主动编排相适应的并行模式,同时具备杰出的线性减速比,数据并行性能有了较大幅度的晋升。

此外,天枢还自研了高效通信协议,原生反对 RDMA;同时还反对多种深度学习编译器,多芯片轻松实现软件定义数据流,对 AI 芯片敌对兼容。

可视化剖析

在模型训练过程当中,开发者可能直观、实时地洞察模型构造、参数趋势、降维剖析等重要信息。通过可视化剖析,辅助参数调整,从而扭转训练门路。

模型炼知

以后支流深度学习算法构建过程通常须要通过数据处理、模型开发和大规模训练计算等步骤来生产模型,而本次天枢推出了全新的模型生产方式“模型炼知”,通过当先的模型重组炼知技术,实现灵便按需定制模型。

天枢的深度模型炼知框架具备度量性能,可能主动度量多个视觉模型是否可能进行重组,并通过逐层重组、独特特征提取、多任务自适应分支解码等,将不同模型构造进行重组,间接生产出一个全新的模型,利用在新的场景。

在天枢模型炼知框架上,只有输出两个预训练模型,框架能重组出一个新的多任务模型,该模型能够同时解决两个工作,不仅晋升了计算效率,升高了能耗,还加强了模型的能力边界。

倒退布局

截至目前,天枢平台曾经汇聚了阿里云、蚂蚁金服、新华三(H3C)、海康威视等数十家家生态搭档。

在后续版本中,天枢将进一步丰盛算法库,搭建面向视觉的 AutoML 平台,实现拖拽式模型开发。还将进一步优化分布式训练性能,一直进步训练规模与并行效率,最终造成去中心化式分布式训练。同时,高效的端侧推理平台在研发打算中,将欠缺部署环节,实现端侧推理性能。

值得一提的是,为反对企业倒退,无力扩大企业生态,天枢平台反对中小微企业收费应用,进一步推动人工智能技术向各行各业浸透利用。

当初 Dubhe 已正式在 Gitee 开源,如果你是深度学习的开发者和爱好者,那么这个一站式深度学习开发平台肯定是你不可错过的一站,当初就去我的项目主页给它一个 Star 吧:https://gitee.com/zhijiangtianshu/Dubhe

正文完
 0