关于人工智能:刷新大模型世界观

39次阅读

共计 4312 个字符,预计需要花费 11 分钟才能阅读完成。

近日,OpenAI 发表,安卓版 ChatGPT 已正式上线。在间断几个月 ChatGPT 的网站与挪动客户端的寰球流量(PV)环比继续降落的状况下,安卓版 ChatGPT 的推出是否让 OpenAI 再度引爆市场?

ChatGPT 只是露出海平面的冰山一角,实际上由生成式 AI、大模型等激发的新一轮 AI 利用热潮始终在继续升温,且影响极其深远。从 2022 年底 ChatGPT 的爆火开始,人们对大模型自身的关注度一直低落,国内不拘一格的大模型也不断涌现。现在半年多过来了,人们对于大模型曾经见怪不怪,反而对大模型如何与行业场景相结合并减速落地倾泻了极大的激情。

中国科学技术信息研究所公布的《中国人工智能大模型地图钻研报告》显示,截至 2023 年 5 月 28 日,国内 10 亿级参数规模以上的根底大模型至多已有 79 个。所谓的“百模大战”曾经箭在弦上。迎接数智化时代的到来,通用模型与垂类模型会互相倾轧还是各领风骚?算力、数据与根底软件三大因素的同频共振,将是决定大模型落地的要害?答复这些问题,从 AI 企业到行业用户,将持刷新大模型世界观。

“垄断派”与“扩散派”之间的博弈

大模型真的“大”到遥不可及吗?实际上,业界对于大模型的钻研早已有之,只不过 ChatGPT 是最先产品化并实现商业落地的。回顾历史,在领有相对技术代差的状况下,Google 搜索引擎的确具备一枝独秀的资本。另一个例子,已经名闻遐迩的 Netscape 浏览器,在推出后差不多一年半的工夫内简直垄断了整个市场,但最终还是不敌 IE 浏览器,黯然退出了历史舞台。由此可见,如果在技术上没有相对的代差,那么由产品飞轮带来的红利可能维持多久,须要打上一个大大的问号。说回到 ChatGPT,OpenAI 利用产品飞轮拉开的差距,或者还不足以成就其市场垄断位置。换句话说,在没有相对技术代差的状况下,仅依附产品飞轮带来的临时当先,是有其脆弱性的。国内大模型厂商的迅速崛起与产品上的继续迭代也证实了这一点,国内外在大模型研发上的差距正逐步放大。

大模型市场上慢慢造成了两大阵营——一方是以 OpenAI 为代表的“垄断派”,它们领有核心技术,以自有大模型为杀手锏;另一方能够称作“技术扩散派”,包含芯片厂商、云算力厂商和数据根底软件厂商等,它们是 AI 生态中的一份子,致力于为大模型的落地、AI 利用的遍及提供必要的撑持。

大模型的呈现是 AI 技术上的一次冲破,是泛滥技术中的一个里程碑中。以此为契机,每个企业都能够领有或建设属于本人的大模型,从而更好地达成本人的商业指标。九章云极 DataCanvas 董事长方磊指出,相比已经的搜索引擎市场的博弈,大模型的垄断派和技术扩散派之间的博弈很可能是一个更加长期、简单、强烈的过程,在此过程中,给每个企业和组织带来的影响也会更加深远和粗浅。有足够技术能力的企业能够开发本人的大模型,而不具备单打独斗能力的,则能够借助开源社区的力量达成指标。从久远来看,大模型终究会成为业务翻新的刚需,然而获取的路径能够是多样化的,同样用户的抉择也是多元化的。

ChatGPT、大模型踊跃的意义在于,它让咱们真实感受到,原来一些不敢想、不敢做的事件,当初曾经有技术能够胜任。特地值得一提的是,大模型对算力、云和根底软件带来了颠覆性的影响。在云计算的上半场,主力是挪动互联网,反对的次要是带宽密集型利用,比方网站、APP 等,其最突出的需要是弹性扩容能力。在这个阶段,私有云是重带宽而轻算力的。然而进入云计算的下半场,随着 AI 浪潮的又一次衰亡,整个市场的驱动力变成了算力,人们谋求的是更高的效率和更低的老本。比方,实现一次大模型的训练是 400 万元还是 500 万元,这才是人们关注的焦点。“云计算迈入‘深水区’,算力和 PaaS 的销售比例将越来越高。”方磊示意,“‘算力即是国力’。在‘东数西算’刚提出来时,有人可能会质疑,真的须要这么多的算力吗?然而在进入以 AI 为驱动的算力密集型利用时代,人们不禁会感叹,‘东数西算’这一开释算力需要的动作真的是高瞻远瞩。由 AI 驱动的中国算力建设会掀起一次真正的‘狂飙’。”

对于大模型的落地而言,根底软件是重要的前提。这也是为什么越来越多的软件厂商在大数据平台、向量数据库、湖仓一体等方面加大投入力度的重要起因。以前,根底软件存在较大的性能与老本上的差异化。因而,软件、模型与硬件的对立优化空间微小。“弱小而灵便的根底软件、凋谢弹性的白盒模型,再加上精通业务的专业人才,将减速实现大模型落地‘最初一公里’的逾越。”方磊示意,“为此,咱们重磅推出了 AIFS(AI Foundation Software)人工智能根底软件 & DataPilot 数据领航员产品体系,为 AI 利用的落地夯实基础设施平台。”

通用模型、垂类模型相辅相成

2023 年 3 月,彭博社公布了专为金融畛域打造的大型语言模型(LLM)BloombergGPT。它基于彭博社的金融数据源,以开源的 GPT- 3 框架为根底,构建了一个 3630 亿个标签的数据集,可能更好地解决金融畛域的数据和工作。通用大模型与面向行业和企业的垂类大模型,谁能在商业市场上最先叫响?

“有券商已经向咱们征询,是否一起开发一个相似 BloombergGPT 的证券行业大模型?”有一段时间,方磊始终被客户相似的询问所突围。从需求方来看,的确有一些大型央企以及金融行业头部企业对大模型十分感兴趣。一方面,出于业务翻新的思考;另一方面,也是因为“数据边界”问题,因为与业务密切相关的私域数据不能“走出”公司,因此无奈间接采纳通用大模型,所以心愿构建属于本人的垂类大模型。

从供给方来看,比方云算力厂商,就十分心愿与九章云极 DataCanvas 这样的根底软件厂商单干,推出打包的整体解决方案,让大模型的训练更具效率且老本更优。而这也正好符合了九章云极 DataCanvas 本身的定位,即“云中云”,为云算力厂商带来根底软件方面的增值,便于行业用户训练本人的垂类模型。

Databricks 于 2023 年 4 月 12 日公布了 Dolly 2.0。据称这是业内第一个开源的、遵循指令的 LLM,用户可在通明且收费提供的数据集上进行微调,从而构建本人的商业应用程序。这也给了同类 AI 根底软件厂商很大的启发和信念,通过构建和优化 AI 基础设施、数据平台和提供参考大模型,就能让行业客户更简略、快捷地打造属于本人的垂类大模型。

在大模型狂飙了半年多当前,人们对于通用大模型与垂类大模型的构建、部署和利用有了更粗浅的认知,缓缓造成了一种共识:通用大模型会慢慢收敛,就像私有云那样大浪淘沙,最终市场上只剩下最强的几个;而市场上更多的则是面向行业和企业的垂类大模型。从将来发展趋势看,在开源的以及通用可参考的大模型之上,融入更多行业常识和企业教训的垂类大模型将层出不穷。行业龙头企业研发大模型,而中小企业在其上间接开发利用,或者将成为一种定式。

一种更切合实际的作法是像九章云极 DataCanvas 那样,“大小均波及”。作为一款行业当先的人工智能利用构建基础设施平台,AIFS 笼罩了大模型的训练、精调、压缩、部署、推理和监控,以及小模型的全生命周期过程,为数据科学家、应用程序开发人员和业务专家提供了一套工具,使不同角色的人员可能相互协作,轻松解决数据并应用这些数据来开发、训练和部署任何规模的模型。一句话,AIFS 旨在为用户自主构建全生命周期的“大 + 小”模型提供一站式反对。方磊示意:“咱们致力于打造人工智能基础设施,既要为企业构建个性化、自主的大模型赋能,又能够将大模型与以往积淀的小模型相交融,利用于业务。”

大模型的确威力微小,但它是否能够放之四海皆准,解决所有问题呢?从目前来看,一些微小的场景、尖端的利用,还是要采纳专用零碎,而碎片化的场景或者解决一些长尾的 to C 方面的问题,则更适宜采纳通用大模型。说到底,专与精是两类不同的需要。一些行业的细分需要,寄希望于通过对通用大模型进行微调就能解决问题,实际上并不可行。一方面,通用大模型并肯定具备特定行业所需的能力;另一方面,即便你想对大模型进行微调,可能也会因为大模型自身过于‘惨重’,而力不从心。从这个角度说,垂类大模型是有其存在和倒退的必要性。

AI 普惠化 任重道远

家喻户晓,微软曾经在 Azure、Microsoft 365 以及多款开发者工具中融入了人工智能性能。近日,微软首席财务官 Amy Hood 在一次分析师电话会议上示意,公司将来还将进一步减少数据中心建设老本,以便更好地撑持人工智能服务。不仅是微软,也不仅仅是美国华尔街,而是全世界都在热切期待,生成式 AI 可能为企业带来真正的收益和增值。

明天,越来越多类 ChatGPT 的大模型正在一直推出或在孕育之中,展现出微小的技术和商业后劲,但欠缺的是足够丰盛的利用场景,以及凋谢的、安全可靠、高效的人工智能基础设施。“现阶段,大模型的利用还是由翻新驱动的,并非齐全由业务驱动。”方磊示意,“大模型的普惠化是事不宜迟。”

国内外支流的云厂商不仅推出了自有的大模型,更为大模型的落地提供了欠缺的撑持,既有产品和服务层面的,也有生态、渠道方面的。比方,亚马逊云科技在近日举办的纽约峰会上发表,推出 7 项生成式 AI 翻新,包含 Amazon Bedrock 新增根底模型供应商 Cohere 和全新根底模型,Amazon EC2 P5 实例正式可用,Amazon OpenSearch Serverless 反对全新向量引擎,编程助手 Amazon CodeWhisperer 与 Amazon Glue 实现集成等。

IDC 公布的《IDC 中国 AI 私有云服务市场份额,2022》报告显示:2022 年中国 AI 私有云服务市场呈现出 80.6% 的正增长,整体市场规模达 79.7 亿元。生成式 AI、大模型等新的能力在私有云上将实现更快的更新迭代。

“大模型时代须要残缺基础设施降级,而不是依附单个大模型解决所有问题;大模型的落地将解决更艰难的问题,引起更深远的影响,而它并不比小模型更容易。”方磊如是说。

大模型带来的颠覆性并不只体现在大模型自身,而是将引发算力、数据、根底软件的一次最粗浅的改革。将来,不论大模型如何演进迭代,高性能的根底软件与数据架构都是不可或缺的“底座”,在 AI 惠普化的过程中施展根底与外围的作用。包含九章云极 DataCanvas 在内的泛滥致力于 AI 普惠化的厂商,将软件工具和解决方案作为赋能宽广行业用户的抓手,继续融入前沿 AI 翻新技术,助力其在大模型时代减速实现自主的数智化降级和 AI 规模化利用。

毋庸置疑,大模型利用终将走向普惠化。但在取得技术红利的过程中,人们也不得不在平安、监管、合规等方面投入更多精力。负责任地应用 AI,将标准、疏导大模型又快又好地落地。

正文完
 0