行业大模型,开卷!
2023-07-01 10:27:32来源:ZAKER科技
如今,通用大模型喧嚣过后,行业模型正在逐渐占据声量,也正印证这一现实:类似 ChatGPT 等基础大模型赚的是 " 吆喝 ",很大程度上是起到教育市场、塑造认知的作用,人工智能真正要落地、要赚到现在的钱,还要看行业大模型。
即便是海外市场,ChatGPT 作为 C 端产品的部分属性,热度也已经逐渐减弱——根据 SimilarWeb 数据,前期 ChatGPT 的访问量增长率惊人,1 月份的环比增长率为 131.6%,2 月份为 62.5%,3 月份为 55.8%,在 4 月份明显放缓,环比增长率为 12.6%,到了 5 月,这个数字已经变为了 2.8%,并预计 6 月的环比增长率有可能为负数。
(资料图)
" 相信我们当中的很多人都试用过了 ChatGPT,也相信很多人试用过之后,已经将它放置一边了,因为目前它和我们的工作基本上还是割裂的,所以用用就放下了。但我依然希望大家不要‘起个大早,赶了晚集’,因为这是一个会带来颠覆性变革的范式革命。" 微软(中国)公司首席技术官(CTO)韦青此前表示。
而基于 ChatGPT 或者大模型,打造的 B 端解决方案,正是解决大模型与场景割裂的良方。
国际上,微软、亚马逊等大厂也开始向企业级服务寻求商业化路径,开始进行多个行业的探索;国内,诸如百度、阿里、腾讯、华为都在快马加鞭加速行业大模型投入。此外,很多全球范围内的行业龙头和创业公司也正在探索行业大模型的前景,近日,北京市科委、中关村管委会也发布了北京市首批 10 个人工智能行业大模型应用案例。此外,相关技术路线的企业并购金额也屡攀新高……
但大模型赛道还远远称不上拥挤——伴随技术迭代迎来飞跃式发展,各行各业正重新积累技术认知、塑造业务模式,一切才刚刚开始。升级:千模大战
如果说基础模型是 " 百模大战 ",行业大模型就是 " 千模大战 ",就像树干长出树枝,每个基础大模型厂商都可以孵化数个行业大模型,大厂们的行动默契而一致。
" 虽然大家对通用大模型期待很高,但它不一定是满足行业场景需求的最优解。"6 月 19 日,在腾讯云行业大模型发布会上,腾讯集团高级执行副总裁、云与智慧产业事业群 CEO 汤道生表示。
在混元助手没有对外发布的情况下,腾讯率先发布了行业大模型,依托腾讯云 TI 平台打造的行业大模型精选商店,为客户提供 MaaS 一站式服务,帮助企业客户构建专属大模型及智能应用。从腾讯处获悉,有关 C 端的通用大模型,腾讯将在后续发布官方消息。
这一系列举措或许可以理解为,暂且不论混元基础大模型的效果和进展如何,优先发布行业大模型,是在客户急需的情况下,腾讯确保自身声量、抢占市场客户的必要之举。
更早之前,华为云人工智能领域首席科学家田奇提到,华为把大模型分成三个层级,L0、L1、L2,L0 就是大家所说的基础通用模型,像 GPT-3,在基础模型 L0 的基础上,加上行业数据,混合训练得到的行业大模型是 L1。
然后再把 L1 针对具体下游千行百业的细分场景进行一些部署,得到细分场景的任务模型 L2,为了尽快降低生产成本、提高效率,如何从行业大模型 L1 中快速生产 L2 模型,还有部署 L2 模型到端侧、边侧和云侧,这是非常重要的问题。
在 7 月即将举办的华为开发者大会的议程上可以看到,华为云将对盘古大模型如何从基础大模型炼成行业大模型进行一系列的解读和发布。
在今年的阿里云峰会上,阿里云 CTO 周靖人也表示," 今天不是所有的企业都需要从头开始训练,也不需要大家从头开始去做多种语料,包括大量的算力资源,从头开始做大模型的一系列定制,我们希望今天通义千问模型之上,结合企业的场景、企业的知识体系、企业的行业特殊需求,产生一个个企业专属模型。"
微软也在做自己的行业大模型。4 月份,在国内,针对本土出海企业用户,微软 Azure OpenAI Service 国际版发布了首批三套面向零售电商、制造业和数字原生领域的 Azure 全球创新行业场景,集成 GPT-3、GPT-4、Codex、DALL-E 和企业级 ChatGPT 等五种大模型服务,帮助中国出海企业客户加速拓展全球市场。
" 千模大战 " 一触即发,但真正进入大浪淘沙的阶段还为时尚早——整体来说,大模型还处于比较早期的发展阶段,尽管行业大模型集中涌现,但这条赛道显然有更大空间。
以金融行业大模型为例,其分成券商、保险、银行、新金融等不同领域,每个领域的下游任务又分成几十上百种的子任务。
" 更重要的时刻,是接下来基于基础模型,通过 SFT 等机制和构建出能够高效适配下游任务,并且在金融行业或者其他行业模型的下游任务产生规模效应化的时候。" 在阿里巴巴达摩院创新业务中心负责人陈海青看来,只是通过一些普适的非结构化数据做继续训练的行业大模型和场景,才算刚刚开始。
理智且现实的选择
如果企业要做一个千亿级参数的基础大模型,需要单机群万卡以上的算力,不仅要有 GPU 卡,还要把 GPU 的集群资源利用起来,大部分公司都无法做到。
而行业大模型显然更容易实现,同时也兼具更广阔的应用前景。
" 大模型赋能千行百业,但是对千行百业的场景要非常理解,不能指望训练出千亿或者万亿大模型,企业用户拿去就好用 ",澜舟科技创始人周明说。" 从通用模型到行业模型,要针对用户的场景做最后一公里的事情。"
在评估基础大模型所需要的投入,权衡利弊与得失之后,企业客户迅速转向行业大模型,厂商的精力也更多投入于此。
汤道生坦言,目前通用大模型一般都是基于广泛的公开文献与网络信息来训练的,网上的信息可能有错误、有谣言、有偏见,许多专业知识与行业数据积累不足,导致模型的行业针对性与精准度不够,数据 " 噪音 " 过大。
但是,在很多产业场景中,用户对企业提供的专业服务要求高,容错性低。企业一旦提供了错误信息,可能引起巨大的法律责任或公关危机。因此,企业使用的大模型必须可控、可追溯、可修正,而且必须反复与充分测试才能上线。
" 我们认为,客户更需要有行业针对性的行业大模型,再加上企业自己的数据做训练或精调,才能打造出实用性高的智能服务。企业所需要的是在实际场景中真正解决了某个问题,而不是在 100 个场景中解决了 70%-80% 的问题。" 汤道生表示。
百度智能云副总裁朱勇也表示," 从国内和国外的情况可以看到,真正做通用模型的并没有那么多,市面上有一些厂商做的实际上是比较小型的模型。相反,领域模型特别重要,因为通用模型只具备通识能力,领域模型可以跟特定行业、领域的任务预期对齐,解决业务的实际问题,这个过程非常重要,但这个过程所需要的代价和资源远远小于从零开始做底层通用模型。"
同时他还判断,未来基础模型(底层通用模型)可能就几家,但是结合专业领域的数据、行业 know how,上面会长出很多不同类型的领域模型,这些领域模型将来会非常繁荣,支撑上层繁荣的领域应用。
以百度智能云和国网打造的能源行业大模型 " 国网 - 百度 · 文心 " 为例,百度智能云与国网专家们一起,在通用大模型行中引入国网在电力业务积累的样本数据和特有知识,并且在训练中,结合双方在预训练算法和电力领域业务与算法的经验,设计电力领域实体判别、电力领域文档判别等算法作为预训练任务,让文心大模型深入学习电力专业知识,从而真正解决能源领域的实际业务问题,达到降本增效的目的。
朱勇表示,通用模型跟领域模型的区别,可以把通用模型比作上了大学知识面很广的人,他也许知道一些医学的知识,但不能给病人做诊断,不是专业的医生。而领域模型就是在通用能力很强的基础上,深入学习医学知识,成为了一名专业医生,可以在医学领域贡献价值。
从具备很广知识面的通用模型往专业的医学模型,这中间所需要的资源代价,要远远少于从零到一开始建立通用大模型,但它强调的是有专业的数据,要有专业领域的任务来驱动,来激发它产生这样的能力。
行业大模型怎么做
大模型本身就是一个新生事物,它改变了以往的软件开发范式,厂商们更需要一套新的工具链和平台,帮助客户更早更快打磨行业大模型。
随着大模型时代的到来,最后一公里的效率会大幅度提升。周明提到,新一代软件开发范式正在形成,主要是基于企业 prompt 提供很多功能引擎,用户现在是助手可以提高效率,在这个基础上把自己的用户体验想清楚、设计好,就很容易地构造一种新的应用。
以文心千帆大模型平台为例,是面向企业开发者的一站式大模型开发及服务运行平台。不仅提供了包括文心一言底层模型(ERNIE-Bot)和第三方开源大模型,还提供了各种 AI 开发工具和整套开发环境,方便客户轻松使用和开发大模型应用。
诸如数据管理、自动化模型 SFT 以及推理服务云端部署,厂商希望能够实现一站式大模型定制服务。不同厂商的大模型构建平台能力基本相似,不同的是易用性、效果好坏、支持的软硬件等方面。
" 做大模型确实不便宜,但最终能够让大模型服务推广开来的原因只有两个:第一个是模型效果要好,模型效果不好,其他都不用讲,第二个就是成本。" 百度智能云 AI 与大数据平台总经理忻舟表示。
在效果上,行业模型要依托于通用大模型。比如通识教育,如果没有比较好的通用模型就没法谈在具体一个行业的应用效果。Bloomberg 和约翰霍普金斯一起推出的 Bloomberg GPT 就是例子,在它的数据分布中,通用基础模型数据占一半,金融行业公开数据占一半,还有 Bloomberg 自己的数据占 0.6%。
" 任何一个模型要能达到较好的智能水平或者基础能力,一定得在比较好的参数量训练基础模型,在基础模型上再融入一些行业专业数据做行业模型。" 忻舟说。
百度的思路是先推出一个 " 大家伙 "(文心一言),一个非常完整的工具平台(文心千帆),然后根据客户实际需求提供差异化的模型服务,帮助客户做性价比最高的选择,他们认为,价格不会成为企业拥抱大模型的瓶颈。
除了模型调用成本、训练成本,百度还在帮助企业做进一步的成本下降,如果企业只是聚焦在自己相对比较狭窄的领域上,百度也有相对低参数的版本,这样在保证模型效果的同时,使用或者训练模型的成本将会大幅下降。
事实上,打造行业大模型的成本没有通用标准。
首先,不同的基础大模型有不同的参数规格,软硬件投入要根据模型的基础参数和能力动态变化。如果是百亿参数,一台 A100 卡也能跑起来,就能开始下游任务。
当前比较集中的应用场景需求就属于这类,比如知识管理类中智能问答、智能写作、智能创作,还有泛互联网营销场景和代码生成的需求。
其次,成本跟数据量和应用方向有关。当前全球大模型定价都是以 1000 Token 为基础单位计费。如果企业的下游任务很简单,只需要几万 token 就能做好,那它的成本就非常低,需要的 GPU 卡就非常少。而构建一个行业大模型所需的数据量通常以 G 甚至以 T 为单位,那它的离线训练成本就会非常高。
谁在抢跑?
大模型赛道玩家蜂拥而至,这次不仅仅是一线互联网大厂,还有更多行业龙头和创业公司加入。
哪些行业能率先突围?或许从合作案例所处行业可以窥见一斑,如文章开头的表格所示,金融、医疗、教育、自动驾驶等领域应用频繁。
例如,阿里云在四月份发布通义大模型时宣布已和多家企业已经展开了合作探索,首批合作的企业有 OPPO 安第斯智能云、吉利汽车、智己汽车、奇瑞新能源、毫末智行、太古可口可乐、波司登、掌悦科技等。据介绍,金融行业、零售行业,以及一些面向大型 C 端的场景和行业已经积累了比较多的公开数据、场景数据,便于构建企业或者行业专属模型。
据公开资料显示,百度文心行业大模型的数量已经达到 11 个,覆盖能源电力、金融、航天、传媒、影视、汽车、城市管理、燃气、保险、电子制造和社科多个领域。
6 月 27 日发布的北京市首批十个人工智能行业大模型应用案例涉及能源电力、医疗健康、金融、自动驾驶、建筑、科研、生活、问答等领域。据悉,6 月 27 日至 7 月 30 日期间,北京市科委、中关村管委会还将聚焦城市治理、医疗健康、科学研究、智慧金融、智慧生活、智慧城市等重点领域,面向全市创新主体,将征集 80 余项行业大模型应用案例项目。
但更多的客户正面临一波新的知识积累和学习的过程。" 我们和客户交流时发现,很多客户对行业大模型还不太了解,但会主动提出需要百度的行业大模型。" 百度智能云 AI 平台副总经理李景秋说,这个时候会具体结合企业实际用的产品跟客户解析需求,例如希望行业大模型具备什么样的能力、用在什么系统或应用里面、这些应用到底被谁用、希望达到什么效果……这些问题问完之后,才会真正发现客户需要的是基于文心千帆的工具链 SFT 的大模型,还是要构建行业的预训练模型。后者起码需要几个月、甚至上年的时间去构建部署——从数据的处理、算力层的资源配置等技术问题,到跟行业通用数据的长期训练。
从基础大模型喧嚣渐远,到行业大模型华灯初上,迈入 2023 年下半年,一场真正的商业变革将加速启动。
对比百度等国内厂商和 OpenAI/ 微软在大模型领域的路径,也是一件颇有意思的事情——在 ChatGPT 呈现全球现象级热度时,有声音质疑,中国为什么做不出来 ChatGPT,其中固然有技术环境、商业氛围等一系列的复杂成因,最终很多人还是有一个粗浅的共识—— " 中国 AI 更倾向于业务应用和商业化的能力 ",直白点说,中国 AI 耐心更少,更想赚钱。
但反过来讲,市场是技术发展的最大推动力,对于时间和节奏的把握,造就了不同的结果。就以行业大模型为例,微软或是在等待技术的进一步成熟,或是觉得还没到时机,慢了一步,国内厂商迅速从基础大模型过渡到行业大模型,大模型落地于场景,才能有持久的生命力。
失之东隅,收之桑榆,以结果论,国内行业大模型跑得快,不是一件坏事。
(本文首发钛媒体 APP,作者 | 张帅,编辑 | 盖虹达)
责任编辑:hnmd003
相关阅读
相关阅读
-
行业大模型,开卷!
文心一言看起来是匆忙上马,我认为这个东西根本就不是为了赚钱,就是为
-
环球热讯:第 2 届 SCMG 摄影大赛 #021
「SCMG摄影大赛」第二届「第二十一周赛」初选作品展示01顾光辉《四季如
-
索尼大量机密信息遭泄露,原因是他们用记号笔打码 要闻
高级机密有时候会用最朴素的保密方式。微软收购动视暴雪的商业行为,本
-
昌都市7月1日起实施两项管理办法 规范公共停车场管理和物业管理
《昌都市公共停车场管理办法》《昌都市物业管理办法》于2023年2月6日昌
-
2023全球数字经济大会拉萨高峰论坛将于7月4日举行-当前快讯
6月30日,记者从2023全球数字经济大会拉萨高峰论坛新闻发布会上获悉,
-
拉萨市民政局全力打造“社工”服务品牌 环球热资讯
拉萨市民政局相关负责人介绍,为充分发挥社工站在基层治理中的积极作用
-
欧媒刊文:美国长期双标 信誉正严重下滑 天天快资讯
欧媒刊文:美国长期双标信誉正严重下滑
-
每日快看:全家百万医疗险是哪家的保险?哪家的好?
全家百万医疗险并非由某一家特定的保险公司提供,而是一种针对全家的附
-
买了意外险工伤能不能赔?意外险的赔付范围是什么? 世界视点
能赔。意外险属于商业保险范畴,其主要目的是在被保险人在保险期间遭受
-
【全球新要闻】青少年运动意外保险可靠吗?保障什么?
可靠。现在大多数的保险公司都是有推出专门的运动意外险保险产品,运动
-
意外险工伤能赔偿吗?赔偿的要求有哪些?
可以。意外险主要覆盖个人在保险期间内遭受意外伤害导致身故或伤残时的
-
意外险多长时间能生效?一般可以保障多久?
意外险的生效时间取决于具体的保险合同和条款。通常情况下,意外险在完
-
虎牙斗鱼夹缝求生-天天报资讯
近日,杭州亚运会电子竞技项目国家队正式公布名单,31名运动员将参
-
最新消息:包头国有企业党建研究会第一次会员大会召开
6月30日,包头国有企业党建研究会第一次会员大会暨市属国有企业党建品
-
环球看点!促消费燃旺烟火气|最美“警色” 守护平安烟火气
夜晚民警在美食街巡逻检查守护市民出行安全。记者宫伟恩摄今夏以来,包
-
视讯!金杏飘香引客来
土右旗第十五届中国金杏节暨三娘子旅游文化节开幕。记者贾荣摄特色产品
-
当前通讯!中国男乒大捷:3-0、3-1,1将逆转日本冠军,世界第一樊振东领衔4战4胜
2023WTT常规挑战赛萨格勒布站站是一站比较重要的赛事,本次比赛,中国
-
紧身裤上衣穿什么搭配
紧身裤上衣穿什么搭配,春天可以搭配的裤子有很多,紧身裤为其中一类,
-
西安国家版本馆:于山水交融间品味汉唐气象 天天观点
以“山水相融、天人合一、汉唐气象、中国精神”为设计理念……
-
世界观点:关键节点再发力 经济回升向好态势明显——6月全国各地经济社会发展扫描
“十里不同天,一天游四季”。6月18日,在新疆天山深处蜿蜒向前的独库
-
苹果市值突破 3 万亿美元 全球观热点
7月1日消息,美国当地时间周五,苹果市值有史以来首次收于3万亿美元以
-
今日热议:B 站掀桌子了
出品|虎嗅商业消费组作者|黄青春题图|视觉中国哔哩哔哩(下简称B站
-
天天百事通!苹果与诺基亚续签多年协议,可使用后者 5500 多项 5G 专利
IT之家7月1日消息,诺基亚和苹果公司今天发布联合声明,表示两家公司续
-
每日快报!父亲是“老赖”导致女儿 710 分落榜?法官:类似故事纯属谣言
日前,一篇《因父亲是老赖导致无法录取,女儿高考710分落榜!》的文章
-
历史新高!苹果市值突破 3 万亿美元
划重点:1苹果股价涨至190美元以上,市值重返3万亿美元,成为世界上唯
-
天天关注:全面采用中国标准!国内首列时速 80 公里 A 型地铁列车亮相
据广州地铁官方微信消息,6月29日,国内首列时速80公里A型中国标准地铁
-
巨桶方便面卖 500 元!还遭疯抢?网友:看不懂_全球报资讯
6月29日,深圳最大的山姆旗舰店开业本次开业山姆推出限定款产品——合
-
我国首个藏医专用医疗器械产品正式发布 世界视点
全国首个藏医专用器械“一次性使用藏医放血包”正式上市发布,填补了藏
-
2023年西藏自治区“创伤救治”专家学术论坛暨第二届“京藏携手-急诊急救护理工作坊”在拉萨举办|焦点速讯
6月26日,由西藏自治区医学会急诊医学分会、西藏护理学会、西藏自治区
-
西藏推出首款注册藏医专门器械
“一次性使用藏医放血包”注册证授证仪式30日在拉萨举行,这是西藏自治
精彩推荐
阅读排行
精彩推送
- 环保行业上市公司股票有哪些?(...
- 快讯2023-07-01 08:29:25 当前资讯
- 当前热讯:社保和意外险可以一起...
- 学校给学生买的意外险保险范围是...
- 增额终身寿安全吗?增额终身寿险...
- 6百万医疗保险是真的吗?有什么...
- 机票需要买航空意外险吗?航空意...
- 或四季度上市 全新哈弗H5实车图曝光
- 环球观天下!特斯拉新款Model 3...
- 深蓝S7上市首周:试驾火爆门店冷...
- 理想汽车CEO李想发全员信,立下...
- 焦点资讯:双门四座 法拉利Roma...
- “科创中国”技术路演专场活动在...
- 等于 10 个贵州茅台!苹果成为...
- 最资讯丨尼康 Z 8 动态范围与...
- 优秀投资者必备的7种素质-快看点
- 小米平板6 Max曝光:12.4寸屏 ...
- 海马汽车入股盒子智行
- 数万亿银行互联网贷款全盘重塑
- 太突然!宣布将停刊!135 年走...
- 今日观点!高铁踹座老人是退休政...
- mic男团王浩和谁在一起了_mic男团王浩
- 优化派单模式、完善评价规则,多...
- 今头条!我给 AI 打工,时薪只...
- 电动自行车充电新标准今日起施行...
- Windows 11 大更新!Copilot ...
- 人形机器人,觉醒?
- Kindle 商店彻底关门了,说真的...
- 全球资讯:无双皇子李简在线阅读...
- 伦敦股市6月30日上涨