侵权投诉

                  让AI抛弃“小作坊”,拥抱“工业化”:盘古大模型究竟是什么?

                  脑极体 ? 2021-07-12 21:48 ? 次阅读

                  如果你想要一台冰箱,结果只能买到压缩机,金属面板、塑料储物盒,需要自己进行组装;如果你想要一台汽车,结果拿到一坨橡胶,需要自己从头造轮胎,你将会是什么心情?

                  目前AI开发的状态与上面举的例子很像。熟悉AI的朋友知道,AI应用开发是碎片化、定制化的,场景稍有变化就要重新进行数据处理,海量参数调优,反复迭代。如果模型达不到期望的目标,还要把这个过程推倒重来,模型开发周期动辄一个月,甚至数月。这种耗费大量人工的方式说明AI开发还处于作坊模式中。

                  在2021WAIC期间,华为云盘古预训练大模型被评选为大会的“镇馆之宝”,为AI带来了工业化开发新模式。我们不妨就着“镇馆之宝”四个字,来掰扯掰扯盘古大模型究竟是什么,预训练模型又与AI工业化之间存在着怎样的关联。

                  4a9b886015c849429038c826f3e4aec0~tplv-tt-shrink:640:0.image

                  2018年GPT 和 BERT的横空出世,引发了AI行业内外的共同关注。NLP领域的大规模预训练模型,从逻辑上来解释的话,就是采用自监督学习能力在大规模算力的支持下学习海量参数的数据。这不仅让NLP算法能力有了革命性突破,还将大量原本需要用户完成的训练任务预先完成。打个比方,这就像学校先把各种知识教给学生,让他有了基本的行业常识,而不是等到进入企业之后再从头识字,从而降低了企业的培训成本。

                  如今,大规模预训练模型已经成为全球主流AI厂商、研究机构的“必备功课”,训练参数与算力投入量也水涨船高。OpenAI在2020年发布的GPT-3已经达到了1750亿参数量、上万GPU的惊人训练规模。可以说,大规模预训练模型既要考验厂商的算法创新、调参与优化能力,又是对数据能力、并行计算能力、网络架构能力、开发工具和能力的全面大考。想要让AI在厂商一侧就变成工业化、标准化的“准完成品”,需要投入的技术实力与产业资源都远超大部分AI产品。

                  b03202ba841646b385e613d4ec40d11f~tplv-tt-shrink:640:0.image

                  想要“镇”住AI工业化中出现的种种挑战,练就真正能解决问题的AI大模型,需要同时具备高效算法、澎湃算力,海量数据吞吐能力基础。

                  在2021WAIC开幕式上,华为轮值董事长胡厚崑在演讲中介绍了盘古大模型。他认为当前AI的普及应用的瓶颈首先不在技术上,技术已经有了相当的发展,也不在应用上,因为应用的需求都已经蓬勃而出了。它的瓶颈在于开发的效率上,现在的开发效率太低,AI应用的开发太慢,它严重阻碍了技术和需求的结合。

                  为了提高AI的开发效率,华为云联合伙伴推出了盘古系列预训练大模型,包括业界首个兼具生成与理解能力的中文语言(NLP)大模型和视觉(CV)大模型。

                  想要具体感知到华为云盘古大模型的能力,我们到WAIC的展馆中一探究竟。盘古大模型在现场展示了成语填空、阅读理解、快速分类三种能力。甚至连 “明明明明明白白白喜欢他,但他就是不说”这种奇葩句子,盘古大模型也能判断出“白白喜欢谁?”“谁喜欢明明?”等问题。

                  0e054ea198de41b3bfa449bdaa93500a~tplv-tt-shrink:640:0.image

                  优质的大模型需要三个核心能力,即:可以吸收海量数据的超大型神经网络、强壮的网络结构、优秀的泛化能力。华为云盘古预训练大模型除此之外,还有哪些独特优势呢?

                  首先,盘古预训练大模型拥有领先的技术创新。

                  盘古NLP大模型首次使用Encoder-Decoder架构,兼顾NLP理解与生成的能力,且性能领先;在NLPCC生成任务上,Rouge score取得第一,比第二名提升60% 以上。该架构多任务学习的方法,能够让大模型训练更加稳定;同时基于提示的微调, 能够在小样本学习上超越GPT系列。训练盘古NLP大模型使用了40TB的文本数据,包含了大量的通用知识,同时也沉淀了华为云的许多行业经验。盘古CV大模型在业界首次实现了模型的按需抽取,不同部署场景下抽取出的模型体积差异,动态范围可达三个数量级;提出的基于样本相似度的对比学习,凭借小样本学习能力在ImageNet上取得了业界领先的成绩。

                  其次,盘古预训练大模型拥有丰富的技术沉淀及应用实践。

                  盘古预训练大模型已经在多个行业、100多个场景成功验证,包括能源、零售、金融、工业、医疗、环境、物流等等。其中,在能源领域,盘古预训练大模型帮助行业客户实现设备能耗的智能控制,可以节约电力成本50%;在金融行业中的异常财务检测,让模型精度提升20%以上; 在尘肺检测中,病例识别准确率提升22%等等。

                  423b4cc6cd624dadb5a55099e66e9f95~tplv-tt-shrink:640:0.image

                  盘古已经在近百个行业场景中进行了应用,未来,华为云盘古预训练大模型还将上线华为云AI资产共享社区(AI Gallery),将AI能力进一步开放出来。

                  既名“盘古”,便应该去开辟一些什么。翻过AI工业化的山丘,彼端每一家企业、每一位开发者的心中都应该有一个“盘古”。

                  收藏 人收藏
                  分享:

                  评论

                  相关推荐

                  京东方携智慧一体机产品亮相2021深圳国际全触与显示展

                  10月19日,2021国际全触与显示展在深圳国际会展中心隆重举行,本届展会集中展示了全球最前沿的创新....
                  的头像 京东方BOE 发表于 10-25 16:18 ? 173次 阅读

                  AI芯片是智能汽车发展的基石

                  “以智能芯片和操作系统为基石,智能汽车未来将成为个人智能终端发展最大的母生态,而开放、融合、共创是新....
                  的头像 地平线HorizonRobotics 发表于 10-25 14:40 ? 123次 阅读

                  冲刺科创板,扫描全能王所属公司未来可期

                  扫描全能王在办公类APP中一直名列前茅,是职场办公人士手机中不可或缺的重要APP之一。扫描全能王的成....
                  的头像 话说科技 发表于 10-25 13:33 ? 29次 阅读
                  冲刺科创板,扫描全能王所属公司未来可期

                  华为开发者大会概念股大涨

                  华为2021开发者大会于10月22日至24日在东莞松山湖欧洲小镇举办,据了解,鸿蒙生态相关公司有望获....
                  的头像 lhl545545 发表于 10-25 10:23 ? 175次 阅读

                  IBM公布一项开创性承诺与全球计划

                  日前 -- IBM(纽交所证券代码: IBM)公布了一项开创性承诺与全球计划,承诺在 2030年之前....
                  的头像 IBM中国 发表于 10-25 10:10 ? 162次 阅读

                  如何助力商业银行对公业务的数智化转型

                  对公业务作为商业银行的主要资产、营业收入和净利润来源,对银行的意义不言而喻。伴随着金融科技的进一步迭....
                  的头像 IBM中国 发表于 10-25 10:07 ? 184次 阅读

                  传苹果正考虑将汽车电池采购订单转投松下

                  近日,苹果公司与宁德时代就其计划电动汽车的电池供应所进行的谈判,谈判进展并没有达到预期效果。不过苹果....
                  的头像 lhl545545 发表于 10-25 09:55 ? 281次 阅读

                  华为开发者大会发布HarmonyOS 3预览版等全新开发技术,搭载HarmonyOS的设备超过1.5亿台

                  HarmonyOS已在超过1.5亿智能手机、平板、手表、智慧屏等设备上应用,成为万物智联时代的数字底....
                  的头像 西西 发表于 10-25 09:55 ? 274次 阅读

                  华为昇腾异构计算架构CANN 助力应对AI发展新挑战!

                  电子发烧友网报道(文/李弯弯)人工智能在21世纪以后,经历了PC、互联网以及移动互联网这几波浪潮之后....
                  的头像 Carol Li 发表于 10-25 09:35 ? 357次 阅读
                  华为昇腾异构计算架构CANN 助力应对AI发展新挑战!

                  探访百度AI反诈第一线,揭秘百度AI安全技术

                  科技发展一路向前,电信诈骗、黑灰产的犯罪手段也越来越高明。“反诈”这个词,正在越来越高频的出现在我们....
                  的头像 脑极体 发表于 10-25 09:35 ? 71次 阅读
                  探访百度AI反诈第一线,揭秘百度AI安全技术

                  凌华科技边缘AI助力全球首场于著名印第安纳波利斯赛道进行的高速Indy自动驾驶挑战赛

                  同期举办科学教育互动活动,可直击F1TENTH赛道、Kvaser‘s DevKit 赛车模拟器以及更....
                  发表于 10-22 17:45 ? 597次 阅读
                  凌华科技边缘AI助力全球首场于著名印第安纳波利斯赛道进行的高速Indy自动驾驶挑战赛

                  华为开发者大会2021:Wireless Kit + Network Kit

                   Wireless Kit + Network Kit new 智能网络调优无惧网络拥塞让应用加速,....
                  的头像 西西 发表于 10-22 16:50 ? 213次 阅读
                  华为开发者大会2021:Wireless Kit + Network Kit

                  华为开发者大会2021年 AI能力帮助网络快速链接

                  华为开发者大会2021年 AI能力帮助网络快速链接 AI能力强大通过AI预测通信信号,AI通过网络路....
                  的头像 inr999 发表于 10-22 16:30 ? 929次 阅读
                  华为开发者大会2021年 AI能力帮助网络快速链接

                  华为开发者大会2021,开发AI信号预测及信号调优

                  开发者大会上,为达到手机网络信号的稳定,华为助力开发AI信号预测及对网络的优化调优。
                  的头像 电子魔法师 发表于 10-22 16:24 ? 185次 阅读
                  华为开发者大会2021,开发AI信号预测及信号调优

                  华为开发者大会2021:打造全场景万物智联的应用生态底座

                   21,738APls打造全场景万物智联的应用生态底座具体是什么样子的。
                  的头像 西西 发表于 10-22 16:23 ? 319次 阅读
                  华为开发者大会2021:打造全场景万物智联的应用生态底座

                  2021华为开发者大会张平安:全场景沉浸的数字孪生亮相

                  2021华为开发者大会上,全场景沉浸的数字孪生亮相。AI实时处理能力把智慧能力给更多的开发者,为应用....
                  的头像 lhl545545 发表于 10-22 16:18 ? 182次 阅读
                  2021华为开发者大会张平安:全场景沉浸的数字孪生亮相

                  AI芯片公司获大笔融资,英特尔前副总裁证实加入董事会

                  据外媒报道,日前,以色列芯片公司Hailo完成1.36亿美元C轮融资,据业内知情人士所说,该笔融资让....
                  的头像 电子发烧友网 发表于 10-22 16:00 ? 361次 阅读

                  华为开发者大会,AI实现万物互联

                  华为开发者大会进行时,AI助力万物互联,万物智联需要新的智慧交互体验,多设备的协同合作可以更专业化。
                  的头像 电子魔法师 发表于 10-22 15:26 ? 189次 阅读
                  华为开发者大会,AI实现万物互联

                  华为开发者大会2021采用最新AI技术 沟通无障碍

                  在华为开发者大会2021直播间里,左下角有一个实时手语服务,这是开放AI技术,使能音视频实时手语服务....
                  的头像 璟琰乀 发表于 10-22 15:01 ? 194次 阅读
                  华为开发者大会2021采用最新AI技术 沟通无障碍

                  AI助力华为2021开发者大会

                  10月22日下午14:30,“万物互联”华为开发者大会2021(Together)主题演讲正在进行中....
                  的头像 lhl545545 发表于 10-22 14:56 ? 145次 阅读
                  AI助力华为2021开发者大会

                  华为开发者大会2019回顾

                  华为开发者大会2019于8月9日-8月11日在东莞松山湖正式举行,华为消费者业务CEO、华为技术有限....
                  的头像 独爱72H 发表于 10-22 14:45 ? 143次 阅读

                  新数智芯生态共飞腾 | 2021飞腾生态伙伴大会诚邀您的参与

                  渤海之滨,海河之津,2021飞腾生态伙伴大会即将如约启幕,作为面向生态伙伴的年度盛会,我们汇聚力量、....
                  的头像 话说科技 发表于 10-22 13:46 ? 83次 阅读
                  新数智芯生态共飞腾 | 2021飞腾生态伙伴大会诚邀您的参与

                  腾讯云有哪些杀手锏产品助力企业数字化转型

                  电子发烧友网报道(文/章鹰)“我们经历了PC互联网、移动互联网时代,现在到了万物互联的时代,大家感受....
                  的头像 电子发烧友网 发表于 10-22 10:56 ? 540次 阅读

                  2021华为开发者大会在哪里买票

                  2021华为开发者大会在哪里买票?2021华为开发者大会将于本月22号在广东东莞松山湖正式举行,20....
                  的头像 lhl545545 发表于 10-22 10:51 ? 352次 阅读

                  哈啰出行与您相约潍坊第七届中日韩产业博览会

                  出行是人们最初探索世界的方式,从旷野到城市,那些未知、好奇的,都将在路上得到解答,为了可以放肆同行,....
                  的头像 话说科技 发表于 10-22 10:08 ? 145次 阅读
                  哈啰出行与您相约潍坊第七届中日韩产业博览会

                  华为开发者大会2020举办地点

                  华为开发者大会2020举办地点在广东东莞松山湖举行。这是华为面向信息与通信领域全球开发者的年度顶级旗....
                  的头像 lhl545545 发表于 10-22 09:58 ? 293次 阅读

                  Graphcore首次发布大型IPU产品,为超级计算机领域提供超强AI算力

                  Graphcore今日宣布发布最新产品IPU-POD128和IPU-POD256。IPU-POD12....
                  发表于 10-22 09:52 ? 606次 阅读
                  Graphcore首次发布大型IPU产品,为超级计算机领域提供超强AI算力

                  华为开发者大会2021带来什么产品

                  华为官方公布了华为开发者大会2021将在中国松山湖举行,时间将定档在10月22日至10月24日,干货....
                  的头像 lhl545545 发表于 10-22 09:43 ? 291次 阅读

                  游戏AI对自对弈推理速度提出新要求

                  腾讯一直积极地推动强化学习在游戏AI领域的发展,并在2019年推出了“开悟”AI开放研究平台,提供不....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-22 09:23 ? 235次 阅读

                  2021数字经济峰会上中原人工智能计算中心正式宣布投运

                  “闻听三国事,每欲到许昌”,提到河南许昌,很多人首先联想到的就是三国历史、曹魏文化。 事实上,除了久....
                  的头像 脑极体 发表于 10-22 09:21 ? 260次 阅读

                  avatarin能够像提供共享电瓶车一样向企业提供机器人

                  白天,Akira Fukabori 和 Kevin Kajitani 在日本最大的航空控股公司工作;....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-22 09:18 ? 194次 阅读

                  NVIDIA加速虚拟人项目渲染与推理效率

                  腾讯AI LAB致力于打造产学研用一体的 AI 生态,主要的研究方向包括计算机视觉、语音识别、自然语....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-22 09:12 ? 173次 阅读

                  知识计算 华为云要给AI时代开一扇门 华为开发者大会你不来看看?

                  在企业、行业应用AI时,我们一般都会说需要具备三大条件:算力、算法、数据。而企业在获取这三大要素过程....
                  的头像 脑极体 发表于 10-21 19:02 ? 860次 阅读

                  华为开发者大会2021如何购票

                  华为开发者大会(Together)将于10月22日-10月24日在东莞松山湖举行,持续3天,内容包括....
                  的头像 ss 发表于 10-21 17:00 ? 388次 阅读

                  华为全联接大会2020在上海开幕

                  华为2020全联接大会在上海举行,华为全联接大会将深耕数字化、能源数字化与能源技术的创新融合,使能源....
                  的头像 lhl545545 发表于 10-21 16:56 ? 362次 阅读

                  工信部印发一份与人工智能相关的通知

                  10月14日,工信部印发了一份与人工智能相关的通知,宣布开展2021年人工智能产业创新任务揭榜挂帅申....
                  的头像 电子发烧友网 发表于 10-21 15:38 ? 558次 阅读

                  MediaTek举办天玑旗舰技术媒体沟通会,先进技术引领移动平台体验升级

                  2021年10月20日,MediaTek举办天玑旗舰技术媒体沟通会,分享了基于天玑5G移动平台的多领....
                  发表于 10-20 18:20 ? 737次 阅读
                  MediaTek举办天玑旗舰技术媒体沟通会,先进技术引领移动平台体验升级

                  矩池云亮相PyConChina 释放AI创新潜能

                  2021年10月16日,Python开发者大会PyCon China 2021于线上举行,这是PyC....
                  的头像 话说科技 发表于 10-20 17:52 ? 460次 阅读
                  矩池云亮相PyConChina 释放AI创新潜能

                  2021地平线开发者加速营交流活动在南京圆满举办

                  9月28日,2021地平线开发者加速营交流活动在南京圆满举办。活动由地平线主办,第一创客、Segme....
                  的头像 地平线HorizonRobotics 发表于 10-20 17:34 ? 423次 阅读

                  嵌入式AI需要什么样的解决方案

                  ADAS 和自动驾驶、智慧城市、智慧医疗和工业视觉应用,是嵌入式 AI 应用的典型场景,也是赛灵思 ....
                  发表于 10-20 16:49 ? 1041次 阅读
                  嵌入式AI需要什么样的解决方案

                  软硬结合的智慧园区综合管理系统

                  在中国社会高速发展的时间周期中,大量老旧园区在完成历史使命后被闲置甚至被荒废,如何让老旧园区重新焕发....
                  的头像 旷视MEGVII 发表于 10-20 15:47 ? 328次 阅读

                  摄像头分析能力是否八面玲珑

                  今天,视频分析广泛正应用于人们的日常生活。从帮助智能楼宇提升安全性、在智慧城市中检测拥堵与犯罪,到配....
                  的头像 FPGA开发圈 发表于 10-20 14:23 ? 136次 阅读

                  摄像头分析能力是否八面玲珑

                  今天,视频分析广泛正应用于人们的日常生活。从帮助智能楼宇提升安全性、在智慧城市中检测拥堵与犯罪,到配....
                  的头像 FPGA开发圈 发表于 10-20 14:23 ? 153次 阅读

                  中国天眼携手浪潮存储构建超大规模科研数据基础设施平台

                  IDC公布2021年未来企业大奖获奖名单,国家天文台携手浪潮存储建设的“中国科学院国家天文台FAST....
                  的头像 浪潮存储 发表于 10-20 11:50 ? 382次 阅读

                  华邦HyperRAMTM 助力Efinix驱动新一代紧凑型超低功耗AI与IoT设备

                  华邦电子今日宣布,可编程产品平台和技术的创新厂商Efinix选择华邦HyperRAMTM 内存来驱动....
                  发表于 10-20 10:29 ? 1873次 阅读
                  华邦HyperRAMTM 助力Efinix驱动新一代紧凑型超低功耗AI与IoT设备

                  2021届GTC大会的内容预告

                  有朝一日,所有会动的事物都可能实现自主化,这将改变行业并创造新的业务模式。 NVIDIA GTC大会....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-20 10:07 ? 322次 阅读

                  高通孟樸:XR+5G+AI驱动下一轮产业变革 赋能全新视界

                  在高通我们认为XR包括VR、AR和MR,它将是下一代移动计算平台。
                  发表于 10-20 10:03 ? 651次 阅读
                  高通孟樸:XR+5G+AI驱动下一轮产业变革 赋能全新视界

                  交换机重要吗 如何使用NVIDIA交换机展现云计算、AI的性能

                  交换机重要吗? 网络矩阵是现代化数据中心性能的关键。这对数据中心的交换机提出了很多要求,而其中最基本....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-20 09:54 ? 274次 阅读

                  谷歌重磅推出首个Tensor自研芯片

                  今日凌晨,谷歌公司召开了新品发布会,随后推出了搭载谷歌首个Tensor自研芯片最新的Pixel智能手....
                  的头像 lhl545545 发表于 10-20 09:38 ? 501次 阅读

                  NVIDIA助力踏歌智行打造矿区智能驾驶引擎

                  作为英伟达初创加速计划会员企业,北京踏歌智行科技有限公司是一家专注于露天矿用车无人驾驶技术研究、产品....
                  的头像 NVIDIA英伟达企业解决方案 发表于 10-20 09:19 ? 624次 阅读
                  欧美美女的白虎