当前位置：首页 > 元宇宙 > 元宇宙

【申万宏源】必然的碎片化AI落地，哪种路径可能胜出？ | 元宇宙Meta洞见

来源：责编：时间：2023-08-11 16:52:27 3892观看

导读大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型，大规模预训练模型（大模型）渐渐成为了AI算法领域的热点。AI产业链：从算力到应用工作流程视角• 算法设计环节：机器视觉、语音识别、自然语

大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型，大规模预训练模型（大模型）渐渐成为了AI算法领域的热点。

AI产业链：从算力到应用

工作流程视角

• 算法设计环节：机器视觉、语音识别、自然语音处理、知识图谱

• 算法实现环节：深度学习框架，训练、推理部署，对模型的调参优化

• 算法运行环节：AI芯片和AIDC超算中心，提供硬件基础

AI平台层：何种训练模型可以脱颖而出

AI平台：少量企业参与的AI高地之争

• 训练软件框架：实现深度学习训练算法的模块化封装

• 模型生产平台：实现模型的工业级生产

• 推理部署框架：实现模型生产完成后的工业级高效、自动的部署

• 数据平台：包括数据采集、数据标注、数据生产、数据存储等功能

训练框架：调节参数，生成参数

训练框架是AI的重要基石，也是AI发展战略的制高点。当算法变成改造甚至颠覆软件行业的力量时，最后核心就是看这些AI的公司有没有平台化的能力，即“能够批量、高效、比竞争对手更及时地供应优质算法。

推理框架：与硬件和设备端紧密相关

推理框架：主要部署在设备端和云端，因此与硬件厂商紧密相关。

开源框架的选择：规模效应与生态

四大顶级深度学习框架阵营可以满足绝大部分开发者要求。社区规模效应：维护力量、贡献人员决定了算法库扩展及时性、API水平，软件框架规模效应较强。

AI大模型：成为行业新趋势

行业更新热点在“大模型”

传统机器学习里，模型过小则欠拟合，模型过大则过拟合。深度学习里Double Descent现象在2018年揭示，随着模型参数变多，Test Error是先下降，再上升，然后第二次下降；原则上，在成本可接受的情况下，模型越大，准确率越好。

OpenAI ：GPT-3

GPT-3在许多NLP数据集上均具有出色的性能，包括翻译、问答和文本填空任务，这还包括一些需要即时推理或领域适应的任务，例如给一句话中的单词替换成同义词，或执行3位数的数学运算。

GPT-3工具DALL·E和“逻辑”优化

基于GPT-3构建，仅使用了120亿个参数样本，相当于GPT-3参数量的十四分之一；有利于降低了深度学习需要的数据标注量，文本和图像理解结合起来

优势显著

• 自监督学习功能，大幅降低对数据量的需求：GPT舍弃Fine-tuning，先使用海量数据预训练大模型，得到一套模型参数，然后用这套参数对模型进行初始化，再进行训练。大幅降低后续对数据量的需求。

• 预训练大模型+细分场景微调，更适合长尾落地：大规模预训练可以有效地从大量标记和未标记的数据中捕获知识，通过将知识存储到大量的参数中并对特定任务进行微调，极大扩展模型的泛化能力。

• 有望进一步突破现有模型结构的精度局限：可能继续突破精度上限。

AI碎片化问题：必然性的两种路径

AI落地和碎片化需求同时出现

业界在2015-2017年后开始发生变化，AI走出实验室和商业模式转变：

• 工业场景更复杂的逻辑：编程模式从静态网络结构描述向动态计算过程转变。

• SDK商业模式可能无法在国内落地：早期试图复制海外SDK销售路线，但这一模式无法在国内复制。

两种路径的总结

设计并训练工业级的高性能AI模型需要大量的成本投入和深厚的技术沉淀，包含多场景汇总的海量数据，复杂的模型设计和训练算法，以及复杂的软件框架和硬件系统在内的大型计算基础设施，AI公司需要突破技术发展的瓶颈。

-END-

本文链接：http://www.28at.com/showinfo-40-64-0.html【申万宏源】必然的碎片化AI落地，哪种路径可能胜出？ | 元宇宙Meta洞见

声明：本网页内容旨在传播知识，若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。邮件：2376512515@qq.com

上一篇：【东方证券】虚拟世界照进现实，元宇宙中有什么？ | 元宇宙Meta洞见

下一篇：元宇宙将会如何塑造未来的工作方式？

标签：

热门焦点

AI界地震！美国对OpenAI展开调查！监管风暴来袭！

来源：清元宇宙还记得5月OpenAI在国会山听证会上的自信、坦诚、游刃有余的问答吗？那时的Sam Altman可谓意气风发，在耐心、友好的国会议员面前，就AI立法、大模型安全性问题侃侃而
虚拟人再升级，企业可以解放双手了？

来源：伯虎财经今天想跟大家来唠唠AI，其实聊到这个话题很多人都不陌生了。在ChatGPT和AIGC大热背后，还有一位低调的“大佬”——虚拟人。比如咱们熟知的虚
沉寂3年，大模型激活小度天猫精灵？

Tech星球（微信ID：tech618）文 | 何煦阳沉寂了许久的智能音箱，在今年大模型横空出世之后，又再次燃起了新的希望。 2月9日，小度宣布将融合文心一言，打造针对智能设备场景的AI模型&ldq
25万虚拟er在“元宇宙”追星

“默叽默叽，我是默默酱，我是在真元宇宙也有头有脸的人。”12月11日晚20：00，虚拟偶像@默默酱的首场个人元宇宙演唱会《以梦为马，抵达繁星》在大有空间APP
百度元宇宙希壤是什么？（附下载）

百度元宇宙希壤是什么，最近很多人关注。还有很多人问希壤怎么下载、百度希壤怎么进入？今天小编带你来全面了解一下。“希壤”是百度于2021年12月27日于百度AI开
顶流IP“冰墩墩”带着中国元素NFT进入全球视野

一场被国际奥委会主席评价堪称独具匠心、非凡卓越的2022年北京冬季奥运会，在这个“双奥之城”经历了16个令人难忘的精彩日夜，最终圆满闭幕。让我们印象深刻的不
借VR产业东风，江西抢滩布局“元宇宙”

自2016年起就在VR上倾注了大量精力的江西省，迅速搭上了“元宇宙”。VR、AR等技术是通往元宇宙的关键接口，使人们可以在数字空间和物理空间自由穿梭。自2016年起
纽约证券交易所母公司ICE收购tZero股份以探索代币化股票

2 月 22 日，纽约证券交易所 (NYSE) 的母公司洲际交易所 (ICE) 宣布，它将持有私人数字证券市场 tZERO 的所有权。根据公告，ICE 将成为 tZero 的“重要”少数股东，但
全球十大元宇宙概念游戏

A股市场中，不少游戏公司早早搭上了元宇宙概念。举例，中青宝宣称将发布一款元宇宙概念的模拟经营类游戏，尽管游戏尚在研发中，这一消息已经让中青宝的股价在51个交易

首页

元宇宙

NFT

区块链

虚拟人

AR/VR

AI

元宇宙百科

【申万宏源】必然的碎片化AI落地，哪种路径可能胜出？ | 元宇宙Meta洞见

AI产业链：从算力到应用

AI平台层：何种训练模型可以脱颖而出

AI大模型：成为行业新趋势

AI碎片化问题：必然性的两种路径

AI界地震！美国对OpenAI展开调查！监管风暴来袭！

虚拟人再升级，企业可以解放双手了？

沉寂3年，大模型激活小度天猫精灵？

25万虚拟er在“元宇宙”追星

百度元宇宙希壤是什么？（附下载）

顶流IP“冰墩墩”带着中国元素NFT进入全球视野

借VR产业东风，江西抢滩布局“元宇宙”

纽约证券交易所母公司ICE收购tZero股份以探索代币化股票

全球十大元宇宙概念游戏

最新推荐

内容行业大变天，爆款全靠AI？

元宇宙火热的当下，我们该如何“身临其境”的体验元宇宙？

2022年中国元宇宙产业系列研究报告-基础设施篇（5）

FTX 加密货币交易所开始向游戏公司提供加密服务

我们为什么需要Web3，距离Web3的实现还有多远？

PayPal CEO 的加密语录：加密货币将重新定义金融世界

猜你喜欢

热门推荐

相关资讯