当前位置:首页 > 元宇宙 > 元宇宙

【申万宏源】必然的碎片化AI落地,哪种路径可能胜出? | 元宇宙Meta洞见

来源: 责编: 时间:2023-08-11 16:52:27 2917观看
导读 大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型,大规模预训练模型(大模型)渐渐成为了AI算法领域的热点。AI产业链:从算力到应用工作流程视角• 算法设计环节:机器视觉、语音识别、自然语

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型,大规模预训练模型(大模型)渐渐成为了AI算法领域的热点。aLJ28资讯网——每日最新资讯28at.com

AI产业链:从算力到应用

工作流程视角
aLJ28资讯网——每日最新资讯28at.com

• 算法设计环节:机器视觉、语音识别、自然语音处理、知识图谱aLJ28资讯网——每日最新资讯28at.com

• 算法实现环节:深度学习框架,训练、推理部署,对模型的调参优化aLJ28资讯网——每日最新资讯28at.com

• 算法运行环节:AI芯片和AIDC超算中心,提供硬件基础aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com

AI平台层:何种训练模型可以脱颖而出

AI平台:少量企业参与的AI高地之争
aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

• 训练软件框架:实现深度学习训练算法的模块化封装aLJ28资讯网——每日最新资讯28at.com

• 模型生产平台:实现模型的工业级生产aLJ28资讯网——每日最新资讯28at.com

• 推理部署框架:实现模型生产完成后的工业级高效、自动的部署aLJ28资讯网——每日最新资讯28at.com

• 数据平台:包括数据采集、数据标注、数据生产、数据存储等功能aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

训练框架:调节参数,生成参数aLJ28资讯网——每日最新资讯28at.com

训练框架是AI的重要基石,也是AI发展战略的制高点。当算法变成改造甚至颠覆软件行业的力量时,最后核心就是看这些AI的公司有没有平台化的能力,即“能够批量、高效、比竞争对手更及时地供应优质算法。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

推理框架:与硬件和设备端紧密相关aLJ28资讯网——每日最新资讯28at.com

推理框架:主要部署在设备端和云端,因此与硬件厂商紧密相关。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

开源框架的选择:规模效应与生态aLJ28资讯网——每日最新资讯28at.com

四大顶级深度学习框架阵营可以满足绝大部分开发者要求。社区规模效应:维护力量、贡献人员决定了算法库扩展及时性、API水平,软件框架规模效应较强。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com

AI大模型:成为行业新趋势

行业更新热点在“大模型”
aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

传统机器学习里,模型过小则欠拟合,模型过大则过拟合。深度学习里Double Descent现象在2018年揭示,随着模型参数变多,Test Error是先下降,再上升,然后第二次下降;原则上,在成本可接受的情况下,模型越大,准确率越好。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

OpenAI :GPT-3aLJ28资讯网——每日最新资讯28at.com

GPT-3在许多NLP数据集上均具有出色的性能,包括翻译、问答和文本填空任务,这还包括一些需要即时推理或领域适应的任务,例如给一句话中的单词替换成同义词,或执行3位数的数学运算。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

GPT-3工具DALL·E和“逻辑”优化aLJ28资讯网——每日最新资讯28at.com

基于GPT-3构建,仅使用了120亿个参数样本,相当于GPT-3参数量的十四分之一;有利于降低了深度学习需要的数据标注量,文本和图像理解结合起来aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

优势显著aLJ28资讯网——每日最新资讯28at.com

• 自监督学习功能,大幅降低对数据量的需求:GPT舍弃Fine-tuning,先使用海量数据预训练大模型,得到一套模型参数,然后用这套参数对模型进行初始化,再进行训练。大幅降低后续对数据量的需求。aLJ28资讯网——每日最新资讯28at.com

• 预训练大模型+细分场景微调,更适合长尾落地:大规模预训练可以有效地从大量标记和未标记的数据中捕获知识,通过将知识存储到大量的参数中并对特定任务进行微调,极大扩展模型的泛化能力。aLJ28资讯网——每日最新资讯28at.com

• 有望进一步突破现有模型结构的精度局限:可能继续突破精度上限。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com

AI碎片化问题:必然性的两种路径

AI落地和碎片化需求同时出现
aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

业界在2015-2017年后开始发生变化,AI走出实验室和商业模式转变:aLJ28资讯网——每日最新资讯28at.com

• 工业场景更复杂的逻辑:编程模式从静态网络结构描述向动态计算过程转变。aLJ28资讯网——每日最新资讯28at.com

• SDK商业模式可能无法在国内落地:早期试图复制海外SDK销售路线,但这一模式无法在国内复制。aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

两种路径的总结aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com

aLJ28资讯网——每日最新资讯28at.com


aLJ28资讯网——每日最新资讯28at.com

设计并训练工业级的高性能AI模型需要大量的成本投入和深厚的技术沉淀,包含多场景汇总的海量数据,复杂的模型设计和训练算法,以及复杂的软件框架和硬件系统在内的大型计算基础设施,AI公司需要突破技术发展的瓶颈。aLJ28资讯网——每日最新资讯28at.com

-END-
aLJ28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-40-64-0.html【申万宏源】必然的碎片化AI落地,哪种路径可能胜出? | 元宇宙Meta洞见

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 【东方证券】虚拟世界照进现实,元宇宙中有什么? | 元宇宙Meta洞见

下一篇: 元宇宙将会如何塑造未来的工作方式?

标签:
  • 热门焦点
  • 元宇宙的文旅赛道,还能如何发力?

    元宇宙的文旅赛道,还能如何发力?

    来源:X增强现实苹果推出Vision Pro,为XR行业注入一剂强心针。而在苹果开发者大会上迪士尼CEO鲍勃·艾格在宣布迪士尼与苹果达成合作,其Disney+流媒体服务将于Vision Pro
  • 不同于传统数字经济,元宇宙赋予商业生态更多数字资产价值!

    不同于传统数字经济,元宇宙赋予商业生态更多数字资产价值!

    作者:中科基大数据元宇宙是一个去中心化的开放平台,而为了维护这样的平台,需要建立一个公平的游戏规则,确保每个元宇宙的参与者通过这个规则都可以挣到钱,他们的利益都可以得到保
  • 游戏玩家才是最“元宇宙”的

    游戏玩家才是最“元宇宙”的

    01元宇宙的概念,最早由科幻作家尼尔·斯蒂芬森于1992年在其著作《雪崩》中提出。它指的是一个脱胎于现实世界,又与现实世界平行、相互影响,并且始终在线的虚拟世
  • 中国虚拟数字人如何横向拓展市场需求,探索发展场景?

    中国虚拟数字人如何横向拓展市场需求,探索发展场景?

    通过5G、AI等新技术更新换代,虚拟数字人为诸多下游行业带来新的发展机会。虚拟数字人技术以其简化性和精品性持续拓展泛娱乐、金融、教育、政务、医疗、零售等
  • 超级碗的加密时刻:是主流信号还是“网络超级碗2.0”?

    超级碗的加密时刻:是主流信号还是“网络超级碗2.0”?

    2 月 13 日,美东时间 18:30,有着“美国春晚”之誉的超级碗(Super Bowl)落下帷幕。超级碗是美国国家美式足球联盟(也称为国家橄榄球联盟)的年度冠军赛,胜者将成为“世
  • 区块链产业人才发展报告

    区块链产业人才发展报告

    工业和信息化部作为工业和信息化行业主管部门,正在着力推进“两个强国”建设,加快推动以区块链为代表的新兴技术与实体经济深度融合。我国区块链技术和应用想要
  • 餐桌上怎么变出元宇宙?

    餐桌上怎么变出元宇宙?

    作者:星影“元宇宙让餐饮业脱胎换骨。”实体的餐饮与虚拟的元宇宙,看起来风马牛不相及,但最近全世界的餐饮企业都掀起了一股注册元宇宙商标的热潮。2月初,全球最大
  • 知识产权可能在元宇宙中“消失”?

    知识产权可能在元宇宙中“消失”?

    开篇老雅痞先来划重点:一些公司开始采取积极的方式来保护他们在元宇宙的知识产权。耐克、爱马仕和米拉麦克斯最近提起诉讼,声称NFT侵犯了他们的知识产权。Inside
  • 新闻业在元宇宙的现状和未来

    新闻业在元宇宙的现状和未来

    “美联社有毛病吧,这真的过分了!”,一位媒体编辑在推特中愤怒地表示。这是针对一款视频NFT的批评言论之一,之后取消了此次销售,因为该视频呈现了移民穿越地中海的苦
Top