当前位置:首页 > 元宇宙 > 元宇宙

【申万宏源】必然的碎片化AI落地,哪种路径可能胜出? | 元宇宙Meta洞见

来源: 责编: 时间:2023-08-11 16:52:27 4245观看
导读 大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型,大规模预训练模型(大模型)渐渐成为了AI算法领域的热点。AI产业链:从算力到应用工作流程视角• 算法设计环节:机器视觉、语音识别、自然语

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

大规模预训GPT(Generative PreTraining)是OpenAI在2018年提出的模型,大规模预训练模型(大模型)渐渐成为了AI算法领域的热点。8a328资讯网——每日最新资讯28at.com

AI产业链:从算力到应用

工作流程视角
8a328资讯网——每日最新资讯28at.com

• 算法设计环节:机器视觉、语音识别、自然语音处理、知识图谱8a328资讯网——每日最新资讯28at.com

• 算法实现环节:深度学习框架,训练、推理部署,对模型的调参优化8a328资讯网——每日最新资讯28at.com

• 算法运行环节:AI芯片和AIDC超算中心,提供硬件基础8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com

AI平台层:何种训练模型可以脱颖而出

AI平台:少量企业参与的AI高地之争
8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

• 训练软件框架:实现深度学习训练算法的模块化封装8a328资讯网——每日最新资讯28at.com

• 模型生产平台:实现模型的工业级生产8a328资讯网——每日最新资讯28at.com

• 推理部署框架:实现模型生产完成后的工业级高效、自动的部署8a328资讯网——每日最新资讯28at.com

• 数据平台:包括数据采集、数据标注、数据生产、数据存储等功能8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

训练框架:调节参数,生成参数8a328资讯网——每日最新资讯28at.com

训练框架是AI的重要基石,也是AI发展战略的制高点。当算法变成改造甚至颠覆软件行业的力量时,最后核心就是看这些AI的公司有没有平台化的能力,即“能够批量、高效、比竞争对手更及时地供应优质算法。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

推理框架:与硬件和设备端紧密相关8a328资讯网——每日最新资讯28at.com

推理框架:主要部署在设备端和云端,因此与硬件厂商紧密相关。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

开源框架的选择:规模效应与生态8a328资讯网——每日最新资讯28at.com

四大顶级深度学习框架阵营可以满足绝大部分开发者要求。社区规模效应:维护力量、贡献人员决定了算法库扩展及时性、API水平,软件框架规模效应较强。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com

AI大模型:成为行业新趋势

行业更新热点在“大模型”
8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

传统机器学习里,模型过小则欠拟合,模型过大则过拟合。深度学习里Double Descent现象在2018年揭示,随着模型参数变多,Test Error是先下降,再上升,然后第二次下降;原则上,在成本可接受的情况下,模型越大,准确率越好。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

OpenAI :GPT-38a328资讯网——每日最新资讯28at.com

GPT-3在许多NLP数据集上均具有出色的性能,包括翻译、问答和文本填空任务,这还包括一些需要即时推理或领域适应的任务,例如给一句话中的单词替换成同义词,或执行3位数的数学运算。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

GPT-3工具DALL·E和“逻辑”优化8a328资讯网——每日最新资讯28at.com

基于GPT-3构建,仅使用了120亿个参数样本,相当于GPT-3参数量的十四分之一;有利于降低了深度学习需要的数据标注量,文本和图像理解结合起来8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

优势显著8a328资讯网——每日最新资讯28at.com

• 自监督学习功能,大幅降低对数据量的需求:GPT舍弃Fine-tuning,先使用海量数据预训练大模型,得到一套模型参数,然后用这套参数对模型进行初始化,再进行训练。大幅降低后续对数据量的需求。8a328资讯网——每日最新资讯28at.com

• 预训练大模型+细分场景微调,更适合长尾落地:大规模预训练可以有效地从大量标记和未标记的数据中捕获知识,通过将知识存储到大量的参数中并对特定任务进行微调,极大扩展模型的泛化能力。8a328资讯网——每日最新资讯28at.com

• 有望进一步突破现有模型结构的精度局限:可能继续突破精度上限。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com

AI碎片化问题:必然性的两种路径

AI落地和碎片化需求同时出现
8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

业界在2015-2017年后开始发生变化,AI走出实验室和商业模式转变:8a328资讯网——每日最新资讯28at.com

• 工业场景更复杂的逻辑:编程模式从静态网络结构描述向动态计算过程转变。8a328资讯网——每日最新资讯28at.com

• SDK商业模式可能无法在国内落地:早期试图复制海外SDK销售路线,但这一模式无法在国内复制。8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

两种路径的总结8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com

8a328资讯网——每日最新资讯28at.com


8a328资讯网——每日最新资讯28at.com

设计并训练工业级的高性能AI模型需要大量的成本投入和深厚的技术沉淀,包含多场景汇总的海量数据,复杂的模型设计和训练算法,以及复杂的软件框架和硬件系统在内的大型计算基础设施,AI公司需要突破技术发展的瓶颈。8a328资讯网——每日最新资讯28at.com

-END-
8a328资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-40-64-0.html【申万宏源】必然的碎片化AI落地,哪种路径可能胜出? | 元宇宙Meta洞见

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 【东方证券】虚拟世界照进现实,元宇宙中有什么? | 元宇宙Meta洞见

下一篇: 元宇宙将会如何塑造未来的工作方式?

标签:
  • 热门焦点
  • ChatGPT访问量增速下滑,AI真的是一场泡沫吗?

    来源:首席商业评论2023年,最火的莫过于ChatGPT,席卷全球的同时也引发了生成式AI(人工智能)的投资热潮。在美股,ChatGPT相关概念股飙涨,以AI算力龙头英伟达为例,其股价年内一度累计上
  • 元宇宙社交啫喱、希壤爆款迭出,腾讯慌了吗?

    文 | 陈桥辉没想到腾讯超级QQ秀的20周年归来首秀,被一款名不见经传的产品抢了风头。1月15日,一款名为“啫喱”的社交App迅速在各个互联网的社交圈内火爆起来,引起
  • 区块链产业人才发展报告

    工业和信息化部作为工业和信息化行业主管部门,正在着力推进“两个强国”建设,加快推动以区块链为代表的新兴技术与实体经济深度融合。我国区块链技术和应用想要
  • 好莱坞:一股新的电影制作加密浪潮将颠覆这个行业

    在Moviecoin.com平台上,有一部电影设定了一个前所未有的目标,即通过预售NFT获得100%的全额融资,这部电影就是马克·奥康纳(Mark O’connor)执导的《Oui Cannes》,
  • 虚拟数字人:元宇宙的主角破圈而来

    虚拟数字人市场逐步进入成熟期,商业化进程加速。1982年世界第一位虚拟歌姬林明美诞生,虚拟数字人行业经历了萌芽、探索、初级和成长四个阶段。随技术逐年突破,制
  • 量子计算在未来能否提高区块链技术的效率

    区块链技术的主要成功之处在于对不透明的金融流程进行了去中心化的访问量子计算机的内在目标是解决传统计算机不可能解决的问题随着区块链技术的使用案例逐渐
  • 知识产权可能在元宇宙中“消失”?

    开篇老雅痞先来划重点:一些公司开始采取积极的方式来保护他们在元宇宙的知识产权。耐克、爱马仕和米拉麦克斯最近提起诉讼,声称NFT侵犯了他们的知识产权。Inside
  • 头像类NFTs的统治能持续多久?

    在过去的一两年里,NFTs在互联网世界中掀起了一场风暴。今天,当我们想到NFTs时,我们主要想到的是那些充斥着我们的社交媒体屏幕的数字卡通--无聊猿、punks 和介于
  • 电影工业巨头好莱坞计划进军元宇宙,将会对行业带来什么影响?

    元宇宙听起来像不像是科幻小说中出现的术语?事实确实如此。小说家尼尔·斯蒂芬森在1992年的小说《雪崩》中首次用这个词来定义了一个多连接的虚拟宇宙,它能够模
Top