当前位置：首页 > 科技 > 手机

苹果论文展示Ferret-UI大语言模型：可深度理解屏幕信息内容

来源：责编：时间：2024-04-11 08:58:24 292观看

导读近日，苹果发布研究论文，展示了名叫“Ferret-UI”的多模态大语言模型。根据论文介绍，Ferret-UI模型针对目前MLLMs模型（多模态大语言模型）无法有效理解移动应用程序在屏幕上显示的内容这一问题，做出了针对性的调整。为了训练

近日，苹果发布研究论文，展示了名叫“Ferret-UI”的多模态大语言模型。

根据论文介绍，Ferret-UI模型针对目前MLLMs模型（多模态大语言模型）无法有效理解移动应用程序在屏幕上显示的内容这一问题，做出了针对性的调整。

为了训练Ferret-UI，苹果收集了大量初级用户界面任务的训练样本，如图标识别、查找文本和小部件列表。

这些样本的格式都是按照带有区域注释的指令来设计的，以便于精确引用和接地。

同时，为了增强模型的推理能力，苹果进一步编制了高级任务数据集，包括详细描述、感知/交互对话和功能推理。

这使得Ferret-UI相较目前的GPT-4V等MLLMs模型，在理解应用程序在屏幕上显示的内容时，有着显著的优势。

本文链接：http://www.28at.com/showinfo-22-82548-0.html苹果论文展示Ferret-UI大语言模型：可深度理解屏幕信息内容

声明：本网页内容旨在传播知识，若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。邮件：2376512515@qq.com

上一篇：用户反馈佩戴Vision Pro后出现健康问题：头痛、颈部酸痛等

下一篇： 2024中国边缘计算20强重磅发布！华为第一

标签：

热门焦点

K6：面向开发人员的现代负载测试工具

K6 是一个开源负载测试工具，可以轻松编写、运行和分析性能测试。它建立在 Go 和 JavaScript 之上，它被设计为功能强大、可扩展且易于使用。k6 可用于测试各种应用程序，包括 Web
三万字盘点 Spring 九大核心基础功能

大家好，我是三友~~今天来跟大家聊一聊Spring的9大核心基础功能。话不多说，先上目录：图片友情提示，本文过长，建议收藏，嘿嘿嘿！一、资源管理资源管理是Spring的一个核心的基础功能，不
最“俊美”淘宝卖家，靠直播和短视频圈粉，上架秒光，年销3000万

来源 | 电商在线文｜易琬玉编辑｜斯问受访店铺：Ringdoll戒之人形图源：微博@御座的黄山、“Ringdoll戒之人形”淘宝店铺有关外貌的评价，黄山已经听累了。生于1985年的他，哪
梁柱接棒两年，腾讯音乐闯出新路子

文丨田静出品丨牛刀财经（niudaocaijing）7月5日，企鹅FM发布官方公告称由于业务调整，将于9月6日正式停止运营，这意味着腾讯音乐长音频业务走向消亡。腾讯在长音频领域还在摸索。为
年轻人的“职场羞耻感”，无处不在

作者：冯晓亭陶淘李欣张琳马舒叶来源：燃次元“人在职场，应该选择什么样的着装？”近日，在网络上，一个与着装相关的帖子引发关注，在该帖子里，一位在高级写字楼亚洲金
微博大门常打开，迎接海外画师漂洋东渡

作者:互联网那些事“起猛了，我能看得懂日语了”。“为什么日本人说话我能听懂？”“中文不像中文，日语不像日语，但是我竟然看懂了”…&hell
2纳米决战2025

集微网报道从三强争霸到四雄逐鹿，2nm的厮杀声已然隐约传来。无论是老牌劲旅台积电、三星，还是誓言重回先进制程领先地位的英特尔，甚至初成立不久的新
iQOO Neo8 Pro即将开售：到手价3099元起安卓性能最强旗舰

5月23日，iQOO如期举行了新品发布会，全新的iQOO Neo8系列也正式与大家见面，包含iQOO Neo8和iQOO Neo8 Pro两个版本，其中标准版搭载高通骁龙8+，而Pro版更
由于成本持续增加，笔记本产品价格预计将明显上涨

根据知情人士透露，由于材料、物流等成本持续增加，笔记本产品价格预计将在2021年下半年有明显上涨。进入6月下旬以来，全球半导体芯片缺货情况加剧，显卡、处理器

苹果论文展示Ferret-UI大语言模型：可深度理解屏幕信息内容

K6：面向开发人员的现代负载测试工具

三万字盘点 Spring 九大核心基础功能

最“俊美”淘宝卖家，靠直播和短视频圈粉，上架秒光，年销3000万

梁柱接棒两年，腾讯音乐闯出新路子

年轻人的“职场羞耻感”，无处不在

微博大门常打开，迎接海外画师漂洋东渡

2纳米决战2025

iQOO Neo8 Pro即将开售：到手价3099元起安卓性能最强旗舰

由于成本持续增加，笔记本产品价格预计将明显上涨

最新推荐

猜你喜欢

热门推荐

相关资讯