×
img

天风证券:消费电子行业专题研究:FerretUI提升交互能力,AI助力苹果开启升级新周期

发布者:wx****83
2024-04-30
1 MB 9 页
半导体 天风证券
文件列表:
天风证券:消费电子行业专题研究:FerretUI提升交互能力,AI助力苹果开启升级新周期.pdf
下载文档
FerretUI通过任意分割UI界面实现全貌、细节捕捉,有望颠覆传统UI交互方式 Ferret-UI是一个为移动UI定做的大模型(MLLM),具备图片识别、定位和推理功能,有望通过整合于agent使用户直接交互操作手机,颠覆UI交互方式。FerretUI建立于Ferret多模态模型基础上,通过图像编码器、空间感知的视觉采样器和语言模型(LLM)架构实现图片精准理解与定位,并集成了"anyresolution"(任意分辨率)技术灵活适应各种屏幕纵横比并捕捉细节。通过基础、高级分级训练,FerretUI得以具备基本的定位和理解UI组件能力以及进阶的AI交互推理能力。在与市场主流大模型的综合基准测试中,FerretUI在除“查找文本”外的所有初级UI任务上超越了GPT-4V,在iPhone端高级UI任务的平均得分与GPT-4V非常相近,并具备一定的不同操作系统之间的迁移能力。 FerretUI催化iPhone规模出货、有望驱动升级周期,AI手机拉动上游价值量提升 类比5G,AI因其软硬件要求带来较高硬件承接需求,现有手机配置或难以支持AI应用,2023年全球智能手机出货量下降背景下,AI的高

加载中...

已阅读到文档的结尾了

下载文档

网友评论>