• 我的订阅
  • 科技

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

类别:科技 发布时间:2024-08-19 09:37:00 来源:量子位

人工智能的发展速度可能超乎你的想象。自GPT-4将多模态技术引入公众视野以来,多模态大模型进入快速发展阶段,逐渐从单纯的模型研发转向垂直领域的探索和应用,与各行各业深度融合。在界面交互领域,谷歌、苹果等国际科技巨头纷纷投入UI多模态大模型研发,这被视为手机AI革命的必经之路。

在此背景下,国内首个UI大模型横空出世。8月17日,在IXDC2024国际体验设计大会上,AI时代设计工具Motiff妙多推出了其自主研发的UI多模态大模型——Motiff妙多大模型。这是全球首个由UI设计工具企业研发的大模型,标志着中国UI设计力量在全球舞台上的崛起。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

IXDC大会现场,Motiff妙多副总裁介绍国内首个UI大模型——Motiff妙多大模型

Motiff妙多大模型具备出色的UI理解能力和执行开放式指令的能力。在五个行业公认的UI能力基准测试集中,Motiff妙多大模型的各项指标均超过了GPT-4o和苹果的Ferret UI,同时在Screen2Words(界面描述与推断)和Widget Captioning(部件描述)两大指标上也超越了谷歌的ScreenAI,其中Widget Captioning指标高达161.77,刷新SoTA。与Ferret UI、ScreenAI等现有解决方案相比,Motiff妙多大模型能灵活地根据上下文理解界面元素,达到“设计专家”水平,最接近人类对UI界面的理解和表述结果。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

权威UI指标横评中,Motiff妙多大模型所有指标均超过GPT-4o和Ferret UI

最懂UI的大模型、表述高度接近人类,未来界面交互革命的基石

在IXDC大会上,Motiff妙多副总裁张昊然详细介绍了Motiff妙多大模型,它具备理解用户界面和交互导览两大能力,有望引领界面交互革命。“人类的创造从认知和理解开始,AI 时代的 UI 创作也将从大模型充分理解用户界面开始。”张昊然说。

Motiff妙多大模型在理解用户界面方面表现卓越,堪比“设计专家”。它不仅能识别界面中所有的图片、图标、文字和40多种细粒度UI组件,还能精确标注界面上不同元素的区域坐标。此外,它还能够回答与用户界面相关的各种问题,并根据界面信息进行功能推断、详细描述界面内容。

相较于GPT-4o、Ferret UI和ScreenAI等大模型,Motiff妙多大模型还在界面分析能力上具有显著优势。例如,在APP Store应用界面中,Motiff妙多大模型能以UI设计视角将页面分为顶部导航栏、应用信息模块等多个模块,并详细分析每个模块的功能和布局,这有助于提供设计建议、自动生成UI设计原型等。Motiff妙多在界面分析能力上处于行业领先水平,是最懂UI设计的多模态大模型。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

Motiff妙多大模型能回答各种各样有关UI界面的问题

Motiff妙多大模型在理解和表述能力上也最接近人类。此前的解决方案(如 Ferret UI 和 ScreenAI)难以根据上下文理解图标的含义,Motiff妙多大模型通过人工标注等方式收集了大量高质量的 UI 领域数据,能理解并指出同一图标在不同界面中的多种含义,显著提升了描述的准确度和情境相关性。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

图1数据由谷歌ScreenAI生成,将心形图标错误地理解为“心”而不是“收藏”;图2、3、4数据由Motiff妙多大模型生成,能结合界面信息准确描述图标含义。

Motiff妙多大模型还具备交互导览能力,可以根据用户需求提示操作步骤,并在获得许可后替代用户完成相关操作。这为未来的界面交互革命奠定了基础。未来,用户无需手动点击屏幕,只需语音或图像输入即可操作设备,Siri等手机助手可能成为所有App的新入口,真正的智能手机和电脑将由此诞生,软件应用新范式和界面交互新时代也将随之开启。

此外,Motiff妙多大模型也成功将错误率控制在个位数内。业内观点认为,错误率的大幅下降标志着AI从辅助工具向独立完成工作的“技术奇点”迈进。目前,大模型面临的核心问题之一是较高的错误率,如GPT-4在多个指标上有30%至40%的错误率,在UI领域错误率甚至超过70%。相比之下,Motiff妙多大模型将错误率降低到15%以下,个别指标错误率仅为7%。

为何AI应用企业能自主研发出全球领先的大模型?张昊然在大会上称,这源于对“产品做得更好”的持续追求。“Motiff妙多作为AI产品引领者,致力于从应用场景出发突破技术瓶颈,不断提升对AI能力的要求。”他说。

Motiff妙多能在UI领域“打败”GPT-4o、苹果Ferret UI等国际领先大模型,也得益于其长期的技术积累。Motiff妙多自2021年成立以来一直专注于界面交互与设计,其母公司猿辅导集团2014年就成立了专注于AI技术前沿探索的AI Lab,2018年猿辅导集团在知名机器阅读比赛MSMARCO中就位列全球第一,当时的机器阅读理解能力已经超越了百度和微软。

AI提效+生成打造设计师最佳助手, 优化软件开发工作流

毫无疑问, Motiff妙多大模型的发布标志着界面设计领域迎来GPT时刻。UI 设计需要对视觉元素的精确处理和对用户交互逻辑的深度理解,Motiff妙多大模型显著提升了设计工具的效率和生成能力。

在Motiff妙多的AI生成UI功能中,用户只需输入一段指令,不到30秒,Motiff妙多就能生成两版设计稿。根据近期30多位行业人士的盲评,Motiff妙多生成的两版设计稿均优于之前领先的AI生成UI工具Galileo AI。该功能发布后迅速成为市场上的领先者,这一优势直接源于Motiff妙多大模型的UI专业能力。据悉,AI生成UI功能已于8月17日对全球用户开放,只需注册Motiff妙多账号即可免费体验。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

此外,AI设计系统功能中的组件识别准确性也得到了显著提升。在大模型的支持下,设计师仅需花费几分钟就能完成过去至少几周才能完成的工作。AI复制功能对设计稿中的图片和文案识别准确率达到97%以上。

“Motiff 妙多将计划面向中大型企业开放大模型能力,和客户共同打造 AI 时代新的界面生产关系。”张昊然在会上指出,Motiff妙多大模型有助于优化软件开发工作流,有效缩短现有的界面生产流程。

Motiff妙多此前已在界面设计行业开创了多个“第一”,不仅首创多个AI功能,也是国内首个自研图形渲染引擎的界面设计软件,并且是全球唯一在单画布100万图层下仍可流畅编辑的高性能产品。Motiff在海外社交媒体上被誉为“AI版Figma”,在提高生产力超百倍的同时,价格比Figma低80%以上,并登上知名产品发布平台Product Hunt 7月最受欢迎产品日榜和周榜第一。

Motiff妙多发布国内首个UI大模型,效果跑分超越苹果、GPT-4o

(海外社交平台出现大量比较Motiff妙多和Figma的帖子,Motiff妙多被认为是设计师都需要了解的AI工具。)

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-08-19 11:45:11

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

4g显存低配畅玩aigc!
...年前的GTX1650(显存4GB),AI出图效果堪比当前最好的开源模型SDXL。△图源:推特@ナビ这是最近在GitHub上连续数日霸榜TOP1的新项目Fooocus
2023-08-26 19:58:00
苹果展示ferret-uiai系统可理解应用程序
...以理解应用程序屏幕上的内容。以ChatGPT为代表的AI大语言模型(LLMs),其训练材料通常是文本内容。为了能够让AI模型能够理解图像
2024-04-11 02:30:00
苹果rabbit推出ai硬件“rabbitr1”
...式AI硬件“RabbitR1”(R1)。凭借简洁的设计、内嵌人工智能模型以及极低的定价,R1迅速蹿红,亮相仅一天销售破万台
2024-01-21 10:48:00
苹果发布mm1.5-ui模型
...13日消息,近日,苹果公司推出了300亿参数的多模态AI大模型MM1.5,该版本是在前代MM1的架构基础上发展而来的。该模型继续遵循数据驱动的训练原则,着重探究在不同训练周期
2024-10-13 10:57:00
苹果AI震撼上线iPhone,进化版Siri却没有ChatGPT!47页技术报告揭秘自研模型
...,一大波测评刷屏全网。更惊喜的是,苹果AI背后的基础模型47页技术报告,也一并上线了。一大早,人们期待已久的「苹果AI」首个预览版
2024-08-01 09:40:00
...Seek在其官网宣布了一项最新更新。据官网公告,DeepSeek V3模型已完成小版本升级,目前版本号DeepSeek-V3-0324
2025-03-26 11:46:00
谭平:得益于技术发展,虚拟世界有了实现的基础条件
...个相当小众的领域。二十年过去,技术已进步太多:三维模型数据比过去丰富得多,渲染效果也更逼真、更快速。三维模型可以由艺术家手工设计出来,也可以通过对真实物体、场景进行三维重建得
2023-01-19 11:33:00
详解苹果牵手OpenAI:合作只是一场噱头
...的记录里。值得一提的是,苹果与OpenAI合作使用的是GPT-4o模型,苹果用户无需注册OpenAI账户即可免费使用
2024-06-20 13:28:00
构建人机交互创新模式,微美全息研究AIGC智能交互界面生成技术
...、搜索历史记录、喜好等。然后,系统将这些数据交给AI模型进行训练,从中学习出用户喜欢的元素和设计风格,系统会根据用户提供的需求和创意,自动生成相应的代码和设计,以快速构建出高
2023-07-17 17:00:00
更多关于科技的资讯:
吉刻现场|硬核登场!吉林选手角逐第三届全国博士后创新创业大赛
10月26日,第三届全国博士后创新创业大赛在福建泉州(晋江)开幕。本届大赛,吉林省派出23个项目团队组成的参赛队伍角逐三个大赛道
2025-10-27 14:09:00
厦心医院实现手术\
厦门网讯(厦门日报记者 楚燕 通讯员 许良友 付磊 刘云芳)10月23日,一项载入医学史册的创新手术在厦门大学附属心血管病医院(以下简称“厦心医院”)圆满完成
2025-10-27 08:11:00
新闻纵深·解码钢铁大模型|邯钢构建六大领域全链条智能大模型:“聪明大脑”带来极致能效
邯钢构建六大领域全链条智能大模型“聪明大脑”带来极致能效编者按当钢铁遇上人工智能,一场“智变”正悄然发生。为生动展现人工智能为钢铁产业生产
2025-10-27 08:12:00
第十一届NJSD软件开发者会议在软件谷举行江苏规模最大,1400名软件工程师在宁“聚会”南报网讯(记者于洁尘通讯员林园园)70多位业界“大咖”登台演讲
2025-10-27 08:20:00
南报网讯(通讯员郑瑞于品华杨刚记者徐宁)近日,南化公司自主研发的橡胶防老剂中间产品RT培司(4-氨基二苯胺)除盐技术取得突破
2025-10-27 08:21:00
南报网讯(通讯员杨淏涵记者张希)日前,南京林业大学与乐惠国际南京基地签署《校企全面合作协议》《产业研究院共建协议》,全面开启校企战略合作
2025-10-27 08:22:00
高效,是都市青年的通行证:InstaShake以“一杯营养”重塑健康生活方式 —— 新锐品牌以“零添加、无预制、纯手工”的坚守,为上海都市人群注入鲜活能量
在生活节奏不断加速的上海,追求健康与追求效率似乎成为一道单选题。然而,新锐健康饮品品牌InstaShake正以其独特的“零添加
2025-10-27 08:39:00
济宁银行锚定金融“五篇大文章” 多维发力赋能区域经济高质量发展
鲁网10月27日讯近年来,济宁银行围绕做好金融“五篇大文章”,深入洞察科技企业、中小微企业以及重点产业链金融需求,以产品创新破解融资难题
2025-10-27 11:07:00
汪昌莲据《经济日报》报道,“两三元就能买品牌饼干薯片”“上百种散装零食任意挑选”……从县城到乡镇,在街角与量贩零食店不期而遇已成逛街“标配”
2025-10-27 11:10:00
受冷空气影响,气温先降后升,27日早晨气温较低。26日夜间到27日白天晴间多云,北风转南风2~3级,最低气温市区4℃左右
2025-10-27 11:28:00
2025青岛虚拟现实创新大会将启,雷神科技聚焦信创生态构建
鲁网10月27日讯虚实无界,智享未来。2025青岛虚拟现实创新大会即将在崂山区拉开帷幕。2017年以来,由崂山区成功承办的虚拟现实创新大会
2025-10-27 11:48:00
长白时评评论员 唐小兰近日,北京一市民反映有陌生男子在她家中无人时,通过指纹解锁智能门锁多次进入她家。当事人焦女士告诉新京报记者
2025-10-27 13:38:00
“生物制药工艺与设备发展新趋势研讨会”于10月16日下午举行,麦济生物、艾捷博雅科技、碧博生物等企业的代表,就生物制药工艺优化与设备选型提供了新思路与新方法。责编:卢思宇、姚凯红
2025-10-27 10:19:00
河北日报讯(记者刘英、刘杰)近日,经省科技厅批准,由廊坊润泽科技发展有限公司牵头组建的省级创新联合体——河北省人工智能创新联合体成立
2025-10-27 08:07:00
厦门网讯 (厦门日报记者 薛尧) “品牌金饰每克突破1100元,自己买工具打首饰能省近一半!”近日,受国际金价持续震荡
2025-10-25 08:13:00