编辑:[db:作者] 时间:2024-08-25 04:49:38
在此背景下,海内首个UI大模型横空出世。8月17日,在IXDC2024国际体验设计大会上,AI时期设计工具Motiff妙多推出了其自主研发的UI多模态大模型——Motiff妙多大模型。
这是环球首个由UI设计工具企业研发的大模型,标志着中国UI设计力量在环球舞台上的崛起。IXDC大会现场,Motiff妙多副总裁先容海内首个UI大模型——Motiff妙多大模型
Motiff妙多大模型具备出色的UI理解能力和实行开放式指令的能力。在五个行业公认的UI能力基准测试集中,Motiff妙多大模型的各项指标均超过了GPT-4o和苹果的Ferret UI,同时在Screen2Words(界面描述与推断)和Widget Captioning(部件描述)两大指标上也超越了谷歌的ScreenAI,个中Widget Captioning指标高达161.77,刷新SoTA。与Ferret UI、ScreenAI等现有办理方案比较,Motiff妙多大模型能灵巧地根据高下文理解界面元素,达到“设计专家”水平,最靠近人类对UI界面的理解和表述结果。
威信UI指标横评中,Motiff妙多大模型所有指标均超过GPT-4o和Ferret UI
最懂UI的大模型、表述高度靠近人类,未来界面交互革命的基石在IXDC大会上,Motiff妙多副总裁张昊然详细先容了Motiff妙多大模型,它具备理解用户界面和交互导览两大能力,有望引领界面交互革命。“人类的创造从认知和理解开始,AI 时期的 UI 创作也将从大模型充分理解用户界面开始。”张昊然说。
Motiff妙多大模型在理解用户界面方面表现卓越,堪比“设计专家”。它不仅能识别界面中所有的图片、图标、笔墨和40多种细粒度UI组件,还能精确标注界面上不同元素的区域坐标。此外,它还能够回答与用户界面干系的各种问题,并根据界面信息进行功能推断、详细描述界面内容。
相较于GPT-4o、Ferret UI和ScreenAI等大模型,Motiff妙多大模型还在界面剖析能力上具有显著上风。例如,在APP Store运用界面中,Motiff妙多大模型能以UI设计视角将页面分为顶部导航栏、运用信息模块等多个模块,并详细剖析每个模块的功能和布局,这有助于供应设计建议、自动天生UI设计原型等。Motiff妙多在界面剖析能力上处于行业领先水平,是最懂UI设计的多模态大模型。
Motiff妙多大模型能回答各种各样有关UI界面的问题
Motiff妙多大模型在理解和表述能力上也最靠近人类。此前的办理方案(如 Ferret UI 和 ScreenAI)难以根据高下文理解图标的含义,Motiff妙多大模型通过人工标注等办法网络了大量高质量的 UI 领域数据,能理解并指出同一图标在不同界面中的多种含义,显著提升了描述的准确度和情境干系性。
图1数据由谷歌ScreenAI天生,将心形图标缺点地理解为“心”而不是“收藏”;图2、3、4数据由Motiff妙多大模型天生,能结合界面信息准确描述图标含义。
Motiff妙多大模型还具备交互导览能力,可以根据用户需求提示操作步骤,并在得到容许后替代用户完成干系操作。这为未来的界面交互革命奠定了根本。未来,用户无需手动点击屏幕,只需语音或图像输入即可操作设备,Siri等手机助手可能成为所有App的新入口,真正的智好手机和电脑将由此出身,软件运用新范式和界面交互新时期也将随之开启。
此外,Motiff妙多大模型也成功将缺点率掌握在个位数内。业内不雅观点认为,缺点率的大幅低落标志着AI从赞助工具向独立完成事情的“技能奇点”迈进。目前,大模型面临的核心问题之一是较高的缺点率,如GPT-4在多个指标上有30%至40%的缺点率,在UI领域缺点率乃至超过70%。比较之下,Motiff妙多大模型将缺点率降落到15%以下,个别指标缺点率仅为7%。
为何AI运用企业能自主研发出环球领先的大模型?张昊然在大会上称,这源于对“产品做得更好”的持续追求。“Motiff妙多作为AI产品引领者,致力于从运用处景出发打破技能瓶颈,不断提升对AI能力的哀求。”他说。
Motiff妙多能在UI领域“打败”GPT-4o、苹果Ferret UI等国际领先大模型,也得益于其长期的技能积累。Motiff妙多自2021年景立以来一贯专注于界面交互与设计,其母公司猿辅导集团2014年就成立了专注于AI技能前沿探索的AI Lab,2018年猿辅导集团在有名机器阅读比赛MSMARCO中就位列环球第一,当时的机器阅读理解能力已经超越了百度和微软。
AI提效+天生打造设计师最佳助手, 优化软件开拓事情流毫无疑问, Motiff妙多大模型的发布标志着界面设计领域迎来GPT时候。UI 设计须要对视觉元素的精确处理和对用户交互逻辑的深度理解,Motiff妙多大模型显著提升了设计工具的效率和天生能力。
在Motiff妙多的AI天生UI功能中,用户只需输入一段指令,不到30秒,Motiff妙多就能天生两版设计稿。根据近期30多位行业人士的盲评,Motiff妙多天生的两版设计稿均优于之前领先的AI天生UI工具Galileo AI。该功能发布后迅速成为市场上的领先者,这一上风直接源于Motiff妙多大模型的UI专业能力。据悉,AI天生UI功能已于8月17日对环球用户开放,只需注册Motiff妙多账号即可免费体验。
此外,AI设计系统功能中的组件识别准确性也得到了显著提升。在大模型的支持下,设计师仅需花费几分钟就能完成过去至少几周才能完成的事情。AI复制功能对设计稿中的图片和文案识别准确率达到97%以上。
“Motiff 妙多将操持面向中大型企业开放大模型能力,和客户共同打造 AI 时期新的界面对盆关系。”张昊然在会上指出,Motiff妙多大模型有助于优化软件开拓事情流,有效缩短现有的界面对盆流程。
Motiff妙多此前已在界面设计行业首创了多个“第一”,不仅创始多个AI功能,也是海内首个自研图形渲染引擎的界面设计软件,并且是环球唯一在单画布100万图层下仍可流畅编辑的高性能产品。Motiff在外洋社交媒体上被誉为“AI版Figma”,在提高生产力超百倍的同时,价格比Figma低80%以上,并登上有名产品发布平台Product Hunt 7月最受欢迎产品日榜和周榜第一。
(外洋社交平台涌现大量比较Motiff妙多和Figma的帖子,Motiff妙多被认为是设计师都须要理解的AI工具。)
— 完 —
量子位 QbitAI 头条号签约
关注我们,第一韶光获知前沿科技动态
本站所发布的文字与图片素材为非商业目的改编或整理,版权归原作者所有,如侵权或涉及违法,请联系我们删除,如需转载请保留原文地址:http://www.baanla.com/bx/127805.html
下一篇:返回列表
Copyright 2005-20203 www.baidu.com 版权所有 | 琼ICP备2023011765号-4 | 统计代码
声明:本站所有内容均只可用于学习参考,信息与图片素材来源于互联网,如内容侵权与违规,请与本站联系,将在三个工作日内处理,联系邮箱:123456789@qq.com