首页 > 计算机科学

ICLR 2026 | GPT-5竟给废图打高分?首个图表“信达雅”评测基准发布

PaperWeekly 2026-02-04 13:46
文章摘要
背景:在数据驱动的决策时代,图表是传递复杂信息的核心工具,但现实中存在大量设计不当的图表,而当前缺乏系统评估图表质量的标准,多模态大模型在图表理解与评估上的能力也尚未得到有效量化。研究目的:为此,研究团队提出了VisJudge-Bench,这是首个基于“信、达、雅”三维框架的可视化质量评估基准,旨在系统衡量大模型在图表数据忠实度、信息表达力和视觉美感方面的能力。结论:实验表明,当前主流大模型(如GPT-5)在图表评估上存在系统性偏差(如分数膨胀或过度保守),尤其在复杂仪表盘场景中表现不佳;而基于该基准专项训练的VisJudge模型则更贴近人类专家判断,且在自动化数据分析任务中展现出实用价值,推动了AI向可靠的“视觉评审官”发展。
ICLR 2026 | GPT-5竟给废图打高分?首个图表“信达雅”评测基准发布
本站注明稿件来源为其他媒体的文/图等稿件均为转载稿,本站转载出于非商业性的教育和科研之目的,并不意味着赞同其观点或证实其内容的真实性。如转载稿涉及版权等问题,请作者速来电或来函联系。
最新文章
ICLR 2026 | GPT-5竟给废图打高分?首个图表“信达雅”评测基准发布
ICLR 2026 | GPT-5竟给废图打高分?首个图表“信达雅”评测基准发布
\uD83E\uDE84 你的 Dashboard 好看又精准吗? 也许,是时候让 AI 来严肃地打一次分了。引言:当 AI 开始 “看图思考”在这个“数据驱动决策”的时代,图表早已不是“锦上添花”的装饰——它是传递复杂信
10小时前
Wiley高层访问中国市场:加速AI布局,助力人工智能驱动型研究的发展
Wiley高层访问中国市场:加速AI布局,助力人工智能驱动型研究的发展
近期,威立执行副总裁兼总经理Jay Flynn,威立高级副总裁兼学术出版全球负责人Liz Ferguson及威立高级副总裁兼首席营销官Anna Reeves到访中国市场,在威立北京办公室与威立全球副总
10小时前
代码直接变论文!MSRA同款Agent库开源,读Repo一键生成初稿
代码直接变论文!MSRA同款Agent库开源,读Repo一键生成初稿
当你还在反复调试 Prompt 时,隔壁组已经用 Agent 把代码直接变成了顶会论文。科研中最绝望的时刻往往不是没有 idea,而是实验跑通后,对着丑陋的 Visio 架构图调配色,或者对着空白的
2026-02-03
别再暴力Clip了!千问提出GatedNorm,统一视角揭秘残差流玄学
别再暴力Clip了!千问提出GatedNorm,统一视角揭秘残差流玄学
在 Transformer 的训练过程中,只要稍微留心观察权重或激活值的分布,你就会发现残差流里的那个怪象:无论输入何种 token,某些固定维度的激活值始终显著高于其他维度。与此同时,Attenti
2026-02-03
Book学术官方微信
Book学术文献互助
Book学术文献互助群
群 号:604180095
Book学术
文献互助 智能选刊 最新文献 互助须知 联系我们:info@booksci.cn
Book学术提供免费学术资源搜索服务,方便国内外学者检索中英文文献。致力于提供最便捷和优质的服务体验。
Copyright © 2023 Book学术 All rights reserved.
ghs 京公网安备 11010802042870号 京ICP备2023020795号-1