Kombai 发布 Design Creativity Bench:GPT-6 Astra 居首但仍远低于人类
Kombai 发布 Design Creativity Bench,用 80 个开放式 UI 任务测模型设计创造力,最高的 GPT-6 Astra 得 65.5 分,人类参考 92.3 分。
AI 深度解读
Kombai 发布 Design Creativity Bench,比较模型在开放式 UI 任务中的原创性、跨场景变化能力与需求完成度,关注价值在于把“设计创造力”从主观印象转化为可比较指标。
- 官方基准称,评测覆盖 80 个开放式 UI 任务,并设置人类设计师参考组。
- Kombai 榜单显示,GPT-6 Astra 得分 65.5,人类参考为 92.3;但论文使用的模型集合与榜单版本存在更新差异,不能简单视为固定排名。
- 论文《Design Creativity Bench: Measuring creativity in LLM-Generated UI》(2026-10-14 修订)称,模型间创意范围为 0.581,人类参考为 0.902;同时模型对需求的完成度普遍超过 90%。
- 这些指标衡量的是特定任务和评测协议下的设计差异,不等同于通用设计质量,也不能直接推断模型在移动端或真实商业项目中的表现。
- 影响/看点:该基准可能促使 UI 生成评测同时关注功能完成与设计多样性,但结论能否推广,取决于任务覆盖、评分方法和模型版本是否持续公开可复现。
- 资料依据:
- Kombai Design Creativity Bench(2026-10-14):https://ww2.kombai.com/benchmark/
- Design Creativity Bench: Measuring creativity in LLM-Generated UI(2026-10-14):https://arxiv.org/abs/2610.11539
- X:邵猛(2026-10-15):https://x.com/shao__meng/status/2110542220709540193
本内容由 AI 生成,仅供参考,请注意甄别