预注册实验：AI在创意搜索早期介入更利筛选质量

Difang Huang、Shumin Yu、Fadong Chen、Weihua Zhou在arXiv发布预注册实验论文《Too Late to Prune: Generative AI, the Screen, and Team Creative Decisions》，研究生成式AI接入时机对团队创意决策的影响。结论是：在产品设计任务中，语言模型越早在创意搜索阶段介入，团队最终筛选出的方案质量越高。 实验将148个三人团队随机分配到五种访问安排，任务分限时搜索与筛选两个阶段。把同样的15分钟模型访问从搜索阶段移到筛选阶段，专家评定的创造力下降0.62个标准差，尽管各团队使用模型的频率相近。机制上，晚期访问团队带着与无AI团队相同的小创意池进入筛选阶段后再重新搜索，其筛选阶段29%的查询用于生成新选项，而全程有访问的团队这一比例为11%。 晚期访问带来的增量是广度而非质量：这些团队提交的方案比无AI团队多73%。此外，语言模型评委能识别访问带来的收益，但未能识别晚期接入的时机成本。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。