SSKG方法让LLM模拟不同掌握程度学生

Yuan An等提出随机学生知识图谱（SSKG）方法，通过采样知识图谱三元组的掌握概率决定答题结果，再让LLM生成与结果一致的理由，用于模拟不同掌握程度的学生。 作者称现有LLM模拟学生缺乏区分能力：在五个掌握级别的SAT题目上，三个LLM答题准确率一致达96.8–100%。基线对比中，七个基线方法无法区分不同掌握画像、准确率保持在86.5–100%，而SSKG方法在从低到高掌握画像上的准确率为44.1–85.2%，随掌握程度拉开差距。上述结果基于论文摘要，属作者声称的实验结果。

AI 根据报道生成 · 2 小时前更新