大模型在高等教育中的应用:大模型写作辅助能力测评

大规模语言模型引发了高等教育领域的深层变革。研究基于人-技关系理论,聚焦人文社会学科研究生学位论文写作辅助场景,构建包含知识、逻辑和应用能力三大维度15项任务的能力框架,及包含2,990道题项的测试数据集,以ChatGPT、Qwen-72B-Chat和Qwen-14B-Chat为样本模型进行写作辅助能力测评。研究发现:大模型在人文社会学科学位论文写作辅助场景下表现出较好的知识型能力与应用型能力,逻辑型能力也存在较强的发展潜力,Qwen-72B-Chat在高等教育与科研垂类表现较好。研究针对大模型在科研方法、社会关系和因果关系三方面的不足,探索了有效的补充指令改进策略,从学习者、研发者、管理者和研究者视角提出了建议,以科学规范与指引学生的技术行为,推动高等教育与科研垂类大模型的建设。