2024年11月9日,我院教师王晔、邓雅菱对大语言模型(Large Language Model,以下简称LLM)语义网络的研究“The fluency-based semantic network of LLMs differs from humans”在期刊《Computers in Human Behavior: Artificial Humans》上发表。
该研究发现与人类相比,LLM的语义网络具有较差的互联性、局部关联组织和灵活性,这表明LLM在语义空间中的搜索效率较低,思维更僵化,可能会进一步影响其在创造性写作和推理中的表现。
该研究为LLM评估提供了新的维度,并为LLM的改进提供了新的方向,这是我们在大模型测评方面的一个探索性工作,欢迎交流讨论。