大语言模型中的高维人类价值表示
High-Dimension Human Value Representation in Large Language Models
基于摘要分析。本文研究如何表征和比较大语言模型(LLMs)所体现的人类价值分布,提出高维表示方法 UniVaR,以分析不同模型在不同语言和文化语境下的价值优先次序。其研究对象是 LLM 输出中的人类价值取向,而非 EEG/BCI 信号或神经表征。 方法方面,作者将 UniVaR 定位为不依赖特定模型架构和训练数据的价值分布表示,并使用八个多语言 LLM 的价值相关输出进行训练,在 LlaMA2、ChatGPT、JAIS 和 Yi 四个多语言 LLM 的输出上测试。摘要未交代价值相关输出的采集方式、价值维度的定义、表示学习目标、模型具体版本,以及训练与测试模型是否重叠,因此其跨模型泛化范围尚需核对。 作者报告,UniVaR 能够比较不同 LLM 及不同语言来源下的人类价值分布,并据此探索语言、文化与模型价值优先次序之间的关系。摘要未提供定量指标、对照基线或统计结果,尚不能据此判断表示是否主要捕捉价值取向,还是同时受到语言、主题及回答风格的影响;实验协议、消融及统计信息尚未验证。 摘要以降低大规模人工标注成本作为研究动机之一,但未给出利用 UniVaR 实施模型对齐的流程或成本验证,不能将其直接视为已经验证的低成本对齐方法。材料也未提供与 EEG/BCI 的具体机制对应关系,因此不据此推导神经信号任务上的迁移效果。
UniVaR 将不同 LLM 的价值相关输出映射为可比较的高维表示,值得关注其跨模型、跨语言比较能否区分价值差异与语言表达差异,但具体评估协议与有效性尚未验证。
来源:OpenReview · Representation learning · openreview.net