Not-quite-human tastes: the stylized omnivorousness of LLM survey surrogates.
创建于 更新于
摘要
本文系统评估LLMs作为文化口味silicon surrogates的忠实度，基于SPPA数据对277,470个合成样本的对比，揭示表层看似合理的输出背后存在显著的偏差与结构性失配。生态层面显示silicon样本普遍呈现正向偏差，导致“喜欢”的广度被高估，特别是在非流行流派中更为突出；关系性结构被削弱， genre之间的协变关系与真实数据显著不同；在社会空间关联方面，年龄、性别、种族、收入等变量的关联被扭曲，甚至出现虚构或夸大的race-taste与类阶层关系 [page::7][page::9][page::13]。研究采用Jaccard距离、相关矩阵对比和混合效应元回归等方法，系统评估生态、关系性与社会位置关联三维 fidelity，并指出在文化研究领域谨慎使用silicon采样的必要性与改正方向 [page::17]。
