# OpenAI 公布了一份政治偏见评测，用 500 道题测 ChatGPT 会不会站队

> 原标题：Defining and evaluating political bias in LLMs

- 来源：OpenAI News
- 发布时间：2025-10-09T13:00:00.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/432
- 原文：https://openai.com/index/defining-and-evaluating-political-bias-in-llms

## 摘要

OpenAI 自己动手测了 ChatGPT 的政治偏见。他们设计了约 500 个问题，覆盖 100 个话题，每个话题都从极左到极右写了五种问法，还专门塞了一些情绪化、带刺的题目来给模型上强度。评测不看模型选 A 还是选 B，而是看它会不会在回答里夹带私货、只讲一面理、或者被用户带节奏。结果显示，碰到中性或稍微带点倾向的问题，模型基本能保持客观。

## 推荐理由

OpenAI 用约 500 道题覆盖 100 个话题，从极左到极右各设五种问法，考察 ChatGPT 是否夹带倾向、只讲一面理或被用户带节奏。

## 锐评

自己出题自己考，还只公布结论，这种评测我一般当 PR 看。500 道题、100 个话题、五种问法听着挺全，可偏见轴怎么定义、那 30% 降幅拿什么当基线，一个字没提，分数就没法横向比。能说明点问题的只有生产流量里不到 0.01% 这个数，但分母是全部对话，政治提问本来就少，低也正常。这份东西的价值在于 OpenAI 愿意把政治偏见摆上台面量，不在于它测出来的结果。
