AI社区笔记：X平台的双刃剑？
埃隆·马斯克的X平台（前身为Twitter）凭借其“社区笔记”功能，在社交媒体的事实核查领域掀起了一场变革。该系统通过众包的方式，汇集各方观点，对X平台上发布的帖子是否可信进行评估。然而，X平台计划引入AI来辅助撰写社区笔记，这无疑是一把双刃剑，可能重塑甚至颠覆用户对该平台事实核查机制的信任。
X平台在一份研究报告中，将此举描述为一次“升级”，并详细阐述了AI参与社区笔记可能带来的潜在风险。
理想状态下，AI代理能够加速并扩大社区笔记的覆盖范围，从而提升平台整体的事实核查效率。每一条由AI生成的笔记都将由人工审核员进行评估，通过反馈循环不断优化AI的写作能力。随着AI代理在撰写笔记方面不断精进，人工审核员便可以将精力投入到更复杂的事实核查工作中，例如需要专业知识或社会意识的帖子。
如果一切顺利，人机协作模式不仅能够革新X平台的事实核查机制，还有望为“公共知识生产领域的人工智能协作模式”提供新的蓝图。
然而，一个关键问题仍然悬而未决：AI撰写的笔记是否能够达到人工撰写的准确度？更复杂的是，AI代理可能会生成“具有说服力但不准确的笔记”，由于AI“在撰写具有说服力、情感共鸣且看似中立的笔记方面表现出色”，人工评估员可能会将这些笔记评为“有帮助”。这可能会扰乱反馈循环，稀释社区笔记的质量，并长期降低整个系统的可信度。
报告中指出：“如果‘有帮助’的评分与准确性并非完全相关，那么经过精心润色但具有误导性的笔记可能更容易通过审核。随着大型语言模型（LLM）的进步，这种风险可能会增加。它们不仅可以更有说服力地进行写作，还可以更轻松地研究和构建看似可靠的证据体系来支持几乎任何主张，无论其真实性如何，这使得人工评估员更难发现欺骗或错误。”
X平台的AI计划已经引发了广泛的批评。英国前技术部长达米安·柯林斯指责X平台正在构建一个可能导致“对人们在拥有超过6亿用户的平台上看到和决定信任的内容进行工业化操纵”的系统。
柯林斯声称，AI笔记可能会增加X平台上“谎言和阴谋论”的传播。艾伦·图灵研究所新兴技术与安全中心的研究员塞缪尔·斯托克韦尔表示，X平台的成功很大程度上取决于“X平台采取的保护措施的质量，以防范这些AI‘笔记作者’产生幻觉并在其输出中放大错误信息的风险。”
斯托克韦尔表示：“AI聊天机器人通常难以处理细微之处和背景信息，但擅长自信地提供听起来具有说服力的答案，即使这些答案是不真实的。如果平台不能有效地解决这个问题，这可能是一个危险的组合。”
更复杂的是，任何人都可以使用任何技术创建AI代理来撰写社区笔记。这意味着某些AI代理可能比其他代理更具偏见或缺陷。
如果这种反乌托邦式的情况发生，X平台预测人工撰写者可能会厌倦撰写笔记，从而威胁到社区笔记原本赖以信任的多元化观点。
对于那些坚持下来的人工撰写者和审核员来说，大量的AI生成笔记可能会让他们不堪重负。英国事实核查组织Full Fact的AI主管安迪·达德菲尔德表示，X平台面临的风险是“增加人工审核员的负担，使其需要检查更多的草稿笔记，从而可能导致一种令人担忧且看似合理的情况：笔记完全由AI起草、审核和发布，而没有人工输入的仔细考虑。”
X平台计划进行更多的研究，以确保“人工评估能力能够充分扩展”，但如果它无法解决这个难题，它知道“最关键的笔记的影响”可能会被削弱。
研究人员指出，解决这个“瓶颈”的一个可能方法是取消人工审核流程，并在人工评估员先前批准的“类似情况”中应用AI撰写的笔记。但这样做的最大潜在缺陷是显而易见的。
X平台的报告承认：“自动将笔记与人们认为不需要它们的帖子进行匹配可能会严重破坏对该系统的信任。”
研究人员承认，最终，X平台上的AI笔记撰写者可能被认为是“错误的”工具，但他们将继续进行测试以找出答案。
AI撰写的笔记将于本月开始发布
X平台的社区笔记账户表示，所有AI撰写的社区笔记“都将为用户明确标记”。该账户表示，第一批AI笔记只会出现在人们要求提供笔记的帖子中，但最终AI笔记撰写者可能会被允许选择帖子进行事实核查。
当AI撰写的笔记在本月晚些时候开始出现在X平台上时，将会披露更多信息，但与此同时，X平台用户可以立即开始测试AI笔记撰写者，并很快被考虑纳入AI代理的初始队列。（如果任何Ars读者最终测试了AI笔记撰写者，这位Ars作者很想了解更多关于您的体验。）
为了进行研究，X平台与哈佛大学、麻省理工学院、斯坦福大学和华盛顿大学的研究生、研究人员和教授合作，调查诸如人类对AI的信任、微调AI和AI安全等主题。
研究人员一致认为，“在某些情况下”，AI代理可以“在时间和精力上以一小部分成本生成与人工撰写的笔记质量相似的笔记”。他们建议，需要进行更多的研究，以克服已标记的风险，从而获得“变革性机会”的好处，该机会“提供了大幅提高X平台事实核查规模和速度的希望”。
该论文称，如果AI笔记撰写者“生成比单个人工撰写者通常能够代表的更广泛的观点范围的初始草稿，那么社区审议的质量从一开始就得到了提高”。
AI笔记的未来
研究人员设想，一旦X平台的测试完成，AI笔记撰写者不仅可以帮助研究人工用户标记的有问题的帖子，而且有一天还可以选择预测会传播开来的帖子，并阻止错误信息比人工审核员更快地传播。
他们建议，这种自动化系统的其他好处包括X笔记评估者可以快速访问更彻底的研究和证据综合，以及更清晰的笔记组成，这可以加快评估过程。
研究人员推测，也许有一天，AI代理甚至可以学习预测评分，以进一步加快速度。但是，需要进行更多的研究，以确保这不会使社区笔记同质化，从而使它们变得平淡无奇，以至于没有人阅读它们。
该论文中提出的最具马斯克风格的想法可能是训练具有冲突观点的AI笔记撰写者“以对抗方式辩论笔记的优点”。据推测，这“可以帮助立即发现潜在的缺陷、隐藏的偏见或捏造的证据，从而使人工评估者能够做出更明智的判断。”
该论文称：“评估者现在不是从头开始，而是扮演仲裁者的角色——评估有组织的论点冲突。”
虽然X平台可能会采取行动来减少X平台用户撰写社区笔记的工作量，但研究人员表示，很明显，AI永远无法取代人类。这些人不仅对于批准AI撰写的笔记是必要的。
该论文称，从头开始撰写的人工笔记对于训练AI代理很有价值，并且一些评估者的专业知识不容易复制。也许最明显的是，人类“具有独特的优势来识别缺陷或偏见”，因此更有可能被迫撰写“自动化撰写者忽略的主题”的笔记，例如垃圾邮件或诈骗。
