Extrinsic Hallucinations in LLMs
摘要
Lilian Weng 深度解析 LLM 的外部幻觉问题。幻觉分为事实性错误和缺乏知识边界两大类。从预训练数据质量、SFT 对齐、RLHF 等环节分析幻觉产生原因。缓解方案包括 RAG、事实核查、解码策略调整、自我一致性等。
相关概念
- Hallucination
- RAG
- Factuality
- Knowledge Boundary
相关实体
- Lilian Weng
- OpenAI
Lilian Weng 深度解析 LLM 的外部幻觉问题。幻觉分为事实性错误和缺乏知识边界两大类。从预训练数据质量、SFT 对齐、RLHF 等环节分析幻觉产生原因。缓解方案包括 RAG、事实核查、解码策略调整、自我一致性等。