Rorical To boldly go where no man has gone before.

LLM的逆转诅咒极其正常

今天终于找到短的一点点时间写一下自己的想法。 如下是描述了 LLM(大语言模型)经过研究后发现的一个缺点,被称作“逆转诅咒”。 主要发现是:如果一个LLM在训练数据中学习到“A是B”这样的句子,它通常不能推导出反方向的“B是A”。比如模型学到“奥拉夫·朔尔茨是德国第九任总理”,但问它“谁是德国第九任

Rorical 发布于 2023-10-08