知识截止日期

知识截止日期,是模型训练数据停止的时间点——换句话说,也就是模型了解这个世界的最后日期。如果一个模型的截止日期是今年一月,你问它上周发生的新闻,它要么不知道,要么更糟——一本正经地编造答案(幻觉)。

这也是聊天机器人纷纷加上搜索功能的原因。模型的知识在某个时间点被「冻结」,而搜索就是把最新信息「加热」后端上来的方式。所以聊天机器人不知道昨天的发布会内容并不奇怪;也正因如此,遇到时效性强的问题时,一定要确认搜索功能是否开启。

1. 问聊天机器人:「你的知识截止日期是什么时候?」
2. 关闭搜索功能,问它截止日期之后发生的事(比如最近一场体育比赛的结果)——它会不知道,或含糊其辞。
3. 打开搜索后再问同样的问题,就能得到最新答案。这样一试,就能立刻感受到「模型的记忆」和「搜索加热来的信息」之间的区别。