「灵验高下文」普及20倍!DeepMind发布ReadAgent框架
2024-04-07裁剪:LRS 【新智元导读】师法东谈主类阅读历程,先分段选录再回忆,谷歌新框架ReadAgent在三个长文档阅读领会数据集上赢得了更强的性能,灵验高下文普及了3-20倍。 基于Transformer的谣言语模子(LLM)具有很强的话语领会才调,但LLM一次巧合读取的文本量仍然受到极大摈弃。 除了高下文窗口较小外,LLM的性能会跟着输入履行长度的增多而下落,即便输入履行未跳跃模子的高下文窗口长度摈弃亦然如斯。 比拟之下,东谈主类却不错阅读、领会和推理很长的文本。 LLM和东谈主类在阅读长度上存在