跳转到内容
说的是哪种记忆?
区分上下文、循环状态、参数与持久存储。
工作原理
上下文与记忆
上下文是提供给计算的信息。循环网络在步骤之间传递状态。外部存储可以保存文档,并按请求检索相关内容。这些机制的容量与保留保证不同。
检查理解
回答前,先用自己的话解释。
从索引检索的文档可以扩充上下文,而不改变模型参数。
从概念到应用应用于实践
科学来源
- Hochreiter & Schmidhuber · 1997Long Short-Term Memory原始文献
- Lewis et al. · 2020Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks原始文献
基于所引公开资料的教学总结。论文结果受其任务、协议和资源预算约束。