漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品

新技术:Unlimiformer可以轻松处理超长文本

talkingdev • 2023-05-04

1453658 views

Unlimiformer是一种新的方法,可以与任何基于transformer的模型配合使用,使其能够处理超长的输入文本,而不会出现限制。这种酷炫的技术可以改善BART和Longformer等模型,使它们能够对超长文本进行概括,甚至是整本书籍,而不需要任何内容删减。 ## 核心要点 - Unlimiformer是一种新的方法,可以使任何基于transformer的模型处理超长的输入文本,而不会出现限制。 - 这种技术可以改善BART和Longformer等模型,使它们能够对超长文本进行概括。 - Unlimiformer的出现将为处理超长文本的应用程序带来重大的改进。