百科问答小站 logo
百科问答小站 font logo



有哪些利用搜索引擎(Search Engine)辅助自然语言处理任务(NLP)的论文? 第1页

  

user avatar   maplefalls 网友的相关建议: 
      

在Google Scholar搜索"Retrieval Augmented"就能get到一堆用IR技术辅助NLP任务的论文。实际上,所有知识密集型(knowledge-intensive)任务都可以考虑利用IR为模型提供额外知识,比如KILT基准包含的五大知识密集型任务:QA、Dialogue、Fack Checking、Slot Filling、Entity Linking:

QA:Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks

Dialogue:Retrieval Augmentation Reduces Hallucination in Conversation

Fack Checking:Improving Evidence Retrieval for Automated Explainable Fact-Checking

Slot Filling:Robust Retrieval Augmented Generation for Zero-shot Slot Filling

Entity Linking:Autoregressive Entity Retrieval

在Summarization、Machine Translation任务上也出现了类似的工作:

Summarization:Retrieval Augmented Code Generation and Summarization

Machine Translation:Nearest Neighbor Machine Translation

而在Language Model上,比较知名的就是谷歌的REALM: Retrieval-Augmented Language Model Pre-Training和Open AI的WebGPT: Browser-assisted question-answering with human feedback,这种重量级工作目前也只有大厂能做出来。

另外最近的一篇综述也对检索辅助生成任务的论文做了一个小结:A Survey on Retrieval-Augmented Text Generation




  

相关话题

  逐渐变成搜索引擎的知乎你如何看待? 
  BERT模型可以使用无监督的方法做文本相似度任务吗? 
  Transformer是如何处理可变长度数据的? 
  为什么 Siri 听懂了我的话,还是不能做出有效的回答或准确的操作? 
  请问下大家训练 SimCSE 时, loss 有没有这样的情况? 
  NLP 方向在国内清北读博还是国外? 
  2021年人工智能领域有哪些关键性进展和突破? 
  自然语言处理是计算机实现通用人工智能的最难挑战吗? 
  在CV/NLP/DL领域中,有哪些修改一行代码或者几行代码提升性能的算法? 
  《失控玩家》中的游戏有可能实现出来吗? 

前一个讨论
ICLR 2022有哪些值得关注的投稿?
下一个讨论
clickhouse到底有哪些吊炸天的优化?





© 2024-12-18 - tinynew.org. All Rights Reserved.
© 2024-12-18 - tinynew.org. 保留所有权利