Nyligen, neurala modeller preducerade på en språk modellering uppgift, såsom ELMo (Peters et al., 2017), OpenAI GPT (Radford et al., 2018) och BERT (Devlin et al., 2018), har uppnått imponerande resultat på olika naturliga språk bearbetning uppgifter såsom frågesvar och naturliga språk inference. I det här dokumentet beskriver vi ett enkelt återinförande av BERT för omplacering av frågebaserad passage. Vårt system är toppmodernt på TREC-CAR datasetet och toppposten i topplistan för MS MARCO passage hämtning uppgift, överträffar den tidigare toppmoderna med 27% (relativ) i MRR@10. Koden för att återge våra resultat finns på https://github.com/nyu-dl/ dl4marco-bert
BERT har avancerat state-of-the-art på en mängd olika NLP-uppgifter, inklusive passage ranking uppgifter REF.
Passage Re-ranking with BERT
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}