dense embedding
-
[딥러닝 NLP] Passage retrievalNLP 2022. 8. 14. 02:02
* KAIST 서민준교수님 강의자료의 QA 부분을 공부하고, 제가 이해한대로 적었습니다. https://seominjoon.github.io/kaist-ai605/ passage retrieval은 query 에 맞는 passage(문단, 문서)를 찾는 것 입니다. MRC model과 합쳐서 open domain QA 를 풀 수 있습니다. passage retrieval의 원리는 query와 passage들을 embedding 한 뒤 유사도를 측정하는 것 입니다. 즉 query와 passage의 의미를 잘 담도록 embedding 하는 것이 핵심입니다. 따라서 이 글에서는 주로 query와 passage embedding 에 대해서 설명합니다. embedding은 입력 data를 vector로 변화하는 ..