한국어 수사를 위한 기계 독해 데이터 세트
A Dataset for Machine Reading Comprehension of Korean Numerals
- 문서 유형
- 연구출판물 · 학술지 논문
- 등재
- KCI
- 저널 순위
- KCI Q3
- 저널
- 정보과학회 컴퓨팅의 실제 논문지28(12) · pp.615 · 2022
- 피인용
- KCI 0
- ISSN
- 2383-6318
저자
초록
본 논문에서는 한국어 수사를 위한 기계 독해 데이터 세트 구축 방법을 제안한다. 구축한 데이터 세트를 BERT 기반 한국어 질의응답 언어모형에 추가로 훈련하여, 수사를 포함한 질의응답의 성능 개선을 가져왔다. 데이터 세트 구축을 위해 대한민국 법령문서를 이용하였고, 해당 문서의 구조적 정보를 반영하기 위한 가공 절차를 거쳤다. 질의응답 생성 절차 마련을 위해 한국어 물음말, 한국어 분류사, 국제단위계 및 범용 단위를 수사와 결합하는 방식을 활용했다. 생성한 데이터 세트의 일반화를 알기 위해 전자신문 기사를 포함한 평가 데이터 세트로 실험을 수행했다. 실험 결과, 해당 데이터 세트를 훈련한 시스템의 성능은 EM 83.4, F1 91.0으로, 기존 시스템보다 EM 14.0, F1 9.6 향상되었다. 데이터 세트 평가를 위해 KorQuAD 검증 데이터 세트 중 수사를 포함한 데이터를 무작위로 추출하여 실험했고, 이 또한 기존시스템보다 EM 13.0, F1 7.2 향상된 성능을 보였다.
키워드
machine reading comprehensionquestion answeringBERTnatural language processingKorean numeralsarabic numerals기계 독해질의응답자연어 처리한국어 수사아라비아 숫자
식별자
- KCI
- ART002905096



로그인
연구물 목록으로