서비스 소개

공개 말뭉치 목록

한국어 분석 및 질의응답 기술을 개발하기 위한 과학기술정보통신부 소프트웨어 분야 R&D 과제인 엑소브레인 과제에서는 다양한 지식산업 환경에서 전문가 수준의 질의응답 서비스의 제공을 위하여 ETRI, 울산대, KAIST, 충북대, 강원대 등 국내 여러 연구기관이 힘을 합쳐 연구하고 있습니다.

이러한 연구기관에서 각자 기술 개발을 위해 구축한 학습 말뭉치인 엑소브레인 말뭉치를배포하여, 유사 분야 연구에 도움이 되고자 합니다. 엑소브레인 말뭉치 v3.0은 아래와 같이 구성되어 있습니다.

엑소브레인
QA Datasets
(ETRI)
1. 퀴즈 QA Datasets : 퀴즈 분야 질의응답을 위한 4개 유형(객관식/주관식/가부형/연상형)의 퀴즈 QA datasets(569개)
2. SQuAD 한국어 QA Dataset : SQuAD 질문의 위키피디아 한국어 번역 QA dataset(표준태깅, 339개)
3. 단문질문 QA Datasets : 위키피디아 단문 질문 QA datasets
  1. ① 상/중/하 난이도 패러프레이즈 QA dataset(표준태깅, 300개)
  2. ② 일반 QA dataset(기본 태깅, 1,776개)
엑소브레인
언어분석 말뭉치
(ETRI)
1. 언어분석 통합 말뭉치 자연어 질의응답을 위한 질문과 정답 단락의 쌍으로 구성된 6개 기술(형태소분석, 다의어 어휘의미분석, 세분류 개체명인식, 의존구문분석, 의미역인식, 상호참조해결)의 태깅 가이드라인 및 말뭉치 (2,214문장, 12,835어절)
  1. ① 강원대 : 상호참조해결 태깅가이드라인 및 말뭉치
2. 세부기술별 말뭉치:
  1. ① 개체명 인식 태깅가이드라인 및 말뭉치 (인명/장소/조직/날짜/시간 5개 태그, 10,000 문장)
  2. ② 의미역 인식 태깅가이드라인 및 말뭉치 (625문장, 7,436어절)
  3. ③ 의존구문분석 태깅가이드라인 및 말뭉치 (1,653문장, 20,418어절)
울산대학교
형태/의미 말뭉치
(UCorpus-HG)
21세기 세종계획 형태의미 말뭉치(339개 파일)를 문장단위로 편집하고 여러 오류를 수정, 어깨번호가 부착되지 않은 부사,관형사,접사에 대해서도 어깨번호를 부착
전체 941,034 문장, 11,046,135 어절 (학습/평가 말뭉치 90%:10% 분리 제공)
엑소브레인
Korean TimeBank
및 SpaceBank
1. Korean TimeBank (KAIST) : 한국어 시간 정보 주석 말뭉치
  • 한국어 시간 정보 자동 추출을 위한 한국어 시간 정보 주석 가이드라인 및 말뭉치
  • 말뭉치 구성: 2,393 문서, 6,189 문장 태깅 (시간개체 3,462개, 시간관계 4,933개)
2. Korean SpaceBank (충북대학교) : 한국어 공간 정보 주석 말뭉치
  • 한국어 공간 정보 자동 추출을 위한 한국어 공간 정보 주석 가이드라인 및 말뭉치 v2.0
  • 말뭉치 구성 : 개체 태그 7종류, 관계 태그 4종류, 1,654문장 태깅
말뭉치 구축 표준안

엑소브레인 언어분석 말뭉치는 한국정보통신기술협회(TTA) 표준안에 입각하여 구축하였습니다.
ETRI 언어지능연구그룹이 주도로 여러 전문가들의 검증을 거쳐 현재 형태소 분석, 개체명 인식, 구문분석이 표준안으로 채택되었으며, 의미역 인식, 질문 분석에 대한 표준안이 제출되어 검증 중에 있습니다. 표준안은 아래에서 다운받으실 수 있습니다.

  • TTA 표준 형태소 태그셋 (TTAK.KO-11.0010/R1)
    download
  • TTA 표준 개체명 태그셋 (TTAK.KO-10.0852)
    download
  • TTA 표준 의존 구문분석 가이드라인 (TTAK.KO-10.0853)
    download
말뭉치 신청 방법
  1. 1
    다운로드 및 작성
    사용허가협약서를 다운로드하여 수기로 작성해주세요.
  2. 2
    스캔 및 업로드
    작성한 사용허가협약서를 스캔하여 말뭉치 신청하기버튼 클릭 후 파일을 업로드해주세요.
  3. 3
    정보 입력 메일발송
    간단한 개인정보 입력 후 말뭉치 신청하기를 완료합니다.
  4. 4
    담당자 확인 후 이메일 발송
    담당자 확인 후 신청자의 이메일로 다운로드 받을 링크를 전달합니다.