㈜알토비전, 추출 요약 단점 보완한 ‘추상 요약’ 구축
AI 기술이 발전하며 문서 요약 서비스가 점점 늘어나고 있다. 신문 기사, 구인/구직 사이트뿐만 아니라 각종 보험사 약관, 은행 등등에서도 AI를 활용한 서비스를 선보이며 바쁜 현대인들이 간편하게 정보를 습득할 수 있도록 돕고 있다. 그러나 요약문이 본문을 발췌한 정도의 수준으로 간혹 중요한 내용을 빠뜨린다거나 전후 문장을 살펴보지 않으면 이해할 수 없는 내용으로 요약되기도 한다.
일반적으로 다수의 포털에서 접할 수 있는 기사 요약 서비스 등에서는 추출 요약 방식을 사용한다. 추출 요약 방식은 본문에서 중요한 문장을 선택하여 그대로 요약문에 제시하는 방식이다. 각 문장의 완성도가 높다는 장점이 있지만, 문맥이 연결되지 않는 문장이 선택될 경우, 문장의 연결이 어색하거나 중요한 내용의 누락, 비슷한 내용이 중복으로 제시되는 등의 한계가 있다.
추상 요약은 추출 요약의 단점을 보완하여 나온 요약 방식으로, AI가 본문의 내용을 요약한 새로운 문장을 작성한다. 내용을 보다 충실히 요약하는 장점이 있어 추출 요약보다는 한 단계 더 나아간 요약 방식이라고 할 수 있다. 그러나 각 문장에 문법 오류가 있거나 어색한 문장이 작성될 수 있다는 한계점이 걸림돌이었다.
㈜알토비전 컨소시엄은 이러한 추상 요약의 한계점을 보완하고 완성도를 높이기 위해 한국지능정보사회진흥원(이하 NIA)의 ‘추상 요약 사실성 검증 데이터’(이하 추상 요약 사업) 10만 세트를 구축했다.
이 컨소시엄은 ㈜알토비전을 주관기관으로 하고 ㈜나라지식정보와 비플라이소프트㈜가 참여하여 지난 7월부터 이 사업을 추진해 왔다. 컨소시엄에서는 비플라이소프트㈜에서 원시데이터 수집 및 정제와 원천 데이터 생성을, ㈜알토비전이 데이터 가공을, ㈜나라지식정보에서 검수 및 품질 관리를 맡았다.
추상 요약 사업의 구체적인 내용을 보면, AI와 사람이 추상 요약문을 각각 작성하고, 요약문에 포함된 오류를 AI가 학습할 수 있는 데이터로 구축했다.
오류의 유형은 문장 생성 과정의 오류인 문장 오류와 내용 요약 과정의 오류인 내용 오류로 구분되고 세부적으로는 6가지 유형으로 분류되었다. 문장 오류는 ▶한글맞춤법, 띄어쓰기 오류 ▶ 단어 선택 오류 ▶ 비문 ▶ 미완성 또는 불완전한 문장 등으로 나뉘고 내용 오류는 ▶ 키워드 또는 중요 내용 오류 ▶ 유사한 내용 반복 오류 등으로 나뉜다. AI가 오류를 학습할 수 있도록 하나의 데이터 세트에 오류 요약문, 요약문 오류의 위치, 오류 유형 정보, 오류를 고친 정보가 들어 있고 json 파일 형태로 구축됐다.
㈜알토비전 AI NLP Lab. 김태훈 실장은 “알토비전과 ㈜테디썸은 사람이 쓴 문장 또는 AI가 만든 문장의 오류를 지적하거나 수정을 할 수 있는 ‘선생님 AI’ 솔루션을 개발할 예정”이라고 밝혔다.
이어 “기존 맞춤법 검사기의 한계를 극복하고 실시간으로 올라오는 언론 기사의 맞춤법 오류를 자동으로 교정하는 AI 서비스를 개발하여 궁극적으로 포털에서 정확한 기사를 볼 수 있도록 하는 것이 목표”라며 “NIA를 중심으로 AI 학습용 데이터가 많이 구축되고 있는데 기존 구축 데이터의 오류를 수정하여 학습용 데이터의 품질을 높이는 데에도 기여하고 싶다”라고 전했다.
㈜알토비전은 2020년 설립된 중소기업으로 AI 학습용 데이터 구축 전문 기업이다. NIA의 데이터 구축 사업, 정보통신산업진흥원(NIPA) 사업 등을 수행해 왔다.
Copyright © 매일경제 & mk.co.kr. 무단 전재, 재배포 및 AI학습 이용 금지
- 주차장에 차 4대 알박기…“명당자리 독차지” 주민들은 울상 - 매일경제
- ‘소멸국가 되나’ 인구 급감에 고개드는 부동산 비관론 [매부리레터] - 매일경제
- 월급 1억 직장인, 내년 최고 건보료 月391만원으로 오른다 - 매일경제
- [단독] 카카오, 내년 3월부터 전면 출근...격주 놀금제도 6개월만에 폐지 - 매일경제
- 석달새 40% 올랐는데 더 간다?...초고수들이 찍은 이 종목 - 매일경제
- 北무인기에 뚫린 이유 찾았다…“돌발출현 소형드론에 대응 못해” - 매일경제
- 갤럭시S23+ 시그니처 색상은 ‘이것’…유출된 홍보물 살펴보니 - 매일경제
- 초장에 회를 꾹 찍어서 쩝쩝…강남 아바타 상영관서 벌어진 일 - 매일경제
- [속보] 파주 택시기사 살해범, “전 여친도 죽였다” 진술 - 매일경제
- 셀틱, J리그 MVP와 조규성 동반 영입 희망 - MK스포츠