기업의 인사담당자는 구직/구인 전문 사이트에 직원 모집공고를 낸 후 2~3명을 뽑는 자리에 수백 명의 지원자의 이력서와 자기소개서를 검토하는 것만으로 하루의 업무 대부분을 차지한다. 구직/구인 전문 사이트 마다 AI를 활용한 이력서, 자기소개서 요약 서비스가 있지만, 요약 내용이 본문 중 일부를 발췌하는 정도라 이 사람이 직무에 맞는 사람인지 판단하기가 어렵다.

AI 기술이 발전하며 문서 요약 서비스가 점점 늘어나고 있다. 신문 기사, 구인/구직 사이트뿐만 아니라 각종 보험사 약관, 은행 등등에서도 AI를 활용한 서비스를 선보이며 바쁜 현대인들이 간편하게 정보를 습득할 수 있도록 돕고 있다. 그러나 요약문이 본문을 발췌한 정도의 수준으로 간혹 중요한 내용을 빠뜨린다거나 전후 문장을 살펴보지 않으면 이해할 수 없는 내용으로 요약되기도 한다.

일반적으로 다수의 포털에서 접할 수 있는 기사 요약 서비스 등에서는 추출 요약 방식을 사용한다. 추출 요약 방식은 본문에서 중요한 문장을 선택하여 그대로 요약문에 제시하는 방식이다. 각 문장의 완성도가 높다는 장점이 있지만, 문맥이 연결되지 않는 문장이 선택될 경우, 문장의 연결이 어색하거나 중요한 내용의 누락, 비슷한 내용이 중복으로 제시되는 등의 한계가 있다.

추상 요약은 추출 요약의 단점을 보완하여 나온 요약 방식으로, AI가 본문의 내용을 요약한 새로운 문장을 작성한다. 내용을 보다 충실히 요약하는 장점이 있어 추출 요약보다는 한 단계 더 나아간 요약 방식이라고 할 수 있다. 그러나 각 문장에 문법 오류가 있거나 어색한 문장이 작성될 수 있다는 한계점이 걸림돌이었다.

㈜알토비전 컨소시엄은 이러한 추상 요약의 한계점을 보완하고 완성도를 높이기 위해 한국지능정보사회진흥원(이하 NIA)의 ‘추상 요약 사실성 검증 데이터’(이하 추상 요약 사업) 10만 세트를 구축했다.

이 컨소시엄은 ㈜알토비전을 주관기관으로 하고 ㈜나라지식정보와 비플라이소프트㈜가 참여하여 지난 7월부터 이 사업을 추진해 왔다. 컨소시엄에서는 비플라이소프트㈜에서 원시데이터 수집 및 정제와 원천 데이터 생성을, ㈜알토비전이 데이터 가공을, ㈜나라지식정보에서 검수 및 품질 관리를 맡았다.

추상 요약 사업의 구체적인 내용을 보면, AI와 사람이 추상 요약문을 각각 작성하고, 요약문에 포함된 오류를 AI가 학습할 수 있는 데이터로 구축했다.

오류의 유형은 문장 생성 과정의 오류인 문장 오류와 내용 요약 과정의 오류인 내용 오류로 구분되고 세부적으로는 6가지 유형으로 분류되었다. 문장 오류는 ▶한글맞춤법, 띄어쓰기 오류 ▶ 단어 선택 오류 ▶ 비문 ▶ 미완성 또는 불완전한 문장 등으로 나뉘고 내용 오류는 ▶ 키워드 또는 중요 내용 오류 ▶ 유사한 내용 반복 오류 등으로 나뉜다. AI가 오류를 학습할 수 있도록 하나의 데이터 세트에 오류 요약문, 요약문 오류의 위치, 오류 유형 정보, 오류를 고친 정보가 들어 있고 json 파일 형태로 구축됐다.

㈜알토비전 AI NLP Lab. 김태훈 실장은 “알토비전과 ㈜테디썸은 사람이 쓴 문장 또는 AI가 만든 문장의 오류를 지적하거나 수정을 할 수 있는 ‘선생님 AI’ 솔루션을 개발할 예정”이라고 밝혔다.

이어 “기존 맞춤법 검사기의 한계를 극복하고 실시간으로 올라오는 언론 기사의 맞춤법 오류를 자동으로 교정하는 AI 서비스를 개발하여 궁극적으로 포털에서 정확한 기사를 볼 수 있도록 하는 것이 목표”라며 “NIA를 중심으로 AI 학습용 데이터가 많이 구축되고 있는데 기존 구축 데이터의 오류를 수정하여 학습용 데이터의 품질을 높이는 데에도 기여하고 싶다”라고 전했다.

㈜알토비전은 2020년 설립된 중소기업으로 AI 학습용 데이터 구축 전문 기업이다. NIA의 데이터 구축 사업, 정보통신산업진흥원(NIPA) 사업 등을 수행해 왔다.