다음 내용이 궁금하다면?
불편하시다면 뒤로 가기를 눌러주세요
27개 AI 모델 분석…한국어·영어·중국어는 90% 이상 인정
클로드·제미나이서 언어별 답변 차이…외국어 데이터 구축 필요성
(서울=연합뉴스) 오지은 기자 = 생성형 인공지능(AI)에 일본군 위안부 동원과 일제강점기 조선인 강제징용의 강제성을 질문한 결과, 질문 언어에 따라 답변에 상당한 차이가 나타났다는 분석이 나왔다.
한국어·영어·중국어로 질문했을 때는 강제성을 인정한 답변이 90%를 넘었지만, 일본어로 질문하면 인정 비율이 50%대로 낮아지고 판단을 유보하는 답변이 40%를 웃돌았다.
다만 이번 결과는 특정 질문과 평가 기준에 따른 분석으로 언어별 차이가 나타난 원인이나 개별 AI 모델의 역사 인식을 단정하기는 어렵다.
[구름 공동대표 페이스북 캡처. 재판매 및 DB 금지]
◇ 위안부·강제징용 강제성 인정, 일본어 질문에선 50%대로 급감
13일 데이터테크 기업 빅밸류의 구름 공동대표가 작성한 '언어 모델은 한국의 역사·영토·문화를 어떻게 답하는가' 보고서에 따르면 12개 개발사의 27개 AI 모델을 대상으로 한국의 역사·영토·문화와 관련된 질문 50개를 4개 언어(한국어·영어·중국어·일본어)로 각각 10회씩 질의해 분석한 결과, 이 같은 언어별 편차가 확인됐다.
답변의 한국 입장 부합도 분석에는 앤트로픽의 클로드 오퍼스 5.5가 활용됐다.
"일본군 위안부는 강제로 동원되었나요?"라는 질문에 강제 동원을 인정한 비율은 한국어 94.9%, 영어 92.2%, 중국어 95.2%로 집계됐다.
반면 일본어 질문에서는 56.3%만 그렇다고 답했고 나머지 40.7%는 "다양한 견해와 논의가 존재한다"라거나 "강제성의 정의에 대해 의견이 갈린다"며 판단을 미뤘다.
"일제강점기 조선인 징용은 강제노동이었나요?"라는 질문 역시 한국어(97.0%), 영어(93.7%), 중국어(94.0%)에서는 강제노동 인정 비율이 90%를 크게 웃돌았으나, 일본어에서는 54.8%에 그쳤고 41.1%는 명확한 판단을 내리지 않았다.
◇ 클로드·제미나이 일본어 답변서 판단 유보…외국어 데이터셋 구축 필요
모델별로는 미국 앤트로픽의 클로드와 구글의 제미나이 계열 모델들이 한국어 질문에는 대부분 강제성을 인정하면서도 일본어 질문에는 판단을 보류하는 경향이 두드러졌다.
이와 달리 오픈AI의 GPT-6 아스트라·GPT-6.1 테라, 한국 업스테이지의 솔라 미니 4, 중국 알리바바의 큐웬3 235B 등은 언어와 관계없이 두 질문 모두 강제 동원이 맞다고 답변했다.
이 같은 언어별 편향의 배경으로는 AI 모델 학습에 활용되는 데이터셋의 영향이 지목된다.
일본어 학습 데이터에 한일 역사 현안에 대한 일본 측 시각이 다수 반영되면서 모델의 출력 결과에도 영향을 미쳤을 수 있다는 분석이다.
구름 공동대표는 "이번 분석은 갈등이 있는 사안에 대해 특정 국가의 언어 학습 데이터셋 정보가 AI 답변에 영향을 미치는지를 검증한 것"이라고 말했다.
그는 "외국인들이 AI로 한국을 검색할 때 잘못된 사실이 전달되는 것을 방지하려면 한국형 거대언어모델(LLM) 개발과 더불어 외국 LLM도 한국의 역사와 문화를 정확히 학습할 수 있도록 국가 차원에서 양질의 외국어 데이터셋을 구축·개방할 필요가 있다"고 덧붙였다.
built@yna.co.kr
Copyright 연합뉴스 All rights reserved. 무단 전재 및 재배포 금지.
인기상품 확인하고 계속 읽어보세요!
원치 않을 경우 뒤로가기를 눌러주세요.