GIST, 맥락 맞는 변화 읽는 AI 평가 기준 공개

인공지능신문에 따르면 GIST 연구팀이 9월 14일 두 장의 이미지를 놓고 AI가 상황에 맞는 핵심 변화만 골라 설명하는지 검증하는 평가 기준 'C3-Bench'를 공개했다. 이 기준은 4개 분야 51개 현실 상황을 묶어, 단순한 차이 찾기가 아니라 무엇을 봐야 하는지까지 따져 AI의 영상 이해력을 가리도록 설계됐다. 연구팀은 같은 이미지라도 목적에 따라 중요한 변화가 달라진다는 점에 주목해, 찾아야 할 변화와 무시해야 할 차이를 함께 정하고 답변의 의미를 종합적으로 평가하도록 했다. 또 사람 평가와 자동 평가를 비교해 새 방식이 인간 판단에 더 가깝다고 봤다. 아울러 최신 모델이 문장을 자연스럽게 만드는 능력과 실제로 중요한 변화를 정확히 짚는 능력은 다를 수 있다고 분석했다. 연구팀은 이 기준이 감시, 원격탐사, 자율주행, 이상 탐지처럼 현장 판단이 중요한 분야에서 AI 성능을 가늠하고 개선하는 공통 잣대로 쓰일 수 있다고 기대했다.