딥브레인AI, XR용 ‘AI 휴먼 NPC’ SDK 개발…실시간 대화·맞춤형 응답

테크월드뉴스 · 2026년 9월 15일

✦ AI 요약

딥브레인AI가 XR 기반 메타버스 서비스용 3D AI 휴먼 NPC 인터페이스 개발도구 '페르소나 XR AI 휴먼 SDK' 개발을 완료했다고 15일 밝혔다.

이 도구는 이용자와 실시간으로 대화하고 상황에 맞춰 반응하며, TTS·음소 단위 립싱크 엔진·LLM 기반 발화 생성 기술을 적용했다.

유니티 기반 플러그인 형태로 제공되며, 전시·박물관·교육·관광·공공 안내 등 XR 콘텐츠 제작 분야에 순차 공급할 계획이다.

딥브레인AI가 XR 공간용 3D AI 휴먼 NPC 개발도구를 공개했다. 딥브레인AI는 15일 XR 기반 메타버스 서비스용 3D AI 휴먼 NPC 인터페이스 개발도구 '페르소나 XR AI 휴먼 SDK'의 개발을 완료했다고 발표했다.

이 도구는 이용자와 실시간으로 대화하고 상황에 맞춰 반응하는 기능을 갖췄다. '페르소나 XR AI 휴먼 SDK'에는 딥브레인AI의 고속 음성합성(TTS), 음소 단위 립싱크 엔진, 거대언어모델(LLM) 기반 발화 생성 기술이 적용됐다.

작동 방식은 이용자의 질문 내용을 분석한 뒤 AI 휴먼 NPC가 실시간으로 답변하는 구조다. 이를 통해 실시간 질의응답을 구현한다.

이 도구는 게임·XR 콘텐츠 개발 엔진 유니티 기반 플러그인 형태로 제공된다. 개발자는 기존 XR 콘텐츠에 음성 대화 기능을 갖춘 AI 휴먼 NPC를 적용할 수 있으며, 성별·외형·음성·제스처·페르소나를 설정할 수 있다.

이 기술은 답변 생성용 AI 모델을 콘텐츠 목적별로 변경할 수 있도록 구성됐다. 지원 대상은 윈도우·맥OS·안드로이드 기반 모바일 XR 기기다.

NPC 구현에서는 개발자가 설정한 역할·성격을 바탕으로 NPC의 표정·몸짓·목소리를 구현한다. 발화 내용과 화법에는 LLM을 활용하며, 시나리오 기반 학습 표준 모델을 사용한다.

딥브레인AI의 감정 인식 기술을 연동할 경우 이용자 질문 내용과 표정·목소리를 분석할 수 있다. 이 기술은 분석 결과를 바탕으로 상황에 적합한 감정 표현을 응답에 반영할 수 있도록 했으며, 대화 상황 변화에도 설정된 NPC 페르소나에 맞춘 발화를 생성하도록 설계됐다.

딥브레인AI는 AI 휴먼 구현용 영상 합성 기술의 성능 검증도 진행했다. 자체 합성 모델은 지난해 7월 한국인정기구(KOLAS) 공인시험기관 평가 대상이 됐으며, 평가 항목은 영상 품질·립싱크 정확도·발음 정확도 등이다.

회사는 이번 SDK를 전시·박물관·교육·관광·공공 안내 등 XR 콘텐츠 제작 분야를 대상으로 순차 공급할 계획이다. 회사는 NPC·사용자 인터페이스(UI) 컴포넌트와 분야별 템플릿을 제작할 계획이다. 또 통합 플랫폼을 통해 NPC·UI 컴포넌트를 제공할 예정이며, XR 콘텐츠 제작사를 대상으로 사용자 경험(UX) 평가 서비스도 지원할 예정이다.

이번 SDK는 문화체육관광부·한국콘텐츠진흥원 지원 문화기술 연구개발(R&D) 사업 과제로 개발됐다. 과제명은 'XR 공간 반응형 콘텐츠 최적화를 위한 멀티모달 UX 평가 플랫폼 기술 개발'이다. 이 과제는 연세대학교 산학협력단이 주관하고, 한양대학교·한국외국어대학교·딥브레인AI·나인파이브·스토익엔터테인먼트가 공동연구개발기관으로 참여한다.

이 과제의 목표는 생체신호·행동 등 다중 데이터를 활용해 XR 콘텐츠의 사용자 경험을 평가하는 데 있다. 또 평가 결과를 기반으로 NPC·UI를 최적화하는 통합 플랫폼을 구축하는 것도 목표다. 올해 하반기에는 최종 실증 평가가 예정돼 있다.

장세영 딥브레인AI 대표는 이번 성과의 의미에 대해 AI 휴먼 기술의 XR 콘텐츠 제작 현장에 즉시 활용 가능한 개발도구를 완성한 데 있다고 설명했으며, 향후에는 전시·교육·공공 서비스 등 다양한 영역을 대상으로 AI 휴먼의 실질적 솔루션화를 위한 연구개발을 지속하겠다고 밝혔다.

출처: 테크월드뉴스 · 김승기 기자
원문: https://www.epnc.co.kr/news/articleView.html?idxno=406960