구독자 여러분, 여러분은 자신의 목소리를 얼마나 잘 알고 계신가요? 혹시 녹음된 목소리를 직접 들어본 경험이 있으신가요?

그런 경험이 있으시다면, 아무래도 듣기에 “어색하다”, 또는 “불쾌하다” 라고 생각하셨을지 모르겠습니다. 평범한 일입니다. 본인의 실제 목소리에 익숙지 않아서도 그렇고, 인간의 발성 및 청음 체계가 하나의 몸에 있기 때문이죠. 그런데 흥미롭게도, 자기 목소리는 상황에 따라 여러 긍정적인 효과를 만들어낼 수 있다는 여러 연구들이 있습니다.

무엇보다 VR에서는 현실만큼이나 풍부한 비언어적 소통이 항상 가능하지 않습니다. 아바타의 미세한 표정 변화나 자연스러운 손짓, 시선 교환이 제한되는 환경에서는, 그 빈자리를 목소리가 크게 메웁니다. 이러한 이유로 아바타의 정체성도 외형뿐 아니라 “어떤 목소리로 말하느냐”로 결정되는 경우가 많습니다.

또한 최근에는 대규모 언어 모델(LLM)과 음성 기술(STT, TTS)이 빠르게 발전하면서, AI 에이전트와 음성 어시스턴트(VA)가 본격적으로 등장하고 있습니다. 이러한 기류 속에서, 기존에는 무엇을 말하느냐가 핵심 주제였다면, 이제는 어떤 목소리로 말하느냐가 역시도 그에 못지 않게 사용자 경험을 좌우할 수 있는 시대가 되었습니다.

음성 상호작용이라 하면, 먼저 음성 입력Voice Input을 먼저 떠올리실 수도 있습니다. 이전에 저희 XOLogue에서 다룬 적이 있는데요, 이번에는 그래서 다른 개념들을 한 번 살펴봅시다.

음성 입력 외의 음성 상호작용의 예로는, 가상현실 음성 비서가 과제나 게임의 진행을 안내하거나, 사용자의 질문에 실시간으로 답변하는 방식, 혹은 멀티유저 환경에서는 팀원 간 보이스 채팅이 대표적인 음성 상호작용이라 할 수 있습니다. 물론 이 외에도 다양하고도 많은 사례가 존재합니다.

음성 상호작용이 VR에서 각광받는 이유이자 가장 큰 이점은, 손과 시선을 덜 점유하면서도 빠르게 의도를 전달할 수 있다는 점입니다. 이는 음성 입력에서만 국한되지 않으며, 멀티유저 VR 콘텐츠에서는 컨트롤러로 글자를 입력하는 채팅이 느리고 불편하기 때문에, 많은 사용자가 텍스트 채팅보다 보이스 채팅을 자연스럽게 선택합니다.

즉, VR 콘텐츠에서 음성은 단순한 편의 기능이 아니라, 협업과 소통을 성립시키는 현실적인 기본값인 경우가 많습니다.

특히 이 지점에서 음성, 또는 목소리는 아바타와 깊게 연결됩니다.

기존의 많은 연구는 가상현실에서 아바타의 목소리가 몰입감과 사회적 경험, 그리고 신뢰감과 긴밀하게 연결되어 있음을 보여줍니다.

특히 로봇, 아바타와 관련된 연구에서는 인간의 목소리가 비인간적인 외형의 가상 캐릭터에 대해서도 더 긍정적인 인식을 이끌어내는 경향이 보고되었습니다. 즉, 목소리는 아바타에 대한 거리감을 줄이고, 상호작용의 사람다움을 보강하는데 도움을 줄 수 있다는 의미입니다.

또한, 여기서 중요한 포인트는 단순히 좋은 목소리가 아니라, 아바타의 외형과 목소리가 서로 얼마나 잘 어울리느냐입니다. 이는 아바타의 불일치성, 혹은 외형-음성 간의 불일치성이라고 할 수 있습니다.

IEEE VR 2025 에서 발표된 Gao et al.의 연구에 따르면, 가상현실에서 가상 에이전트의 시각-음성 정합성(Consistency)이 높을수록 사용자의 공감(Empathy)이 유의하게 높아졌습니다. 물론, 해당 연구에서는 목소리보다 아바타의 스타일화 수준이 주는 영향을 강조했지만, 그럼에도 불구하고, 사람이 한 존재를 자연스럽고 일관된 대상으로 받아들이도록 만드는 일치감이 사회적 반응을 강화할 수 있다는 의미로 해석 할 수 있습니다.

이번 Immersyn의 와인 시음회 FGI는 차기 프로젝트를 위한 데이터 수집을 위한 것. Immersyn은 지금 시음에 제약이 있는 분들을 위해 시음을 거치지 않고도 XR 경험을 통해 공감각적으로 와인의 구매결정을 내리는 요인을 느끼고 결정을 도울 수 있는 프로덕트, [VinoSense]를 개발중입니다.

와인의 단순한 맛 뿐만 아니라 와인이 주는 분위기와 그 분위기에서 파생되는 또 다른 분위기, 그것이 컨셉이 와인이라는 주류의 특성상 구매결정에 큰 영향을 주기 때문에 개발 대상이 되는 와인들이 사용자들에게 어떤 무드를 공유하고 있는지, 어떤 컨셉을 느끼게 할 수 있는지 등을 찾는 것이죠.

Immersyn의 계획은 다음과 같습니다. 2월까지 기술적 데모를 완성하고, 5월에 있을 엔바이콘 시음회에서 실제 와인 구매 의향이 있는 소비자들에게 프로덕트를 체험할 수 있도록 하고, 프로덕트가 구매전환율 향상을 얼마나 돕는지 비교하여 결과를 정리할 예정이라네요.

디자이너 (3D, UIUX) : 프로덕트 자체 기획에 이어 공감각적인 디자인으로 실제 사용자들을 자극하고 의도를 구현하기 위해 디자이너분들을 모십니다. 프로젝트 자체가 경험에 초점이 가있는 만큼 사용자 중심의 플로우를 중요시 여기는 Ux 디자이너분들과, 공감각적인 상상력을 펼쳐보실 비주얼 디자이너분들을 구합니다.

개발자: 저희 개발 인원이 미국에 많이 거주중이셔서 한국에 거주하시는 유니티 개발자분이 필요합니다. 저희는 자체 기술적 역량 강화를 위해서 Seamless MR, Spatial Anchor 등 기술테스트를 다양하게 시도하고 매 프로덕트에 발전시켜 적용합니다. 미학적/감각적인것을 ‘기술적으로’ 개발. 전달하는 것이 핵심인 팀인 만큼 기술과 미학을 모두 잡는 데에 관심 있으신 개발자분들을 모십니다.