JP — ITmedia
잭 도시 이끄는 Block, 음성만으로 학습한 전이중 음성 모델 'Dessa' 발표 "사람과 대화하는 듯"
AI2분 읽기
Block(잭 도시가 이끄는 회사)이 음성 AI '데사(Dessa)'를 공개했습니다. 이 AI는 사람의 말소리만 보고 배웠고, 사람과 대화하듯 실시간으로 말로 답할 수 있습니다.
무슨 일이 있었나요?
Block(예전 이름은 Square)은 10월 23일(미국 시간) '데사'를 연구용 미리보기로 발표했습니다. 데사는 말을 듣고 말로 답하는 '음성 대 음성' 모델입니다. 듣는 것과 말하는 것을 동시에 할 수 있는데, 이를 '풀 듀플렉스'라고 부릅니다. 잭 도시는 진짜 사람과 이야기하는 느낌이라고 말했습니다.
핵심 숫자와 사실
- 데사는 글자 없이 사람이 나눈 대화 음성만으로 배웠습니다.
- 학습에는 NVIDIA GB200 NVL72 시스템 한 대를 사용했습니다.
- Block은 데사가 대형 언어 모델(LLM)보다 수백 배 적은 단어로 말하는 법을 배웠다고 밝혔습니다.
- M4 Max 이상의 MacBook Pro에서 기기 안에서 직접 실행할 수 있습니다.
- 시연은 영어만 가능합니다. 지원하는 다른 언어는 밝히지 않았습니다.
기존 음성 AI와 무엇이 다를까요?
대부분의 음성 AI는 먼저 말을 글자로 바꾸고, 글을 보고 답을 만든 뒤, 다시 그 답을 음성으로 바꿉니다. Block은 이 과정에서 말투, 비꼬는 느낌, 한숨 같은 중요한 정보가 사라진다고 설명합니다. 풀 듀플렉스 모델은 듣고 말하기를 동시에 하므로, 친구처럼 말을 끊거나, 웃거나, '응, 응' 하고 맞장구칠 수 있습니다.
왜 중요할까요?
데사는 AI가 감정과 말의 흐름까지 살려서 더 자연스럽게 말할 수 있다는 가능성을 보여 줍니다. Block은 목소리에 담긴 감정을 이해하지 못하는 AI가 안전 문제가 될 수 있다고도 말했습니다. 데사는 그 문제를 해결하는 첫걸음이라고 합니다. 다만 아직 초기 연구 단계이며, 일반인이 언제 쓸 수 있는지는 밝히지 않았습니다.
앞으로 지켜볼 점
- Block이 사람들이 데사를 직접 써 볼 수 있는 링크를 언제 공개할지
- 정식 출시 날짜가 언제 발표될지(아직 정해지지 않음)
- AI 안전 연구자들이 초기에 접근해 찾아낼 숨은 위험이 무엇인지
- 7월에 공개된 OpenAI의 풀 듀플렉스 음성 모델 'GPT-Live-1'과 비교했을 때 성능이 어떤지
용어 풀이
- Block
- 잭 도시가 이끄는 결제·금융 기술 회사로, 예전 이름은 Square입니다.
- Dessa
- Block이 공개한 음성 AI로, 말을 듣고 실시간으로 말로 답하는 연구용 모델입니다.
- NVIDIA GB200 NVL72
- NVIDIA가 만든 대형 AI 학습용 컴퓨터 시스템입니다.
- GPT-Live-1
- OpenAI가 7월에 공개한 풀 듀플렉스 음성 모델입니다.