JP — ITmedia
Block của Jack Dorsey ra mắt Dessa, mô hình giọng nói song công chỉ huấn luyện từ âm thanh: "Cảm giác như đang nói chuyện với người thật"
AI2 phút đọc
Block, công ty do Jack Dorsey đứng đầu, vừa giới thiệu Dessa, một AI giọng nói mới. AI này chỉ học từ giọng nói của con người, không học từ văn bản, và có thể trả lời ngay lập tức như một người đang trò chuyện.
Chuyện gì đã xảy ra?
Vào ngày 23 tháng 10 (theo giờ Mỹ), Block (trước đây có tên là Square) công bố Dessa dưới dạng bản xem trước nghiên cứu. Dessa là mô hình "giọng nói sang giọng nói". Nó nhận giọng nói vào và đưa giọng nói ra. Nó có thể nghe và nói cùng lúc, gọi là "song công toàn phần" (full-duplex). Ông Dorsey nói rằng cảm giác như đang nói chuyện với một người thật.
Các con số và sự kiện chính
- Dessa chỉ học từ các đoạn ghi âm hội thoại của con người, không dùng văn bản.
- Quá trình học dùng một hệ thống NVIDIA GB200 NVL72.
- Block cho biết Dessa học ngôn ngữ với số lượng từ ít hơn các mô hình ngôn ngữ lớn (LLM) hàng trăm lần.
- Dessa có thể chạy trực tiếp trên máy MacBook Pro với chip M4 Max trở lên.
- Bản demo chỉ dùng tiếng Anh. Block chưa nói rõ Dessa hỗ trợ những ngôn ngữ nào.
Vì sao đây là điều mới?
Hầu hết AI giọng nói hiện nay làm theo ba bước: đổi giọng nói của bạn thành chữ, tạo câu trả lời, rồi đổi câu trả lời đó lại thành giọng nói. Block cho rằng cách này làm mất các chi tiết hữu ích như giọng điệu, sự mỉa mai và tiếng thở dài. Mô hình song công toàn phần có thể nghe và nói cùng lúc. Nhờ vậy, AI có thể ngắt lời, cười, hoặc nói "ừm, đúng rồi" như một người bạn.
Vì sao điều này quan trọng?
Dessa cho thấy AI có thể học cách nói tự nhiên hơn, có cảm xúc và đúng nhịp hơn. Block cũng nói rằng một AI không hiểu được cảm xúc trong giọng nói là một vấn đề an toàn. Theo Block, Dessa là một bước đi nhằm giải quyết vấn đề đó. Tuy vậy, đây vẫn là nghiên cứu ban đầu, và Block chưa cho biết khi nào công chúng có thể dùng thử.
Cần theo dõi điều gì?
- Thời điểm Block đưa đường liên kết để mọi người dùng thử Dessa.
- Ngày ra mắt chính thức đầy đủ. Block chưa công bố ngày này.
- Kết quả từ nhóm nhỏ các nhà nghiên cứu an toàn AI được dùng thử sớm, nhằm tìm ra những rủi ro ẩn.
- So sánh giữa Dessa và GPT-Live-1 của OpenAI, một mô hình giọng nói song công toàn phần được phát hành vào tháng 7.
Chú giải
- Block
- Công ty do Jack Dorsey đứng đầu, trước đây có tên là Square, làm về thanh toán và tài chính số.
- Dessa
- Mô hình AI giọng nói mới của Block, học từ giọng nói người và có thể trò chuyện theo thời gian thực.
- full-duplex
- Kiểu hoạt động cho phép AI nghe và nói cùng lúc, giống như người thật khi trò chuyện.
- LLM
- Mô hình ngôn ngữ lớn, loại AI học từ lượng văn bản rất lớn để hiểu và tạo ra chữ.
- NVIDIA GB200 NVL72
- Hệ thống máy tính mạnh do NVIDIA sản xuất, dùng để huấn luyện AI.
- GPT-Live-1
- Mô hình giọng nói song công toàn phần của OpenAI, được phát hành vào tháng 7.