Lưu trữ — CN — technode
ByteDance tái cấu trúc đội ngũ mô hình nền tảng Seed giữa thông tin về kế hoạch phát triển mô hình 5.000 tỷ tham số.
Cơ sở Seed division của ByteDance đã trải qua việc cải cách tổ chức, thành lập bốn bộ phận mới tập trung vào việc tiền huấn luyện, RL, ứng dụng sản phẩm và các mô hình đối thoại. Bước đi này phù hợp với thông tin về một mô hình có thể lên đến 5 nghìn tỷ tham số hiện đang được phát triển, mặc dù chi tiết vẫn còn bất định và chưa được xác nhận như một sản phẩm.
Điểm chính
- Bộ phận Seed của ByteDance đã tái cấu trúc thành bốn bộ phận: Dữ liệu tiền huấn luyện, Horizon RL, Sản phẩm hậu huấn luyện-Công việc, và Sản phẩm hậu huấn luyện-Chat.
- Nhóm Công việc sẽ phát triển các ứng dụng kinh doanh cho các sản phẩm như Doubao và Dola.
- Nhóm Chat sẽ tập trung vào mô hình đối thoại của người tiêu dùng.
- Việc tái cấu trúc này liên quan đến kế hoạch cho một mô hình mới với hơn 5 nghìn tỷ tham số, nhưng chưa có thông báo chính thức về sản phẩm.
Vì sao quan trọng
- Sự phát triển của các mô hình nền tảng đóng vai trò quan trọng trong việc phát triển trí tuệ nhân tạo, được minh họa bởi các xu hướng như việc tăng kích thước và khả năng của các mô hình.
- Nhiều công ty công nghệ đang đầu tư vào các mô hình ngôn ngữ quy mô lớn như một phần của chiến lược để thúc đẩy sáng tạo và có lợi thế cạnh tranh.
Việc tái cơ cấu nhóm cơ sở của ByteDance nhấn mạnh cam kết của công ty trong việc phát triển khả năng AI, đặt nó vào vị trí chiến lược trong cảnh quan công nghệ đang phát triển nhanh chóng tập trung vào các mô hình quy mô lớn.