Lưu trữ — US — techcrunch
Giám đốc Meta phủ nhận công ty đã tăng điểm chuẩn của Llama 4 một cách giả tạo
Phó chủ tịch trí tuệ nhân tạo sinh sáng của Meta, Ahmad Al-Dahle, đã bác bỏ tin đồn rằng công ty đã can thiệp vào điểm số chuẩn cho các mô hình Llama 4 của mình, khẳng định rằng chúng không được huấn luyện trên bộ dữ liệu kiểm tra. Sự nghi ngờ phát sinh từ các báo cáo về điểm số kém và những tuyên bố của một người tiết lộ về phương pháp chuẩn hóa của Meta.
Điểm chính
- Phó Chủ tịch Ahmad Al-Dahle của Meta đã phủ nhận việc tăng điểm đánh giá benchmark của Llama 4 một cách nhân tạo.
- Tin đồn bắt đầu lan truyền sau khi có báo cáo cho rằng các mô hình Llama 4 hoạt động kém chất lượng.
- Điểm đánh giá benchmark có thể dẫn đến sự hiểu lầm về hiệu suất nếu các mô hình được huấn luyện trên các bộ dữ liệu thử nghiệm.
- Việc một người dùng từ chức để phản đối các phương pháp đánh giá benchmark đã gây ra những tin đồn này.
- Al-Dahle thừa nhận sự chênh lệch về chất lượng hoạt động trên các nền tảng lưu trữ điện toán khác nhau.
Vì sao quan trọng
- Nhu cầu về sự minh bạch và trung thực của hiệu suất mô hình AI đang được quan tâm, phản ánh xu hướng rộng hơn trong ngành về đạo đức AI.
- Các công nghệ kiểm định đang được xem xét kỹ lưỡng, thể hiện sự tranh luận liên tục về xác nhận mô hình AI và hiệu quả trong thế giới thực.
- Vụ việc này làm nổi bật sự phát triển của cạnh tranh và niềm tin trong lĩnh vực AI khi các công ty đẩy mạnh việc đo lường hiệu suất tốt hơn.
Từ chối từ cấp điều hành của Meta nhấn mạnh sự quan trọng của tính minh bạch trong việc đánh giá AI, khi sự quan sát từ ngành công nghiệp tăng cao về hiệu suất và thực tiễn đạo đức trong việc phát triển AI.