Lưu trữ — US — techcrunch
Băng thông của Wikimedia Commons tăng 50% do AI crawlers
Tổ chức Wikimedia Foundation đã báo cáo rằng nhu cầu băng thông tăng 50% cho việc tải về từ Wikimedia Commons, được gán cho các robot AI (trí tuệ nhân tạo) chứ không phải người dùng. Những robot này gây ra chi phí cao và tình trạng căng thẳng tài nguyên, thúc đẩy các nỗ lực để chặn chúng và có thể đe dọa sẵn có của Internet mở.
Điểm chính
- Sức tiêu thụ băng thông đã tăng đột ngột lên đến 50% kể từ tháng 1 năm 2024 do các robot AI tự động thu thập dữ liệu.
- 65% lưu lượng tài nguyên tốn kém nhất đến từ các robot, mặc dù chúng chỉ chiếm 35% tổng số lần xem trang.
- Robot thường "đọc hàng loạt" trang ít phổ biến, làm tăng chi phí vì nội dung này được phục vụ từ trung tâm dữ liệu chính.
- Wikimedia đang dùng tài nguyên để chặn các trình thu thập dữ liệu để duy trì trải nghiệm người dùng.
- Vấn đề này phản ánh một khuynh hướng rộng hơn ảnh hưởng đến cơ sở hạ tầng mã nguồn mở, cùng với các nhà phát triển và công ty phản ứng trước sự gia tăng lưu lượng robot.
Vì sao quan trọng
- Sự gia tăng của các trình thu thập thông tin AI tạo ra những thách thức đáng kể đối với các nguồn tài nguyên internet công cộng.
- Các phản ánh tương tự từ các nhà phát triển về nhu cầu băng thông gia tăng làm nổi bật tác động đến các dự án mã nguồn mở.
- Các cơ chế phản ứng như AI Labyrinth của Cloudflare cho thấy nỗ lực của các công ty công nghệ để giảm thiểu tác động từ trình thu thập thông tin.
Tình hình tại Wikimedia Commons minh họa nguy cơ ngày càng gia tăng mà các trình thu thập dữ liệu AI gây ra cho sự bền vững của các nền tảng kiến thức mở, thúc đẩy việc thực hiện các biện pháp phòng vệ khẩn cấp có thể hạn chế việc truy cập thông tin trực tuyến.