xếp gwei, cả ngày, mỗi ngày

METR và @Research_FRI đã thực hiện một nghiên cứu thí điểm nhỏ về việc liệu các chuyên gia rủi ro AI và các siêu dự đoán viên (n=18) có mong đợi AI có thể gây ra sự tăng tốc cực độ trong tiến trình phát triển AI hay không. Chúng tôi nghĩ rằng những người khác có thể tìm thấy giá trị trong các cách thức hoạt động của chúng tôi, mặc dù kết quả dựa trên một mẫu nhỏ và có thiên lệch.

Chúng tôi đã thử nghiệm cách các tác nhân AI tự động thực hiện các nhiệm vụ phần mềm thực tế từ nghiên cứu RCT về năng suất của nhà phát triển gần đây của chúng tôi. Chúng tôi phát hiện ra một khoảng cách giữa điểm số thuật toán và khả năng sử dụng trong thế giới thực, điều này có thể giúp giải thích tại sao các tiêu chuẩn AI cảm thấy không liên quan đến thực tế.