Thuật ngữ thuật ngữ AI

cái gì là Con ngườiEval?

Định nghĩa

Điểm chuẩn của các vấn đề lập trình Python được sử dụng để đo lường tính chính xác của việc tạo mã thông qua các bài kiểm tra đơn vị.

Điều khoản liên quan

Điểm chuẩn
Một bài kiểm tra hoặc tập dữ liệu được tiêu chuẩn hóa dùng để đo lường và so sánh hiệu suất của mô hình.
GSM8K
Một chuẩn mực của các bài toán đố toán cấp lớp dùng để đánh giá khả năng suy luận từng bước trong các mô hình ngôn ngữ.
Bộ đánh giá
Một tập dữ liệu được giữ lại được sử dụng để đo lường chất lượng mô hình sau khi đào tạo.
Tính toán thời gian thử nghiệm
Tính toán suy luận bổ sung được sử dụng trong quá trình tạo phản hồi để cải thiện chất lượng hoặc lý luận.
Vượt qua@k
Số liệu đánh giá mã đo khả năng ít nhất một trong số k mẫu được tạo vượt qua các bài kiểm tra.
Quản trị AI
Các chính sách, tiêu chuẩn và cơ chế giám sát hướng dẫn cách phát triển và sử dụng AI trong xã hội.

Xem thêm

MMLUFactualityLLM-as-JudgeCitationsBi-EncoderWatermarkingCross-EncoderMid-training
Duyệt qua Bảng thuật ngữ AI đầy đủKhám phá tất cả hướng dẫn AI miễn phí