Chuyển đến nội dung

Phương pháp của chúng tôi

Gần như mọi khóa luyện thi trực tuyến đều quảng cáo "chấm điểm bằng AI". Không nơi nào cho thấy điểm đó gần với điểm của một giám khảo thật đến mức nào. Chúng tôi muốn đo điều này và công bố kết quả. Dưới đây là tiến độ hiện tại, không tô vẽ.

Tóm tắt

  • Công cụ áp dụng ba tiêu chí trong cẩm nang thí sinh TCF: ngôn ngữ, ngữ dụng và ngôn ngữ xã hội.
  • Đã có một đợt kiểm tra nội bộ; việc so sánh với giám khảo thật có chuyên môn đã được lên kế hoạch và sẽ công bố.
  • Trong lúc chờ, trình độ hiển thị là ước tính để luyện tập, không phải điểm chính thức.

Những gì đã làm

  • Một đợt kiểm tra nội bộ đầu tiên: khoảng hai mươi bài viết và bài nói luyện tập do đội ngũ của chúng tôi soạn, từ A2 đến C1, được chạy qua công cụ chấm bài nhiều lần. Nhờ đó chúng tôi đã sửa được một số lỗi, ví dụ những lỗi bị báo sai.
  • Đợt kiểm tra này có giới hạn: trình độ của các bài do chính chúng tôi xác định, không phải do một giám khảo có chứng nhận. Vì vậy đây chưa phải là thước đo độ tin cậy.

Những gì chúng tôi dự định

  • Thu thập bài viết và bản ghi âm luyện tập ở mọi trình độ, với sự đồng ý của tác giả.
  • Nhờ các giám khảo có chuyên môn về tiếng Pháp như ngoại ngữ chấm theo tiêu chí chính thức của TCF, mà không cho họ xem điểm của AI.
  • So sánh: độ lệch trung bình tính theo trình độ, tỷ lệ bài được xếp cùng trình độ và lệch tối đa một trình độ, và mức độ đồng thuận giữa chính các giám khảo.
  • Công bố các số liệu này tại đây, kèm ngày đo và phiên bản công cụ chấm bài được đánh giá.

Trong lúc chờ đợi, trình độ mà công cụ chấm bài hiển thị chỉ là trình độ ước tính để bạn luyện tập, không phải điểm chính thức.

Các tiêu chí được áp dụng

Chúng tôi áp dụng các tiêu chí do France Éducation international công bố trong cẩm nang thí sinh TCF (Manuel du candidat): ngôn ngữ (từ vựng, ngữ pháp, chính tả, cách xây dựng câu), ngữ dụng (mạch lạc, phát triển chủ đề) và ngôn ngữ xã hội (phù hợp với tình huống). Các quy tắc dẫn đến « A1 non atteint » (dưới A1), như số từ, lạc đề hay bài học thuộc lòng, được kiểm tra trước tiên.

Dữ liệu của bạn

Một bài viết chỉ được đưa vào bộ dữ liệu kiểm chứng nếu tác giả đã đồng ý bằng một ô đánh dấu riêng, mặc định không được chọn. Khi đó bài viết sẽ được ẩn danh.