data/errors.json

[{"group": "A. Sáu mô hình cùng đúng (câu định vị khái niệm)", "items": [{"id": "TH3_B10_QA124", "grade": 3, "lesson": "Bài 10. Bảo vệ thông tin khi dùng máy tính", "question": "Thông tin được trao đổi giữa những gì?", "gold": "các máy tính", "context": "USB là thiết bị lưu trữ và có thể dùng để trao đổi thông tin giữa các máy tính.", "preds": {"phobert": {"answer": "các máy tính", "f1": 1.0}, "mbert": {"answer": "các máy tính", "f1": 1.0}, "xlmr": {"answer": "các máy tính", "f1": 1.0}, "vit5": {"answer": "các máy tính", "f1": 1.0}, "bartpho": {"answer": "các máy tính", "f1": 1.0}, "gpt": {"answer": "các máy tính", "f1": 1.0}}}, {"id": "TH4_B11_QA043", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Hai thao tác giúp soạn thảo như thế nào?", "gold": "nhanh và hợp lí", "context": "Em có thể sử dụng các thao tác sao chép, di chuyển một phần văn bản để soạn thảo nhanh và hợp lí. Em cũng có thể chèn thêm hình ảnh để văn bản sinh động và hấp dẫn hơn.", "preds": {"phobert": {"answer": "nhanh và hợp lí", "f1": 1.0}, "mbert": {"answer": "nhanh và hợp lí", "f1": 1.0}, "xlmr": {"answer": "nhanh và hợp lí", "f1": 1.0}, "vit5": {"answer": "nhanh và hợp lí", "f1": 1.0}, "bartpho": {"answer": "nhanh và hợp lí", "f1": 1.0}, "gpt": {"answer": "nhanh và hợp lí", "f1": 1.0}}}, {"id": "TH5_B01_QA045", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Các trò chơi được đề cập dành cho ai?", "gold": "thiếu nhi", "context": "Giải trí: Em có thể xem video, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi) trên máy tính hoặc điện thoại với đồ hoạ tuyệt đẹp và âm thanh sống động.", "preds": {"phobert": {"answer": "thiếu nhi", "f1": 1.0}, "mbert": {"answer": "thiếu nhi", "f1": 1.0}, "xlmr": {"answer": "thiếu nhi", "f1": 1.0}, "vit5": {"answer": "thiếu nhi", "f1": 1.0}, "bartpho": {"answer": "thiếu nhi", "f1": 1.0}, "gpt": {"answer": "thiếu nhi", "f1": 1.0}}}]}, {"group": "B. Lỗi biên: dự đoán THỪA", "items": [{"id": "TH3_B10_QA121", "grade": 3, "lesson": "Bài 10. Bảo vệ thông tin khi dùng máy tính", "question": "USB dùng để trao đổi gì?", "gold": "thông tin", "context": "USB là thiết bị lưu trữ và có thể dùng để trao đổi thông tin giữa các máy tính.", "preds": {"phobert": {"answer": "thông tin giữa các máy tính", "f1": 0.5}, "mbert": {"answer": "thông tin giữa các máy tính", "f1": 0.5}, "xlmr": {"answer": "thông tin giữa các máy tính", "f1": 0.5}, "vit5": {"answer": "thông tin", "f1": 1.0}, "bartpho": {"answer": "thông tin giữa các máy tính", "f1": 0.5}, "gpt": {"answer": "thông tin", "f1": 1.0}}}, {"id": "TH4_B11_QA031", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Thao tác được nhắc đến là gì?", "gold": "di chuyển phần văn bản", "context": "Có những trường hợp phần văn bản để ở vị trí chưa hợp lí, em có thể di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại.", "preds": {"phobert": {"answer": "di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại", "f1": 0.455}, "mbert": {"answer": "di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại", "f1": 0.455}, "xlmr": {"answer": "di chuyển phần văn bản đó đến vị trí hợp lí", "f1": 0.625}, "vit5": {"answer": "di chuyển", "f1": 0.571}, "bartpho": {"answer": "gõ lại", "f1": 0.0}, "gpt": {"answer": "di chuyển phần văn bản đó", "f1": 0.909}}}, {"id": "TH5_B01_QA043", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Em có thể đọc gì để giải trí?", "gold": "truyện", "context": "Giải trí: Em có thể xem video, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi) trên máy tính hoặc điện thoại với đồ hoạ tuyệt đẹp và âm thanh sống động.", "preds": {"phobert": {"answer": "xem video , nghe nhạc , đọc truyện", "f1": 0.286}, "mbert": {"answer": "truyện", "f1": 1.0}, "xlmr": {"answer": "xem video, nghe nhạc, đọc truyện", "f1": 0.286}, "vit5": {"answer": "truyện", "f1": 1.0}, "bartpho": {"answer": "video", "f1": 0.0}, "gpt": {"answer": "sách", "f1": 0.0}}}]}, {"group": "C. Lỗi biên: dự đoán THIẾU", "items": [{"id": "TH3_B10_QA196", "grade": 3, "lesson": "Bài 10. Bảo vệ thông tin khi dùng máy tính", "question": "Kẻ xấu có thể làm gì trên Internet?", "gold": "đe dọa , bắt nạt em", "context": "Kẻ xấu có thể sử dụng các thông tin bí mật của em để đe doạ, bắt nạt em trên Internet, thậm chí là lừa đảo, tống tiền gia đình em.", "preds": {"phobert": {"answer": "bắt nạt em", "f1": 0.75}, "mbert": {"answer": "bắt nạt em", "f1": 0.75}, "xlmr": {"answer": "đe doạ, bắt nạt em", "f1": 0.8}, "vit5": {"answer": "đe doạ, bắt nạt em", "f1": 0.8}, "bartpho": {"answer": "sử dụng các thông tin bí mật của em", "f1": 0.143}, "gpt": {"answer": "sử dụng các thông tin bí mật của em", "f1": 0.143}}}, {"id": "TH4_B11_QA028", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Khi nào cần di chuyển phần văn bản?", "gold": "ở vị trí chưa hợp lí", "context": "Có những trường hợp phần văn bản để ở vị trí chưa hợp lí, em có thể di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại.", "preds": {"phobert": {"answer": "vị trí chưa hợp lí", "f1": 0.909}, "mbert": {"answer": "không cần phải gõ lại", "f1": 0.0}, "xlmr": {"answer": "gõ lại", "f1": 0.0}, "vit5": {"answer": "khi không cần phải gõ lại", "f1": 0.0}, "bartpho": {"answer": "khi cần", "f1": 0.0}, "gpt": {"answer": "khi cần", "f1": 0.0}}}, {"id": "TH5_B01_QA063", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Ba phần mềm hỗ trợ hợp tác được nêu là gì?", "gold": "Zoom , Google Meet , Microsoft Teams", "context": "Hợp tác với các bạn: Em có thể hỗ trợ, giúp đỡ, tương tác hoặc thảo luận với các bạn của mình qua các phần mềm như Zoom, Google Meet, Microsoft Teams. Em cũng có thể tham gia các nhóm, câu lạc bộ học tập trên Internet với bạn cùng lớp hoặc những bạn có cùng nhu cầu học tập.", "preds": {"phobert": {"answer": "Microsoft Teams", "f1": 0.571}, "mbert": {"answer": "Microsoft Teams", "f1": 0.571}, "xlmr": {"answer": "Zoom, Google Meet, Microsoft Teams", "f1": 1.0}, "vit5": {"answer": "Zoom, Google Meet, Microsoft Teams", "f1": 1.0}, "bartpho": {"answer": "Zoom, Google Meet, Microsoft Teams", "f1": 1.0}, "gpt": {"answer": "Zoom, Google Meet, Microsoft Teams", "f1": 1.0}}}]}, {"group": "D. Chỉ mô hình đơn ngữ đúng, mBERT sai", "items": [{"id": "TH3_B10_QA193", "grade": 3, "lesson": "Bài 10. Bảo vệ thông tin khi dùng máy tính", "question": "Kẻ xấu sử dụng loại thông tin nào?", "gold": "các thông tin bí mật của em", "context": "Kẻ xấu có thể sử dụng các thông tin bí mật của em để đe doạ, bắt nạt em trên Internet, thậm chí là lừa đảo, tống tiền gia đình em.", "preds": {"phobert": {"answer": "các thông tin bí mật của em", "f1": 1.0}, "mbert": {"answer": "các thông tin bí mật", "f1": 0.833}, "xlmr": {"answer": "các thông tin bí mật của em", "f1": 1.0}, "vit5": {"answer": "các thông tin bí mật", "f1": 0.833}, "bartpho": {"answer": "các thông tin bí mật", "f1": 0.833}, "gpt": {"answer": "các thông tin bí mật của em", "f1": 1.0}}}, {"id": "TH4_B11_QA029", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Phần văn bản được di chuyển đến đâu?", "gold": "vị trí hợp lí", "context": "Có những trường hợp phần văn bản để ở vị trí chưa hợp lí, em có thể di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại.", "preds": {"phobert": {"answer": "vị trí hợp lí", "f1": 1.0}, "mbert": {"answer": "vị trí chưa hợp lí, em có thể di chuyển phần văn bản đó đến vị trí hợp lí", "f1": 0.348}, "xlmr": {"answer": "vị trí chưa hợp lí", "f1": 0.889}, "vit5": {"answer": "vị trí hợp lí", "f1": 1.0}, "bartpho": {"answer": "vị trí hợp lí", "f1": 1.0}, "gpt": {"answer": "vị trí hợp lí", "f1": 1.0}}}, {"id": "TH5_B01_QA050", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Những hình thức giải trí nào được nêu?", "gold": "xem video , nghe nhạc , đọc truyện hay chơi những trò chơi", "context": "Giải trí: Em có thể xem video, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi) trên máy tính hoặc điện thoại với đồ hoạ tuyệt đẹp và âm thanh sống động.", "preds": {"phobert": {"answer": "xem video , nghe nhạc , đọc truyện hay chơi những trò chơi", "f1": 1.0}, "mbert": {"answer": "Giải trí", "f1": 0.0}, "xlmr": {"answer": "xem video", "f1": 0.308}, "vit5": {"answer": "xem video, nghe nhạc, đọc truyện", "f1": 0.706}, "bartpho": {"answer": "xem video, nghe nhạc, đọc truyện hay chơi những trò chơi", "f1": 1.0}, "gpt": {"answer": "chơi game, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi)", "f1": 0.692}}}]}, {"group": "E. GPT ảo tưởng (ViT5 đúng, GPT lệch hẳn)", "items": [{"id": "TH3_B10_QA196", "grade": 3, "lesson": "Bài 10. Bảo vệ thông tin khi dùng máy tính", "question": "Kẻ xấu có thể làm gì trên Internet?", "gold": "đe dọa , bắt nạt em", "context": "Kẻ xấu có thể sử dụng các thông tin bí mật của em để đe doạ, bắt nạt em trên Internet, thậm chí là lừa đảo, tống tiền gia đình em.", "preds": {"phobert": {"answer": "bắt nạt em", "f1": 0.75}, "mbert": {"answer": "bắt nạt em", "f1": 0.75}, "xlmr": {"answer": "đe doạ, bắt nạt em", "f1": 0.8}, "vit5": {"answer": "đe doạ, bắt nạt em", "f1": 0.8}, "bartpho": {"answer": "sử dụng các thông tin bí mật của em", "f1": 0.143}, "gpt": {"answer": "sử dụng các thông tin bí mật của em", "f1": 0.143}}}, {"id": "TH4_B11_QA051", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Cần mở tệp nào?", "gold": "Bai1", "context": "Nhiệm vụ: a) Mở tệp Bai1 trong thư mục tên của em đã tạo ở phần Luyện tập của Bài 10. b) Sao chép văn bản, gõ thêm câu thơ, di chuyển văn bản để được kết quả như minh hoạ trong Hình 43. c) Chèn hình ảnh phù hợp vào văn bản. Lưu tệp với tên mới là Bai2.", "preds": {"phobert": {"answer": "Bai1", "f1": 1.0}, "mbert": {"answer": "Bai1", "f1": 1.0}, "xlmr": {"answer": "Bai1", "f1": 1.0}, "vit5": {"answer": "Bai1", "f1": 1.0}, "bartpho": {"answer": "Bai1", "f1": 1.0}, "gpt": {"answer": "Bai2", "f1": 0.0}}}, {"id": "TH5_B01_QA043", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Em có thể đọc gì để giải trí?", "gold": "truyện", "context": "Giải trí: Em có thể xem video, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi) trên máy tính hoặc điện thoại với đồ hoạ tuyệt đẹp và âm thanh sống động.", "preds": {"phobert": {"answer": "xem video , nghe nhạc , đọc truyện", "f1": 0.286}, "mbert": {"answer": "truyện", "f1": 1.0}, "xlmr": {"answer": "xem video, nghe nhạc, đọc truyện", "f1": 0.286}, "vit5": {"answer": "truyện", "f1": 1.0}, "bartpho": {"answer": "video", "f1": 0.0}, "gpt": {"answer": "sách", "f1": 0.0}}}]}, {"group": "F. Mọi mô hình đều hỏng", "items": [{"id": "TH3_B15_QA061", "grade": 3, "lesson": "Bài 15. Công việc được thực hiện theo điều kiện", "question": "Khi bị sốt, em dùng gì?", "gold": "cặp nhiệt độ", "context": "Các việc gồm gặp cô giáo, giặt xong quần áo, bị sốt và bút bi hết mực. Các việc tương ứng gồm em nói “Em chào cô ạ!”, phơi quần áo, cặp nhiệt độ và bơm mực.", "preds": {"phobert": {"answer": "bút bi hết mực", "f1": 0.0}, "mbert": {"answer": "bút bi hết mực", "f1": 0.0}, "xlmr": {"answer": "bút bi hết mực", "f1": 0.0}, "vit5": {"answer": "bút bi hết mực", "f1": 0.0}, "bartpho": {"answer": "bút bi hết mực", "f1": 0.0}, "gpt": {"answer": "bút bi", "f1": 0.0}}}, {"id": "TH4_B11_QA028", "grade": 4, "lesson": "Bài 11. Chỉnh sửa văn bản", "question": "Khi nào cần di chuyển phần văn bản?", "gold": "ở vị trí chưa hợp lí", "context": "Có những trường hợp phần văn bản để ở vị trí chưa hợp lí, em có thể di chuyển phần văn bản đó đến vị trí hợp lí mà không cần phải gõ lại.", "preds": {"phobert": {"answer": "vị trí chưa hợp lí", "f1": 0.909}, "mbert": {"answer": "không cần phải gõ lại", "f1": 0.0}, "xlmr": {"answer": "gõ lại", "f1": 0.0}, "vit5": {"answer": "khi không cần phải gõ lại", "f1": 0.0}, "bartpho": {"answer": "khi cần", "f1": 0.0}, "gpt": {"answer": "khi cần", "f1": 0.0}}}, {"id": "TH5_B01_QA042", "grade": 5, "lesson": "Bài 1. Em có thể làm gì với máy tính?", "question": "Em có thể nghe gì trên máy tính?", "gold": "nhạc", "context": "Giải trí: Em có thể xem video, nghe nhạc, đọc truyện hay chơi những trò chơi (dành cho thiếu nhi) trên máy tính hoặc điện thoại với đồ hoạ tuyệt đẹp và âm thanh sống động.", "preds": {"phobert": {"answer": "xem video", "f1": 0.0}, "mbert": {"answer": "nghe nhạc", "f1": 0.667}, "xlmr": {"answer": "xem video, nghe nhạc", "f1": 0.4}, "vit5": {"answer": "video, nghe nhạc, đọc truyện", "f1": 0.333}, "bartpho": {"answer": "video", "f1": 0.0}, "gpt": {"answer": "video", "f1": 0.0}}}]}]