TIÊU CHÍ ĐÁNH GIÁ KẾT QUẢ THEO F1 SCORE

Kết quả sẽ được đánh giá dựa trên chỉ số F1 score, một chỉ số phổ biến dùng để đo lường hiệu quả của các mô hình phân loại trong các tác vụ học máy. F1 score là trung bình điều hòa giữa Precision (độ chính xác) và Recall (độ bao phủ), cung cấp một cái nhìn tổng thể về khả năng của mô hình trong việc nhận diện chính xác các đối tượng trong một lớp.

Chỉ số F1 được tính theo công thức sau:

Trong đó:

• Precision (Độ chính xác) là tỷ lệ giữa số lượng kết quả chính xác và tổng số kết quả được dự đoán là chính xác.
• Recall (Độ bao phủ) là tỷ lệ giữa số lượng kết quả chính xác và tổng số kết quả thực sự có trong dữ liệu.

F1 score có giá trị nằm trong khoảng từ 0 đến 1, với giá trị càng cao càng thể hiện mô hình phân loại có hiệu quả. F1 score đặc biệt hữu ích khi dữ liệu không đồng đều, tức là số lượng các lớp dương tính và âm tính có sự chênh lệch lớn.

Nhãn được tạo ra theo các tiêu chí như sau:

Nhãn 0: Bảng hiệu.

Điểm F1 của mô hình sẽ được tính cho mỗi lớp, và kết quả cuối cùng của mỗi đội thi sẽ được xác định theo F1 score cao nhất, với điều kiện là mô hình phải đạt được F1 score tốt.

Quy định chung

Quyền hủy bỏ, sửa đổi và đình chỉ tham dự
Ban tổ chức cuộc thi có toàn quyền quyết định việc hủy bỏ, sửa đổi hoặc đình chỉ cuộc thi nếu cần thiết.

Chấp nhận công khai kết quả
Bằng cách tham gia và gửi kết quả cuộc thi, bạn đồng ý rằng điểm số của mình có thể được công khai tại các hội thảo, sự kiện hoặc kỷ yếu của cuộc thi, theo quyết định của Ban tổ chức. Các thông tin này có thể bao gồm, nhưng không giới hạn, các đánh giá định lượng được thực hiện tự động hoặc thủ công, các đánh giá định tính, và các chỉ số khác mà Ban tổ chức cho là phù hợp. Bạn chấp nhận rằng quyết định cuối cùng về việc lựa chọn các chỉ số và giá trị điểm số thuộc về người ra đề.

Cam kết tuân thủ quy định pháp lý
Khi tham gia cuộc thi, bạn cam kết sẽ tuân thủ đầy đủ các luật lệ và quy định hiện hành. Bạn xác nhận rằng phần mềm bạn phát triển trong khuôn khổ cuộc thi không vi phạm bất kỳ quyền sở hữu trí tuệ, bản quyền hoặc bằng sáng chế nào của bên thứ ba, và bạn không vi phạm các quy định về kiểm soát xuất khẩu, quyền riêng tư và bảo vệ dữ liệu.

Giải thưởng và điều kiện trao giải
Giải thưởng sẽ được trao sau khi Ban tổ chức xác minh tính đủ điều kiện của người tham gia và đảm bảo sự tuân thủ các quy tắc cuộc thi, cũng như các yêu cầu của đội thắng cuộc.

Quyền sử dụng bài dự thi
Khi tham gia cuộc thi, bạn đồng ý trao quyền cho Ban tổ chức sử dụng các bài dự thi, mã nguồn và dữ liệu tạo ra trong quá trình dự thi cho bất kỳ mục đích nào mà không cần sự phê duyệt thêm.

Thể lệ nộp bài

Số lần gửi bài tối đa trong mỗi giai đoạn:

• Giai đoạn 1 - Khởi động:
  Public Test: Tối đa 10 bài/ngày/đội
• Giai đoạn 2 - Về đích:
  Private Test: Tối đa 5 bài/ngày/đội

Điều kiện bài dự thi hợp lệ
Bài dự thi sẽ bị coi là không hợp lệ nếu bị hư hỏng, thay đổi, không đầy đủ, giả mạo, hoặc được gửi muộn. Nếu bài dự thi vi phạm một trong các yêu cầu trên, Ban tổ chức có quyền loại bỏ thí sinh khỏi cuộc thi.

Dữ liệu

Điều khoản sử dụng dữ liệu
Bằng cách tải xuống hoặc truy cập dữ liệu do Ban tổ chức cung cấp, bạn đồng ý với các điều khoản dưới đây:

• Hạn chế sử dụng dữ liệu: Thí sinh không được sử dụng dữ liệu ngoài tập dữ liệu được cung cấp bởi cuộc thi. Bạn có quyền tăng cường và tạo dữ liệu tổng hợp từ tập dữ liệu này.
• Cấm phân phối dữ liệu: Bạn không được phân phối, sao chép, tái sản xuất, tiết lộ, chuyển nhượng, bán hoặc giao dịch dữ liệu do Ban tổ chức cung cấp cho bất kỳ bên thứ ba nào, trừ khi nhằm mục đích phi thương mại hoặc nghiên cứu học thuật.
• Cấm sử dụng dữ liệu sai mục đích: Dữ liệu không được sử dụng cho bất kỳ mục đích giám sát, phân tích, nghiên cứu nào để phân biệt đối xử hoặc cô lập nhóm cá nhân hoặc cá nhân đơn lẻ vì mục đích bất hợp pháp.
• Trách nhiệm và bảo vệ dữ liệu: Bạn hoàn toàn chịu trách nhiệm về việc sử dụng dữ liệu trong cuộc thi. Bạn cam kết bảo vệ và bồi thường cho Ban tổ chức chống lại bất kỳ khiếu nại nào phát sinh từ việc sử dụng dữ liệu.

Định dạng của dữ liệu

Kết quả dự đoán của tất cả ảnh đều sẽ được tổng hợp lại thành một file và đặt tên là “answer.txt” để nộp lên hệ thống. File này phải được nén (zip) lại trước khi nộp lên hệ thống.

Định dạng mỗi dòng của "answer.txt" là tên ảnh và kết quả dự đoán của 1 đối tượng trong ảnh đó như sau (Tên ảnh và 5 số thể hiện kết quả dự đoán ngăn cách nhau bởi dấu cách. Trong đó:

• Tên ảnh: là tên ảnh trong các tập test, không có phần đuôi
• class_id có giá trị = 0
• x_center: là tọa độ X tại trung tâm của bounding box, được normalize theo chiều dài của ảnh
• y_center: là tọa độ Y tại trung tâm của bounding box, được normalize theo chiều cao của ảnh
• width: là chiều dài của bounding box, được normalize theo chiều dài của ảnh
• height: là chiều cao của bounding box, được normalize theo chiều dài của ảnh

Ví dụ:

img_1 0 0.43671875 0.166 0.0390 0.0527

img_1 0 0.151 0.189 0.490 0.527

img_2 0 0.87 0.41 0.01 0.02