Lưu ý: Bài viết này được dịch hoàn toàn bởi ChatGPT và không đi qua khâu hiệu đính.
Hệ thống đánh giá phân tán các bài báo giúp quá trình này nhanh hơn gấp đôi và bao gồm các biện pháp ngăn chặn gian lận.
Một thử nghiệm hệ thống đánh giá bài báo mới đã giảm hơn một nửa thời gian cần để xem xét các đơn xin tài trợ, theo kết quả từ một thử nghiệm nhỏ. Hệ thống này có thể giúp các tổ chức tài trợ nghiên cứu xử lý nhanh chóng và hiệu quả hơn hàng nghìn đơn xin tài trợ mà họ nhận được.
Hệ thống, gọi là “đánh giá phân tán”, yêu cầu các nhà nghiên cứu nộp đơn xin tài trợ phải đánh giá một số đơn xin tài trợ khác. Điều này giúp tránh quy trình thường xuyên kéo dài, khi các tổ chức tài trợ phải tìm kiếm những người đánh giá bài báo bên ngoài, theo dõi các nhà đánh giá quá tải và phân loại các đơn xin tài trợ.
Thử nghiệm được thực hiện bởi Đơn vị Metascience của Vương quốc Anh, một nhóm chính phủ được thành lập vào năm 2024 để nghiên cứu và cải thiện cách tài trợ và thực hiện nghiên cứu khoa học. Kết quả đã được công bố tại hội nghị Metascience 2025 ở London vào ngày 30 tháng 6.
Kết quả rất ấn tượng về mặt hiệu quả và khả năng cấp phát tài trợ, theo lời Tom Stafford, một nhà khoa học nhận thức tại Đại học Sheffield. Ông cũng khen ngợi nhóm Metascience vì đã sử dụng những biện pháp ngăn chặn gian lận, chẳng hạn như đánh giá không công bằng với mục đích giảm điểm của ứng viên khác. “Bạn sẽ không thể được lợi từ việc cho điểm thấp cho người khác,” Stafford nói.
Sự gia tăng số lượng đơn xin tài trợ
Các tổ chức tài trợ nghiên cứu từ lâu đã tìm cách xử lý số lượng đơn xin tài trợ tăng vọt. UK Research and Innovation (UKRI), tổ chức tài trợ lớn nhất tại Anh, đã thấy số đơn tăng từ khoảng 19.800 đơn trong năm 2021–22 lên gần 27.200 đơn trong năm 2023–24. Trong khi đó, ngân sách hoạt động của tổ chức này đã giảm hơn 15%, mất hàng trăm nhân viên và đối mặt với chỉ trích về việc quản lý hành chính chậm chạp. Thông thường, quá trình đánh giá bài báo tại UKRI mất từ 4,6 đến 6,3 tháng.
Đánh giá phân tán đã được thử nghiệm hoặc áp dụng ở một số nơi khác. Đài quan sát Nam Âu tại Garching, Đức, là nơi tiên phong trong việc sử dụng phương pháp này để đánh giá các đơn xin tài trợ cho vị trí trong kính thiên văn của họ. Quỹ Volkswagen, một tổ chức tài trợ nghiên cứu ở Hanover, Đức, cũng đã thử nghiệm phương pháp này.
Kết quả thử nghiệm và biện pháp chống gian lận
Trong thử nghiệm của nhóm Metascience, 100 đơn xin tài trợ đã được đánh giá, với các ứng viên tham gia phải đánh giá 8 đến 10 đơn khác để có thể giữ cơ hội nhận tài trợ của mình. Hệ thống đánh giá phân tán đã giảm thời gian đánh giá xuống còn 2,2 tháng, nhanh hơn từ 53% đến 65% so với phương pháp truyền thống.
Ngoài ra, để tránh gian lận, nhóm Metascience đã chia các ứng viên thành hai nhóm, A và B, mỗi nhóm chỉ đánh giá ứng viên của nhóm còn lại, điều này giúp việc đánh giá không ảnh hưởng đến cơ hội thành công của người đánh giá. Một thuật toán cũng đã được phát triển để đảm bảo không có sự trao đổi đánh giá giữa các ứng viên.
Tính khả thi của phương pháp
Tuy nhiên, phương pháp đánh giá phân tán không phù hợp với các tài trợ xuyên ngành, đòi hỏi cái nhìn từ các lĩnh vực rộng hơn so với các ứng viên. Nó hoạt động tốt nhất khi cộng đồng nghiên cứu là khá xác định.
Thử nghiệm này là một trong những nghiên cứu được báo cáo tại hội nghị Metascience 2025, nơi phản ánh sự quan tâm ngày càng lớn đối với nghiên cứu về nghiên cứu.
Dịch từ Nature
