Một LLM mã nguồn mở đọc 291 bài báo khoa học bị rút lại: 7,7% số đoạn văn có đề cập đến việc bài báo bị rút lại

Xuất bản ngày 31/10/2026 | Phiên bản 1.2 Tập dữ liệu Mở Các sai sót đã được cải chính chính thức vẫn tồn tại trong dữ liệu huấn luyện AI: Cảnh báo công khai từ Céphéide, dữ liệu và bằng chứng Tác giả/Người tạo Gracia, Sébastien1 Xem đơn vị công tác 1. Loxyn, Lyon Mô tả Phiên bản 1.2 (ngày 31/10/2026). Bổ sung 4 thư mục, các phép đo được thực hiện vào ngày 30/10/2026 trong phần tiếp nối của bước S1: liệu OLMo 2, một mô hình mở có dữ liệu huấn luyện công khai, có cho biết một bài báo đã bị rút lại khi dữ liệu của mô hình thể hiện điều đó hay không? Kết quả: trong những nội dung mô hình đã đọc về 291 bài báo bị rút lại mà mô hình từng tiếp cận nhiều lần, 7,7% các đoạn trích có đề cập đến việc rút bài; mô hình không đưa ra câu trả lời "bị rút lại" đối với bất kỳ bài báo nào trong số 891 bài được truy vấn (S4 và S5) và trả lời "không bị rút lại" đối với 425 bài, song mô hình không nhận biết được các bài báo này (tạp chí chính xác: 2 / 891), do đó chưa đưa ra kết luận đối với mô hình. Đã đăng ký trước, niêm phong và neo xác thực trên mạng Bitcoin trước khi thực hiện câu hỏi đầu tiên. Xem README — v1.2.md. Các tệp tin của phiên bản 1.1 và bài báo arXiv:2610.34379 giữ nguyên không đổi. Phiên bản 1.2 (ngày 31/10/2026). Bổ sung 4 thư mục, các phép đo được thực hiện vào ngày 30/10/2026 trong phần tiếp nối của bước S1: liệu OLMo 2, một mô hình mở có dữ liệu huấn luyện công khai, có cho biết một bài báo đã bị rút lại khi dữ liệu của mô hình thể hiện điều đó hay không? Kết quả: trong những nội dung mô hình đã đọc về 291 bài báo bị rút lại mà mô hình từng tiếp cận nhiều lần, 7,7% các đoạn trích có đề cập đến việc rút bài; mô hình không đưa ra câu trả lời "bị rút lại" đối với bất kỳ bài báo nào trong số 891 bài được truy vấn (S4 và S5) và trả lời "không bị rút lại" đối với 425 bài, song mô hình không nhận biết được các bài báo này (tạp chí chính xác: 2 / 891): chưa đưa ra kết luận đối với mô hình. Đã đăng ký trước, niêm phong và neo xác thực trên mạng Bitcoin trước khi thực hiện câu hỏi đầu tiên. Xem LISEZ-MOI — v1.2.md. Các tệp tin của phiên bản 1.1 và bài báo arXiv:2610.34379 giữ nguyên không đổi. Cảnh báo công khai từ Céphéide, hệ thống đo kiểm của Loxyn, cung cấp đầy đủ dữ liệu, tập lệnh (scripts), dữ liệu đọc và bằng chứng. Văn bản cảnh báo bằng tiếng Pháp và tiếng Anh nằm trong thư mục ALERTE/; tài liệu hướng dẫn từng bước là README.md (tiếng Anh) và 00 — LISEZ-MOI.md (tiếng Pháp). Bài báo: arXiv:2610.34379. Toàn bộ gói tài liệu (thư mục từng bước, danh sách, bằng chứng) được lưu trong tệp định dạng .zip; tệp MANIFESTE.sha256 cung cấp mã băm SHA-256 của từng tệp tin bên trong. Các văn bản chính thức thường được đính chính sau khi công bố: các văn bản đính chính của Liên minh châu Âu (EU) trên Công báo (Official Journal), các đính chính RFC đã được xác minh, các trường hợp rút lại bài báo khoa học. Nghiên cứu này đánh giá liệu các nội dung đính chính nói trên có xuất hiện trong các tập dữ liệu công khai dùng để huấn luyện mô hình ngôn ngữ (EurlexResources, FineWeb-2, một tập mẫu FineWeb, peS2o) hay không, và phản hồi của các mô hình đối với các đoạn văn bản đã được đính chính. Kết quả chính cho thấy: 95,5% các bản đính chính đơn ngữ có thể kiểm tra đối với các đạo luật của EU (1.989/2.082) vẫn tồn tại ở dạng sai sót trong EurlexResources; ít nhất 124 lỗi luật EU đã đính chính và 60 đính chính RFC đã xác minh bị lặp lại trong dữ liệu huấn luyện từ web; khoảng 12.200 bài báo bị rút lại nằm trong peS2o, trong đó 79% không đề cập đến việc rút bài; 53% mẫu ngẫu nhiên các bài báo bị rút lại vẫn được trích dẫn sau một năm hoặc lâu hơn kể từ thời điểm rút bài (theo OpenAlex); khi được truy vấn mà không cung cấp tài liệu kèm theo, 5 mô hình đưa ra phiên bản sai lệch trong 45% số câu trả lời có chọn một phiên bản dứt khoát, và chỉ có 1 trên 295 câu trả lời nêu rõ không biết. Khi đối chiếu song song hai phiên bản, các mô hình chọn phiên bản đã đính chính trong 53% trường hợp, và việc nêu tên văn bản luật không tạo ra sự khác biệt; khi mỗi phiên bản đi kèm ngày tháng và nhãn đính chính (corrigendum), 4 mô hình quy mô lớn hơn đã lựa chọn phiên bản đính chính trong 99–100% trường hợp. Mọi quy trình đều được đăng ký trước và gắn dấu thời gian bằng OpenTimestamps trên chuỗi khối (blockchain) Bitcoin. Các đối chứng thất bại, dự đoán sai và sai lệch đều được báo cáo đầy đủ. Tệp dữ liệu Retraction Watch không được phân phối lại (mã băm SHA-256 của tệp được lưu trong niêm phong của bước xử lý bài báo bị rút). Phiên bản 1.1 (ngày 27/10/2026): bổ sung README.md, bản dịch tiếng Anh của 00 — LISEZ-MOI.md, và liên kết đến bài báo trên arXiv. Không có tệp nào khác thay đổi. Tệp tin 00 — LISEZ-MOI.md Tệp tin (96,3 MB) Tên Kích thước 00 — LISEZ-MOI.md md5:c1833c1f765420f6037a0ec20a660241 7,2 kB Xem trước Tải về ALERT — text EN.md md5:049808d98977cef4b940ec03adc6ec22 20,0 kB Xem trước Tải về ALERTE — texte FR.md md5:48768a73067b1bed26afd4f12e87bf5a 22,9 kB Xem trước Tải về cepheide-alerte-donnees-et-preuves-2026-10-25.zip md5:b7d4ff2926181e8732266ce5a4cdec33 94,8 MB Xem trước Tải về cepheide-v1.2-retractations-OLMo-2026-10-31.zip md5:83d09a72c3d5c297fc325e88c2aeebf2 765,2 kB Xem trước Tải về LISEZ-MOI — v1.2.md md5:a2f736af7752bd562e23adb22462e477 5,2 kB Xem trước Tải về MANIFESTE — v1.2.sha256 md5:821390fb841f4e9e9ed9259a52d8f25e 9,5 kB Tải về MANIFESTE.sha256 md5:b08f269cdab9ea8d9a4f7ecdf4f707a2 665,2 kB Tải về README — v1.2.md md5:1b64f9cf9f1cbd3f0d4b7e56195a8681 5,0 kB Xem trước Tải về README.md md5:aeb32f400565eead266687a19cc467cb 7,2 kB Xem trước Tải về verif_ots.py md5:b89687ce22fd6c2791ae3473c5517d75 956 Bytes Tải về Thông tin bổ sung Các công trình liên quan Là phần bổ sung cho Bản in trước (Preprint): arXiv:2610.34379 (arXiv)