Vào ngày 2 tháng 6, theo phương tiện truyền thông nước ngoài, bộ giải mã đã báo cáo vào ngày 1, một loạt các cuộc thi an ninh mạng gần đây được tổ chức bởi Palisade Research cho thấy các tác nhân AI có khả năng cạnh tranh trực tiếp với các tin tặc của con người và thậm chí đã giành chiến thắng trong một số trường hợp .
Nhóm nghiên cứu đã tiến hành các thử nghiệm chiến đấu thực tế trên các hệ thống AI trong hai cuộc thi "bắt giữ cờ" (CTF) quy mô lớn, với hàng ngàn người chơi tham gia vào cuộc thi . trong các cuộc thi như vậy, các nhóm tham gia cần giải quyết các vấn đề bảo mật bằng cách bẻ khóa mã hóa, xác định lỗ hổng và tìm thấy
Mục đích của bài kiểm tra là kiểm tra xem các tác nhân AI có thể cạnh tranh với các đội của con người . Kết quả cho thấy hiệu suất của AI vượt xa kỳ vọng và hầu hết các AI tham gia vượt quá mức trung bình của người chơi con người.
Sự phức tạp của các hệ thống AI tham gia khác nhau . Một số nhóm, chẳng hạn như CAI, đã dành khoảng 500 giờ để xây dựng các hệ thống của riêng họ và một số nhóm, chẳng hạn như không bị xáo trộn, chỉ dành 17 giờ để tham gia bằng cách tối ưu hóa các gợi ý của các mô hình hiện tại Enigma và Claude Code.
Trong cuộc thi đầu tiên, được gọi là "AI vs . con người", sáu đội AI đã thi đấu với khoảng 150 đội người . Tất cả người chơi phải hoàn thành 20 câu hỏi về kỹ thuật và kỹ thuật đảo ngược trong vòng 48 giờ .
Bốn trong số bảy AI tham gia đã phá vỡ thành công 19 câu hỏi . Nhóm AI xếp hạng cao nhất được xếp hạng trong top 5% của tổng danh sách và hiệu suất tổng thể của nó tốt hơn so với hầu hết người chơi của con người .
Mặc dù vậy, một số cầu thủ có kinh nghiệm của con người vẫn không bị tụt lại phía sau . Một số người chơi chỉ ra rằng họ đã tham gia vào nhiều đội quốc tế, và trải nghiệm thực tế CTF phong phú và sự quen thuộc của họ với các chiến lược giải quyết vấn đề chung là chìa khóa cho khả năng cạnh tranh của họ .
Trò chơi thứ hai, "Apocalypse không gian mạng", khó khăn hơn nhiều . Các tác nhân AI đã phải đối mặt với các loại câu hỏi mới và cạnh tranh với gần 18, 000 người chơi con người.
Theo các báo cáo, có bốn đại lý AI tham gia cuộc thi, trong đó CAI thực hiện tốt nhất, hoàn thành 20 nhiệm vụ và xếp thứ 859, xếp hạng trong top 10% của tất cả các nhóm tham gia và 21% nhóm hoạt động hàng đầu {{4}
Các nhà nghiên cứu cũng đã phân tích độ khó của các câu hỏi được giải quyết bởi AI . Dựa trên thời gian của các đội hàng đầu để giải quyết các câu hỏi, người ta thấy rằng AI có tỷ lệ thành công 50% trong việc giải quyết các câu hỏi của con người khoảng 78 phút để giải quyết .