Geekbench cảnh báo công cụ BOT của Intel cho CPU Arrow Lake Plus tạo kết quả 'không thể so sánh với chạy chuẩn'

Primate Labs, công ty đứng sau Geekbench, đã thông báo sẽ gắn cảnh báo vào kết quả benchmark được tạo ra bởi CPU Arrow Lake Plus mới của Intel. Chuyên gia benchmark này cho biết công cụ BOT mới của Intel, chỉ chạy trên chip vừa ra mắt và cả bộ phận Panther Lake, "có thể tăng điểm Geekbench 6 lên đến 8%, nhưng những kết quả đó không thể so sánh với các lần chạy tiêu chuẩn." Primate Labs thực tế nói rằng các tác vụ riêng lẻ có thể được cải thiện tới 40%.

Về lý do cho động thái này, công ty cho biết: "Vì công cụ này sửa đổi benchmark, và cả Primate Labs lẫn công chúng đều không rõ những thay đổi này xảy ra như thế nào, nên kết quả được tạo với công cụ không thể so sánh với kết quả được tạo mà không có nó." Cảnh báo sẽ được áp dụng cho tất cả kết quả Geekbench 6 của chip Intel mới vì Primate Labs hiện "không có cách nào phát hiện nếu một kết quả Geekbench 6 được chạy với hay không có Binary Optimization Tool."

Do đó, hiện tại, tất cả kết quả benchmark Arrow Lake Plus sẽ có cảnh báo sau đính kèm: "Kết quả benchmark này có thể không hợp lệ do các công cụ sửa đổi nhị phân có thể chạy trên hệ thống này." Primate Labs kết luận rằng, "mặc dù Binary Optimization Tool chỉ hỗ trợ một số ít CPU Intel, đây là một bước quan trọng để đảm bảo điểm số được báo cáo trên Geekbench Browser vẫn đáng tin cậy. Intel liệt kê các CPU được hỗ trợ trên trang web Binary Optimization Tool. Chúng tôi kỳ vọng danh sách này sẽ động và thay đổi theo thời gian. Cảnh báo của Primate Labs sẽ được cập nhật tương ứng."

Câu hỏi ngay lập tức là liệu điều này có công bằng không. Một số nhà quan sát đã chỉ ra đúng rằng các lần chạy Geekbench ngay từ đầu không hoàn toàn có thể so sánh được trên các nền tảng khác nhau. Quan trọng hơn, những gì công cụ BOT của Intel đang làm có thể nói là không khác gì những gì các kiến trúc CPU khác nhau làm nội bộ. Nhị phân Geekbench được liên kết động, có nghĩa là các lệnh thực tế được chạy khác nhau tùy thuộc vào sự kết hợp CPU và OS liên quan. BOT của Intel chỉ đảm bảo rằng các lệnh được tạo ra là tối ưu tuyệt đối cho kiến trúc vi mô cơ bản.

Hơn nữa, khi bạn đào sâu, tất cả CPU hiệu quả dịch nhị phân phần mềm thành mã vi mô cụ thể cho kiến trúc của chúng. Hiểu biết của tôi là những gì BOT của Intel đang làm về cơ bản là sắp xếp lại các lệnh để chúng sử dụng đầy đủ đường ống Arrow Lake Plus. Tất cả các tính toán thực tế đều giống nhau. Nói cách khác, kích hoạt BOT không có nghĩa là bỏ qua bất kỳ công việc nào.

Nếu có lý do hợp lệ để đánh dấu các kết quả được tăng cường bởi BOT, đó là chúng không đại diện cho cách kiến trúc Arrow Lake Plus hoạt động khi không kích hoạt BOT. Điều đó quan trọng vì BOT không tự động hoạt động trên tất cả phần mềm. Intel so sánh BOT với trò chơi Tetris nơi các lệnh được sắp xếp tối ưu hơn.

Thay vào đó, Intel trước tiên phải đánh giá phần mềm hoặc ứng dụng và tạo hồ sơ cụ thể cho ứng dụng cho BOT. Trong một thế giới lý tưởng, bạn sẽ có kết quả cả với và không kích hoạt BOT, cho một bức tranh đầy đủ về cách CPU hoạt động cả tự nhiên và với công cụ được bật. Bạn cũng có thể tranh luận rằng Intel có một chút lịch sử khi nói đến, chà, điều chỉnh kết quả benchmark.

Để đào xới chỉ hai ví dụ trong số nhiều, vào năm 2024 SPEC đã vô hiệu hóa kết quả benchmark của Intel sử dụng một trình biên dịch Intel nhất định do các tối ưu hóa "không công bằng", và vào năm 2009, ICC của Intel được phát hiện là làm suy giảm hiệu suất trên CPU AMD bằng cách cố ý loại bỏ tất cả các tối ưu hóa cho kiến trúc CPU cạnh tranh. Mối quan tâm khác là BOT của Intel châm ngòi cho một cuộc chạy đua vũ trang về tối ưu hóa mà hiệu quả làm cho tất cả các kết quả không đại diện cho hiệu suất CPU thực tế.

Với tất cả những điều đó, việc đánh dấu các kết quả được tăng cường bởi BOT có lẽ có ý nghĩa.