SPEC, pirmaujanti organizacija, skelbianti bandymų rezultatus, ėmėsi svarbaus žingsnio, siekdama palaikyti sąžiningumą ir tikslumą vertinant našumo vertinimus. Siekdama spręsti kontroversišką optimizavimo techniką, naudojamą konkrečioje „Intel“ kompiliatoriaus versijoje, SPEC panaikino daugiau nei 2 600 „Intel“ procesorių, naudojančių šį kompiliatorių, pasiektus bandymų rezultatus.
Diskvalifikacija pirmiausia paveikia sistemas, kurios įrengtos 4-os kartos „Xeon Sapphire Rapids“ procesoriais, paprastai randamais aukštos klasės serveriuose, duomenų centruose ir darbo vietose. Šie rezultatai buvo gauti naudojant SPEC CPU 2017, standartizuotą bandymų rinkinį, skirtą įvertinti skirtingų darbo apkrovų veikimą skirtingose kompiuterio sistemose.
Nors aparatinė įranga yra svarbi nustatant bandymų rezultatus, programinės pusės optimizavimas, įskaitant kompiliatoriaus naudojimą, gali labai paveikti rezultatus. Šiuo atveju kontroversiška optimizavimo technika išimtinai buvo skirta dviems bandymams SPEC CPU 2017 rinkinyje: 523.xalancbmk_r ir 623.xalancbmk_s.
Pranešta optimizavimo technika turėjo potencialą padidinti SPECint našumą 9%. Tačiau svarbu pažymėti, kad šis pagerinimas buvo ribotas iki konkretiems bandymams ir nebuvo išplėstas į realius pasaulio taikymus.
Panašūs optimizavimo kontroversijos buvo praeityje, įtraukiant įmones kaip „Nvidia“ ir „AMD“, kur buvo ginčytas GPU našumas ir tvarkyklės nustatymai. Panaikindama SPEC CPU 2017 rezultatus, SPEC siekia spręsti šias problemas, pabrėždama išsamų ir patikimą bandymų vertinimą.
SPEC tikslas yra sukurti aplinką, kuri tiksliai atspindėtų kompiuterio sistemų tikrus veikimo gebėjimus. Panaikindama rezultatus, pasiektus naudojant konkretų „Intel“ kompiliatoriaus versiją, SPEC sustiprina sąžiningumo, objektyvumo ir patikimų bandymų praktikų vertybes.
SPEC sprendimas patvirtina, kad yra svarbu išlaikyti sąžiningumą vertinant našumą ir atkreipia dėmesį į organizacijos įsipareigojimą skatinti bandymų aplinką, atitinkančią tikrųjų sistemų veikimą visiems laikams, palaikant sąžiningumo ir patikimumo principus.
The source of the article is from the blog kewauneecomet.com