SPEC poništava rezultate SPEC CPU 2017 za Intel CPU-ove zbog spornih optimizacijskih tehnika SPEC, organizacija odgovorna za objavljivanje rezultata ispitivanja performansi, poduzela je odlučan korak kako bi osigurala poštenu i točnu evaluaciju performansi. Kao odgovor na kontroverznu optimizacijsku tehniku korištenu u određenoj verziji Intel kompajlera, SPEC je poništio više od 2.600 rezultata ispitivanja postignutih od strane Intel CPU-ova koji su koristili navedeni kompajler.
Diskvalifikacija uglavnom utječe na uređaje opremljene 4. generacijom Xeon Sapphire Rapids CPU-ova, koji se često nalaze u skupocjenim poslužiteljima, podatkovnim centrima i radnim stanicama. Ti rezultati ispitivanja postignuti su korištenjem SPEC CPU 2017, standardiziranog testa performansi koji procjenjuje performanse različitih opterećenja na različitim računalnim sustavima.
Iako hardver igra važnu ulogu u rezultatima ispitivanja, optimizacija softvera, uključujući korištenje kompajlera, može znatno utjecati na rezultate. Međutim, sporna optimizacijska tehnika odnosila se isključivo na dva specifična testa unutar SPEC CPU 2017 paketa: 523.xalancbmk_r i 623.xalancbmk_s.
Ova optimizacijska tehnika, prema izvještaju Phoronix-a, mogla je potencijalno poboljšati SPECint performanse za 9%. Važno je napomenuti da se ovo povećanje odnosi samo na mete koje su bile predmet optimizacije i ne odnosi se na stvarne aplikacije.
Kontroverze oko optimizacija specifičnih za određene testove događale su se i u prošlosti, uključujući kompanije poput Nvidije i AMD-a u vezi s performansama GPU-a i postavkama upravljačkog programa. SPEC, poništavajući rezultate SPEC CPU 2017, ima za cilj riješiti ovaj problem i istaknuti važnost sveobuhvatnih i pouzdanih testova performansi.
Cilj organizacije je stvoriti okruženje koje točno odražava stvarne performanse računalnih sustava. Poništavanjem rezultata postignutih korištenjem određene verzije Intel kompajlera, SPEC jača vrijednosti poštene, objektivne i pouzdane prakse testiranja performansi.
Konačno, odluka SPEC-a o poništavanju ovih rezultata testiranja ponovno potvrđuje važnost održavanja integriteta u evaluacijama performansi. Kroz ovu akciju, SPEC ima za cilj promovirati okruženje testiranja koje vjerno predstavlja stvarne performanse računalnih sustava, istovremeno slijedeći principe poštene i pouzdane procjene.
Česta pitanja o odluci SPEC-a za poništavanje rezultata testiranja
1. Koja organizacija je odgovorna za objavljivanje rezultata testiranja?
SPEC je organizacija odgovorna za objavljivanje rezultata testiranja.
2. Što je SPEC učinio u vezi s poštenim i točnim evaluacijama performansi?
SPEC je poduzeo odlučan korak kako bi osigurao poštene i točne evaluacije performansi poništavajući više od 2.600 rezultata testiranja postignutih od strane Intel CPU-ova koji su koristili određenu verziju Intel kompajlera.
3. Koji CPU-ovi su uglavnom pogođeni diskvalifikacijom?
Diskvalifikacija uglavnom pogađa uređaje opremljene 4. generacijom Xeon Sapphire Rapids CPU-ova, koji se često nalaze u skupocjenim poslužiteljima, podatkovnim centrima i radnim stanicama.
4. Koja je mjera korištena za procjenu performansi?
Mjera korištena za procjenu performansi bila je SPEC CPU 2017, standardizirano testiranje koje ocjenjuje performanse različitih opterećenja na različitim računalnim sustavima.
5. Koju ulogu igra optimizacija softvera u rezultatima testiranja performansi?
Optimizacija softvera, uključujući korištenje kompajlera, može znatno utjecati na rezultate testiranja zajedno s performansama hardvera.
6. Na koje specifične testove je usmjerena sporna optimizacijska tehnika?
Sporna optimizacijska tehnika fokusirana je isključivo na dva specifična testa unutar paketa SPEC CPU 2017: 523.xalancbmk_r i 623.xalancbmk_s.
7. Koliko je povećanje performansi mogla pružiti optimizacijska tehnika?
Optimizacijska tehnika potencijalno je mogla poboljšati SPECint performanse za 9%, no važno je napomenuti da se to povećanje odnosi samo na mete koje su bile predmet optimizacije i ne odnosi se na stvarne aplikacije.
8. Jesu li se slične kontroverze oko optimizacija događale u prošlosti?
Da, slične kontroverze oko optimizacija događale su se u prošlosti, uključujući kompanije poput Nvidije i AMD-a u vezi sa performansama GPU-a i postavkama upravljačkog programa.
9. Koja je SPEC-ova svrha ovom akcijom?
SPEC ima za cilj riješiti problem kontroverzi vezanih uz optimizaciju specifičnih za testove i istaknuti važnost sveobuhvatnih i pouzdanih praksi testiranja kako bi stvorio okruženje koje točno odražava stvarne performanse računalnih sustava.
10. Koje vrijednosti SPEC naglašava ovom odlukom?
SPEC naglašava vrijednosti poštenosti, objektivnosti i pouzdane prakse testiranja poništavanjem rezultata postignutih korištenjem određene verzije Intel kompajlera.
The source of the article is from the blog shakirabrasil.info