Intel steht in der Kritik, seine CPU-Benchmark-Ergebnisse aufgebläht zu haben. Die Anschuldigungen wurden von der Standard Performance Evaluation Corporation (SPEC) erhoben. Der Prozessorhersteller habe die Benchmark-Ergebnisse seiner Xeon-Prozessoren zwischen 2022 und 2023 bei dem SPEC CPU 2017-Test verfälscht.
Die Standard Performance Evaluation Corporation, besser bekannt als SPEC, hat über 2600 ihrer eigenen Ergebnisse zur Überprüfung von Xeon-Prozessoren in den Versionen 2022 und 2023 ihres beliebten industriellen Tests SPEC CPU 2017 für ungültig erklärt. Die neutrale Testorganisation hat festgestellt, dass das Unternehmen Compiler speziell für den Benchmark optimiert hatte, um einen unfairen Vorteil zu erlangen.
Nach einer Untersuchung stellte SPEC fest, dass Intel Compiler verwendet hatte, die, Zitat, “eine Kompilierung durchführen, die die Leistung der Benchmarks 523.xalancbmk_r / 623.xalancbmk_s speziell verbessert, indem sie a priori-Wissen über den SPEC-Code und das Datenset verwenden.”
Der Compiler ist wichtig, um Software für effiziente Ausführung auf dem Prozessor zu optimieren. Phoronix zufolge könnte der benutzerdefinierte Compiler die relevanten Ergebnisse des SPEC-Tests sogar um bis zu 9% aufgebläht haben.
Das bedeutet, dass die Ergebnisse nicht repräsentativ dafür waren, wie Endbenutzer die Leistung in der realen Welt erwarten können. Benchmarks dienen als wichtige Maßstäbe. Unternehmen nutzen jene Drittanbieter-Ergebnisse, um Entscheidungen über Investitionen zu treffen.