2,600 بنچمارک رسمی اینتل به دلیل تقلب بی اعتبار شد

2,600 بنچمارک رسمی اینتل به دلیل تقلب بی اعتبار شد

سازنده بنچمارک مشهور SPEC CPU 2017 اعلام کرده؛ بیش از 2600 بنچمارک رسمی محصولات اینتل به‌خاطر تقلب نرم افزاری، بی اعتبار هستند. این طور که به‌نظر می‌رسد، اینتل از یک کامپایلر دستکاری‌شده استفاده کرده است که موجب تغییر نتایج می‌شود.

طبق اعلام این توسعه دهنده، از این به بعد، نتایج کسب شده با یک نسخه خاص از کامپایلر اینتل را به دلیل احتمال وجود تقلب، اعلام نمی‌کند. هم زمان نتایج بیش از 2,600 بنچمارک رسمی پردازنده‌های اینتل برچسب خورده‌اند و اعتبار آنها زیر سؤال رفته است. این نتایج عمدتاً مربوط به پردازنده‌های نسل چهارمی Xeon Sapphire Rapids است.

متهم شدن اینتل به تقلب در بنچمارک‌های رسمی

SPEC CPU 2017 بنچمارکی است که عمدتاً در سرورها، دیتاسنترها و سیستم‌های ورک استیشن استفاده می‌شود. این بنچمارک با شبیه سازی بار پردازشی سنگین در سناریوهای مختلف، امکان مقایسه کارایی پردازنده‌ها و نسل‌های مختلف را می‌دهد. امتیاز کسب شده در بنچمارک SPEC CPU 2017 ناشی از قدرت سخت افزاری و هم‌چنین نرم افزاری آن است.

2,600 بنچمارک رسمی اینتل به دلیل تقلب بی اعتبار شد

یکی از جنبه‌های نرم افزاری مهم و موثر بر امتیاز کسب شده در بنچمارک SPEC CPU 2017 دارد، کامپایلر است. کامپایلرهای (کامپایلر کدهای نوشته شده به زبان سطح بالا (نزدیک به زبان انسان) توسط برنامه نویسان را به زبان دودویی ماشین تبدیل می‌کند). اینتل کدهای نوشته شده را برای اجرای بهتر توسط CPU بهینه سازی می‌کنند.

حالا مشخص شده کامپایلر oneAPI DPC به گونه‌ای برنامه ریزی شده است تا به جای دستیابی به عملکرد بهتر در زمان اجرای پردازش‌های مشابه بنچمارک SPEC CPU 2017، دقیقاً در همان بنچمارک عملکرد بهتری به نمایش بگذارد.

بدیهی است بهینه سازی کامپایلرها برای اجرای بهینه‌تر کدها یک امر طبیعی است، با این حال زمانی که تنها برای بنچمارک ها بهینه سازی می‌شوند، شائبه تقلب هم به میان می‌آید. SPEC تاکید کرده باید نتایج بنچمارک ها بازتاب دهنده عملکرد در دنیای واقعی باشند، به همین دلیل، چنین بهینه سازی هایی تقلب به حساب می‌آیند.

رسانه Phoronix می‌گوید تأثیر بهینه سازی های مورد بحث در بنچمارک SPECint به طور کلی حدود 9 درصد است و در نسخه‌های 2022.0 تا 2023.0 کامپایلر Intel oneAPI پیدا می‌شود. به این ترتیب نتایج رسمی اعلام شده از سوی اینتل در سال 2022 میلادی قابل اطمینان نیست.

تقلب‌های نرم افزاری این چنینی، قبلا هم اتفاق افتاده بودند. در سال 2003 میلادی انویدیا متهم شد هنگام اجرای بنچمارک 3DMark 2003 بهینه سازی هایی را اعمال می‌کند که در حالت عادی خاموش باقی می‌مانند تا با این کار عملکرد بهتری را به نمایش بگذارد. نکته قابل توجه اینکه انویدیا خود AMD را متهم می‌کرد که برخی تنظیمات گرافیکی را پایین می‌آورد تا پفریم ریت بازی‌ها را بالا ببرد.