„Principled Technologies“ pareiškimas dėl „Intel“ ir AMD procesorių testavimo

Kilo didelis pasipiktinimas dėl palyginamųjų procesorių testų, kuriuos užsakė „Intel“ pas „Principled Technologies“. Iš pradžių buvo galvota, kad testuose didžiausia problema yra bloga atminties konfigūracija, bet vėliau pastebėta dar pora didelių keistų ir abejotinų sprendimų.

Labai keista, kad „Intel“ platformoms buvo montuojamas  „Noctua NH-U14S“ aušintuvas (~100 € vertės), o AMD „Ryzen“ procesoriui buvo paliktas gamyklinis „Wraith Prism“ aušintuvas. Paaiškinimas labai paprastas. „AMD sakė, kad tai geras aušintuvas, o kadangi nedarėme jokio spartinimo jį ir naudojome“. Kaip žinome, dėl geresnio aušintuvo „Ryzen 7 2700X“ gali išgauti didesnį dažnį.

Didžiausias „Principled Technologies“ testavimo trūkumas nebuvo greitai pastebėtas. Jie nusprendė, kad labai gera idėja išjungti pusę „Ryzen 7 2700X“ branduolių įgalinus „Gaming“ režimą „Ryzen Master“ programėlėje. Šis režimas yra skirtas „Threadripper“ procesoriams, o ne „Ryzen“. „Principled Technologies“ paaiškinimas buvo paprastas: „mes matėme geresnę spartą naudodami „Gaming“ režimą su „Threadripper“ procesoriais, todėl pagalvojome, kad siekiant nuoseklių rezultatų šis režimas turi būti naudojamas visose AMD platformose“.

Pilnas „Principled Technologies“  pareiškimas:

Today, we have seen several reports that suggested Principled Technologies (PT) published misleading information in our recent study comparing Intel’s gaming processors to AMD’s. We apologize for our delay in responding, but it’s been a busy day, and we wanted to be as thorough as possible in addressing inquiries concerning our testing. We’ll address specific questions and share more detail on our methodology in a moment, but we first must respond directly to attempts to call our integrity into question.

For almost 16 years, we have tested products for our clients because they trust our integrity. We have worked not just for any one company but for dozens of the leading technology firms, including rivals such as Intel and AMD, Microsoft and Google, Dell and HP, and many others.

Those clients trust PT in part because our integrity and our technical knowledge are beyond reproach. We work hard to be the best in both of those areas. We chose our company name to emphasize our commitments to both technology and our principles. (And, accusers saying we are only in this for the money obviously haven’t read our book, Limit Your Greed!)

Before going further, we thus must categorically deny any dishonesty in our work on this project for Intel or in any of our other projects.

Now that we’ve gotten that off our chests, let’s address the specific questions from recent videos as well as subsequent posts and tweets.

Project overview
An overview of the project will provide useful context.

Our overall goal – and Intel’s specific request for this project – was to create as level a playing field as possible for comparing the AMD and Intel processors as the majority of the gaming market would likely use them. To do that, we built and configured 16 systems for this comparative testing; we had two of each processor/motherboard configuration. We matched all components where possible, the only variances being the motherboards, CPUs, and CPU coolers. (Full details are in our interim report.)

In an effort to be very transparent, we published our interim summary report on Oct 8, 2018. We will continue to be transparent and responsive to any questions.

Responses to inquiries
We have received a number of inquiries regarding the testing methodology we used and the potential for bias in favor of Intel. We are providing additional information to be as transparent as possible and to help allay these concerns.

The following list summarizes many of the inquiries we have received and our responses. (We are continuing to work on addressing additional inquiries.)

  • Use of „Game Mode“ on the AMD Ryzen 7 2700X: Some inquiries we have received concern the use of the Ryzen utility and the number of active cores in the AMD-based systems. Based on AMD’s recommendations and our initial testing on the Threadripper processors, we found installing the AMD Ryzen Master utility and enabling the Game Mode increased most results. For consistency purposes, we did that for all AMD systems across Threadripper and Ryzen. We are now doing additional testing with the AMD systems in Creator Mode. We will update the report with the new results.
  • Cooler choice: We chose Noctua for the CPU coolers, due to having almost identical systems in the NH-U14S (Intel) and NH-U14S TR4-SP3 (AMD), which allowed us to maintain a comparable thermal profile. Because we were not performing any overclocking on any configuration, and because AMD has said it was a good cooler, we stuck with the stock AMD Ryzen 7 2700X Wraith Prism cooler.
  • Memory speeds: To have complete parity across all systems, and to allow the Intel Core i9 X-series and AMD Ryzen Threadripper to fully utilize memory bandwidth, we used four 16 GB DDR4 DIMMs on all configurations. We took the following memory configuration steps:

Intel
MSI Z390-A Pro motherboard (i9-9900K)

  • Load Optimized BIOS defaults
  • Enabled: Extreme Memory Profile (X.M.P.)
  • DRAM Frequency set to DDR4-2666
  • Asus Prime X299-Deluxe motherboard (i9-9900X ,i9-9980XE)
  • Load Optimized BIOS defaults
  • Enabled: Extreme Memory Profile (X.M.P.)
  • Disabled ASUS MultiCore Enhancement to use stock Intel multicore settings
  • DRAM Frequency set to DDR4-2666
  • Installed Intel Turbo Boost Maxdriver/utility

Asus Prime Z370-A (i7-8086K,i7-8700K)

  • Load Optimized BIOS defaults
  • Enabled: Extreme Memory Profile(X.M.P.)
  • Disabled ASUS MultiCore Enhancement to use stock Intel multicore settings
  • DRAM Frequency set to DDR4-2666
  • Power saving & Performance mode, set to Performance

AMD
Asus Prime X399-A (Threadripper 2990WX, Threadripper 2950X)

  • Load Optimized BIOS defaults
  • Verify that D.O.C.P is selected for AMD-equivalent memory settings to XMP
  • Performance Enhancer, set to Default
  • Disabled overclocking enhancement
  • DRAM frequency set to DDR4-2933
  • Set Core Performance Boost to Auto
  • Set performance bias to None
  • Installed Ryzen Master utility

Asus Prime X470 Pro (Ryzen 72700X)

  • Load Optimized BIOS defaults
  • Verify that D.O.C.P is selected for AMD-equivalent memory settings to XMP
  • DRAM frequency set to DDR4-2933
  • Set performance bias to None
  • Installed Ryzen Master utility

Resolution settings: One goal of this study was to test the CPUs and their graphics subsystems, not the GPUs, so we ran the tests at the most common gaming resolution (62.06%), 1920×1080, according to the Steam Hardware Survey: https://store.steampowered.com/hwsurvey/Steam-Hardware-Software- Survey-Welcome-to-Steam. This allowed us to minimize any GPU-based bottlenecks on the rendering pipeline.

Quality settings: We configured all games to use the „High“ or equivalent preset, versus „Ultra“ or other presets, also to emphasize CPU over GPU performance. In the case where there were only three presets, we chose the top preset.

Clarification of various installation questions: We installed all games using Steam or the Microsoft Store, and fully updated with the latest patches.

Motherboards: Re a Twitter comment from Cyber Cat @0xCats, „Hey @AMD Apparently according to @PrincipledTech @Intel is able to run Ryzen & Threadripper Chips on Z370 and Z390“: Thanks for catching that copy/paste error in our configuration info. We made an error there. The correct processor/motherboard/BIOS version specs for the AMD procs we tested are the following: Ryzen 7 2700X/ASUS PRIME X470-PRO/4024 and Threadripper 2950X & 2990WX/ASUS PRIME X399-A/0807. We apologize for the error and will post a revised version (with changes noted) soon.

Because our goal is always to do the right thing and get the answers right, we are currently doing additional testing. We will share that data and will certainly call out if something is significantly different from what we’ve already published.

We are confident in our test methodology and results. We welcome questions and we are doing our best to respond to questions from our interim report, but doing so takes time. We will add responses if other issues come up.

14 Komentarai

  1. Maariux parašė:

    Skiedalai kurie jau buvo sukonspektuoti ir suderinti su Intel prieš publikaciją, žinant, kad yla išlys iš maišo.*

    *- tai yra tik mano nuomonė ir ji nebūtinai atitinka su kitoje laiko erdvėje gyvenančiais individais.

  2. GreenZebra parašė:

    : „mes matėme geresnę spartą naudodami „Gaming“ režimą su „Threadripper“ procesoriais, todėl pagalvojome, kad siekiant nuoseklių rezultatų šis režimas turi būti naudojamas visose AMD platformose“.

    Nežinau kokie tem dundukai sėdi. Bet toks komentaras parodo kad jie už inteli, nejaugi sunku daugiau testų atlikti su visais variantais…
    Paršiukas irgi galvojo kol į keptuvę nepakliuvo

  3. SoTOP parašė:

    Būtų įdomu sužinoti, kokia yra grupė žmonių kurie pakankamai domisi kompais, kad būtų matę tuos testus, bet nesuprastų jog tokiais testais praktiškai niekada negalima pasitikėti. Spėčiau labai maža, bet youtuber’iams čia free content, tai dar ilgai sliekų ieškos.

  4. nemesis parašė:

    „Didžiausias „Principled Technologies“ testavimo trūkumas nebuvo greitai pastebėtas. Jie nusprendė, kad labai gera idėja išjungti pusę „Ryzen 7 2700X“ branduolių įgalinus „Gaming“ režimą „Ryzen Master“ programėlėje. Šis režimas yra skirtas „Threadripper“ procesoriams, o ne „Ryzen“. „Principled Technologies“ paaiškinimas buvo paprastas: „mes matėme geresnę spartą naudodami „Gaming“ režimą su „Threadripper“ procesoriais, todėl pagalvojome, kad siekiant nuoseklių rezultatų šis režimas turi būti naudojamas visose AMD platformose“.“

    Nežinau kaip vyksta ir veikia Gaming rėžimas praktiškai, bet man kilo keli klausimai:
    1. Kodėl programa vadinasi „Ryzen Master“ jei ji skirta „Threadripper“, o ne „Ryzen“ procesoriams?
    2. Kodėl „Ryzen Master“ kažką daro su „Ryzen“ procesoriais jei to daryti neturėtų?
    Nežinau ar čia vertimą aš ne taip suprantu, ar kažkoks liapsusiukas padarytas ir programos pusės?

    • SoTOP parašė:

      1. Ryzen master yra AMD sukurta programa skirta visiem Zen procesoriams valdyti OS lygmenyje. Tiesiog Gaming rėžimas yra naudojamas išskirtinai su TR procesoriais dėl to, kad jie turi „per daug“ branduolių dabartiniams žaidimams.
      2. Programa daro kas jai pasakyta daryti.

      • pasimetes parašė:

        Geresnis klausimas yra kodėl pas juos „gaming mode“ atjungia branduolius, kai mano ryzen master, tai nedaro.:D Musėm per sena versija mano… Aišku gali jie sakyti jog pirma testavo su TR, o tada su 2700x ir programa automatiškai numetė… nors čia didelis klaustukas.:D

    • Mindaugas Klumbis parašė:

      Threadripper ir yra Ryzen.

  5. killmer parašė:

    Haha, labai smagu stebėti kai tokie „tech. guru“ prisidirba, o po to bando apsimesti naiviais. Visiems besisukantiems versle ant kaktos nupaišyti dolerio simboliai, tik kai kurie bando vaidinti protingesnius, atseit taip nėra 😀

  6. Frantisekas parašė:

    Pamenu kaip pardavejai 2000m. triesdavo jog AMD sudega, poto ilgai reikejo ismusinet is smegenu, kai premijos sildo gali kanori prikurpt.

  7. Ambient parašė:

    Skaitau ir sunku patiket, kad intelis uzsiima tokiom apgailetinom nesamonem.. turbut AMD labai sitpri rakstis 🙂 AMD taip ir toliau!

    P.S. Mindaugai kiek tau intelis moka?

  8. Stipena parašė:

    Juokas juokais bet AMD taip pat naudojasi Principled Technologies paslaugomis.

Parašykite komentarą

Brukalų kiekiui sumažinti šis tinklalapis naudoja Akismet. Sužinokite, kaip apdorojami Jūsų komentarų duomenys.