Metodika testování procesorů (na EHW)

[Mirek Jahoda]

Test DivX (převod VOB, tedy DVD-Video, na AVI) je i ve stávající metodice.

[Lukáš V.]

On myslel spíš naopak, z ostatních formátů udělat klasické DVD-Video. Ono je to ale celkem fuk, protože relativní rozdíly budou +/- stejné.

[Lazar]

Byl zminovan opacny proces (DivX/H.264->Mpeg-2). Odhadem tak 70-80% celkove utilizace CPU takovymto testem by bylo zpusobeno encodingem do Mpeg-2. Otazkou je nakolik by vysledky byly odlisne proti soucasnemu x264 testu. Asi ano pokud by se zvolil na multi-core nedostatecne skalujici encoder.

[Mirek Jahoda]

Platformou se definitivně staly Windows 7 Enterprise (90 dní trvanlivost by mi měla stačit) 64-bit. Jestli to nějak ovlivní návrhy na testy virtualizace, sem s nimi.

Zatím metodika vypadá nějak takto, možná z časových důvodů postupně uberu:
PCMark Vantage (64-bit) [body]
Cinebench R11.5 (64-bit) [body]
Cinebench R10 (64-bit) [body]
POV-Ray v3.7 (64-bit) [s] (menší je lepší)
Blender 2.47 (64-bit) [s] (menší je lepší)
3ds Max 2010 SP1 32-bit [s] (menší je lepší)
DivX 6.8.4 [s] (menší je lepší)
XviD 1.2.2 [s] (menší je lepší)
Windows Media Encoder 9 [s] (menší je lepší)
x264 benchmark HD 3.15 [fps] (vyšší je lepší)
TrueCrypt 6.3
WAV do MP3 LameEnc 3.97
WAV do MP3 LameEnc 4.0alpha
WAV do MP3 LameEnc MT
WAV do AAC
WAV do FLAC
Zoner Photo Studio 12 [s] (menší je lepší)
Paint.NET 3.2.6 [s] (menší je lepší)
WinRAR 3.92 64-bit [kB/s]
7-zip 4.65 64-bit [MIPS]
wPrime 2.0, 32M [s] (menší je lepší)
MaxxPI, 32M [s] (menší je lepší)
SuperPI 1.5 Mod XS [s]
Fritz Chess [knodes/s]
Everest 5.3 (Memory Read) [kB/s]
Everest 5.3 (Memory Write) [kB/s]
Everest 5.3 (Memory Copy) [kB/s]
Everest 5.3 (Memory Latency) [ns] (menší je lepší)
Everest 5.3 (CPU Queen) [kB/s]
Everest 5.3 (PhotoWorxx) [kB/s]
SiSoft Sandra (Whetstones, Dhrystones, Mem. Read, Write, Copy, Latency, AES, ...)
ArmA II, 720p [fps] - zatím mám problémy s během dema na sestavě se zmíněným OS, GTX 280 a Gulftownem
Call of Duty 4, 480p [fps]
Call of Duty 4, 16×10 [fps]
Crysis CPU, 480p [fps]
Enemy Territory: Quake Wars, 720p [fps]
Far Cry 2, 480p+
Far Cry 2, 720p
Left 4 Dead, 720p [fps]
Unreal Tournament 3, 720p [fps]
World in Conflict, 720p [fps]
X3: Terran Conflict, 720p [fps]
3DMark Vantage (CPU) [body]
3DMark06 (CPU) [body]
Spotřeba, teploty – samozřejmě s okomentovanou dávkou nepřesnosti napříč platformami

Přemýšlím ještě o SpecCPU nebo částech SpecViewPerf, rovněž asi zařadím dávku v novém RawTherapee 3.0 alpha.

Zkusil jsem Serious Sam SE demo a software rendering tam nebyl, ten byl snad s jistotou v Unreal Tournament (původním), ale přemýšlel jsem o tom, a asi bude stačit nechat 3DMark CPU testy a testy v nízkém rozlišení. Staré hry se software renderingem jedou stejně jen přes jediné jádro CPU a to asi není dnes už ono.

U 3ds max bych poprosil pOOlu nebo další o promptní radu ohledně nastavení (mám pěknou scénu i animaci pro rendering, jen nevím jak náročně nastavit výstup).

[Tralalák]

Čakal som WinZIP 14 (recognizes Intel-based computers with built-in AES encryption and uses the available hardware support to make encryption operations two to three times faster čo je reálny benchmark pričom z SiSoft Sandra AES má človek len výsledok v grafe.

Uvedomujem si, že nemôže mať každý všecko. Škoda.

[Mirek Jahoda]

WinZIP 14 stojí bohužel 30 EUR. U nás navíc není myslím příliš (i kvůli ceně) používán. Zkušební verze funguje tuším 45 dní. Nestačily by tedy testy AES obsažené v PCMark Vantage, Sandře a TrueCrypt?

[Mirek Jahoda]

Spíše si marně lámu hlavu nad tím, jestli by procesory nějak objektivně šlo porovnat třeba na H.264 1080p videu Samsung Oceanic Life s 16 ref. frames. Bude to sice vhodnější hlavně pro slabší procesory než právě testovaný Gulftown, ale mohlo by být fajn zhruba znát vhodnost těch kterých pro přehrávání (a měřit přitom klidně i spotřebu).

[Lazar]

Eliminovat C&Q/SpeedStep pro vzajemne snadne srovnani prubehu vytizeni CPU behem prehravani (spolecny graf). Problemem muze byt i to, ze dostupne nekomercni dekodery na slabsich dvojadrech maji problem bez ztraty snimku Samsung.Oceanic prehrat. CoreAVC, ktery uspeje i na slabsich CPU zas neni volne dostupny (CoreAVC 2.0 snad ani nevysel v trialu) a je tak stizena opakovatelnost testu ctenari.

[flanker]

výběr se mi líbí ! Vítám zajímavý multithreadový benchmark Maxxpi a také větší výběr videokodeků a 3dsMAx. Můžu se tak bokem dotázat, kolik cca hodin dá naměření pro jeden CPU?

[Mirek Jahoda]

To teprve uvidím, metodiku pořád tak nějak za běhu skládám. Když to bude víc jak šest hodin jen na měření, tak budu muset ale zestručňovat (aby zbyl čas taky na další věci s procesorem a stihlo se jich pár otestovat).

[pOOLa]

Muzu se optat proc je vybran 3ds max 32bit? A ne 64bit?

[Mirek Jahoda]

Jelikož mi nějak nevyšla snaha o stažení té trial verze v 64 bitech (možná jsem jen na webu Autodesku byl slepý, takže při objevení odkazu sem s ním – více bych ale ocenil rady k nastavení v těch kartách Render Options - momentálně jsem nechal default a zvýšil jen rozlišení na 640 × 480 a zatrhl podporu SSE, renderuji 81snímkovou animaci draka). Zkušenost s dalšími programy ale říká, že to bude spíše jen o 5 až 10 % pomalejší na všech CPU, poměry sil to nezmění (a o to jde jaksi v prvé řadě).

[flanker]

každopádně se už na čtvrtek těším a snad měření procesrů včele s Gulftownem ve zdraví přežiješ

[Mirek Jahoda]

Budu rád, když do čtvrtka stihnu proti Gulftownu naměřit jeden dva další Intely. Phenom 965 se mi musí nejdřív beztak vrátit a pak musím doufat, že Sedmičky budou přežívat změnu platforem stejně dobře jako Visty.

Btw, finálně jsem stihl otestovat toto (návrhy na změny až zase za pár měsíců v další metodice):

Kód: Vybrat vše

PCMark Vantage (64-bit) [body]
PCMark Vantage (Memories) [body]
PCMark Vantage (TV and Movies) [body]
PCMark Vantage (Gaming) [body]
PCMark Vantage (Music) [body]
PCMark Vantage (Communications) [body]
PCMark Vantage (Productivity) [body]
Cinebench R11.5 (64-bit) [body]
Cinebench R10 (64-bit) [body]
POV-Ray v3.7 (64-bit) [s] (menší je lepší)
Blender 2.47 (64-bit) [s]  (menší je lepší)
3ds Max Design 2010 SP1 32-bit [s] (menší je lepší)
DivX 6.8.4 [s] (menší je lepší)
XviD 1.2.2 [s] (menší je lepší)
Windows Media Encoder 9 [s] (menší je lepší)
x264 benchmark HD 3.15 [fps] (vyšší je lepší)
TrueCrypt 6.3 – AES [MB/s]
TrueCrypt 6.3 – Serpent [MB/s]
TrueCrypt 6.3 – Twofish [MB/s]
TrueCrypt 6.3 – AES-Twofish [MB/s]
TrueCrypt 6.3 – AES-Twofish-Serpent [MB/s]
TrueCrypt 6.3 – Serpent-AES [MB/s]
TrueCrypt 6.3 – Serpent-Twofish-AES [MB/s]
TrueCrypt 6.3 – Twofish-AES [MB/s]
LameEnc 3.97 WAV do MP3 Play/CPU Ratio (vyšší je lepší)
LameEnc 4.0a WAV do MP3 Play/CPU Ratio (vyšší je lepší)
Nero AAC Codec 1.5.1 WAV do AAC [s] (menší je lepší)
FLAC 1.2.1b + Foobar 1.0 WAV do FLAC [s] (menší je lepší)
Zoner Photo Studio 12 - úpravy JPEG [s] (menší je lepší)
Zoner Photo Studio 12 - RAW -> JPEG [s] (menší je lepší)
RawTherapee 3.0a [s] (menší je lepší)
AutoStitch 2.2 [s] (menší je lepší)
Autopano Giga 2.0.6 [s] (menší je lepší)
Paint.NET 3.5.4 [s] (menší je lepší)
WinRAR 3.92 64-bit [kB/s]
7-zip 4.65 64-bit [MIPS]
WinZIP 14 + AES [s] (menší je lepší)
wPrime 2.02, 32M [s] (menší je lepší)
Super PI 1M [s] (menší je lepší)
MaxxPI2 1.5 16M [kB/s]
Fritz Chess [knodes/s]
Everest 5.3 (Memory Read) [kB/s]
Everest 5.3 (Memory Write) [kB/s]
Everest 5.3 (Memory Copy) [kB/s]
Everest 5.3 (Memory Latency) [ns] (menší je lepší)
Everest 5.3 (CPU Queen) [kB/s]
Everest 5.3 (PhotoWorxx) [kB/s]
Everest 5.3 (Zlib) [kB/s]
Everest 5.3 (Julia) [kB/s]
Everest 5.3 (Mandel) [kB/s]
Everest 5.3 (SinJulia) [kB/s]
SiSoft Sandra 2010c Dhrystone ALU [GIPS]
SiSoft Sandra 2010c Whetstone FPU [GFLOPS]
SiSoft Sandra 2010c Multimedia [MPixel/s]
SiSoft Sandra 2010c Inter-Core Bandwith [MB/s]
SiSoft Sandra 2010c Inter-Core Latency [ns] (menší je lepší)
SiSoft Sandra 2010c AES256 [MB/s]
SiSoft Sandra 2010c SHA256 [MB/s]
SiSoft Sandra 2010c .NET Dhrystone [GIPS]
SiSoft Sandra 2010c .NET Whetstone [GFLOPS]
SiSoft Sandra 2010c .NET Multimedia [MPixel/s]
SiSoft Sandra 2010c Mem. Bandwith [GB/s]
SiSoft Sandra 2010c Memory Latency [ns] (menší je lepší)
SiSoft Sandra 2010c Cache/Memory Bandwith [GB/s]
Linpack Java Opera 10.5 [MFLOPS]
SunSpider 0.9 Opera 10.5 [ms]
SunSpider Firefox 3.6 [ms]
Peacekeeper Opera 10.5 [body]
Peacekeeper Firefox 3.6 [body]
GUIMark HTML Opera 10.5 [fps]
GUIMark HTML Firefox 3.6 [fps]
GUIMark Flash (Flex 3) Opera 10.5 [fps]
GUIMarkFlash (Flex 3)  Firefox 3.6 [fps]
GUIMark Java 5 Swing Opera 10.5 [fps]
GUIMark Java 5 Swing Firefox 3.6 [fps]
Call of Duty 4, 480p [fps]
Call of Duty 4, 16×10 [fps]
Crysis, CPU, 8×6 [fps]
Enemy Territory: Quake Wars, 720p [fps]
Far Cry 2, DX9, low, 480p
Far Cry 2, DX10, high, 720p
Left 4 Dead, 720p [fps]
Unreal Tournament 3, 720p [fps]
World in Conflict, 720p [fps]
X3: Terran Conflict, 10×7 [fps]
3DMark Vantage (CPU) [body]
3DMark06 (CPU) [body]
Spotřeba PC v idle [W]
Spotřeba PC v Prime95 25.9[W]
Teplota RealTemp/CoreTemp v idle [˚C]
Teplota RealTemp/CoreTemp v Prime95 25.9 [˚C]


[Tralalák]

Jeje WinZIP 14 + AES [s] (menší je lepší)

[flanker]

supr, to bude pěkné počteníčko !

[Mirek Jahoda]

Jeje WinZIP 14 + AES [s] (menší je lepší)

Nj, ale jen dekomprese zašifrovaného archivu.

[Lazar]

Probihaji procesorove testy s vyznamnym podilem IO operaci na Ramdisku, nebo na SSD/HDD?

[Tralalák]

Nj, ale jen dekomprese zašifrovaného archivu.

A ešte k tomu aj bez AES?

[Mirek Jahoda]

Lazar: Diskem je 160GB X25-M G2.

Tralalak: Mělo by to být zašifrované s AES, zda to testuji správně si za chvíli ověřím (jedu už kolečko na Bloomfieldu).

[pOOLa]

Muzu se optat proc je vybran 3ds max 32bit? A ne 64bit?

Aha, ja nevedel ze bude pouzita trail

Jinak posli me dystal tu scenu kterou renderujes. Ja ti k ni neco napisu. Na zacatku jsem rikal ze klidne vytvorim scenu vlastni aby respektovala dnesni naroky. Zatim vsak nebyl vznesen zadny pozadavek

Pokud vyuzivas nejake stavajici sceny co je v 3ds max, tak to asi nebude zadna slava na porovnavani jednotlivich procesoru

[Mirek Jahoda]

Ono to vyplynulo z té komunikace s Autodeskem. Minimálně do dubna nemá smysl nic jiného než trial. V testu Gulftownu (a asi i pár dalších navazujících) bude muset dostačovat (draka, jakmile si u testování v redakci vzpomenu, určitě pošlu nebo vystavím). Na scéně je dobře vidět rozdíl i mezi Bloomfieldem a Gulftownem, u renderingu nemám o neškálování strach.

[pOOLa]

Ono to vyplynulo z té komunikace s Autodeskem. Minimálně do dubna nemá smysl nic jiného než trial. V testu Gulftownu (a asi i pár dalších navazujících) bude muset dostačovat (draka, jakmile si u testování v redakci vzpomenu, určitě pošlu nebo vystavím). Na scéně je dobře vidět rozdíl i mezi Bloomfieldem a Gulftownem, u renderingu nemám o neškálování strach.

Jasny, jde o to jestli je render nastaven tak aby vyuzival procesory spravne. Jaky je bucke size? jaky je samplovani, apod. to jsou proste veci ktere se museji nastavit aby vse bylo adekvatni k dnesnim prosecorum...

[Mirek Jahoda]

Jak jsem řekl, nechal jsem implicitní nastavení renderingu kromě podpory SSE (zapnuto) a rozlišení (zvýšeno). Později (opět z práce/redakce) můžu poslat i screenshot.

[pOOLa]

Tak koukam ze test je venku, ale zadne nastaveni 3ds max neprobehlo... skoda. Opet tu mame test 3ds max, ktery nema skoro zadnou hodnotu. Slo by to jeste zmenit? Posli me to na e-mail at to muzu zapracovat.