Difference between revisions of "CPU-Benches"

Un article de lcgwiki.
Jump to: navigation, search
Ligne 18: Ligne 18:
 
la suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
 
la suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
 
Ajout des tests au CPPM (Edith Knoops)
 
Ajout des tests au CPPM (Edith Knoops)
 +
 +
SPEC HEP
 +
Des mesures avec la benchmark suite HEP SPEC sont également disponibles ( fond bleu des tableaux)
  
  
Ligne 70: Ligne 73:
 
|+
 
|+
 
|-
 
|-
! style="background:#efefef;" |  Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN KSI2K/core [1] !! FZK KSI2K/core [3]!! CERN KSI2K/core corrigé [2]
+
! style="background:#efefef;" |  Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN KSI2K/core [1] !! FZK KSI2K/core [3]!! CERN KSI2K/core corrigé [2] !! '''SPEC HEP 32bits [4]''' !!  '''SPEC HEP 64bits [4]'''
 
|-
 
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227
+
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
 
|-
 
|-
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837  
+
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
 
|-
 
|-
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590
+
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590 || bgcolor="#0066FF" | x  || bgcolor="#0066FF" | x
 
|-
 
|-
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430
+
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430 || bgcolor="#0066FF" | 70.71 || bgcolor="#0066FF" | x
 
|-
 
|-
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221
+
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
 
|}
 
|}
 
  
  
Ligne 90: Ligne 92:
  
 
[3] : Une exécution unique avec les optimisations FZK à titre indicatif.
 
[3] : Une exécution unique avec les optimisations FZK à titre indicatif.
 +
 +
[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC
 
----
 
----
  

Version du 08:21, 15 avril 2009

Transition vers les nouvelles unités specs HEP-SPEC06 -- --Chollet 14:47, 24 mars 2009 (CET)

- LCG Overview Board - Change of CPU accounting unit (I.Bird): The working group on benchmarking has now concluded, both on the new benchmark and on the transition process from SI2K. A new benchmark, based on the SPEC 2006 suite has been agreed upon. This uses a combination of the SPEC2006 FP and INT benchmarks, and has been shown to scale well with the experiments’ applications. This benchmark, labelled HEP-SPEC06, will be used in future to specify requirements and resources. The translation of kSI2K to the new unit is a simple factor of 4.
(HEP-SPEC06 = 4 * kSI2K)
Sites will be requested to benchmark their existing resources, and the results will be published on a web site. Future procurements should require the vendor to run the benchmark – provided as a simple script. Planning for changing the reporting in the accounting system is under way. The new unit will be used in the April RRB.

- Les minutes du MB du 27 janvier https://twiki.cern.ch/twiki/pub/LCG/MbMeetingsMinutes/LCG_Management_Board_2009_01_27.htm

- Le script dispo à https://twiki.cern.ch/twiki/bin/view/FIOgroup/TsiBenchHEPSPEC (Voir les attachements en bas de page tar.gz)

- La distribution de la suite SPEC CPU2006 version 1.1 est disponible (sous AFS au CC). Pour plus d'infos contacter F.Chollet ou Pierre Larrieu


SPEC CPU2000 Des tests de puissance des CPU ont été réalisés au LAPP (Eric Fede) et à Subatech (Jean-Michel Barbet) avec la suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/ Ajout des tests au CPPM (Edith Knoops)

SPEC HEP Des mesures avec la benchmark suite HEP SPEC sont également disponibles ( fond bleu des tableaux)


Tests réalisés par Jean-Michel :

Scientific-Linux V4.3 i386, gcc v3.4.5

Les autres conditions de test sont disponibles sur demande. A noter que les tests ont été réalisés sur des machines en configuration opérationnelles pour la grille (avec tous les daemons).

Machine CPU Nb cores Mémoire RAM CERN KSI2K/core [1] FZK KSI2K/core [3] CERN KSI2K/core corrigé [2]
Dell 5160 Woodcrest 3.00GHz 4 8Go 1409 1830 2113
IBM Clovertown 2.33GHz 8 16Go 979 1875 1468
Dell Optiplex Pentium4 3.20GHz 1 2Go 872 1128 1308

Dell PowerEdge 1955 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060626-06298.html

IBM 3550 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060623-06219.html

IBM 3350 Clovertown E5345 : http://www.spec.org/osg/cpu2000/results/res2006q4/cpu2000-20061113-07918.html


Tests réalisés au LAPP (eric) :

Scientific-Linux V3.08 i386, gcc v3.4.3

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

Machine CPU Nb cores Mémoire RAM CERN KSI2K/core [1] FZK KSI2K/core [3] CERN KSI2K/core corrigé [2]
HP BL 460c Woodcrest 2.66GHz 4 8Go 1367 1665 2050


Scientific-Linux V4.5 x86_64, gcc v3.4

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés. Un tuning "simple" au niveau du bios donne des disparités dans les résultats des bench qui depassent les 10 %.

Machine CPU Nb cores Mémoire RAM CERN KSI2K/core [1] FZK KSI2K/core [3] CERN KSI2K/core corrigé [2] SPEC HEP 32bits [4] SPEC HEP 64bits [4]
HP BL 460c Woodcrest 2.66GHz 4 8Go 1485 1592 2227 x x
HP BL 460c Clovertown 2.33GHz 8 16Go 1225 x 1837 x x
DELL 1950 Intel 5335 2GHz 8 8Go 1060 1139 1590 x x
HP BL 460c Harpertown 3GHz 8 16Go 1620 1715 2430 70.71 x
DELL M600 Harpertown 2.66GHz 8 32Go 1481 1588 2221 x x


[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC


Tests réalisés au CPPM (Edith) :

Scientific-Linux 4.6 x86_64, gcc v3.4.6

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

Machine CPU Nb cores Mémoire RAM CERN KSI2K/core FZK KSI2K/core CERN32 KSI2K/core CERN KSI2K/core corrigé
HP DL145 Opteron 250 2.4Ghz 2 4Go 1149 1278 972 1725
SUN Opteron 250 2.4Ghz 2 4Go 1173 1298 988 1760
HP DL145G2 Opteron 275 2.2 Ghz 4 6Go 981 1087 857 1471
DELL Opteron 2218 2.6 Ghz 4 8Go 1199 1073 1045 1798
DELL Xeon E5420 2.5Ghz 8 16 Go 1418 1528 x 2128