lcgwiki - Contributions [en]

Tier 3:IPNL

2019-05-02T10:41:02Z

Pugnere:

[[image:Logo_ipnl_mini.png]]
*Responsable scientifique : Colin BERNET
*Responsable technique : Denis Pugnère
*[http://www.ipnl.in2p3.fr Site web de l'IPNL]

A la demande des équipes CMS, ALICE, AGATA, ILC, et en prenant en compte également les besoins de calcul de toutes les équipes du laboratoire, le service informatique met en place un Tier 3 (centre de niveau 3) de la grille de calcul LCG.

*LCG Grid Operations Centre's entry for this site: [https://goc.egi.eu/portal/index.php?Page_Type=Site&id=331] ''(access granted by LCG user certficate)''
*Supported LHC VOs: Alice, CMS
*LCG Information System Monitor for this site: [http://goc.grid.sinica.edu.tw/gstat/IN2P3-IPNL/ IN2P3-IPNL]

Exploitation : Guillaume Baulieu, Yoan Giraud, Tibor Kurca, Martin Mommey, Denis Pugnère par fraction de leur temps.

'''Technologies et savoir-faire'''

Le T3 met a disposition des chercheurs plusieurs serveurs de type UI (User Interfaces) pour réaliser des calculs courts, pour mettre au point les traitements de données et lancer les jobs sur le T3. Les utilisateurs disposent d'un espace de stockage partagé ainsi que de tous les outils nécessaires à la gestion de leurs Jobs.

Cluster local Scientific-Linux 6, OpenPBS. Quattor (worker nodes, disk servers)

'''Stockage''' : DPM, xrootd, GPFS

'''Réseau''' : Coeur de réseau 10 Gbit/s, connexion en fibre optique directe au CC-IN2P3 à 10 Gbit/s et vers Renater.

'''Liens'''

* Description du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/spip.php?rubrique114&lang=fr
* Statistiques CPU du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/t3-stat/t3-stat.png
* ALICE (site name : IPNL) : http://alimonitor.cern.ch/map.jsp
* CMS (site name : T3_FR_IPNL) : http://dashb-ssb.cern.ch/dashboard/request.py/siteviewhome

WLCG Data transfers

2017-03-17T14:29:42Z

Pugnere:

Mars 2016
Petit Tour des Dashboards de monitoring des transferts de données :
__TOC__

==Outils communs de monitoring des transferts de données==
PRELIMINAIRE
=== Dashboard WLCG ===
'''ALICE, ATLAS, CMS, LHCb - Transferts FTS & XRootD Dashboard''' : http://dashb-wlcg-transfers.cern.ch/ui 
Voir [http://lcg.in2p3.fr/wiki/index.php?title=Dashb-wlcg-transfers certains extraits du Dashboard WLCG]

* Attention à la complexité => risque de devoir patienter ou/et de se perdre.
* Mieux vaut se limiter aux statistiques sur 4 ou 24h
* Attention : les noms de site différent selon la VO
** A noter un pb avec les filtres vo=alice country=(FRANCE) => uniquement Subatech
** Difficulté pour visualiser les trafics multi-vos au niveau d'un site (ne pas hésiter à ajouter le petit nom du site alice le cas échéant) :
*** http://dashb-wlcg-transfers.cern.ch/ui/#dst.site=(IN2P3-LPSC)
*** http://dashb-wlcg-transfers.cern.ch/ui/#dst.site=(Grenoble)&vo=(alice)
*** http://dashb-wlcg-transfers.cern.ch/ui/#dst.site=(IN2P3-LPSC,grenoble)
*** http://dashb-wlcg-transfers.cern.ch/ui/#dst.site=(IN2P3-CC,CCIN2P3)
* Toutes les options ne sont pas actives dans toutes les conditions.
** Par ex., il n'est pas possible de différencier les "Access types" :remote/local ou "Transfer Modes" : Reading/Copy dans le cas de transfers FTS et dans le cas du trafic ALICE ==> une étiquette "TOTAL" apparait au niveau de la légende
* Trafics XRootD ALICE : les vues WLCG et alimonitor semblent cohérentes, xrootd natif ET xrootd/DPM sont monitorés
**http://dashb-wlcg-transfers.cern.ch/ui/#date.interval=1440&dst.site=(GRIF_IRFU)&grouping.dst=(site)&technology=(xrootd)&vo=(alice)
* Limitations Monitoring XRootD ATLAS/CMS : monitoring partiel du trafic local ==> pb de configuration du monitoring XRootD ATLAS / CMS dans certains sites (cf. paragraphe 4.)
* Faire attention à l'interprétation : dst vs src, client vs srv, generated by applications at vs seen by SE qui ne sont pas assimilables DATA IN et DATA OUT
* Affichage "n/a" : le mapping entre serveurs XRootD et clients d'une part et sites de grille qui est effectué au niveau du dashboard a sans doute des soucis d'autant que le cas des sites FR est particulier (lié au domaine in2p3.fr). Cas IN2P3 failover à voir également. cf. paragraphe 5.

=== Dashboard FTS ===
'''ATLAS, CMS, LHCb - uniquement transferts FTS''' : http://dashb-fts-transfers.cern.ch/ui 
[http://lcg.in2p3.fr/wiki/index.php?title=Dashb-fts-transfers Extraits (FC) du Dashboard FTS]
* Possibilité de spécifier un intervalle de dates plus important, intérêt peut être pour le monitoring d’un site multi-VO sinon préférer l’outil spécifique à la VO par ex. monitoring rucio dans le cas ATLAS http://dashb-atlas-ddm.cern.ch/ddm2/
* Il y a + de détails : efficacité, erreurs… qu'avec le dashboard général de WLCG 

=== Dashboard XRooTD ===
''''ATLAS, CMS - uniquement trafics XRootD '''': http://dashb-wdt-xrootd.cern.ch/ui
* Trafic atlas sur les 4 dernières heures : http://dashb-wdt-xrootd.cern.ch/ui/#vo=(atlas)
* Trafic atlas sur les 4 dernières heures dont GRIF a été la source : http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=dst&src.site=(GRIF)&vo=(atlas) '''=> destination n/a !!!'''
* Trafic cms sur les 4 dernières heures : http://dashb-wdt-xrootd.cern.ch/ui/#vo=(cms)
* http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=access_type&src.site=(LAPP)
* http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=src&src.site=(GRIF)&vo=(cms) by source
* http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=src&src.site=(GRIF)&vo=(atlas) by source
* http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=access_type&src.site=(GRIF-LPNHE)&vo=(atlas)
* http://dashb-wdt-xrootd.cern.ch/ui/#p.grouping=transfer_mode&src.site=(GRIF-LPNHE)&vo=(atlas)
* Understand Site Access patterns :
** qui accède au LPNHE en lecture pour atlas ? : http://dashb-wdt-xrootd.cern.ch/ui/#srv.site=(GRIF-LPNHE)&tab=access_pattern&vo=(atlas)

== Monitoring XRootD ATLAS / CMS (configuration du) ==
Dans certains sites FR, il n'y a clairement pas de monitoring des trafics XrootD ATLAS / CMS

ATLAS : les trafics fts & XRootd, en accès local & remote sont correctement monitorés au LPSC, CPPM, LAPP mais ce n'est pas le cas partout :
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&dst.site=(IN2P3-LPSC)&p.grouping=technology&vo=(atlas)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&p.grouping=access_type&src.site=(IN2P3-LPSC)&technology=(xrootd)&vo=(atlas)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&dst.site=(IN2P3-CC)&p.grouping=technology&vo=(atlas)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&src.site=(IN2P3-LPC)&p.grouping=technology&vo=(atlas)

CMS : les trafics fts & XRootd, en accès local & remote sont correctement monitorés au GRIF (IRFU, LLR) et à l'IPHC :
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&dst.site=(GRIF)&p.grouping=technology&vo=(cms)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&src.site=(LLR)&p.grouping=access_type&technology=(xrootd)&vo=(cms)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&dst.site=(IPHC)&p.grouping=access_type&technology=(xrootd)&vo=(cms)
* http://dashb-wlcg-transfers.cern.ch/ui/#access_type=(0,1)&dst.site=(_FR_)&grouping.dst=(site)&p.grouping=dst&technology=(xrootd)&vo=(cms)

Il y avait 2 petites erreurs (aujourd'hui corrigées) dans les valeurs par défaut proposées par Quattor : 
# au niveau du numéro de port (9330) du collecteur EU atlas-fax-eu-collector.cern.ch:9330 (pour ATLAS) 
# au niveau du host EU: CMS-AAA-EU-COLLECTOR.cern.ch:9330 (pour CMS) 

Liens vers les pages qui font foi :
*https://svnweb.cern.ch/trac/lcgdm/wiki/Dpm/Xroot/ManualSetup#VOcentralmonitoring
*https://twiki.cern.ch/twiki/bin/view/AtlasComputing/FAXposixStorageNew

Il reste à vérifier/modifier la configuration du monitoring XRootD DPM/dCache au CC pour la remontée des infos ATLAS et CMS dans les quelques sites concernés.

== XRootD Monitoring : Site resolution in France ==
'''Affichage "n/a"''' 
* n/a is an indication that the topology resolution (aka the mapping between xrootd servers and clients to GRID site names) encountered problems. The topology resolution is done at the dashboard level, and France required some special configuration too, so let us go through and check if there is some mapping not properly specified or missing.
*Par ex. Trafic XRootD ATLAS vu au niveau du SE du LAPP au cours des 4 dernières heures :
** http://dashb-wlcg-transfers.cern.ch/ui/#grouping.dst=(site)&p.grouping=dst&src.site=(LAPP)&technology=(xrootd)&vo=(atlas)
** http://dashb-wdt-xrootd.cern.ch/ui/#access_type=()&srv.site=(IN2P3-LAPP)&tab=access_pattern&vo=(atlas)
*idem pour CMS et le LLR :
** http://dashb-wlcg-transfers.cern.ch/ui/#grouping.dst=(site)&p.grouping=dst&src.site=(LLR)&technology=(xrootd)&vo=(cms)
** http://dashb-wdt-xrootd.cern.ch/ui/#access_type=()&srv.site=(LLR)&tab=access_pattern&vo=(cms)

==== TABLE A VERIFIER-CORRIGER ====

* Ticket GGUS : https://ggus.eu/index.php?mode=ticket_info&ticket_id=121143 ; Contact : Luca Magnoni (CERN)
''For the xrootd dashboard the mapping is done with a static lookup of the client domain to a known list of grid sites (e.g."client_domain":"lal.in2p3.fr" is mapped to GRIF). If the mapping fails, the statistics is reported to the n/a category, as a fallback. For France in particular, if a client log arrives with the "in2p3" domain without a known sub-domain, it goes into a "IN2P3failover" category.

VERSION CORRIGEE
{
"ATLAS": {
"in2p3.fr": {
"host_dict": {
"lpn": {
"VOname": "GRIF-LPNHE",
"SiteName": "GRIF",
"Country": "France"
},
"lal": {
"VOname": "GRIF-LAL",
"SiteName": "GRIF",
"Country": "France"
},
"cc": {
"VOname": "IN2P3-CC",
"SiteName": "IN2P3-CC",
"Country": "France"
},
"mar": {
"VOname": "IN2P3-CPPM",
"SiteName": "IN2P3-CPPM",
"Country": "France"
},
"lapp": {
"VOname": "IN2P3-LAPP",
"SiteName": "IN2P3-LAPP",
"Country": "France"
},
"clr": {
"VOname": "IN2P3-LPC",
"SiteName": "IN2P3-LPC",
"Country": "France"
},
"lpsc": {
"VOname": "IN2P3-LPSC",
"SiteName": "IN2P3-LPSC",
"Country": "France"
}
},
"SiteName": "IN2P3",
"VOname": "IN2P3failover",
"Country": "France"
}
}
}

{
"CMS": {
"in2p3.fr": {
"host_dict": {
"lpn": {
"VOname": "T2_FR_GRIF_IRFU",
"SiteName": "GRIF",
"Country": "France"
},
"lal": {
"VOname": "T2_FR_GRIF_LLR",
"SiteName": "GRIF",
"Country": "France"
},
"cc": {
"VOname": "T1_FR_CCIN2P3",
"SiteName": "IN2P3-CC",
"Country": "France"
}
"pol": {
"VOname": "T2_FR_GRIF_LLR",
"SiteName": "GRIF",
"Country": "France"
},
"sbg": {
"VOname": "T2_FR_IPHC",
"SiteName": "IN2P3-IRES",
"Country": "France"
},
"llr": {
"VOname": "T2_FR_GRIF_LLR",
"SiteName": "GRIF",
"Country": "France"
},
"lyo": {
"VOname": "T3_FR_IPNL",
"SiteName": "IN2P3-IPNL",
"Country": "France"
}
},
"SiteName": "IN2P3",
"VOname": "IN2P3failover",
"Country": "France"
}
}

== Outils spécifiques aux VOs ==
* ALICE :
** '''Visualiser le traffic réseau des serveurs de stockage d'un site (tous clients confondus LAN/WAN) :'''
*** MonALISA : http://alimonitor.cern.ch/display : SE information -> xrootd -> Per SE details -> Traffic
*** Lien direct : http://alimonitor.cern.ch/display?page=xrootdse/by_se
*** "Select SE" pour sélectionner un site
** '''Visualiser le traffic réseau "Total" (LAN+WAN) d'un site :'''
*** MonALISA : http://alimonitor.cern.ch/display : Network Traffic -> Server total
*** Lien direct : http://alimonitor.cern.ch/display?page=xrdagg/total
*** Onglet "Series", sélectionner un site
** '''Visualiser le traffic réseau LAN ou WAN d'un site :'''
*** MonALISA : http://alimonitor.cern.ch/display : Network Traffic -> LAN/WAN traffic
*** Lien direct : http://alimonitor.cern.ch/display?page=xrdagg/lan_wan
*** Onglet "Series", sélectionner un site
*** Onglet "Options", LAN / WAN
** '''Quel sont les clients d'un SE (traffic réseau générés par les clients distants d'un SE) :'''
*** MonALISA : http://alimonitor.cern.ch/display : Network Traffic -> Clients per SE
*** Lien direct : http://alimonitor.cern.ch/display?page=xrdagg/site
*** Onglet "Series" : sélectionner les sites clients
*** Onglet "Options", "Select source site" : sélectionner le SE
** '''Quel est le traffic réseau généré par les jobs exécutés sur un site ? Où vont-ils lire les données ?'''
*** MonALISA : http://alimonitor.cern.ch/display : Network Traffic -> SEs per client
*** Lien direct : http://alimonitor.cern.ch/display?page=xrdagg/client
*** Onglet "Series" : sélectionner les SE
*** Onglet "Options", "Select client site" : sélectionner le site qui exécute les jobs.

* ATLAS :
** DDM Dashboard : http://dashb-atlas-ddm.cern.ch/ddm2
**
* CMS :
* LHCb :

== Liens ==
* WDT Project : http://wdtmon.web.cern.ch/wdtmon/ dahboard evolution on Hadoop/Spark
* Wiki : https://twiki.cern.ch/twiki/bin/view/LCG/WLCGDataTransferMonitoring
* Accès remote aux SE de GRIF (A.Sartirana): https://indico.in2p3.fr/event/11973/session/12/contribution/37
* WLCG Data Activities Dashboard L.Magnoni (CERN): https://indico.cern.ch/event/337567/session/6/contribution/21

Tier 3:IPNL

2016-09-02T09:24:52Z

Pugnere:

[[image:Logo_ipnl_mini.png]]
*Responsable scientifique : Stéphane Perriès
*Responsable technique : Denis Pugnère
*[http://www.ipnl.in2p3.fr Site web de l'IPNL]

A la demande des équipes CMS, ALICE, AGATA, ILC, et en prenant en compte également les besoins de calcul de toutes les équipes du laboratoire, le service informatique met en place un Tier 3 (centre de niveau 3) de la grille de calcul LCG.

*LCG Grid Operations Centre's entry for this site: [https://goc.egi.eu/portal/index.php?Page_Type=Site&id=331] ''(access granted by LCG user certficate)''
*Supported LHC VOs: Alice, CMS
*LCG Information System Monitor for this site: [http://goc.grid.sinica.edu.tw/gstat/IN2P3-IPNL/ IN2P3-IPNL]

Exploitation : Guillaume Baulieu, Yoan Giraud, Tibor Kurca, Martin Mommey, Denis Pugnère par fraction de leur temps.

'''Technologies et savoir-faire'''

Le T3 met a disposition des chercheurs plusieurs serveurs de type UI (User Interfaces) pour réaliser des calculs courts, pour mettre au point les traitements de données et lancer les jobs sur le T3. Les utilisateurs disposent d'un espace de stockage partagé ainsi que de tous les outils nécessaires à la gestion de leurs Jobs.

Cluster local Scientific-Linux 6, OpenPBS. Quattor (worker nodes, disk servers)

'''Stockage''' : DPM, xrootd, GPFS

'''Réseau''' : Coeur de réseau 10 Gbit/s, connexion en fibre optique directe au CC-IN2P3 à 10 Gbit/s et vers Renater.

'''Liens'''

* Description du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/spip.php?rubrique114&lang=fr
* Statistiques CPU du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/t3-stat/t3-stat.png
* ALICE (site name : IPNL) : http://alimonitor.cern.ch/map.jsp
* CMS (site name : T3_FR_IPNL) : http://dashb-ssb.cern.ch/dashboard/request.py/siteviewhome

File:Logo ipnl mini.png

2016-09-02T09:24:20Z

Pugnere:

File:Logo ipnl RVB.png

2016-09-02T09:12:51Z

Pugnere:

Tier 3:IPNL

2016-09-02T09:10:29Z

Pugnere:

[[image:logo-ipnl.gif]]
*Responsable scientifique : Stéphane Perriès
*Responsable technique : Denis Pugnère
*[http://www.ipnl.in2p3.fr Site web de l'IPNL]

A la demande des équipes CMS, ALICE, AGATA, ILC, et en prenant en compte également les besoins de calcul de toutes les équipes du laboratoire, le service informatique met en place un Tier 3 (centre de niveau 3) de la grille de calcul LCG.

*LCG Grid Operations Centre's entry for this site: [https://goc.egi.eu/portal/index.php?Page_Type=Site&id=331] ''(access granted by LCG user certficate)''
*Supported LHC VOs: Alice, CMS
*LCG Information System Monitor for this site: [http://goc.grid.sinica.edu.tw/gstat/IN2P3-IPNL/ IN2P3-IPNL]

Exploitation : Guillaume Baulieu, Yoan Giraud, Tibor Kurca, Martin Mommey, Denis Pugnère par fraction de leur temps.

'''Technologies et savoir-faire'''

Le T3 met a disposition des chercheurs plusieurs serveurs de type UI (User Interfaces) pour réaliser des calculs courts, pour mettre au point les traitements de données et lancer les jobs sur le T3. Les utilisateurs disposent d'un espace de stockage partagé ainsi que de tous les outils nécessaires à la gestion de leurs Jobs.

Cluster local Scientific-Linux 6, OpenPBS. Quattor (worker nodes, disk servers)

'''Stockage''' : DPM, xrootd, GPFS

'''Réseau''' : Coeur de réseau 10 Gbit/s, connexion en fibre optique directe au CC-IN2P3 à 10 Gbit/s et vers Renater.

'''Liens'''

* Description du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/spip.php?rubrique114&lang=fr
* Statistiques CPU du T3 IN2P3-IPNL : http://www.ipnl.in2p3.fr/t3-stat/t3-stat.png
* ALICE (site name : IPNL) : http://alimonitor.cern.ch/map.jsp
* CMS (site name : T3_FR_IPNL) : http://dashb-ssb.cern.ch/dashboard/request.py/siteviewhome

CPU-Benches

2012-03-02T10:00:29Z

Pugnere: /* Tests réalisés à l'IPNL (Denis) : */

'''Transition vers les nouvelles unités specs HEP-SPEC06'''
--MàJ --[[User:Chollet|Chollet]] 09:37, 11 septembre 2009 (CEST)--

=== Page HEPiX de référence ===
* https://hepix.caspur.it/benchmarks

=== Stratégie LCG ===
* LCG Overview Board - Change of CPU accounting unit (I.Bird):
''The working group on benchmarking has now concluded, both on the new benchmark and on the transition process from SI2K. A new benchmark, based on the SPEC 2006 suite has been agreed upon. This uses a combination of the SPEC2006 FP and INT benchmarks, and has been shown to scale well with the experiments’ applications. This benchmark, labelled HEP-SPEC06, will be used in future to specify requirements and resources. '''There is an agreement to use a simple conversion factor of 4 representing the benchmarks ratio HEP-SPEC06/kSI2K'''. Sites will be requested to benchmark their existing resources, and the results will be published on a web site. Future procurements should require the vendor to run the benchmark – provided as a simple script. Planning for changing the reporting in the accounting system is under way. The new unit will be used in the April RRB.''

* LCG Management Board : [https://twiki.cern.ch/twiki/pub/LCG/MbMeetingsMinutes/LCG_Management_Board_2009_01_27.htm Décision du MB du 27 janvier 2009] s'appuyant sur la [http://indico.cern.ch/materialDisplay.py?contribId=3&sessionId=0&materialId=0&confId=49388 proposition du groupe technique (G.Merino)]
* Pledges WLCG en HEP-SPEC06 : http://lcg.web.cern.ch/LCG/resources.htm

=== HEP-SPEC06 Benchmark ===
*Le script dispo à https://twiki.cern.ch/twiki/bin/view/FIOgroup/TsiBenchHEPSPEC (Voir les attachements en bas de page tar.gz)

* La distribution de la suite SPEC CPU2006 version 1.1 est disponible (sous AFS au CC).
Pour plus d'infos contacter F.Chollet ou Pierre Larrieu

=== Conversion des kSI2k ===
* Facteur de conversion HEP-SPEC06/kSI2k : 4
* 1 kSI2k = 4 HEP-SPEC06

=== Publication des capacités CPU ===
* Document de référence pour la publication dans le contexte actuel (Glue schema 1.3):
https://twiki.cern.ch/twiki/pub/LCG/WLCGCommonComputingReadinessChallenges/WLCG_GlueSchemaUsage-1.8.pdf 

Tentative de synthèse --[[User:Chollet|Chollet]] 09:46, 11 septembre 2009 (CEST)
** PhysicalCPUs = processeurs c.a.d chipset
Un subcluster de 113 machines bi processeurs quadricoeurs = 226 CPUs physiques
** LogicalCPUs = processeurs logiques ou vus de l'OS correspond au nombre de cœurs pour
autant que l'hyperthreading ne soit pas activé (incluant les machines offline ou arrêtées)
Un subcluster de 113 machines bi processeurs quadricoeurs = 904 CPUs logiques
Le nombre de cœurs par CPU physique (par chipset) étant de 4
A publier via l'attribut ''GlueSubClusterLogicalCPUs''
** A noter : Un SubCluster est a priori défini comme un ensemble homogène de workers mais
il est "admis que dans la pratique" cela ne soit pas le cas. Dans ce cas, les sites sont
sensés publier des spécifications moyennes pour certains attributs.

* Consignes pour les sites / Advices for sites (Juin 2009):
[http://indico.cern.ch/getFile.py/access?sessionId=2&resId=1&materialId=0&confId=63028 Présentation J.Gordon]

Tentative de synthèse --[[User:Chollet|Chollet]] 17:50, 10 septembre 2009 (CEST)
MàJ --[[User:Chollet|Chollet]] 17:01, 2 décembre 2009 (CET)
- Effectuer la mesure de la '''capacité CPU de la machine''' à partir du benchmark HEP-SPEC06
en utilisant le script mis à disposition ci-dessous. '''ATTENTION''' le bench fournit
un score par machine et la publication se fait par cœur
- Publier la '''capacité par cœur''' en HEP-SPEC06 via
''GlueHostProcessorOtherDescription: Benchmark=<value>-HEP-SPEC06''
Cet attribut est également utilisé pour publier le nombre moyen de cœurs par processeur
(ou chipset)
''GlueHostProcessorOtherDescription: Cores=<typical number of cores per CPU>, Benchmark=
<value>-HEP-SPEC06''
- Convertir la capacité CPU par coeur en SI2K en mulipliant par 250
- Mettre à jour l'attribut ''GlueHostBenchmarkSI00''

Les sites qui n'ont pas passé le benchmark HEP-SPEC06 doivent publier une valeur moyenne en SpecInt200
par LogicalCPU via l'attribut ''GlueHostBenchmarkSI00''

En cas de clusteur ou sous-clusteur hétérogène, GlueHostBenchmarkSI00 étant défini comme "Average SpecInt2000 rating per logical CPU" c.a.d par coeur pourvu que l'hyperthreading soit désactivé, vous êtes invités à publier une valeur moyenne pondérée. Voir le document
de référence page 5 (dernière ligne)

-----

=== Résultats des benchs effectués par les sites ===
SPEC CPU2000
Des tests de puissance des CPU ont été réalisés au LAPP (Eric Fede) et à Subatech (Jean-Michel Barbet) avecla suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
Ajout des tests au CPPM (Edith Knoops)

HEP-SPEC06
Des mesures avec le benchmark suite HEP-SPEC06 sont également disponibles ( fond bleu des tableaux)

==== Tests réalisés par Jean-Michel :====

A noter que les tests ont été réalisés sur des machines en configuration opérationnelles pour la grille (avec tous les daemons).

'''Scientific-Linux V4.3 i386, gcc v3.4.5'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell PE1955 || Woodcrest 5160 3.00GHz || 4 || 8Go || 1409 || 1830 || 2113 || bgcolor="#0066FF" | 39.48 || bgcolor="#0066FF" | -
|-
| IBM || Clovertown 2.33GHz || 8 || 16Go || 979 || 1875 || 1468 || bgcolor="#0066FF" | 53.12 || bgcolor="#0066FF" | -
|-
|}

'''Scientific Linux SL release 4.5 (Beryllium) x86_64, gcc v3.4.6'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 63.18 || bgcolor="#0066FF" | 57.63
|-
|}

'''Scientific Linux SL release 5.3 (Boron) x86_64 gcc version 4.1.2 20080704 (Red Hat 4.1.2-44)'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | [6] || bgcolor="#0066FF" | [6]
|-
| Dell R410 || Nehalem E5520 2.26GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 94.38 || bgcolor="#0066FF" | -
|-
| Dell R410 || Nehalem E5520 2.26GHz || 16 [7] || 16Go || - || - || - || bgcolor="#0066FF" | 114.36 [7] || bgcolor="#0066FF" | -
|-
|}

'''Fiches SPEC des machines :'''

Dell PowerEdge 1955 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060626-06298.html

Dell PowerEdge 1950 Clovertown E5420 2.33GHz :

Dell PowerEdge 1950 E5420 2.50GHz :

IBM 3550 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060623-06219.html

IBM 3350 Clovertown E5345 : http://www.spec.org/osg/cpu2000/results/res2006q4/cpu2000-20061113-07918.html

'''Notes :'''

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

[5] : A titre indicatif : résultats avec les binaires 64bits (HEP-SEPC06 n'est défini que pour des binaires 32bits)

[6] : Ce test est suspendu car je suis tombé sur le problème suivant :
https://www.jiscmail.ac.uk/cgi-bin/webadmin?A2=ind0909&L=LCG-ROLLOUT&P=R3371

[7] : En activant l'hyperthreading, les benches tournent en 16 exemplaires. A titre indicatif (une seule mesure).

----

==== Tests réalisés au LAPP (eric) : ====

Scientific-Linux V3.08 i386, gcc v3.4.3

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2]
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1367 || 1665 || 2050
|-
|}

Scientific-Linux V4.5 x86_64, gcc v3.4

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés. Un tuning "simple" au niveau du bios donne des disparités dans les résultats des bench qui depassent les 10 %.

On est toujours dans le cas où l'hyperthreading est désactivé : nb de cores logiques = nb de cores physiques = nombre de thread

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits [4] per machin''' !! '''HEP-SPEC06 64bits [4] per machin'''
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227 || bgcolor="#0066FF" | 36.58 || bgcolor="#0066FF" | 34.6
|-
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837 || bgcolor="#0066FF" | 56.04 || bgcolor="#0066FF" | 51.18
|-
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430 || bgcolor="#0066FF" | 70.83 || bgcolor="#0066FF" | 63.99
|-
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 2x220G6 || Nehalem L5520 2.27GHz || 8 || 16Go || x || x || x || bgcolor="#0066FF" | 95.35 || bgcolor="#0066FF" | x
|}

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

Scientific-Linux V5.5 x86_64,

Hyperthreading toujours actif, c'est la version 32 bits du bench qui doit être publié

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Nb de Threads !! '''HEP-SPEC06 32bits per machin''' !! '''HEP-SPEC06 64bits per machin'''
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 16 || bgcolor="#0066FF" | 128.04 || bgcolor="#0066FF" | 140.42
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 12 || bgcolor="#0066FF" | 122.31 || bgcolor="#0066FF" | 137.36
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 8 || bgcolor="#0066FF" | 103.60 || bgcolor="#0066FF" | 119.36
|-
|}

----

==== Tests réalisés au CPPM (Edith/Carlos) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Scientific-Linux 5.3 x86_64, gcc 4.1.2

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN32 SI2K/core || CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits (SL4)''' || '''HEP-SPEC06 32bits (SL5.3)''' || '''HEP-SPEC06 64bits (SL5.3)'''
|-
| HP DL145 || Opteron 250 2.4Ghz || 2 || 4Go || 1149 || 1278 || 972 || 1725 || 15.14 || bgcolor="#0066FF" | 16.16 ||
|-
| SUN || Opteron 250 2.4Ghz || 2 || 4Go || 1173 || 1298 || 988 || 1760 || || ||
|-
| HP DL145G2 || Opteron 275 2.2 Ghz || 4 ||6Go || 981 || 1087 || 857 || 1471 || 26.52 || bgcolor="#0066FF" | 27.41 ||
|-
| DELL || Opteron 2218 2.6 Ghz || 4 || 8Go || 1199 || 1073 ||1045 || 1798 || 32.24 || bgcolor="#0066FF" | 31.68 ||
|-
| DELL || Xeon E5420 2.5Ghz || 8 || 16 Go || 1418 ||1528 || x ||2128 || 63.12 || bgcolor="#0066FF" | 68.64 ||
|-
|DELL || Xeon X5550 2.67GHz || 8 || 24 Go || || || || || || bgcolor="#0066FF" | 116 ||
|-
|DELL || Xeon X5550 2.67GHz || 16 [1] || 24 Go || || || || || || bgcolor="#0066FF" | 145.82 ||
|-
|DELL R410 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 199.34
|-
|DELL C6100 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 231.40

|}

[1] 8 cores / 16 virtual cpu

[2] 12 cores / 24 virtual cpu

----

==== Tests réalisés à l'IPHC (Jérôme) : ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

Pour la réalisation de ces tests, seuls les services indispensables étaient activés. Pour chaque système, le résultat indiqué est une moyenne de quatre tests. Compte tenu de la variation des résultats, une seule décimale est affichée.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits per machin'''
|-
| DELL M600 || Xeon E5410 2.33Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 61.1
|-
| DELL M600 || Xeon L5420 2.50Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 65.4
|-
| DELL M610 || Xeon E5530 2.40Ghz || 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 100,6
|-
| DELL M610 [1] || Xeon E5530 2.40Ghz || 8 + 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 127,0
|-
| DELL M610 || Xeon L5640 2.26Ghz || 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 142,1
|-
| DELL M610 [1] || Xeon L5640 2.26Ghz || 12 + 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 171,6

|}

[1] Option "Virtual CPU" activée.

----

==== Tests réalisés au LPC (Jean-Claude) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Pour la réalisation de ces tests, seuls les services indispensables étaient activés.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [1] per machin'''
|-
| IBM Blade || Xeon E5345 2.33Ghz || 8 || 16Go || N/A || N/A || N/A || bgcolor="#0066FF" | 57.41
|}

[1] Moyenne des résultats obtenus sur trois tests.

Scientific-Linux 5.3 x86_64, gcc v4.1.2

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [2] per machin'''
|-
| IBM Blade || Xeon E5430 2.66Ghz || 8 || 12Go || N/A || N/A || N/A || bgcolor="#0066FF" | 70.64
|}

[2] Moyenne des résultats obtenus sur quatre tests.

----

==== Tests réalisés au LLR (pascale): ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

les machines ont ete installees comme les WN standard de la grille

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Virtual CPU enabled !! '''HEP-SPEC06 32bits per machin''' !! HEP-SPEC06 64bits [1] per machin'''
|-
| DELL R410 || E 5520 || 16[1] || 24Go || YES || 118.57 || 143.44
|-
| || E 5540 || 16[1] || 24Go || YES || 128.38 || 151.03
|-
| DELL R410 || E 5520 || 8 || 24Go || NO || 96.51 || 113.35
|-
| || E 5540 || 8 || 24Go || NO || 103.41|| 121.47
|-
| DELL R410 || E 5520 || 16[1] || 16Go || YES || Pas fait || Pas fait
|-
| || E 5540 || 16[1] || 16Go || YES || Pas fait || 148.64
|-
| DELL R410 || E 5520 || 8 || 16Go || NO || 94.97 || 109.42
|-
| || E 5540 || 8 || 16Go || NO || 102.41|| 117.5

|}

[1] Sur les serveurs il y a réellement 8 cores en tout. A cause de l'activation du "Virtual CPU" , le systeme d'exploitation pense qu'il y a 16 procs : la commande /proc/cpuinfo donne 16 coeurs. D'après les tests il est interessant d'activer le "Virtual CPU". Mais, combien de jobs faut-il activer en parallele? Et comment allons-nous les déclarer dans la grille?
Voici les résultats des tests avec 8, 10, 12, 14 et 16 jobs lancés en parallèle pour la
configuration suivante : R410, 16g ram, Virtual CPU activé.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Nb jobs !! HEP-SPEC06 64bits [1] per machin'''
|-
| 8 jobs || 115.66
|-
| 10 jobs || 130.66
|-
| 12 jobs || 139.29
|-
| 14 jobs || 144.38
|-
| 16 jobs || 148.64

|}

----
==== Tests réalisés à l'IRFU (Christine): ====
Scientific Linux SL release 5.3 (Boron)

2.6.18-164.6.1.el5 #1 SMP Tue Nov 3 23:02:51 EST 2009 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-44)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Virtual CPU enabled !! Nbre de thread !! Mémoire RAM !! HEP-SPEC06 64bits per machin [1]'''
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 16 || 24Go || 142.26
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 12 || 24Go || 136.69
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 8 || 24Go || 114.67
|-
| Bull R422 || E 5520 || 8 || NO || 8 || 24Go || 114.01
|-
| Bull R422 || E 5520 || 8 || NO || 12 || 24Go || 121.39
|-
| Fujitsu PRIMERGY RX200 || Intel(R) Xeon(R) CPU L5420 @ 2.50GHz || 8 || _ || 8 || 16Go || 71.26
|-
|}

[1] Moyenne des résultats obtenus sur deux tests

----
==== Tests réalisés à l'IPNL (Denis) : ====

Scientific Linux SL release 5.4 (Boron)

2.6.18-274.18.1.el5 #1 SMP Thu Feb 9 12:20:03 EST 2012 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-50)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | System !! Processor !! Frequency !! L2 Cache !! CPU nb !! Nb cores / CPU !! Virtual CPU enabled !! Thread nb !! RAM !! HEP-SPEC06 32bits per System !! HEP-SPEC06 64bits per System '''
|-
| Dell C6100 || E 5645 || 2.40 Ghz || 12 Mo || 2 CPU || 6 c || YES || 24 [1] || 48Go || bgcolor="#0066FF" | 181.13 || bgcolor="#0066FF" | 199.64
|-
|}

[1] Nous avons configuré 20 job slots pour 24 coeurs virtuels

=== Résultats des benchs GRIDPP (UK) ===
* http://www.gridpp.ac.uk/wiki/HEPSPEC06

CPU-Benches

2012-03-01T14:47:44Z

Pugnere: /* Tests réalisés à l'IPNL (Denis) : */

'''Transition vers les nouvelles unités specs HEP-SPEC06'''
--MàJ --[[User:Chollet|Chollet]] 09:37, 11 septembre 2009 (CEST)--

=== Page HEPiX de référence ===
* https://hepix.caspur.it/benchmarks

=== Stratégie LCG ===
* LCG Overview Board - Change of CPU accounting unit (I.Bird):
''The working group on benchmarking has now concluded, both on the new benchmark and on the transition process from SI2K. A new benchmark, based on the SPEC 2006 suite has been agreed upon. This uses a combination of the SPEC2006 FP and INT benchmarks, and has been shown to scale well with the experiments’ applications. This benchmark, labelled HEP-SPEC06, will be used in future to specify requirements and resources. '''There is an agreement to use a simple conversion factor of 4 representing the benchmarks ratio HEP-SPEC06/kSI2K'''. Sites will be requested to benchmark their existing resources, and the results will be published on a web site. Future procurements should require the vendor to run the benchmark – provided as a simple script. Planning for changing the reporting in the accounting system is under way. The new unit will be used in the April RRB.''

* LCG Management Board : [https://twiki.cern.ch/twiki/pub/LCG/MbMeetingsMinutes/LCG_Management_Board_2009_01_27.htm Décision du MB du 27 janvier 2009] s'appuyant sur la [http://indico.cern.ch/materialDisplay.py?contribId=3&sessionId=0&materialId=0&confId=49388 proposition du groupe technique (G.Merino)]
* Pledges WLCG en HEP-SPEC06 : http://lcg.web.cern.ch/LCG/resources.htm

=== HEP-SPEC06 Benchmark ===
*Le script dispo à https://twiki.cern.ch/twiki/bin/view/FIOgroup/TsiBenchHEPSPEC (Voir les attachements en bas de page tar.gz)

* La distribution de la suite SPEC CPU2006 version 1.1 est disponible (sous AFS au CC).
Pour plus d'infos contacter F.Chollet ou Pierre Larrieu

=== Conversion des kSI2k ===
* Facteur de conversion HEP-SPEC06/kSI2k : 4
* 1 kSI2k = 4 HEP-SPEC06

=== Publication des capacités CPU ===
* Document de référence pour la publication dans le contexte actuel (Glue schema 1.3):
https://twiki.cern.ch/twiki/pub/LCG/WLCGCommonComputingReadinessChallenges/WLCG_GlueSchemaUsage-1.8.pdf 

Tentative de synthèse --[[User:Chollet|Chollet]] 09:46, 11 septembre 2009 (CEST)
** PhysicalCPUs = processeurs c.a.d chipset
Un subcluster de 113 machines bi processeurs quadricoeurs = 226 CPUs physiques
** LogicalCPUs = processeurs logiques ou vus de l'OS correspond au nombre de cœurs pour
autant que l'hyperthreading ne soit pas activé (incluant les machines offline ou arrêtées)
Un subcluster de 113 machines bi processeurs quadricoeurs = 904 CPUs logiques
Le nombre de cœurs par CPU physique (par chipset) étant de 4
A publier via l'attribut ''GlueSubClusterLogicalCPUs''
** A noter : Un SubCluster est a priori défini comme un ensemble homogène de workers mais
il est "admis que dans la pratique" cela ne soit pas le cas. Dans ce cas, les sites sont
sensés publier des spécifications moyennes pour certains attributs.

* Consignes pour les sites / Advices for sites (Juin 2009):
[http://indico.cern.ch/getFile.py/access?sessionId=2&resId=1&materialId=0&confId=63028 Présentation J.Gordon]

Tentative de synthèse --[[User:Chollet|Chollet]] 17:50, 10 septembre 2009 (CEST)
MàJ --[[User:Chollet|Chollet]] 17:01, 2 décembre 2009 (CET)
- Effectuer la mesure de la '''capacité CPU de la machine''' à partir du benchmark HEP-SPEC06
en utilisant le script mis à disposition ci-dessous. '''ATTENTION''' le bench fournit
un score par machine et la publication se fait par cœur
- Publier la '''capacité par cœur''' en HEP-SPEC06 via
''GlueHostProcessorOtherDescription: Benchmark=<value>-HEP-SPEC06''
Cet attribut est également utilisé pour publier le nombre moyen de cœurs par processeur
(ou chipset)
''GlueHostProcessorOtherDescription: Cores=<typical number of cores per CPU>, Benchmark=
<value>-HEP-SPEC06''
- Convertir la capacité CPU par coeur en SI2K en mulipliant par 250
- Mettre à jour l'attribut ''GlueHostBenchmarkSI00''

Les sites qui n'ont pas passé le benchmark HEP-SPEC06 doivent publier une valeur moyenne en SpecInt200
par LogicalCPU via l'attribut ''GlueHostBenchmarkSI00''

En cas de clusteur ou sous-clusteur hétérogène, GlueHostBenchmarkSI00 étant défini comme "Average SpecInt2000 rating per logical CPU" c.a.d par coeur pourvu que l'hyperthreading soit désactivé, vous êtes invités à publier une valeur moyenne pondérée. Voir le document
de référence page 5 (dernière ligne)

-----

=== Résultats des benchs effectués par les sites ===
SPEC CPU2000
Des tests de puissance des CPU ont été réalisés au LAPP (Eric Fede) et à Subatech (Jean-Michel Barbet) avecla suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
Ajout des tests au CPPM (Edith Knoops)

HEP-SPEC06
Des mesures avec le benchmark suite HEP-SPEC06 sont également disponibles ( fond bleu des tableaux)

==== Tests réalisés par Jean-Michel :====

A noter que les tests ont été réalisés sur des machines en configuration opérationnelles pour la grille (avec tous les daemons).

'''Scientific-Linux V4.3 i386, gcc v3.4.5'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell PE1955 || Woodcrest 5160 3.00GHz || 4 || 8Go || 1409 || 1830 || 2113 || bgcolor="#0066FF" | 39.48 || bgcolor="#0066FF" | -
|-
| IBM || Clovertown 2.33GHz || 8 || 16Go || 979 || 1875 || 1468 || bgcolor="#0066FF" | 53.12 || bgcolor="#0066FF" | -
|-
|}

'''Scientific Linux SL release 4.5 (Beryllium) x86_64, gcc v3.4.6'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 63.18 || bgcolor="#0066FF" | 57.63
|-
|}

'''Scientific Linux SL release 5.3 (Boron) x86_64 gcc version 4.1.2 20080704 (Red Hat 4.1.2-44)'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | [6] || bgcolor="#0066FF" | [6]
|-
| Dell R410 || Nehalem E5520 2.26GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 94.38 || bgcolor="#0066FF" | -
|-
| Dell R410 || Nehalem E5520 2.26GHz || 16 [7] || 16Go || - || - || - || bgcolor="#0066FF" | 114.36 [7] || bgcolor="#0066FF" | -
|-
|}

'''Fiches SPEC des machines :'''

Dell PowerEdge 1955 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060626-06298.html

Dell PowerEdge 1950 Clovertown E5420 2.33GHz :

Dell PowerEdge 1950 E5420 2.50GHz :

IBM 3550 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060623-06219.html

IBM 3350 Clovertown E5345 : http://www.spec.org/osg/cpu2000/results/res2006q4/cpu2000-20061113-07918.html

'''Notes :'''

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

[5] : A titre indicatif : résultats avec les binaires 64bits (HEP-SEPC06 n'est défini que pour des binaires 32bits)

[6] : Ce test est suspendu car je suis tombé sur le problème suivant :
https://www.jiscmail.ac.uk/cgi-bin/webadmin?A2=ind0909&L=LCG-ROLLOUT&P=R3371

[7] : En activant l'hyperthreading, les benches tournent en 16 exemplaires. A titre indicatif (une seule mesure).

----

==== Tests réalisés au LAPP (eric) : ====

Scientific-Linux V3.08 i386, gcc v3.4.3

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2]
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1367 || 1665 || 2050
|-
|}

Scientific-Linux V4.5 x86_64, gcc v3.4

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés. Un tuning "simple" au niveau du bios donne des disparités dans les résultats des bench qui depassent les 10 %.

On est toujours dans le cas où l'hyperthreading est désactivé : nb de cores logiques = nb de cores physiques = nombre de thread

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits [4] per machin''' !! '''HEP-SPEC06 64bits [4] per machin'''
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227 || bgcolor="#0066FF" | 36.58 || bgcolor="#0066FF" | 34.6
|-
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837 || bgcolor="#0066FF" | 56.04 || bgcolor="#0066FF" | 51.18
|-
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430 || bgcolor="#0066FF" | 70.83 || bgcolor="#0066FF" | 63.99
|-
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 2x220G6 || Nehalem L5520 2.27GHz || 8 || 16Go || x || x || x || bgcolor="#0066FF" | 95.35 || bgcolor="#0066FF" | x
|}

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

Scientific-Linux V5.5 x86_64,

Hyperthreading toujours actif, c'est la version 32 bits du bench qui doit être publié

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Nb de Threads !! '''HEP-SPEC06 32bits per machin''' !! '''HEP-SPEC06 64bits per machin'''
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 16 || bgcolor="#0066FF" | 128.04 || bgcolor="#0066FF" | 140.42
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 12 || bgcolor="#0066FF" | 122.31 || bgcolor="#0066FF" | 137.36
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 8 || bgcolor="#0066FF" | 103.60 || bgcolor="#0066FF" | 119.36
|-
|}

----

==== Tests réalisés au CPPM (Edith/Carlos) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Scientific-Linux 5.3 x86_64, gcc 4.1.2

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN32 SI2K/core || CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits (SL4)''' || '''HEP-SPEC06 32bits (SL5.3)''' || '''HEP-SPEC06 64bits (SL5.3)'''
|-
| HP DL145 || Opteron 250 2.4Ghz || 2 || 4Go || 1149 || 1278 || 972 || 1725 || 15.14 || bgcolor="#0066FF" | 16.16 ||
|-
| SUN || Opteron 250 2.4Ghz || 2 || 4Go || 1173 || 1298 || 988 || 1760 || || ||
|-
| HP DL145G2 || Opteron 275 2.2 Ghz || 4 ||6Go || 981 || 1087 || 857 || 1471 || 26.52 || bgcolor="#0066FF" | 27.41 ||
|-
| DELL || Opteron 2218 2.6 Ghz || 4 || 8Go || 1199 || 1073 ||1045 || 1798 || 32.24 || bgcolor="#0066FF" | 31.68 ||
|-
| DELL || Xeon E5420 2.5Ghz || 8 || 16 Go || 1418 ||1528 || x ||2128 || 63.12 || bgcolor="#0066FF" | 68.64 ||
|-
|DELL || Xeon X5550 2.67GHz || 8 || 24 Go || || || || || || bgcolor="#0066FF" | 116 ||
|-
|DELL || Xeon X5550 2.67GHz || 16 [1] || 24 Go || || || || || || bgcolor="#0066FF" | 145.82 ||
|-
|DELL R410 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 199.34
|-
|DELL C6100 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 231.40

|}

[1] 8 cores / 16 virtual cpu

[2] 12 cores / 24 virtual cpu

----

==== Tests réalisés à l'IPHC (Jérôme) : ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

Pour la réalisation de ces tests, seuls les services indispensables étaient activés. Pour chaque système, le résultat indiqué est une moyenne de quatre tests. Compte tenu de la variation des résultats, une seule décimale est affichée.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits per machin'''
|-
| DELL M600 || Xeon E5410 2.33Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 61.1
|-
| DELL M600 || Xeon L5420 2.50Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 65.4
|-
| DELL M610 || Xeon E5530 2.40Ghz || 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 100,6
|-
| DELL M610 [1] || Xeon E5530 2.40Ghz || 8 + 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 127,0
|-
| DELL M610 || Xeon L5640 2.26Ghz || 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 142,1
|-
| DELL M610 [1] || Xeon L5640 2.26Ghz || 12 + 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 171,6

|}

[1] Option "Virtual CPU" activée.

----

==== Tests réalisés au LPC (Jean-Claude) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Pour la réalisation de ces tests, seuls les services indispensables étaient activés.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [1] per machin'''
|-
| IBM Blade || Xeon E5345 2.33Ghz || 8 || 16Go || N/A || N/A || N/A || bgcolor="#0066FF" | 57.41
|}

[1] Moyenne des résultats obtenus sur trois tests.

Scientific-Linux 5.3 x86_64, gcc v4.1.2

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [2] per machin'''
|-
| IBM Blade || Xeon E5430 2.66Ghz || 8 || 12Go || N/A || N/A || N/A || bgcolor="#0066FF" | 70.64
|}

[2] Moyenne des résultats obtenus sur quatre tests.

----

==== Tests réalisés au LLR (pascale): ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

les machines ont ete installees comme les WN standard de la grille

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Virtual CPU enabled !! '''HEP-SPEC06 32bits per machin''' !! HEP-SPEC06 64bits [1] per machin'''
|-
| DELL R410 || E 5520 || 16[1] || 24Go || YES || 118.57 || 143.44
|-
| || E 5540 || 16[1] || 24Go || YES || 128.38 || 151.03
|-
| DELL R410 || E 5520 || 8 || 24Go || NO || 96.51 || 113.35
|-
| || E 5540 || 8 || 24Go || NO || 103.41|| 121.47
|-
| DELL R410 || E 5520 || 16[1] || 16Go || YES || Pas fait || Pas fait
|-
| || E 5540 || 16[1] || 16Go || YES || Pas fait || 148.64
|-
| DELL R410 || E 5520 || 8 || 16Go || NO || 94.97 || 109.42
|-
| || E 5540 || 8 || 16Go || NO || 102.41|| 117.5

|}

[1] Sur les serveurs il y a réellement 8 cores en tout. A cause de l'activation du "Virtual CPU" , le systeme d'exploitation pense qu'il y a 16 procs : la commande /proc/cpuinfo donne 16 coeurs. D'après les tests il est interessant d'activer le "Virtual CPU". Mais, combien de jobs faut-il activer en parallele? Et comment allons-nous les déclarer dans la grille?
Voici les résultats des tests avec 8, 10, 12, 14 et 16 jobs lancés en parallèle pour la
configuration suivante : R410, 16g ram, Virtual CPU activé.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Nb jobs !! HEP-SPEC06 64bits [1] per machin'''
|-
| 8 jobs || 115.66
|-
| 10 jobs || 130.66
|-
| 12 jobs || 139.29
|-
| 14 jobs || 144.38
|-
| 16 jobs || 148.64

|}

----
==== Tests réalisés à l'IRFU (Christine): ====
Scientific Linux SL release 5.3 (Boron)

2.6.18-164.6.1.el5 #1 SMP Tue Nov 3 23:02:51 EST 2009 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-44)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Virtual CPU enabled !! Nbre de thread !! Mémoire RAM !! HEP-SPEC06 64bits per machin [1]'''
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 16 || 24Go || 142.26
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 12 || 24Go || 136.69
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 8 || 24Go || 114.67
|-
| Bull R422 || E 5520 || 8 || NO || 8 || 24Go || 114.01
|-
| Bull R422 || E 5520 || 8 || NO || 12 || 24Go || 121.39
|-
| Fujitsu PRIMERGY RX200 || Intel(R) Xeon(R) CPU L5420 @ 2.50GHz || 8 || _ || 8 || 16Go || 71.26
|-
|}

[1] Moyenne des résultats obtenus sur deux tests

----
==== Tests réalisés à l'IPNL (Denis) : ====

Scientific Linux SL release 5.4 (Boron)

2.6.18-274.18.1.el5 #1 SMP Thu Feb 9 12:20:03 EST 2012 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-50)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | System !! Processor !! Frequency !! L2 Cache !! CPU nb !! Nb cores / CPU !! Virtual CPU enabled !! Thread nb !! RAM !! HEP-SPEC06 32bits per System !! HEP-SPEC06 64bits per System '''
|-
| Dell C6100 || E 5645 || 2.40 Ghz || 12 Mo || 2 CPU || 6 c || YES || 24 [1] || 48Go || 181.13 || 199.64
|-
|}

[1] Nous avons configuré 20 job slots pour 24 coeurs virtuels

=== Résultats des benchs GRIDPP (UK) ===
* http://www.gridpp.ac.uk/wiki/HEPSPEC06

CPU-Benches

2012-02-24T15:42:37Z

Pugnere: /* Tests réalisés à l'IPNL (Denis) : */

'''Transition vers les nouvelles unités specs HEP-SPEC06'''
--MàJ --[[User:Chollet|Chollet]] 09:37, 11 septembre 2009 (CEST)--

=== Page HEPiX de référence ===
* https://hepix.caspur.it/benchmarks

=== Stratégie LCG ===
* LCG Overview Board - Change of CPU accounting unit (I.Bird):
''The working group on benchmarking has now concluded, both on the new benchmark and on the transition process from SI2K. A new benchmark, based on the SPEC 2006 suite has been agreed upon. This uses a combination of the SPEC2006 FP and INT benchmarks, and has been shown to scale well with the experiments’ applications. This benchmark, labelled HEP-SPEC06, will be used in future to specify requirements and resources. '''There is an agreement to use a simple conversion factor of 4 representing the benchmarks ratio HEP-SPEC06/kSI2K'''. Sites will be requested to benchmark their existing resources, and the results will be published on a web site. Future procurements should require the vendor to run the benchmark – provided as a simple script. Planning for changing the reporting in the accounting system is under way. The new unit will be used in the April RRB.''

* LCG Management Board : [https://twiki.cern.ch/twiki/pub/LCG/MbMeetingsMinutes/LCG_Management_Board_2009_01_27.htm Décision du MB du 27 janvier 2009] s'appuyant sur la [http://indico.cern.ch/materialDisplay.py?contribId=3&sessionId=0&materialId=0&confId=49388 proposition du groupe technique (G.Merino)]
* Pledges WLCG en HEP-SPEC06 : http://lcg.web.cern.ch/LCG/resources.htm

=== HEP-SPEC06 Benchmark ===
*Le script dispo à https://twiki.cern.ch/twiki/bin/view/FIOgroup/TsiBenchHEPSPEC (Voir les attachements en bas de page tar.gz)

* La distribution de la suite SPEC CPU2006 version 1.1 est disponible (sous AFS au CC).
Pour plus d'infos contacter F.Chollet ou Pierre Larrieu

=== Conversion des kSI2k ===
* Facteur de conversion HEP-SPEC06/kSI2k : 4
* 1 kSI2k = 4 HEP-SPEC06

=== Publication des capacités CPU ===
* Document de référence pour la publication dans le contexte actuel (Glue schema 1.3):
https://twiki.cern.ch/twiki/pub/LCG/WLCGCommonComputingReadinessChallenges/WLCG_GlueSchemaUsage-1.8.pdf 

Tentative de synthèse --[[User:Chollet|Chollet]] 09:46, 11 septembre 2009 (CEST)
** PhysicalCPUs = processeurs c.a.d chipset
Un subcluster de 113 machines bi processeurs quadricoeurs = 226 CPUs physiques
** LogicalCPUs = processeurs logiques ou vus de l'OS correspond au nombre de cœurs pour
autant que l'hyperthreading ne soit pas activé (incluant les machines offline ou arrêtées)
Un subcluster de 113 machines bi processeurs quadricoeurs = 904 CPUs logiques
Le nombre de cœurs par CPU physique (par chipset) étant de 4
A publier via l'attribut ''GlueSubClusterLogicalCPUs''
** A noter : Un SubCluster est a priori défini comme un ensemble homogène de workers mais
il est "admis que dans la pratique" cela ne soit pas le cas. Dans ce cas, les sites sont
sensés publier des spécifications moyennes pour certains attributs.

* Consignes pour les sites / Advices for sites (Juin 2009):
[http://indico.cern.ch/getFile.py/access?sessionId=2&resId=1&materialId=0&confId=63028 Présentation J.Gordon]

Tentative de synthèse --[[User:Chollet|Chollet]] 17:50, 10 septembre 2009 (CEST)
MàJ --[[User:Chollet|Chollet]] 17:01, 2 décembre 2009 (CET)
- Effectuer la mesure de la '''capacité CPU de la machine''' à partir du benchmark HEP-SPEC06
en utilisant le script mis à disposition ci-dessous. '''ATTENTION''' le bench fournit
un score par machine et la publication se fait par cœur
- Publier la '''capacité par cœur''' en HEP-SPEC06 via
''GlueHostProcessorOtherDescription: Benchmark=<value>-HEP-SPEC06''
Cet attribut est également utilisé pour publier le nombre moyen de cœurs par processeur
(ou chipset)
''GlueHostProcessorOtherDescription: Cores=<typical number of cores per CPU>, Benchmark=
<value>-HEP-SPEC06''
- Convertir la capacité CPU par coeur en SI2K en mulipliant par 250
- Mettre à jour l'attribut ''GlueHostBenchmarkSI00''

Les sites qui n'ont pas passé le benchmark HEP-SPEC06 doivent publier une valeur moyenne en SpecInt200
par LogicalCPU via l'attribut ''GlueHostBenchmarkSI00''

En cas de clusteur ou sous-clusteur hétérogène, GlueHostBenchmarkSI00 étant défini comme "Average SpecInt2000 rating per logical CPU" c.a.d par coeur pourvu que l'hyperthreading soit désactivé, vous êtes invités à publier une valeur moyenne pondérée. Voir le document
de référence page 5 (dernière ligne)

-----

=== Résultats des benchs effectués par les sites ===
SPEC CPU2000
Des tests de puissance des CPU ont été réalisés au LAPP (Eric Fede) et à Subatech (Jean-Michel Barbet) avecla suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
Ajout des tests au CPPM (Edith Knoops)

HEP-SPEC06
Des mesures avec le benchmark suite HEP-SPEC06 sont également disponibles ( fond bleu des tableaux)

==== Tests réalisés par Jean-Michel :====

A noter que les tests ont été réalisés sur des machines en configuration opérationnelles pour la grille (avec tous les daemons).

'''Scientific-Linux V4.3 i386, gcc v3.4.5'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell PE1955 || Woodcrest 5160 3.00GHz || 4 || 8Go || 1409 || 1830 || 2113 || bgcolor="#0066FF" | 39.48 || bgcolor="#0066FF" | -
|-
| IBM || Clovertown 2.33GHz || 8 || 16Go || 979 || 1875 || 1468 || bgcolor="#0066FF" | 53.12 || bgcolor="#0066FF" | -
|-
|}

'''Scientific Linux SL release 4.5 (Beryllium) x86_64, gcc v3.4.6'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 63.18 || bgcolor="#0066FF" | 57.63
|-
|}

'''Scientific Linux SL release 5.3 (Boron) x86_64 gcc version 4.1.2 20080704 (Red Hat 4.1.2-44)'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | [6] || bgcolor="#0066FF" | [6]
|-
| Dell R410 || Nehalem E5520 2.26GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 94.38 || bgcolor="#0066FF" | -
|-
| Dell R410 || Nehalem E5520 2.26GHz || 16 [7] || 16Go || - || - || - || bgcolor="#0066FF" | 114.36 [7] || bgcolor="#0066FF" | -
|-
|}

'''Fiches SPEC des machines :'''

Dell PowerEdge 1955 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060626-06298.html

Dell PowerEdge 1950 Clovertown E5420 2.33GHz :

Dell PowerEdge 1950 E5420 2.50GHz :

IBM 3550 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060623-06219.html

IBM 3350 Clovertown E5345 : http://www.spec.org/osg/cpu2000/results/res2006q4/cpu2000-20061113-07918.html

'''Notes :'''

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

[5] : A titre indicatif : résultats avec les binaires 64bits (HEP-SEPC06 n'est défini que pour des binaires 32bits)

[6] : Ce test est suspendu car je suis tombé sur le problème suivant :
https://www.jiscmail.ac.uk/cgi-bin/webadmin?A2=ind0909&L=LCG-ROLLOUT&P=R3371

[7] : En activant l'hyperthreading, les benches tournent en 16 exemplaires. A titre indicatif (une seule mesure).

----

==== Tests réalisés au LAPP (eric) : ====

Scientific-Linux V3.08 i386, gcc v3.4.3

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2]
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1367 || 1665 || 2050
|-
|}

Scientific-Linux V4.5 x86_64, gcc v3.4

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés. Un tuning "simple" au niveau du bios donne des disparités dans les résultats des bench qui depassent les 10 %.

On est toujours dans le cas où l'hyperthreading est désactivé : nb de cores logiques = nb de cores physiques = nombre de thread

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits [4] per machin''' !! '''HEP-SPEC06 64bits [4] per machin'''
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227 || bgcolor="#0066FF" | 36.58 || bgcolor="#0066FF" | 34.6
|-
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837 || bgcolor="#0066FF" | 56.04 || bgcolor="#0066FF" | 51.18
|-
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430 || bgcolor="#0066FF" | 70.83 || bgcolor="#0066FF" | 63.99
|-
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 2x220G6 || Nehalem L5520 2.27GHz || 8 || 16Go || x || x || x || bgcolor="#0066FF" | 95.35 || bgcolor="#0066FF" | x
|}

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

Scientific-Linux V5.5 x86_64,

Hyperthreading toujours actif, c'est la version 32 bits du bench qui doit être publié

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Nb de Threads !! '''HEP-SPEC06 32bits per machin''' !! '''HEP-SPEC06 64bits per machin'''
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 16 || bgcolor="#0066FF" | 128.04 || bgcolor="#0066FF" | 140.42
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 12 || bgcolor="#0066FF" | 122.31 || bgcolor="#0066FF" | 137.36
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 8 || bgcolor="#0066FF" | 103.60 || bgcolor="#0066FF" | 119.36
|-
|}

----

==== Tests réalisés au CPPM (Edith/Carlos) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Scientific-Linux 5.3 x86_64, gcc 4.1.2

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN32 SI2K/core || CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits (SL4)''' || '''HEP-SPEC06 32bits (SL5.3)''' || '''HEP-SPEC06 64bits (SL5.3)'''
|-
| HP DL145 || Opteron 250 2.4Ghz || 2 || 4Go || 1149 || 1278 || 972 || 1725 || 15.14 || bgcolor="#0066FF" | 16.16 ||
|-
| SUN || Opteron 250 2.4Ghz || 2 || 4Go || 1173 || 1298 || 988 || 1760 || || ||
|-
| HP DL145G2 || Opteron 275 2.2 Ghz || 4 ||6Go || 981 || 1087 || 857 || 1471 || 26.52 || bgcolor="#0066FF" | 27.41 ||
|-
| DELL || Opteron 2218 2.6 Ghz || 4 || 8Go || 1199 || 1073 ||1045 || 1798 || 32.24 || bgcolor="#0066FF" | 31.68 ||
|-
| DELL || Xeon E5420 2.5Ghz || 8 || 16 Go || 1418 ||1528 || x ||2128 || 63.12 || bgcolor="#0066FF" | 68.64 ||
|-
|DELL || Xeon X5550 2.67GHz || 8 || 24 Go || || || || || || bgcolor="#0066FF" | 116 ||
|-
|DELL || Xeon X5550 2.67GHz || 16 [1] || 24 Go || || || || || || bgcolor="#0066FF" | 145.82 ||
|-
|DELL R410 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 199.34
|-
|DELL C6100 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 231.40

|}

[1] 8 cores / 16 virtual cpu

[2] 12 cores / 24 virtual cpu

----

==== Tests réalisés à l'IPHC (Jérôme) : ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

Pour la réalisation de ces tests, seuls les services indispensables étaient activés. Pour chaque système, le résultat indiqué est une moyenne de quatre tests. Compte tenu de la variation des résultats, une seule décimale est affichée.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits per machin'''
|-
| DELL M600 || Xeon E5410 2.33Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 61.1
|-
| DELL M600 || Xeon L5420 2.50Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 65.4
|-
| DELL M610 || Xeon E5530 2.40Ghz || 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 100,6
|-
| DELL M610 [1] || Xeon E5530 2.40Ghz || 8 + 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 127,0
|-
| DELL M610 || Xeon L5640 2.26Ghz || 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 142,1
|-
| DELL M610 [1] || Xeon L5640 2.26Ghz || 12 + 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 171,6

|}

[1] Option "Virtual CPU" activée.

----

==== Tests réalisés au LPC (Jean-Claude) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Pour la réalisation de ces tests, seuls les services indispensables étaient activés.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [1] per machin'''
|-
| IBM Blade || Xeon E5345 2.33Ghz || 8 || 16Go || N/A || N/A || N/A || bgcolor="#0066FF" | 57.41
|}

[1] Moyenne des résultats obtenus sur trois tests.

Scientific-Linux 5.3 x86_64, gcc v4.1.2

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [2] per machin'''
|-
| IBM Blade || Xeon E5430 2.66Ghz || 8 || 12Go || N/A || N/A || N/A || bgcolor="#0066FF" | 70.64
|}

[2] Moyenne des résultats obtenus sur quatre tests.

----

==== Tests réalisés au LLR (pascale): ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

les machines ont ete installees comme les WN standard de la grille

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Virtual CPU enabled !! '''HEP-SPEC06 32bits per machin''' !! HEP-SPEC06 64bits [1] per machin'''
|-
| DELL R410 || E 5520 || 16[1] || 24Go || YES || 118.57 || 143.44
|-
| || E 5540 || 16[1] || 24Go || YES || 128.38 || 151.03
|-
| DELL R410 || E 5520 || 8 || 24Go || NO || 96.51 || 113.35
|-
| || E 5540 || 8 || 24Go || NO || 103.41|| 121.47
|-
| DELL R410 || E 5520 || 16[1] || 16Go || YES || Pas fait || Pas fait
|-
| || E 5540 || 16[1] || 16Go || YES || Pas fait || 148.64
|-
| DELL R410 || E 5520 || 8 || 16Go || NO || 94.97 || 109.42
|-
| || E 5540 || 8 || 16Go || NO || 102.41|| 117.5

|}

[1] Sur les serveurs il y a réellement 8 cores en tout. A cause de l'activation du "Virtual CPU" , le systeme d'exploitation pense qu'il y a 16 procs : la commande /proc/cpuinfo donne 16 coeurs. D'après les tests il est interessant d'activer le "Virtual CPU". Mais, combien de jobs faut-il activer en parallele? Et comment allons-nous les déclarer dans la grille?
Voici les résultats des tests avec 8, 10, 12, 14 et 16 jobs lancés en parallèle pour la
configuration suivante : R410, 16g ram, Virtual CPU activé.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Nb jobs !! HEP-SPEC06 64bits [1] per machin'''
|-
| 8 jobs || 115.66
|-
| 10 jobs || 130.66
|-
| 12 jobs || 139.29
|-
| 14 jobs || 144.38
|-
| 16 jobs || 148.64

|}

----
==== Tests réalisés à l'IRFU (Christine): ====
Scientific Linux SL release 5.3 (Boron)

2.6.18-164.6.1.el5 #1 SMP Tue Nov 3 23:02:51 EST 2009 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-44)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Virtual CPU enabled !! Nbre de thread !! Mémoire RAM !! HEP-SPEC06 64bits per machin [1]'''
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 16 || 24Go || 142.26
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 12 || 24Go || 136.69
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 8 || 24Go || 114.67
|-
| Bull R422 || E 5520 || 8 || NO || 8 || 24Go || 114.01
|-
| Bull R422 || E 5520 || 8 || NO || 12 || 24Go || 121.39
|-
| Fujitsu PRIMERGY RX200 || Intel(R) Xeon(R) CPU L5420 @ 2.50GHz || 8 || _ || 8 || 16Go || 71.26
|-
|}

[1] Moyenne des résultats obtenus sur deux tests

----
==== Tests réalisés à l'IPNL (Denis) : ====

Scientific Linux SL release 5.4 (Boron)

2.6.18-274.18.1.el5 #1 SMP Thu Feb 9 12:20:03 EST 2012 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-50)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | System !! Processor !! Frequency !! L2 Cache !! CPU nb !! Nb cores / CPU !! Virtual CPU enabled !! Thread nb !! RAM !! HEP-SPEC06 32bits per System '''
|-
| Dell C6100 || E 5645 || 2.40 Ghz || 12 Mo || 2 CPU || 6 c || YES || 24 || 48Go || 181.13 [1]
|-
|}

[1] Nous avons configuré 20 job slots pour 24 coeurs virtuels

=== Résultats des benchs GRIDPP (UK) ===
* http://www.gridpp.ac.uk/wiki/HEPSPEC06

CPU-Benches

2012-02-24T15:42:01Z

Pugnere:

'''Transition vers les nouvelles unités specs HEP-SPEC06'''
--MàJ --[[User:Chollet|Chollet]] 09:37, 11 septembre 2009 (CEST)--

=== Page HEPiX de référence ===
* https://hepix.caspur.it/benchmarks

=== Stratégie LCG ===
* LCG Overview Board - Change of CPU accounting unit (I.Bird):
''The working group on benchmarking has now concluded, both on the new benchmark and on the transition process from SI2K. A new benchmark, based on the SPEC 2006 suite has been agreed upon. This uses a combination of the SPEC2006 FP and INT benchmarks, and has been shown to scale well with the experiments’ applications. This benchmark, labelled HEP-SPEC06, will be used in future to specify requirements and resources. '''There is an agreement to use a simple conversion factor of 4 representing the benchmarks ratio HEP-SPEC06/kSI2K'''. Sites will be requested to benchmark their existing resources, and the results will be published on a web site. Future procurements should require the vendor to run the benchmark – provided as a simple script. Planning for changing the reporting in the accounting system is under way. The new unit will be used in the April RRB.''

* LCG Management Board : [https://twiki.cern.ch/twiki/pub/LCG/MbMeetingsMinutes/LCG_Management_Board_2009_01_27.htm Décision du MB du 27 janvier 2009] s'appuyant sur la [http://indico.cern.ch/materialDisplay.py?contribId=3&sessionId=0&materialId=0&confId=49388 proposition du groupe technique (G.Merino)]
* Pledges WLCG en HEP-SPEC06 : http://lcg.web.cern.ch/LCG/resources.htm

=== HEP-SPEC06 Benchmark ===
*Le script dispo à https://twiki.cern.ch/twiki/bin/view/FIOgroup/TsiBenchHEPSPEC (Voir les attachements en bas de page tar.gz)

* La distribution de la suite SPEC CPU2006 version 1.1 est disponible (sous AFS au CC).
Pour plus d'infos contacter F.Chollet ou Pierre Larrieu

=== Conversion des kSI2k ===
* Facteur de conversion HEP-SPEC06/kSI2k : 4
* 1 kSI2k = 4 HEP-SPEC06

=== Publication des capacités CPU ===
* Document de référence pour la publication dans le contexte actuel (Glue schema 1.3):
https://twiki.cern.ch/twiki/pub/LCG/WLCGCommonComputingReadinessChallenges/WLCG_GlueSchemaUsage-1.8.pdf 

Tentative de synthèse --[[User:Chollet|Chollet]] 09:46, 11 septembre 2009 (CEST)
** PhysicalCPUs = processeurs c.a.d chipset
Un subcluster de 113 machines bi processeurs quadricoeurs = 226 CPUs physiques
** LogicalCPUs = processeurs logiques ou vus de l'OS correspond au nombre de cœurs pour
autant que l'hyperthreading ne soit pas activé (incluant les machines offline ou arrêtées)
Un subcluster de 113 machines bi processeurs quadricoeurs = 904 CPUs logiques
Le nombre de cœurs par CPU physique (par chipset) étant de 4
A publier via l'attribut ''GlueSubClusterLogicalCPUs''
** A noter : Un SubCluster est a priori défini comme un ensemble homogène de workers mais
il est "admis que dans la pratique" cela ne soit pas le cas. Dans ce cas, les sites sont
sensés publier des spécifications moyennes pour certains attributs.

* Consignes pour les sites / Advices for sites (Juin 2009):
[http://indico.cern.ch/getFile.py/access?sessionId=2&resId=1&materialId=0&confId=63028 Présentation J.Gordon]

Tentative de synthèse --[[User:Chollet|Chollet]] 17:50, 10 septembre 2009 (CEST)
MàJ --[[User:Chollet|Chollet]] 17:01, 2 décembre 2009 (CET)
- Effectuer la mesure de la '''capacité CPU de la machine''' à partir du benchmark HEP-SPEC06
en utilisant le script mis à disposition ci-dessous. '''ATTENTION''' le bench fournit
un score par machine et la publication se fait par cœur
- Publier la '''capacité par cœur''' en HEP-SPEC06 via
''GlueHostProcessorOtherDescription: Benchmark=<value>-HEP-SPEC06''
Cet attribut est également utilisé pour publier le nombre moyen de cœurs par processeur
(ou chipset)
''GlueHostProcessorOtherDescription: Cores=<typical number of cores per CPU>, Benchmark=
<value>-HEP-SPEC06''
- Convertir la capacité CPU par coeur en SI2K en mulipliant par 250
- Mettre à jour l'attribut ''GlueHostBenchmarkSI00''

Les sites qui n'ont pas passé le benchmark HEP-SPEC06 doivent publier une valeur moyenne en SpecInt200
par LogicalCPU via l'attribut ''GlueHostBenchmarkSI00''

En cas de clusteur ou sous-clusteur hétérogène, GlueHostBenchmarkSI00 étant défini comme "Average SpecInt2000 rating per logical CPU" c.a.d par coeur pourvu que l'hyperthreading soit désactivé, vous êtes invités à publier une valeur moyenne pondérée. Voir le document
de référence page 5 (dernière ligne)

-----

=== Résultats des benchs effectués par les sites ===
SPEC CPU2000
Des tests de puissance des CPU ont été réalisés au LAPP (Eric Fede) et à Subatech (Jean-Michel Barbet) avecla suite SPEC CPU2000 suivant la méthodologie recommandée : http://hepix.caspur.it/processors/
Ajout des tests au CPPM (Edith Knoops)

HEP-SPEC06
Des mesures avec le benchmark suite HEP-SPEC06 sont également disponibles ( fond bleu des tableaux)

==== Tests réalisés par Jean-Michel :====

A noter que les tests ont été réalisés sur des machines en configuration opérationnelles pour la grille (avec tous les daemons).

'''Scientific-Linux V4.3 i386, gcc v3.4.5'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell PE1955 || Woodcrest 5160 3.00GHz || 4 || 8Go || 1409 || 1830 || 2113 || bgcolor="#0066FF" | 39.48 || bgcolor="#0066FF" | -
|-
| IBM || Clovertown 2.33GHz || 8 || 16Go || 979 || 1875 || 1468 || bgcolor="#0066FF" | 53.12 || bgcolor="#0066FF" | -
|-
|}

'''Scientific Linux SL release 4.5 (Beryllium) x86_64, gcc v3.4.6'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 63.18 || bgcolor="#0066FF" | 57.63
|-
|}

'''Scientific Linux SL release 5.3 (Boron) x86_64 gcc version 4.1.2 20080704 (Red Hat 4.1.2-44)'''

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3] !! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits/machine [4]''' !! '''SPEC HEP 64bits/machine [5]'''
|-
| Dell P21950 || Clovertown E5420 2.50GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | [6] || bgcolor="#0066FF" | [6]
|-
| Dell R410 || Nehalem E5520 2.26GHz || 8 || 16Go || - || - || - || bgcolor="#0066FF" | 94.38 || bgcolor="#0066FF" | -
|-
| Dell R410 || Nehalem E5520 2.26GHz || 16 [7] || 16Go || - || - || - || bgcolor="#0066FF" | 114.36 [7] || bgcolor="#0066FF" | -
|-
|}

'''Fiches SPEC des machines :'''

Dell PowerEdge 1955 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060626-06298.html

Dell PowerEdge 1950 Clovertown E5420 2.33GHz :

Dell PowerEdge 1950 E5420 2.50GHz :

IBM 3550 Woodcrest 5160 : http://www.spec.org/osg/cpu2000/results/res2006q3/cpu2000-20060623-06219.html

IBM 3350 Clovertown E5345 : http://www.spec.org/osg/cpu2000/results/res2006q4/cpu2000-20061113-07918.html

'''Notes :'''

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

[5] : A titre indicatif : résultats avec les binaires 64bits (HEP-SEPC06 n'est défini que pour des binaires 32bits)

[6] : Ce test est suspendu car je suis tombé sur le problème suivant :
https://www.jiscmail.ac.uk/cgi-bin/webadmin?A2=ind0909&L=LCG-ROLLOUT&P=R3371

[7] : En activant l'hyperthreading, les benches tournent en 16 exemplaires. A titre indicatif (une seule mesure).

----

==== Tests réalisés au LAPP (eric) : ====

Scientific-Linux V3.08 i386, gcc v3.4.3

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2]
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1367 || 1665 || 2050
|-
|}

Scientific-Linux V4.5 x86_64, gcc v3.4

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés. Un tuning "simple" au niveau du bios donne des disparités dans les résultats des bench qui depassent les 10 %.

On est toujours dans le cas où l'hyperthreading est désactivé : nb de cores logiques = nb de cores physiques = nombre de thread

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core [1] !! FZK SI2K/core [3]!! CERN SI2K/core corrigé [2] !! '''HEP-SPEC06 32bits [4] per machin''' !! '''HEP-SPEC06 64bits [4] per machin'''
|-
| HP BL 460c || Woodcrest 2.66GHz || 4 || 8Go || 1485 || 1592 || 2227 || bgcolor="#0066FF" | 36.58 || bgcolor="#0066FF" | 34.6
|-
| HP BL 460c || Clovertown 2.33GHz || 8 || 16Go || 1225 || x || 1837 || bgcolor="#0066FF" | 56.04 || bgcolor="#0066FF" | 51.18
|-
| DELL 1950 || Intel 5335 2GHz || 8 || 8Go || 1060 || 1139 || 1590 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 460c || Harpertown 3GHz || 8 || 16Go || 1620 || 1715 || 2430 || bgcolor="#0066FF" | 70.83 || bgcolor="#0066FF" | 63.99
|-
| DELL M600 || Harpertown 2.66GHz || 8 || 32Go || 1481 || 1588 || 2221 || bgcolor="#0066FF" | x || bgcolor="#0066FF" | x
|-
| HP BL 2x220G6 || Nehalem L5520 2.27GHz || 8 || 16Go || x || x || x || bgcolor="#0066FF" | 95.35 || bgcolor="#0066FF" | x
|}

[1] : Moyenne de 3 exécutions successives avec les optimisations CERN, chaque exécution démarrant un benchmark CPU2000 par CPU core.

[2] : Correction : La valeur moyenne ci-dessus + 50%. C'est la valeur à publier via le système d'information de la grille.

[3] : Une exécution unique avec les optimisations FZK à titre indicatif.

[4] : Benchmark suite HEP SPEC, en suivant les recommandations : https://twiki.cern.ch/twiki/bin/view/FIOgroup//TsiBenchHEPSPEC

Scientific-Linux V5.5 x86_64,

Hyperthreading toujours actif, c'est la version 32 bits du bench qui doit être publié

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Nb de Threads !! '''HEP-SPEC06 32bits per machin''' !! '''HEP-SPEC06 64bits per machin'''
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 16 || bgcolor="#0066FF" | 128.04 || bgcolor="#0066FF" | 140.42
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 12 || bgcolor="#0066FF" | 122.31 || bgcolor="#0066FF" | 137.36
|-
| HP BL 280c || Intel E5630 2.53GHz || 8 + 8(HT) || 32Go || 8 || bgcolor="#0066FF" | 103.60 || bgcolor="#0066FF" | 119.36
|-
|}

----

==== Tests réalisés au CPPM (Edith/Carlos) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Scientific-Linux 5.3 x86_64, gcc 4.1.2

A noter que les tests ont été réalisés sur des machines dont tous les services non nécéssaires étaient desactivés

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN32 SI2K/core || CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits (SL4)''' || '''HEP-SPEC06 32bits (SL5.3)''' || '''HEP-SPEC06 64bits (SL5.3)'''
|-
| HP DL145 || Opteron 250 2.4Ghz || 2 || 4Go || 1149 || 1278 || 972 || 1725 || 15.14 || bgcolor="#0066FF" | 16.16 ||
|-
| SUN || Opteron 250 2.4Ghz || 2 || 4Go || 1173 || 1298 || 988 || 1760 || || ||
|-
| HP DL145G2 || Opteron 275 2.2 Ghz || 4 ||6Go || 981 || 1087 || 857 || 1471 || 26.52 || bgcolor="#0066FF" | 27.41 ||
|-
| DELL || Opteron 2218 2.6 Ghz || 4 || 8Go || 1199 || 1073 ||1045 || 1798 || 32.24 || bgcolor="#0066FF" | 31.68 ||
|-
| DELL || Xeon E5420 2.5Ghz || 8 || 16 Go || 1418 ||1528 || x ||2128 || 63.12 || bgcolor="#0066FF" | 68.64 ||
|-
|DELL || Xeon X5550 2.67GHz || 8 || 24 Go || || || || || || bgcolor="#0066FF" | 116 ||
|-
|DELL || Xeon X5550 2.67GHz || 16 [1] || 24 Go || || || || || || bgcolor="#0066FF" | 145.82 ||
|-
|DELL R410 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 199.34
|-
|DELL C6100 || Xeon X5650 2.67GHz || 24 [2] || 48 Go || || || || || || || bgcolor="#0066FF" | 231.40

|}

[1] 8 cores / 16 virtual cpu

[2] 12 cores / 24 virtual cpu

----

==== Tests réalisés à l'IPHC (Jérôme) : ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

Pour la réalisation de ces tests, seuls les services indispensables étaient activés. Pour chaque système, le résultat indiqué est une moyenne de quatre tests. Compte tenu de la variation des résultats, une seule décimale est affichée.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits per machin'''
|-
| DELL M600 || Xeon E5410 2.33Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 61.1
|-
| DELL M600 || Xeon L5420 2.50Ghz || 8 || 16 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 65.4
|-
| DELL M610 || Xeon E5530 2.40Ghz || 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 100,6
|-
| DELL M610 [1] || Xeon E5530 2.40Ghz || 8 + 8 || 24 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 127,0
|-
| DELL M610 || Xeon L5640 2.26Ghz || 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 142,1
|-
| DELL M610 [1] || Xeon L5640 2.26Ghz || 12 + 12 || 48 Go || N/A || N/A || N/A || bgcolor="#0066FF" | 171,6

|}

[1] Option "Virtual CPU" activée.

----

==== Tests réalisés au LPC (Jean-Claude) : ====

Scientific-Linux 4.6 x86_64, gcc v3.4.6

Pour la réalisation de ces tests, seuls les services indispensables étaient activés.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [1] per machin'''
|-
| IBM Blade || Xeon E5345 2.33Ghz || 8 || 16Go || N/A || N/A || N/A || bgcolor="#0066FF" | 57.41
|}

[1] Moyenne des résultats obtenus sur trois tests.

Scientific-Linux 5.3 x86_64, gcc v4.1.2

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! CERN SI2K/core !! FZK SI2K/core !! CERN SI2K/core corrigé !! '''HEP-SPEC06 32bits [2] per machin'''
|-
| IBM Blade || Xeon E5430 2.66Ghz || 8 || 12Go || N/A || N/A || N/A || bgcolor="#0066FF" | 70.64
|}

[2] Moyenne des résultats obtenus sur quatre tests.

----

==== Tests réalisés au LLR (pascale): ====

Scientific-Linux 5.3 x86_64, gcc v4.1.2

les machines ont ete installees comme les WN standard de la grille

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Mémoire RAM !! Virtual CPU enabled !! '''HEP-SPEC06 32bits per machin''' !! HEP-SPEC06 64bits [1] per machin'''
|-
| DELL R410 || E 5520 || 16[1] || 24Go || YES || 118.57 || 143.44
|-
| || E 5540 || 16[1] || 24Go || YES || 128.38 || 151.03
|-
| DELL R410 || E 5520 || 8 || 24Go || NO || 96.51 || 113.35
|-
| || E 5540 || 8 || 24Go || NO || 103.41|| 121.47
|-
| DELL R410 || E 5520 || 16[1] || 16Go || YES || Pas fait || Pas fait
|-
| || E 5540 || 16[1] || 16Go || YES || Pas fait || 148.64
|-
| DELL R410 || E 5520 || 8 || 16Go || NO || 94.97 || 109.42
|-
| || E 5540 || 8 || 16Go || NO || 102.41|| 117.5

|}

[1] Sur les serveurs il y a réellement 8 cores en tout. A cause de l'activation du "Virtual CPU" , le systeme d'exploitation pense qu'il y a 16 procs : la commande /proc/cpuinfo donne 16 coeurs. D'après les tests il est interessant d'activer le "Virtual CPU". Mais, combien de jobs faut-il activer en parallele? Et comment allons-nous les déclarer dans la grille?
Voici les résultats des tests avec 8, 10, 12, 14 et 16 jobs lancés en parallèle pour la
configuration suivante : R410, 16g ram, Virtual CPU activé.

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Nb jobs !! HEP-SPEC06 64bits [1] per machin'''
|-
| 8 jobs || 115.66
|-
| 10 jobs || 130.66
|-
| 12 jobs || 139.29
|-
| 14 jobs || 144.38
|-
| 16 jobs || 148.64

|}

----
==== Tests réalisés à l'IRFU (Christine): ====
Scientific Linux SL release 5.3 (Boron)

2.6.18-164.6.1.el5 #1 SMP Tue Nov 3 23:02:51 EST 2009 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-44)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | Machine !! CPU !! Nb cores !! Virtual CPU enabled !! Nbre de thread !! Mémoire RAM !! HEP-SPEC06 64bits per machin [1]'''
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 16 || 24Go || 142.26
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 12 || 24Go || 136.69
|-
| Bull R422 || E 5520 || 16 Virtual CPU / 8 physical CPU || YES || 8 || 24Go || 114.67
|-
| Bull R422 || E 5520 || 8 || NO || 8 || 24Go || 114.01
|-
| Bull R422 || E 5520 || 8 || NO || 12 || 24Go || 121.39
|-
| Fujitsu PRIMERGY RX200 || Intel(R) Xeon(R) CPU L5420 @ 2.50GHz || 8 || _ || 8 || 16Go || 71.26
|-
|}

[1] Moyenne des résultats obtenus sur deux tests

----
==== Tests réalisés à l'IPNL (Denis) : ====

Scientific Linux SL release 5.4 (Boron)
2.6.18-274.18.1.el5 #1 SMP Thu Feb 9 12:20:03 EST 2012 x86_64 x86_64 x86_64 GNU/Linux

version gcc 4.1.2 20080704 (Red Hat 4.1.2-50)

{| class="wikitable" style="text-align:center" border="1" cellpadding="5" cellspacing="0"
|+
|-
! style="background:#efefef;" | System !! Processor !! Frequency !! L2 Cache !! CPU nb !! Nb cores / CPU !! Virtual CPU enabled !! Thread nb !! RAM !! HEP-SPEC06 32bits per System '''
|-
| Dell C6100 || E 5645 || 2.40 Ghz || 12 Mo || 2 CPU || 6 c || YES || 24 || 48Go || 181.13 [1]
|-
|}

[1] Nous avons configuré 20 job slots pour 24 coeurs virtuels

=== Résultats des benchs GRIDPP (UK) ===
* http://www.gridpp.ac.uk/wiki/HEPSPEC06