lcgwiki - Contributions [en]

https://lcg.in2p3.fr/api.php?action=feedcontributions&feedformat=atom&user=Cbarbier lcgwiki - Contributions [en] 2026-05-11T20:01:36Z Contributions MediaWiki 1.43.1 https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5609 LCG-FR / SA1-FR Accounting WG 2010-01-27T16:39:36Z

<p>Cbarbier: </p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/getFile.py/access?sessionId=1&resId=0&materialId=0&confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> * [http://lappweb.in2p3.fr/~barbier Outil d'accounting local du LAPP]<br /> * [http://wwwires.in2p3.fr/accounting/ Lien vers la page Accounting IPHC]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> including '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust Federation]'''<br><br /> <br /> == Documents accounting nominatif ==<br /> * [https://edms.in2p3.fr/file/I-017535/3/2009-03-CNRS-Elaboration_Statistiques_Usage_Grille-v2.pdf Document technique transmis à IdG et au CNRS en vue d'une déclaration à la CNIL]<br /> * [https://edms.in2p3.fr/file/I-017535/3/DN_UPS3107_v0_R1379423.pdf Récépissé déclaration CNIL 1379423]<br /> <br /> == [http://lcg.in2p3.fr/wiki/index.php/CPU-Benches Transition to HEP-SPEC06] ==<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5294 LCG-FR / SA1-FR Accounting WG 2009-06-29T09:05:59Z

<p>Cbarbier: /* Accounting */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/getFile.py/access?sessionId=1&resId=0&materialId=0&confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> * [http://lappweb.in2p3.fr/~barbier Outil d'accounting local du LAPP]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> including '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust Federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=Incoming_events&diff=5281 Incoming events 2009-06-19T14:22:55Z

<p>Cbarbier: </p> <hr /> <div>'''WLCG STEP'09 Post-Mortem Workshop, July 09-10 2009, CERN'''<br /> * http://indico.cern.ch/conferenceDisplay.py?confId=56580<br /> '''Monthly LCG-France Tier-2 Tier-3 Technical Meeting ''' <br /> * http://indico.in2p3.fr/categoryDisplay.py?categId=61 <br /> '''Monthly SA1-FR Meeting ''' <br /> * http://indico.in2p3.fr/categoryDisplay.py?categId=21<br /> '''Monthly LCG Grid Deployment Board '''<br /> * http://indico.cern.ch/categoryDisplay.py?categId=3l181<br /> '''Workshop on adapting applications and computing services to multi-core and virtualization, June 24-26 2009, CERN'''<br /> * http://indico.cern.ch/conferenceDisplay.py?confId=56353</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5057 LCG-FR / SA1-FR Accounting WG 2009-03-11T14:43:36Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/getFile.py/access?sessionId=1&resId=0&materialId=0&confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> including '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust Federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5054 LCG-FR / SA1-FR Accounting WG 2009-03-11T14:38:54Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/getFile.py/access?sessionId=1&resId=0&materialId=0&confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> <br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5051 LCG-FR / SA1-FR Accounting WG 2009-03-11T11:13:01Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/getFile.py/access?sessionId=1&resId=0&materialId=0&confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> <br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5050 LCG-FR / SA1-FR Accounting WG 2009-03-11T11:11:38Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/conferenceDisplay.py?confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''[http://www.eu-egee.org/security EGEE Security]''' activity<br><br /> * '''JSPG meetings : http://indico.cern.ch/categoryDisplay.py?categId=68'''<br /> Meeting held at CERN, Oct 9 and 10 2008 : see David Kelsey's slides about EGEE policy precedence and long term issues.<br /> <br /> Meeting held at CERN, Jan 22 and 23 2009 : see User-Level Job Accounting Data topic <br /> <br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> <br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> * '''New JSPG Documents''' (some approved, some other not yet approved) : '''http://www.jspg.org/wiki/JSPG_Docs''' with a link to the old approved reference documents<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5049 LCG-FR / SA1-FR Accounting WG 2009-03-11T10:09:09Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/conferenceDisplay.py?confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> <br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> <br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> <br /> Old '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> <br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> '''User-Level Job Accounting Data Handling Policy : https://edms.cern.ch/document/855382/1'''<br><br /> <br /> '''New JSPG Documents : http://www.jspg.org/wiki/JSPG_Docs'''<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5048 LCG-FR / SA1-FR Accounting WG 2009-03-11T10:07:58Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/conferenceDisplay.py?confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> <br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> <br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> <br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> <br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> '''User-Level Job Accounting Data Handling Policy : https://edms.cern.ch/document/855382/1'''<br><br /> <br /> '''New JSPG Documents : http://www.jspg.org/wiki/JSPG_Docs'''<br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=5038 LCG-FR / SA1-FR Accounting WG 2009-03-10T08:56:45Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> * GDB meeting @CERN du 11 mars 2009 : [http://indico.cern.ch/conferenceDisplay.py?confId=45473 Accounting Policies and other new/revised security policies] by David Kelsey<br /> <br /> == Accounting ==<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links.html Various links]<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> '''User-Level Job Accounting Data Handling Policy : https://edms.cern.ch/document/855382/1'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4349 LCG-FR / SA1-FR Accounting WG 2008-11-13T10:28:25Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> '''User-Level Job Accounting Data Handling Policy : https://edms.cern.ch/document/855382/1'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4348 LCG-FR / SA1-FR Accounting WG 2008-11-13T10:19:15Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * Visio/téléconférence du 7 novembre 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=1451 Minutes]<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local job accounting] by Cristina del Cano Novales<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4347 LCG-FR / SA1-FR Accounting WG 2008-11-13T10:16:03Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> * GDB meeting @CERN du 12 novembre 2008 : [http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=3&materialId=slides&confId=20235 Local jobs accounting] by Cristina del Cano Novales<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> ..<br /> In order to satisfy the traceability requirements, software deployed in the Grid MUST produce sufficient and relevant logging. <br /> ...<br /> The required information which MUST be retained for a minimum of 90 days. Grid Security Operations MAY define longer periods of retention for specific services and/or operational requirements. The logs MUST be put into a safe repository.<br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4332 LCG-FR / SA1-FR Accounting WG 2008-11-03T09:10:46Z

<p>Cbarbier: /* Accounting */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/links/demo_estambul.pdf Intra-VO and individual user level accounting in EGEE] by Sergio Diaz at EGEE'08 Istanbul<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> <br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4326 LCG-FR / SA1-FR Accounting WG 2008-10-27T09:06:08Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> * GDB meeting @CERN du 8 octobre 2008 : [http://indico.cern.ch/materialDisplay.py?sessionId=2&materialId=0&confId=20234 Accounting Status and Plans] by John Gordon<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> <br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=4325 LCG-FR / SA1-FR Accounting WG 2008-10-27T08:59:32Z

<p>Cbarbier: /* Policies */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> <br /> Last meeting held at CERN, Oct 9 and 10 2008<br /> See David Kelsey's slides about EGEE policy precedence and long term issues.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .<br /> <br /> '''4) Faire un dump d'un mois de base de donnée d'accounting, en supprimant les DNs utilisateurs'''<br /> <br /> Faire un dump entier de la base de données est inutile : on peut se commenter de la table LcgRecords. en supposant que la base s'appelle 'accounting', on peut effectuer un dump sélectif en fonction de la date de l'enregistrement par exemple, reste à filtrer les DNs des utilisateurs :<br /> <br /> mysqldump -u root -p --where "EventDate like '2008-06%'" --insert-ignore -e --skip-opt accounting LcgRecords | gawk -F ',' \<br /> '/INSERT/{for(i=1 ; i<NF ; i++) { if(i!=6) {printf "%s,", $i } else { printf "%s,", "'"''"'"} } ; print $NF } \<br /> !/INSERT/{print $0}' | gzip - > 200806_GRIF_dump2.sql.gz<br /> <br /> Le gawk se charge de remplacer le 6e champ (DN) par un champ vide. Notez qu'il ne semble pas possible d'échapper un simple quote (') à l'intérieur d'une commande gawk en utilisant bash, on a donc recours à une astuce : <br /> <br /> "'"''"'" correspond à :<br /> "' : caractère ", puis fermeture du simplquote gawk<br /> "' suivi de '" : 2 caractères simple quote qui doivent être encadrés de double quotes dans bash<br /> '" : ouverture de la fin de chaine pour la commande gawk, et fermeture de l'argument à printf via un "</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=File:Error.png&diff=4166 File:Error.png 2008-08-12T12:24:47Z

<p>Cbarbier: </p> <hr /> <div></div>

Cbarbier https://lcg.in2p3.fr/index.php?title=File:LYON_error.png&diff=4165 File:LYON error.png 2008-08-12T12:23:12Z

<p>Cbarbier: </p> <hr /> <div></div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3994 LCG-FR / SA1-FR Accounting WG 2008-06-27T13:22:02Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : [http://indico.in2p3.fr/conferenceDisplay.py?confId=989 Minutes]<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3988 LCG-FR / SA1-FR Accounting WG 2008-06-25T15:17:58Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> * Visio/téléconférence du 25 juin 2008 : compte-rendu disponible bientôt<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3987 LCG-FR / SA1-FR Accounting WG 2008-06-25T15:17:13Z

<p>Cbarbier: /* Journées, Réunions... */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> Visio/téléconférence du 25 juin 2008 : compte-rendu disponible bientôt<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br><br /> <br /> == Trucs et astuces ==<br /> <br /> Vous avez l'impression que les données d'accounting ne sont pas à jour sur le portail de CESGA .<br /> <br /> '''1) Vérifier la présence de vos données dans R-GMA'''<br /> <br /> rgma>select max(EventDate), ExecutingSite from LcgRecords where ExecutingSite like 'nom de votre site' group by ExecutingSite; <br /> <br /> Vous aurez la date de vos dernières données d'accounting insérées.<br /> <br /> '''2) Vérifier le nombre de sites publiant .'''<br /> <br /> http://www3.egee.cesga.es/acctenfor/<br /> <br /> Si le nombre de sites est inférieur à la moitié des sites ( 150 sites au total environ donc 75 pour la moitié !!), c'est qu'il y a certainement un problème central<br /> <br /> '''3) Vérifier l'état du registre principal''' <br /> <br /> https://rgma19.pp.rl.ac.uk:8443/Inspector/Main.do/getSiteStatus?serviceType=registry&siteName=lcgic01.gridpp.rl.ac.uk&portNumber=8443&lookupType=statusDetails<br /> <br /> Si il n'y a pas de connections sur celui-ci , c'est qu'il y a certainement aussi un problème .</div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3946 LCG-FR / SA1-FR Accounting WG 2008-06-11T12:40:05Z

<p>Cbarbier: /* Contacts (Mailing list) */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP) / Frédéric Schaer (CEA/IRFU)<br><br /> <br /> == Mandat du Groupe ==<br /> Document consultable:<br /> https://edms.in2p3.fr/file/I-013702/1/LCG-France-SA1-FR_WGAccounting.pdf<br /> <br /> == Journées, Réunions... ==<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> Last meeting held at CERN, May 29 2008 <br /> No time to discuss User-level Job Accounting Policy.<br /> No time to discuss Grid Portal Policy.<br /> * Documents de référence JSPG (versions validées): http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> * Updates not yet approved / Documents en cours de révision (versions non encore validées)<br /> '''Grid Security Traceability and Logging policy : https://edms.cern.ch/document/428037'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Operations policy : https://edms.cern.ch/document/853968'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br></div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3932 LCG-FR / SA1-FR Accounting WG 2008-06-09T10:12:38Z

<p>Cbarbier: /* Contacts (Mailing list) */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier (CNRS/IN2P3/LAPP)<br><br /> <br /> == Mandat du Groupe ==<br /> <br /> == Journées, Réunions... ==<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> * Documents de référence JSPG : http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> '''Security policy : https://edms.cern.ch/document/428008'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Security policy : https://edms.cern.ch/document/573348'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br></div>

Cbarbier https://lcg.in2p3.fr/index.php?title=LCG-FR_/_SA1-FR_Accounting_WG&diff=3931 LCG-FR / SA1-FR Accounting WG 2008-06-09T10:08:12Z

<p>Cbarbier: /* Contacts (Mailing list) */</p> <hr /> <div>== Contacts (Mailing list) ==<br /> <b>LCG-SA1FR-ACCOUNTING-L@IN2P3.FR mailing list</b> : <br /> List managers : Cécile Barbier<br><br /> <br /> == Mandat du Groupe ==<br /> <br /> == Journées, Réunions... ==<br /> <br /> == Accounting ==<br /> * [http://www.ukiroc.eu/content/view/95/249/ EGEE Accounting Service]<br /> * [http://www3.egee.cesga.es/gridsite/accounting/CESGA/egee_view.php EGEE Accounting Charts]<br /> * [http://goc.grid.sinica.edu.tw/gocwiki/ApelFaq Apel FAQ]<br /> <br /> == Policies ==<br /> '''[http://proj-lcg-security.web.cern.ch/ LCG/EGEE Joint Security Policy Group]''' from '''EGEE Security activity : http://www.eu-egee.org/security'''<br><br /> * Réunions JSPG :http://indico.cern.ch/categoryDisplay.py?categId=68<br /> * Documents de référence JSPG : http://proj-lcg-security.web.cern.ch/proj-lcg-security/documents.html<br /> '''Security policy : https://edms.cern.ch/document/428008'''<br><br /> '''Grid Acceptable Use policy : https://edms.cern.ch/document/428036'''<br><br /> '''VO Security policy : https://edms.cern.ch/document/573348'''<br><br /> '''Approval of CA (within IGTF) : https://edms.cern.ch/document/428038'''<br> '''[http://www.eugridpma.org/members/worldmap/ EU Grid Policy Management Authority] as part of [http://www.gridpma.org/ the International Grid Trust federation]'''<br></div>

Cbarbier