lcgwiki - Contributions [en]

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:27:52Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
*** ldapsearch -x -H ldap://lpnse1.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://lpnse1.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
*** GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:21:05Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
*** GlueServiceEndpoint: httpg://lpnse1.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
*** GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:20:48Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
*** GlueServiceEndpoint: httpg://lpnse1.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1

GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:16:06Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
GlueServiceEndpoint: httpg://lpnse1.in2p3.fr:8443/srm/managerv1

GlueSAPath: /dpm/in2p3.fr/home/dteam

GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1

GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:09:38Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
GlueServiceEndpoint:

GlueSAPath: /dpm/in2p3.fr/home/dteam

GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1

GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''

T2T3:2006Q2:Tests T1-T2T3

2006-05-17T10:09:23Z

Derue: /* Sites impliqués */

=== Planning ===
du 10 au 12 mai 2006
=== Suivi et Infos ===
via la liste LCGFR-TECH-L@in2p3.fr
=== Procédure Phase 0 ===
* Test FTS disque à disque
* Test FTS disque à bande

=== Conditions de Test ===
* Données test / Données manip
* paramètres FTS : nbre de fichiers concurrents / nbre de streams
* Taille des fichiers : 1 G
* ...

=== Infos à transmettre au CC-IN2P3 pour la définition des canaux FTS ===
* VO utilisée pour le test
* Storage Element : ldapsearch -x -h lapp-se01.in2p3.fr -p 2135 -b 'mds-vo-name=local,o=grid'
** endpoint srm : GlueServiceEndpoint du SE
** point de montage de la zone de stockage : GlueSAPath du SE

=== Sites impliqués ===
* '''T1 CC-IN2P3 '''
** Contacts : David Bouvet, Lionel Schwarz
** SE : ccsrm.in2p3.fr
*** Endpoint transferts LPC-CC : /pnfs/in2p3.fr/data/dteam/disk/lpc/
*** Endpoint transferts LAL-CC : /pnfs/in2p3.fr/data/dteam/disk/lal/
*** Endpoint transferts DAPNIA-CC : /pnfs/in2p3.fr/data/dteam/disk/dapnia/
*** Endpoint transferts LAPP-CC : /pnfs/in2p3.fr/data/dteam/disk/lapp/
* '''T2 GRIF'''
** Contacts : Michel Jouvin, Pierric Micout, Christine Leroy, Diego Terront
** SE-LAL
** SE-LPNHE : lpnse1.in2p3.fr
GlueServiceEndpoint:
GlueSAPath: /dpm/in2p3.fr/home/dteam
GlueSAPath: /dpm/in2p3.fr/home/atlas
** SE-DAPNIA : node12.datagrid.cea.fr
GlueServiceEndpoint: httpg://node12.datagrid.cea.fr:8443/srm/managerv1

GlueSAPath: /dpm/datagrid.cea.fr/home/dteam
** Dates retenues : 15 mai
* '''T2 LPC Clermont'''
** Contacts : Jean-Claude Chevaleyre, Emmanuel Medernach
** SE : clrlcgse03.in2p3.fr
*** ldapsearch -x -H ldap://clrlcgse03.in2p3.fr:2135 -b mds-vo-name=local,o=grid
*** GlueServiceEndpoint: httpg://clrlcgse03.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 16 mai
* '''T3 IN2P3-LAPP'''
** Contact : Sabine Elles
** SE : lapp-se01.in2p3.fr
*** GlueServiceEndpoint: httpg://lapp-se01.in2p3.fr:8443/srm/managerv1
*** GlueSAPath: /dpm/in2p3.fr/home/atlas
*** GlueSAPath: /dpm/in2p3.fr/home/dteam
** Date retenue : 12 mai

=== Petit HowTo pour lancer des transferts ===

Les transferts sont initiés depuis une UI.

* Avant tout transfert, il faut un '''proxy valide déposé sur le serveur MyProxy''' cclcgproxli01.in2p3.fr, pour permettre au serveur FTS de renouveler un proxy expiré en cours de transfert :
1. grid-proxy-init
2. myproxy-init -s cclcgproxli01.in2p3.fr -d
'''Les transferts lancés par un DN ne sont pas accessibles par un autre DN.'''
* [[Soumission :]]
glite-transfer-submit -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer <SOURCE-SURL> <DEST-SURL>
(ex. de SURL : srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/dteam/hpss/test/test_fts_bnl2lyon_jul14.1)

La commande de soumission retourne un UID (ex.: 604c290c-04fa-11da-816d-adeeeb012d0c) qui permet ensuite de suivre le statut du transfert.

* [[Statut du transfert :]]
glite-transfer-status -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer -l 604c290c-04fa-11da-816d-adeeeb012d0c

La commande retourne par exemple le statut suivant :

Done
Source: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/test_fts_bnl2lyon_jul14.1
Destination: srm://ccsrm.in2p3.fr:8443/srm/managerv1?SFN=/pnfs/in2p3.fr/data/atlas/test/2005-08-04.1654
State: Done
Retries: 0
Reason: (null)
Duration: 25

* [[Destruction d'un transfert :]]
glite-transfer-cancel -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/FileTransfer 604c290c-04fa-11da-816d-adeeeb012d0c

* [[Liste des transferts en cours :]]
glite-transfer-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -c <NOM-du-CANAL>

Il y a des options supplémentaires pour les commandes ci-dessus accessibles par l'option -help.

* [[Effacer les fichiers sur SRM :]]
FTS ne permet pas d'effacer les fichiers sur SRM. Il ne s'occupe que de transférer les fichiers.
Une fois les tests de transferts effectués, merci d'effacer les fichiers sur SRM avec la commande suivante :
srm-advisory-delete <SRM path>

* [[Modification des paramètres des canaux :]]
Pour pouvoir modifier, les paramètres des canaux vous devez être enregistré comme manager du canal.
Si vous l'êtes, voici les commandes :

glite-transfer-channel-set -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement -f <nombre-de-fichiers> -T <nombre-de-streams> <NOM-du-CANAL>

Pour obtenir la liste des canaux :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement

Pour obtenir les informations sur un canal :
glite-transfer-channel-list -s https://cclcgftsli01.in2p3.fr:8443/glite-data-transfer-fts/services/ChannelManagement <NOM-du-CANAL>
'''Attention : ''' Seul les paramètres '''"nombre fichiers"''' et '''"nombre de streams"''' sont à modifier. '''Les autres doivent rester inchangés.'''