CALCUL AU CCIN2P3

18
BaBar France 18/01/2010 Vincent Poireau 1 Page d’aide : http://infodan.in2p3.fr/babar/Computing/ccin2p3-intro.html

description

CALCUL AU CCIN2P3. Page d’aide : http://infodan.in2p3.fr/babar/Computing/ccin2p3-intro.html. NOUVELLES DU CENTRE. Réunion utilisateurs au ccin2p3… hier Budget 12 millions d’euros en 2009 (plan de relance !) 7 millions en 2010 (peut progresser…) Améliorations - PowerPoint PPT Presentation

Transcript of CALCUL AU CCIN2P3

Page 1: CALCUL AU CCIN2P3

BaBar France 18/01/2010 Vincent Poireau 1

Page d’aide :http://infodan.in2p3.fr/babar/Computing/ccin2p3-intro.html

Page 2: CALCUL AU CCIN2P3

Réunion utilisateurs au ccin2p3… hierBudget

12 millions d’euros en 2009 (plan de relance !)

7 millions en 2010 (peut progresser…)

AméliorationsInfrastructure électriqueInstallation d’un 3ème groupe froidRefroidissement par eau des racks

Et toujours…Plus de CPU !Plus de disques !

BaBar France 19/01/2010 2Vincent Poireau

Page 3: CALCUL AU CCIN2P3

3 étapes2011 : 50 racks et

600 kW2015 : 125 racks et

1.5 MW2019 : 216 racks et

3.2 MW

BaBar France 19/01/2010 3Vincent Poireau

PlanningPermis de construire

Déposé le 23 décembre

Début construction au printemps

Livraison début 2011

Page 4: CALCUL AU CCIN2P3

Stockage et analyse des données471 comptes BaBar, dont 76 % d’utilisateurs

extérieurs (comptes créées depuis le début de Babar) 54 comptes actifs

Centre dédié pour 6 AWGs Charmonium, PartSpec, RadPen, TwoBody,

ThreeBody, QuasiTwoBody

Production Monte Carlo3ème centre producteur

Skimming Monte CarloActif depuis mi-2009Voir présentation Elisabetta

BaBar France 18/01/2010 4Vincent Poireau

Page 5: CALCUL AU CCIN2P3

BaBar France 19/01/2010 5Vincent Poireau

CPU utilisé par BaBar en 2009Temps CPU pour le batch

Nombre de jobs

Jobs en queue Jobs qui tournent

Page 6: CALCUL AU CCIN2P3

BaBar France 19/01/2010 6Vincent Poireau

Répartition des utilisateurs du batch

MC

Page 7: CALCUL AU CCIN2P3

BaBar France 19/01/2010 7Vincent Poireau

CPU utilisé par BaBarPart de l’analyse aussi

importante qu’en 2008Part du MC plus faible qu’en

2008

BaBar totalise 5.5 % du temps de calcul sur Anastasie

Demande pour 2010185 Mh UIIdentique à 2008 et 2009

Page 8: CALCUL AU CCIN2P3

Equipe de production Odile, Philippe (LPNHE)Jean-Yves, Suzanne (ccin2p3)Zou (Saclay)

Production SP10 jusqu’à septembre 2009SP10 : simulation Run1-Run7

Production SP11 depuis octobreSP11 : MC générique additionnel (10 ×

données)

BaBar France 19/01/2010 8Vincent Poireau

Page 9: CALCUL AU CCIN2P3

Production en 2009 (nombre de jobs)

Production fin d’année

1500 jobs, puis 2000 jobs passés en parallèle !Bientôt 2500 jobs (merci Jean-Yves !)

BaBar France 19/01/2010 9Vincent Poireau

Jobs en queue Jobs qui tournent

SP10 SP11

Tout seul ! Plus tout seul…

Page 10: CALCUL AU CCIN2P3

Production SP10

BaBar France 19/01/2010 10Vincent Poireau

WeekBeginning

TOTAL caltech ccin2p3 ral slac smu

13-1-2010 61984 0 47138 0 14110 736

6-1-2010 277380 23262 133643 4833 110532 5110

30-12-2009

348941 6562 201626 23124 113493 4136

23-12-2009

308510 29448 173045 0 102510 3507

16-12-2009

132624 42639 0 0 85410 4575

9-12-2009 45313 80 0 0 40738 4495

2-12-2009 121580 5893 64547 0 49368 1772

25-11-2009

61228 0 16574 0 44654 0

18-11-2009

25722 0 162 1841 23719 0

11-11-2009

41909 0 0 0 41909 0

4-11-2009 54592 0 0 96 52372 2124

28-10-2009

109054 0 37080 41413 30561 0

21-10-2009

145557 0 90022 2356 53179 0

14-10-2009

118973 0 58850 0 60123 0

7-10-2009 67869 0 4269 0 63600 0

Production SP11

Premier producteur SP11 !

Millier d’événements par semaine

Page 11: CALCUL AU CCIN2P3

AFS262 144 Mo disponible28 % libre

HPSS 828 675 Go utilisé13 % du total disponible 4ème utilisateur2 871 463 fichiers (295 Mo / fichier)

BaBar France 19/01/2010 11Vincent Poireau

Page 12: CALCUL AU CCIN2P3

Sps (/sps/babar)37 260 GB

disponible20.6 % libre

Du nettoyage a été fait dernièrement !Sinon

procédure automatique

BaBar France 19/01/2010 12Vincent Poireau

Page 13: CALCUL AU CCIN2P3

Xrootd Espace mutualisé entre plusieurs expériences 447 488 Go disponible98 264 Go utilisé par Babar (22 %)

BaBar France 19/01/2010 13Vincent Poireau

Page 14: CALCUL AU CCIN2P3

SL5 64 bitsConnection : ccali.in2p3.frExécute le code Babar

SL4 64 bitsConnection : ccalisl4.in2p3.frExécute le code Babar

SL4 32 bitsConnection : ccalisl432.in2p3.frCompile et exécute le code Babar

SL3 32 bitsConnection : ccalisl3.in2p3.frMachine éteinte

BaBar France 19/01/2010 14Vincent Poireau

Page 15: CALCUL AU CCIN2P3

La dernière machine SL3 a été éteinte la semaine dernièreN’était plus maintenueReprésentait un trou de sécurité pour le

ccin2p3Cependant, quelques utilisateurs peuvent

encore en avoir l’utilité (analyses R18)Procédure : envoyer un email à

[email protected] pour demander à rallumer la machine pour un temps donné

Serveur objectivity éteint définitivement

BaBar France 19/01/2010 15Vincent Poireau

Page 16: CALCUL AU CCIN2P3

Nombre de machines dans la ferme AnastasieLINUX: SL5 64 bits

600 workers 6304 processeurs Puissance : 6 352 109 UI(h)/day

OldLINUX: SL4 64 bits 134 workers 1072 processeurs Puissance : 1 101 446 UI(h)/day

Utilisez donc LINUX plutôt que oldLINUX!BaBar France 19/01/2010 16Vincent Poireau

Page 17: CALCUL AU CCIN2P3

Fin prévue de la plateforme SL4 pour le batch

Changement du système de batch en 2010Ancien système : BQSNouveau : LSF ? Sun Grid Engine ?Mise en service au cours de l’année

BaBar France 19/01/2010 17Vincent Poireau

Page 18: CALCUL AU CCIN2P3

BaBar France, 16 octobre 2008

Vincent Poireau18

Gestion des mots de passe Grand nombre de comptes (multiple ssh, internet, …) Obligation de changement des mots de passe régulièrement à

Lyon et SLAC Multiplication des mots de passe !

Conséquence : beaucoup d’utilisateurs les oublient !

Techniques les plus employées Fichiers .txt dans mes documents Carnet sur le bureau Mémoire (défaillante !)

Conseil : utiliser un gestionnaire de mot de passe Gratuit: KeePass (windows, Linux) Payant: RoboForm (windows, s’intègre

parfaitement à internet explorer ou firefox)