SlideShare ist ein Scribd-Unternehmen logo
1 von 10
Downloaden Sie, um offline zu lesen
Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag
               Virtuelle Organisation dgOps – Status
                   2. Treffen DGI Monitoring TaskForce


                               Stefan Freitag

                          Institut f¨r Roboterforschung
                                    u
                        Technische Universit¨t Dortmund
                                             a


                               09. Juni 2010
Unterst¨tzung durch Beirat
                      u

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag
               Letztes Treffen
               Diskussion uber eine Beschlussvorlage bzgl. der Unterst¨tzung
                          ¨                                           u
               von dgOps

               Was danach geschah:
                   Erstellung und Erweiterung der Beschlussvorlage
                   Einreichung an TAB sowie Weiterleitung an D-Grid Beirat
                   Ziel: Ausspruch einer Empfehlung zur Unterst¨tzung von
                                                               u
                   dgOps auf D-Grid Ressourcen
Das Team

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag
               Frage aus letztem Treffen

                      Wer ubernimmt das Monitoring?
                          ¨


                      Stefan Freitag (VO Representative1 )
                      Arthur Carlson (VO Member)
                      Foued Jrad (VO Member)




                 1
                     kommissarisch
Erstellung einer Internetpr¨senz
                                          a

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag

                   URL: http://sites.google.com/site/dgriddgops/
                   Kein administrativer Aufwand
                   Einfache Einbindung weiterer Module (z. B. Maps,
                   Dokumente) und Gadgets
                       My recent activities
                       ToDo list
                       Project updates
                   Ver¨ffentlichung einer Acceptable Use Policy
                      o
Erstellung einer Internetpr¨senz
                                          a

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag
Acceptable Use Policy

 Virtuelle
Organisation
 dgOps –
               Goal
  Status
               to facilitate the operations of the D-Grid infrastructure, which
 S. Freitag
               includes running official monitoring and performance evaluation
               tools. During all times at which Grid resources are being utilised
               in monitoring or any other tasks relevant to the goal of the VO,
               the Members and Managers of the VO agree to [...] use the
               Grid only in the furtherance of the stated goals of the VO.

               Membership
               will be highly restricted to only those people who are actively
               involved in high level operations of D-Grid.

               Violation Consequences
               termination of membership
Integration von D-Grid Ressourcen

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag
               Dreistufiger Prozess
                a) Anschreiben an alle Ressourcen Admins mit dem Hinweis
                   auf die Empfehlung des Beirats und sp¨terer
                                                        a
                   Kontaktaufnahme durch dgOps.
                b) Direkte Kontaktaufnahme und Submission einfacher Jobs
                        Ziel: Existenz der VO Unterst¨tzung testen (grid-mapfile,
                                                     u
                        Accounts, . . . )
                                                    ¨
                 c) Vollst¨ndige Integration in die Uberwachung
                          a
               Nagios Status → Foued
Gesammelte Erfahrungen

 Virtuelle
Organisation
               Testen von Globus Installationen nicht trivial aufgrund
 dgOps –
  Status
                   Bugreport 5457 (aus 2007), veraltete Globus Toolkit
 S. Freitag        Installationen, Multi-VO Mitgliedschaft und vorhandenem
                    Bug“in RFT
                   ”
               <job>
               <localUserId>op0004</localUserId>
               <executable>/usr/bin/id</executable>
               <directory>/tmp</directory>
               </job>

               [...]
               Current job state: Active
               Current job state: CleanUp-Hold
               globusrun-ws: ignoring error while streaming [...]
               globus_ftp_client: the server responded with an error
               500 500-Command failed. : globus_l_gfs_file_open failed.
               500-globus_xio: Unable to open file /home/op/op0004/[...]
               500-globus_xio: System error in open: Permission denied
Gesammelte Erfahrungen

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag    dCache ist ebenso nicht ganz ohne
                   Unterst¨tzung von dgops und ops auf dem selben SE
                          u
                   Problem liegt beim InfoProvider und der Erzeugung
                   dynamischer Informationen
                   String replacement VO → Speicherpfad, z. B.
                   ops → /pnfs/grid.tu-dortmund.de/data/ops
                   dgops Teilstring ops“ matcht beim Replacement
                                    ”
                   Resultat: ein invalider Speicherpfad
                   dg/pnfs/grid.tu-dortmund.de/data/ops
Offene Punkte

 Virtuelle
Organisation
 dgOps –
  Status

 S. Freitag




                  Feedback an die Sites uber Availabilty/ Reliability
                                        ¨
                  Umstellung auf dgOps bei INCA
                  dgtest Zugang zu Nagios Web-Schnittstelle
                  Ver¨ffentlichung der Nagios Checks
                     o

Weitere ähnliche Inhalte

Andere mochten auch

2010-09-23 Journalismus als zentrale gesellschaftliche Instanz des Public St...
2010-09-23  Journalismus als zentrale gesellschaftliche Instanz des Public St...2010-09-23  Journalismus als zentrale gesellschaftliche Instanz des Public St...
2010-09-23 Journalismus als zentrale gesellschaftliche Instanz des Public St...Vinzenz Wyss
 
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010Anja Filzek
 
Beispiel Tonbildschau für Seniorweb.ch
Beispiel Tonbildschau für Seniorweb.chBeispiel Tonbildschau für Seniorweb.ch
Beispiel Tonbildschau für Seniorweb.chRoger Ramuz
 
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00Paul G. Huppertz
 
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...Paul G. Huppertz
 
Mobile Effects 2010
Mobile Effects 2010Mobile Effects 2010
Mobile Effects 2010burda_news
 

Andere mochten auch (8)

2010-09-23 Journalismus als zentrale gesellschaftliche Instanz des Public St...
2010-09-23  Journalismus als zentrale gesellschaftliche Instanz des Public St...2010-09-23  Journalismus als zentrale gesellschaftliche Instanz des Public St...
2010-09-23 Journalismus als zentrale gesellschaftliche Instanz des Public St...
 
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010
Anja Filzek - Die Wahrheit über soziale Netzwerke Vortrag10092010
 
Beispiel Tonbildschau für Seniorweb.ch
Beispiel Tonbildschau für Seniorweb.chBeispiel Tonbildschau für Seniorweb.ch
Beispiel Tonbildschau für Seniorweb.ch
 
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00
Vortrag 'Service-Spezifizierung und Systemdesign' 2011-02-24 V01.01.00
 
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...
Vortrag 'Service Provider - Service-Trilemma & Geschäftsmodell' 2014-11-06 V0...
 
Wandmalereien
WandmalereienWandmalereien
Wandmalereien
 
Mobile Effects 2010
Mobile Effects 2010Mobile Effects 2010
Mobile Effects 2010
 
Zeepracht
ZeeprachtZeepracht
Zeepracht
 

Mehr von Stefan Freitag

Globus Toolkit Status @ bwGrid F2F
Globus Toolkit Status @ bwGrid F2FGlobus Toolkit Status @ bwGrid F2F
Globus Toolkit Status @ bwGrid F2FStefan Freitag
 
D-Grid IaaS Vorstellung
D-Grid IaaS VorstellungD-Grid IaaS Vorstellung
D-Grid IaaS VorstellungStefan Freitag
 
Vorstellung IGE bei bwGrid Face2Face Meeting
Vorstellung IGE bei bwGrid Face2Face MeetingVorstellung IGE bei bwGrid Face2Face Meeting
Vorstellung IGE bei bwGrid Face2Face MeetingStefan Freitag
 
Cloud Computing in D-Grid
Cloud Computing in D-GridCloud Computing in D-Grid
Cloud Computing in D-GridStefan Freitag
 
Talk at the Security Workshop, GridKA Summerschool 2010
Talk at the Security Workshop, GridKA Summerschool 2010Talk at the Security Workshop, GridKA Summerschool 2010
Talk at the Security Workshop, GridKA Summerschool 2010Stefan Freitag
 
gLite Administration Workshop, Slides
gLite Administration Workshop, SlidesgLite Administration Workshop, Slides
gLite Administration Workshop, SlidesStefan Freitag
 
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle Stefan Freitag
 
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"Stefan Freitag
 
Cloud Computing im Kontext des D-Grid
Cloud Computing im Kontext des D-GridCloud Computing im Kontext des D-Grid
Cloud Computing im Kontext des D-GridStefan Freitag
 
Integration of Cloud and Grid Middleware at DGRZR
Integration of Cloud and Grid Middleware at DGRZRIntegration of Cloud and Grid Middleware at DGRZR
Integration of Cloud and Grid Middleware at DGRZRStefan Freitag
 

Mehr von Stefan Freitag (11)

Globus Toolkit Status @ bwGrid F2F
Globus Toolkit Status @ bwGrid F2FGlobus Toolkit Status @ bwGrid F2F
Globus Toolkit Status @ bwGrid F2F
 
D-Grid IaaS Vorstellung
D-Grid IaaS VorstellungD-Grid IaaS Vorstellung
D-Grid IaaS Vorstellung
 
Vorstellung IGE bei bwGrid Face2Face Meeting
Vorstellung IGE bei bwGrid Face2Face MeetingVorstellung IGE bei bwGrid Face2Face Meeting
Vorstellung IGE bei bwGrid Face2Face Meeting
 
D-Grid Infrastructure
D-Grid InfrastructureD-Grid Infrastructure
D-Grid Infrastructure
 
Cloud Computing in D-Grid
Cloud Computing in D-GridCloud Computing in D-Grid
Cloud Computing in D-Grid
 
Talk at the Security Workshop, GridKA Summerschool 2010
Talk at the Security Workshop, GridKA Summerschool 2010Talk at the Security Workshop, GridKA Summerschool 2010
Talk at the Security Workshop, GridKA Summerschool 2010
 
gLite Administration Workshop, Slides
gLite Administration Workshop, SlidesgLite Administration Workshop, Slides
gLite Administration Workshop, Slides
 
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle
Erweiterung einer D-Grid-Ressource um eine Compute-Cloud-Schnittstelle
 
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"
Zusammenfassung Open Issue Session "Cloud Computing im Kontext des D-Grid"
 
Cloud Computing im Kontext des D-Grid
Cloud Computing im Kontext des D-GridCloud Computing im Kontext des D-Grid
Cloud Computing im Kontext des D-Grid
 
Integration of Cloud and Grid Middleware at DGRZR
Integration of Cloud and Grid Middleware at DGRZRIntegration of Cloud and Grid Middleware at DGRZR
Integration of Cloud and Grid Middleware at DGRZR
 

Virtuelle Organisation dgOps - Status

  • 1. Virtuelle Organisation dgOps – Status S. Freitag Virtuelle Organisation dgOps – Status 2. Treffen DGI Monitoring TaskForce Stefan Freitag Institut f¨r Roboterforschung u Technische Universit¨t Dortmund a 09. Juni 2010
  • 2. Unterst¨tzung durch Beirat u Virtuelle Organisation dgOps – Status S. Freitag Letztes Treffen Diskussion uber eine Beschlussvorlage bzgl. der Unterst¨tzung ¨ u von dgOps Was danach geschah: Erstellung und Erweiterung der Beschlussvorlage Einreichung an TAB sowie Weiterleitung an D-Grid Beirat Ziel: Ausspruch einer Empfehlung zur Unterst¨tzung von u dgOps auf D-Grid Ressourcen
  • 3. Das Team Virtuelle Organisation dgOps – Status S. Freitag Frage aus letztem Treffen Wer ubernimmt das Monitoring? ¨ Stefan Freitag (VO Representative1 ) Arthur Carlson (VO Member) Foued Jrad (VO Member) 1 kommissarisch
  • 4. Erstellung einer Internetpr¨senz a Virtuelle Organisation dgOps – Status S. Freitag URL: http://sites.google.com/site/dgriddgops/ Kein administrativer Aufwand Einfache Einbindung weiterer Module (z. B. Maps, Dokumente) und Gadgets My recent activities ToDo list Project updates Ver¨ffentlichung einer Acceptable Use Policy o
  • 5. Erstellung einer Internetpr¨senz a Virtuelle Organisation dgOps – Status S. Freitag
  • 6. Acceptable Use Policy Virtuelle Organisation dgOps – Goal Status to facilitate the operations of the D-Grid infrastructure, which S. Freitag includes running official monitoring and performance evaluation tools. During all times at which Grid resources are being utilised in monitoring or any other tasks relevant to the goal of the VO, the Members and Managers of the VO agree to [...] use the Grid only in the furtherance of the stated goals of the VO. Membership will be highly restricted to only those people who are actively involved in high level operations of D-Grid. Violation Consequences termination of membership
  • 7. Integration von D-Grid Ressourcen Virtuelle Organisation dgOps – Status S. Freitag Dreistufiger Prozess a) Anschreiben an alle Ressourcen Admins mit dem Hinweis auf die Empfehlung des Beirats und sp¨terer a Kontaktaufnahme durch dgOps. b) Direkte Kontaktaufnahme und Submission einfacher Jobs Ziel: Existenz der VO Unterst¨tzung testen (grid-mapfile, u Accounts, . . . ) ¨ c) Vollst¨ndige Integration in die Uberwachung a Nagios Status → Foued
  • 8. Gesammelte Erfahrungen Virtuelle Organisation Testen von Globus Installationen nicht trivial aufgrund dgOps – Status Bugreport 5457 (aus 2007), veraltete Globus Toolkit S. Freitag Installationen, Multi-VO Mitgliedschaft und vorhandenem Bug“in RFT ” <job> <localUserId>op0004</localUserId> <executable>/usr/bin/id</executable> <directory>/tmp</directory> </job> [...] Current job state: Active Current job state: CleanUp-Hold globusrun-ws: ignoring error while streaming [...] globus_ftp_client: the server responded with an error 500 500-Command failed. : globus_l_gfs_file_open failed. 500-globus_xio: Unable to open file /home/op/op0004/[...] 500-globus_xio: System error in open: Permission denied
  • 9. Gesammelte Erfahrungen Virtuelle Organisation dgOps – Status S. Freitag dCache ist ebenso nicht ganz ohne Unterst¨tzung von dgops und ops auf dem selben SE u Problem liegt beim InfoProvider und der Erzeugung dynamischer Informationen String replacement VO → Speicherpfad, z. B. ops → /pnfs/grid.tu-dortmund.de/data/ops dgops Teilstring ops“ matcht beim Replacement ” Resultat: ein invalider Speicherpfad dg/pnfs/grid.tu-dortmund.de/data/ops
  • 10. Offene Punkte Virtuelle Organisation dgOps – Status S. Freitag Feedback an die Sites uber Availabilty/ Reliability ¨ Umstellung auf dgOps bei INCA dgtest Zugang zu Nagios Web-Schnittstelle Ver¨ffentlichung der Nagios Checks o