07. November 2003 18:00: 15,5 Stunden CGI Probleme
Liebe Mitglieder und sonstige Hostsharing-Nutzer,Auswirkung
Vom 07. November 2003, ca. 18:00h bis 08. November 2003, ca. 9:30h gab es größere Probleme mit CGI im zentralen DW-Webserver. Oft wurden Aufrufe nur mit Fehler 500 (Internal Server Error) beantwortet. Besonders heftig war die Störung von ca. 22:00h bis ca. 0:00h und von ca. 3:30h bis 4:30h sowie von ca. 6:00h bis 9:30h.
Ursache
Das Limit für offene Dateien des zentralen Webservers war durch die Einrichtung eines neuen Paket erreicht worden.
Details
Der Fehler wurde leider nicht von unserem Monitoring erfasst, weil wir CGI nicht mit in den Messungen haben. Zwar gab es Meldungen von Benutzern, aber zunächst klang es eher nach Fehlern in den Anwendungen als nach einem zentralen Problem. Das Ausmaß des Problems war den Hostmastern also bis ca. 9:00h gar nicht bewusst.
Maßnahmen
Zunächst wurde, in der falschen Annahme, dass es sich um Einzelprobleme handelt, evaluiert, wir einzelnen Usern bzw. auch allen Domain-Admins mehr File-Handles gewährt werden können, ohne dabei aber die Grenze für den Apache an sich eizuschränken.
Als die eigentliche Ursache bekannt war, was auch durch ein abstürzendes (seg fault) lsof erschwert wurde, haben wir zunächst die Anzahl der File-Handles für den DW-Webserver auf 2048 verdoppelt.
ToDo #364 wurde aufgenommen, um CGI in unser Monitoring aufzunehmen.
Für den Ausfall bitte ich im Namen der Hostmaster um Verzeihung.
- Michael Hönnig
Hostmaster Hostsharing eG
