Ergebnis der Fehleranalyse 27.09.2021
Hallo zusammen,
nachdem nun alle Teilgebiete analysiert wurden, können wir euch auch endlich ein Update zu den Ergebnissen geben:
Zusammengefasst hat sich der vermutete Kommunikationsfehler im Transfersystem zur Plattform der Virenprüfdienste bestätigt. Um dies künftig schneller zu erkennen und beheben zu können wurden das automatische Monitoring rund um das Transfersystem verbessert und verschiedene Maßnahmen abgeleitet, die die automatisierte Nachverarbeitung des Wiederanlaufpools und das automatische Fehlerhandling mit der RZ-Kommunikation verbessern.
Außerdem haben wir auch unsere Prozesse sowohl in der internen als auch externen Kommunikation nochmal nachgeschärft, so dass dies beim nächsten Mal wieder besser funktionieren sollte 🙂
Für die Technik-Freaks und alle Interessierten hier noch ein paar mehr Details:
Im betroffenen Transfersystem managed ein sogenannter Data Table alle Virenprüfaufträge, die an die Plattform der Virenprüfung übergeben werden. Aufgrund eines Fehlers im Data Table konnten in der Folge keine Virenprüfaufträge mehr angenommen und weitergegeben werden. Dadurch war die Verarbeitungskette für alle Anwendungen unterbrochen, die im Kontext von Aufträgen über die RZ-Kommunikationen einen Virenscan beinhalten. Dieser Fehler konnte noch in der Nacht behoben werden.
Aufgrund des Fehlers waren blöderweise die offenen Aufträge mit einem untypischen Status im Wiederanlaufpool gelandet und konnten hier deshalb nicht automatisiert nachverarbeitet werden. Dies war allerdings in der Nacht nicht aufgefallen und konnte erst mit manuellen Eingriffen am 01.09. bereinigt werden.
Durch die im Wiederanlaufpool befindlichen Aufträge wiederum wurden aufgrund von fachlich notwendigen Verarbeitungsreihenfolgen wiederholt gesendete Aufträge ebenfalls geparkt und nicht direkt verarbeitet.
Am Ende wurde im Zuge der Problemanalyse auch noch ein Fehlverhalten in der RZ-Kommunikation identifiziert, das teilweise dazu geführt hat, dass Statusnachfragen ans Rechenzentrum durch den PC-Client unnötigerweise nach einiger Zeit final auf Fehler gesetzt wurden und die Betroffenen vor Ort aktiv werden mussten. Dieser Fehler ließ sich bereits durch eine verbesserte Steuerung im Rechenzentrum bereinigen und wird in den nächsten Tagen ohne Client-Änderung freigegeben.
Viele Grüße aus Nürnberg
Stefanie Herold
