Der jüngste weltweite Ausfall erinnert uns daran, dass die Identifizierung von Problemen und deren Auswirkungen nur der erste Schritt eines langwierigen Prozesses zur Behebung ist. Störungen sind unvermeidbar; wie wir uns darauf vorbereiten und daraus lernen, versetzt Teams in die Lage, beim nächsten Mal effektiver zu reagieren. Wie die von Unternehmen weltweit ergriffenen Maßnahmen gezeigt haben, kann die Implementierung einer bekannten Lösung in einer Vielzahl von Umgebungen, die potenziell von mehreren verteilten Teams verwaltet werden, eine enorme Herausforderung darstellen. Optimale Praktiken im Störungsmanagement in Verbindung mit zentralisierten Automatisierungsstandards können die Auswirkungen solcher Störungen oft abmildern. Dieser Blogbeitrag beleuchtet die Vorteile und Herausforderungen einer zentralisierten Automatisierung im IT-Betrieb.
___________________________________________________________________________

Im Gespräch mit IT- und Ingenieurfachleuten sowie Führungskräften aus verschiedenen Branchen kristallisiert sich immer wieder die Herausforderung heraus, effektive Automatisierungsstrategien im großen Maßstab umzusetzen. Lassen Sie uns untersuchen, wie Unternehmen bei der Automatisierung das richtige Gleichgewicht zwischen Zentralisierung und Dezentralisierung finden können.

Das Dilemma zwischen Zentralisierung und Dezentralisierung

In Geschäfts- und IT-Prozessen besteht ein inhärentes Spannungsverhältnis zwischen der Zentralisierung von Funktionen zur Standardisierung und Kontrolle und der Dezentralisierung für Agilität und Innovation. Dies zeigt sich besonders deutlich im Bereich der Automatisierung, wo Teams ständig nach Möglichkeiten suchen, die Effizienz zu steigern und manuelle Arbeitsbelastungen zu reduzieren.

Zentralisierung bietet Vorteile wie:

• Einfachere Implementierung von Kontrollmechanismen und Leitplanken
• Ganzheitliche Transparenz für Führungskräfte
• Optimierte Implementierung neuer Standards

Andererseits bietet die Dezentralisierung Folgendes:

• Teamautonomie bei der Anwendung spezialisierter Prozesse und Werkzeuge
• Höhere Geschwindigkeit bei Entscheidungsfindung und Umsetzung
• Flexibilität bei der Verwendung von Best-of-Breed-Lösungen für spezifische Aufgaben

Ein ausgezeichneter Artikel dazu Diskussion von Alix Partners listet viele der Vor- und Nachteile der einzelnen Ansätze auf:

Die Automatisierungslandschaft in modernen Organisationen

In der heutigen IT- und Softwareentwicklungslandschaft ist Automatisierung allgegenwärtig. Sie umfasst ein breites Spektrum an Aktivitäten, von der Reaktion auf Störungen und dem Zuverlässigkeitsmanagement bis hin zur Bereitstellung und Berichterstattung. Die dezentrale Struktur der meisten Organisationen hat jedoch zu einer Vielzahl unterschiedlicher Automatisierungstools und -praktiken in den verschiedenen Teams geführt.

Diese Vielfalt ist auf verschiedene Faktoren zurückzuführen:

• Heterogene Technologie Stacks: VMs versus Container; verschiedene Datenbanksysteme
• Unterschiedliche Fähigkeiten und Vorlieben Unter den Teammitgliedern: Einige Teams bevorzugen es, Automatisierungen in Python-Skripten zu schreiben, während andere Ansible-Playbooks bevorzugen.
• Unterschiedliche Verantwortlichkeiten Und Prozesse für verschiedene Teams

Neben der Vielfalt der technischen Automatisierung kann es in den einzelnen Teams auch Unterschiede in den übergeordneten oder geschäftlichen Prozessen geben, die diese Aufgaben oder den Einsatz von Automatisierung begleiten. Beispielsweise verlangen manche Teams, dass bestimmte Aufgaben von einer oder mehreren Personen freigegeben oder genehmigt werden, während dies bei anderen nicht der Fall ist. Andere wiederum schreiben vor, dass alle Automatisierungen in einem ITSM-System protokolliert oder Benachrichtigungen über Chat-Plattformen wie Slack oder Microsoft Teams versendet werden.

Dieser dezentrale Ansatz kann zwar Innovation und Geschwindigkeit fördern, birgt aber auch Herausforderungen bei der Implementierung abteilungs- oder organisationsweiter Standards, insbesondere in Bereichen wie:

• Selbstbedienungsfunktionen
• Compliance und Auditierung
• Sicherheit und Zugangskontrolle
• Änderungsmanagement- und Überprüfungsprozesse
• Integration mit Geschäftssystemen

Es gibt auch kritische Fälle im Incident-Management, in denen eine Lösung in allen Umgebungen des Unternehmens implementiert werden muss, wie beispielsweise beim Ausfall des Cyberark Falcon Agent Anfang des Monats. Bei zahlreichen Umgebungen mit jeweils unterschiedlichen Methoden zur Durchführung von Betriebsaufgaben verlängert sich die Zeit für die Behebung einer Serviceunterbrechung erheblich.

Der Einfluss von generativer KI auf die Automatisierung

Generative KI revolutioniert die Automatisierungslandschaft, indem sie die Geschwindigkeit der Automatisierungserstellung deutlich erhöht. Tools wie GitHub Copilot, ChatGPT und PagerDuty Advance Dies ermöglicht es Nutzern, schnell Skripte und Playbooks zu generieren, wodurch die Entwicklungszeit verkürzt und die Bereitstellung beschleunigt wird. Dieses rasante Innovationstempo verdeutlicht jedoch auch die Herausforderungen und Risiken der Dezentralisierung für die Automatisierung:

• Nachlässige Beachtung der Sicherheit: Durchschnittliche Geschäftsanwender, die mit KI arbeiten, verfügen möglicherweise nicht über das gleiche Sicherheitsbewusstsein wie erfahrene Entwickler, was zu potenziellen Sicherheitslücken führen kann.
• Mangelhaftes Berechtigungsmanagement: KI-generierte Automatisierungen halten sich möglicherweise nicht an strenge Richtlinien für das Berechtigungsmanagement, wodurch das Risiko eines unbefugten Zugriffs steigt.
• Erhöhtes Risiko der Nichteinhaltung: Ohne angemessene Aufsicht können KI-generierte Automatisierungen gegen Datenschutzbestimmungen wie die DSGVO oder HIPAA verstoßen, was zu erheblichen Compliance-Risiken führt.

Die richtige Balance finden

Unsere Beobachtungen bei PagerDuty haben gezeigt, dass wachsende Unternehmen häufig von einem zentralen Team oder einer Abteilung profitieren, die sich auf Automatisierung konzentriert. Entscheidend ist jedoch, ein Gleichgewicht zu finden, das die Geschwindigkeit, Motivation und Innovationskraft der einzelnen Teams nicht beeinträchtigt.

Hier sind einige Strategien, die erfolgreiche Organisationen anwenden:

1. Einrichtung eines Kompetenzzentrums (Center of Excellence, COE): Es sollte ein zentrales Team eingerichtet werden, das sich auf Best Practices, Tools, Prozesse und Standards für die Automatisierung konzentriert. Dieses Team sollte die einzelnen Teams unterstützen und befähigen, anstatt alle Automatisierungsbemühungen zu übernehmen. Lesen Sie hier unser COE-E-Book. )
2. Wiederverwendbare Komponenten entwickeln: Ermutigen Sie die Entwicklung und den Austausch wiederverwendbarer Automatisierungskomponenten im gesamten Unternehmen. Diese Vorgehensweise fördert die Standardisierung, ohne die Teams zu zwingen, ihre bevorzugten Werkzeuge aufzugeben.
3. Implementieren Sie eine Orchestrierungsschicht: Nutzen Sie ein Automatisierungs-Orchestrierungsplattform Diese Lösung lässt sich in bestehende Systeme integrieren und gewährleistet gleichzeitig unternehmensweite Standards. So können Teams ihre bevorzugten Lösungen weiterhin nutzen und gleichzeitig die Anforderungen an Sicherheit, Transparenz und Self-Service erfüllen. Ein Beispiel für eine Architektur finden Sie im folgenden Diagramm.
4. Förderung des Wissensaustauschs: Förderung der teamübergreifenden Zusammenarbeit und des Wissensaustauschs, um bewährte Verfahren und innovative Ansätze im gesamten Unternehmen zu verbreiten.
5. Ausgewogenheit zwischen Standardisierung und Flexibilität: Identifizieren Sie Bereiche, in denen Standardisierung ist entscheidend (z. B. Sicherheitspraktiken, Compliance-Anforderungen) und Bereiche, in denen Teams mehr Autonomie haben können (z. B. Wahl der Skriptsprachen).

Eine Orchestrierungsplattform kann bei der Implementierung von Automatisierungsstandards helfen und gleichzeitig den Teams die Autonomie geben, ihre eigenen Tools zu verwenden.

Ein Beispiel aus der Praxis: Linksverschiebung unter Beibehaltung der Standards

Viele unserer Kunden setzen auf „Shift Left“, indem sie ihre Entwicklungsteams befähigen, Runbooks im Rahmen ihrer Serviceverantwortung zu implementieren. Gleichzeitig möchten sie ihren Level-1-Supportteams standardisierte Funktionen zur automatischen Fehlerbehebung während der Incident-Response bereitstellen. Dies spart Entwicklern nicht nur Zeit für wertschöpfende Aufgaben, sondern ermöglicht es den Supportteams auch, bei Bedarf sofort zu handeln, anstatt auf die Bestätigung und Umsetzung durch Experten warten zu müssen.

Um dieses Gleichgewicht zu erreichen, nutzen diese Organisationen zentrale Plattformen, die die von Entwicklerteams erstellte Automatisierung orchestrieren und gleichzeitig eine standardisierte Schnittstelle für L1-Supportmitarbeiter bereitstellen. Dieser Ansatz ermöglicht Folgendes:

• Autonomie des Entwicklerteams bei der Erstellung und Wartung dienstspezifischer Automatisierung
• Standardisierte Prozesse für die Reaktion auf Sicherheitsvorfälle
• Verbesserter Wissensaustausch zwischen Entwicklungs- und Betriebsteams

Vorbereitung auf die Zukunft

Durch die richtige Balance zwischen Zentralisierung und Autonomie in der Automatisierung optimieren Unternehmen nicht nur ihre laufenden Abläufe, sondern stärken auch ihre Widerstandsfähigkeit gegenüber zukünftigen technologischen Veränderungen – und minimieren gleichzeitig das Risiko von Folgeausfällen. Wenn die nächste Innovationswelle kommt, sind die Teams besser gerüstet, neue Tools und Methoden in einem flexiblen und dennoch standardisierten Rahmen zu implementieren.

Als CIOs und Technologieverantwortliche stehen Sie vor der Herausforderung, ein Umfeld zu schaffen, das Innovation und Agilität fördert und gleichzeitig die notwendigen Kontrollen und Standards zur langfristigen Risikominimierung gewährleistet. Durch den Einsatz geeigneter Plattformen und Teamstrukturen für das Incident-Management und die Automatisierungssteuerung erreichen Sie dieses Gleichgewicht und positionieren Ihr Unternehmen für langfristigen Erfolg in einer zunehmend automatisierten Welt.

Wir bei PagerDuty haben uns zum Ziel gesetzt, Unternehmen bei der Bewältigung dieser Herausforderungen zu unterstützen und ihnen zu helfen, robuste und skalierbare Automatisierungsstrategien zu entwickeln. Ich lade Sie ein, zu entdecken, wie unsere Lösungen Sie auf Ihrem Weg zur Automatisierung unterstützen und Ihnen helfen können, die optimale Balance für Ihr Unternehmen zu finden.