Stellen Sie sich zwei Zeilen in einer Crontab vor: Ein Export startet um 01:00 Uhr, ein Ladevorgang für das Data Warehouse um 02:00 Uhr. Die Stunde dazwischen ist die einzige Vorkehrung dafür, dass der Ladevorgang erst nach dem Export beginnt. Dauert der Export in einer Nacht länger oder schlägt er mittendrin fehl, beginnt der Ladevorgang trotzdem um 02:00 Uhr, liest die Datei vom Vortag und endet ohne Fehler. Wenn niemand die Fehlermail des Exports liest, fällt es nicht auf. Aus Sicht von Cron sind beide Jobs pünktlich gelaufen.
Mit Workload-Automatisierung kann der Ladevorgang auf den erfolgreichen Export warten. Der Begriff begegnet Ihnen vor allem bei Anbietern und in der Unternehmens-IT, etwa im Zusammenhang mit Control-M und AutoSys. Teile des Vokabulars überschneiden sich mit der Workflow-Automatisierung und der robotergestützten Prozessautomatisierung. Die Unterschiede liegen darin, was ein Werkzeug ausführt und wie es die Ausführung startet.
Die Kurzfassung
- Workload-Automatisierung (WLA) führt voneinander abhängige IT-Jobs wie Datenladevorgänge, Dateiübertragungen und ERP-Stapelverarbeitung zentral auf mehreren Servern aus. Sie bietet Wiederholungsversuche, einen Ausführungsverlauf und Fehlermeldungen.
- Cron startet einen Befehl zur geplanten Minute auf einem Rechner und sendet dessen Ausgabe per E-Mail. Die Reihenfolge der Jobs, die Koordination zwischen den Rechnern und den Ausführungsverlauf müssen Sie selbst verwalten.
- Workflow-Automatisierung verbindet Anwendungen bei einem Ereignis, etwa mit n8n oder Zapier, oder leitet Genehmigungen an Personen weiter. Bei der robotergestützten Prozessautomatisierung (RPA) bedienen Bots die Oberfläche einer Anwendung wie ein Mensch. WLA führt Jobs auf den Servern hinter diesen Anwendungen aus.
- Wenn sich Cron-Ausführungen überschneiden, hilft eine Sperre wie
flockoder eine Änderung am Job. Die Überschneidung allein ist kein Grund, ein WLA-Produkt zu kaufen.
Was ist Workload-Automatisierung?
Workload-Automatisierung (WLA) nutzt Software, um IT-Jobs wie nächtliche Datenladevorgänge, Dateiübertragungen und ERP-Stapelverarbeitung zentral und in der richtigen Reihenfolge auf mehreren Rechnern auszuführen. Die Software startet Jobs nach einem Zeitplan oder bei einem Ereignis, wartet auf den Erfolg vorausgesetzter Jobs, wiederholt fehlgeschlagene Ausführungen, führt einen Verlauf und warnt bei Fehlern oder Laufzeitüberschreitungen.
Für einen Scheduler legt eine Abhängigkeit eine Bedingung für das Ergebnis fest: Der Ladevorgang startet nur, wenn der Export erfolgreich war. Andernfalls wird der Bereitschaftsdienst benachrichtigt. Ein Zeitabstand beruht lediglich auf einer Schätzung der Laufzeit des ersten Jobs. Darüber hinaus bieten WLA-Anbieter oft ähnliche Funktionen:
- Abhängigkeiten zwischen Jobs, einschließlich Verzweigungen bei Fehlern
- Auslöser nach Uhrzeit, nach Geschäftskalender (nur Werktage ohne Feiertage) oder nach Ereignis, etwa beim Eintreffen einer Datei
- Ausführung auf anderen Systemen über installierte Agenten, agentenlose Verbindungen oder Dienstintegrationen, je nach Produkt und Zielsystem
- Wiederholungsversuche, Zeitlimits und Abbruch hängender Jobs
- Ein Ausführungsverlauf mit Job, Ausführungsort, Zeitpunkt, Dauer und Rückgabestatus
- Warnungen bei Fehlern, beim Überschreiten einer festgelegten Laufzeit und bei drohender Verletzung einer im SLA festgelegten Frist
- Nachholen verpasster Ausführungen, wenn ein Rechner nach einem Ausfall wieder verfügbar ist
IBM beschreibt IBM Workload Automation als Plattform zur Koordination unbeaufsichtigter und ereignisgesteuerter Jobs in hybriden Umgebungen. Praktisch bedeutet das: Ein zentraler Scheduler startet Jobs ohne manuelles Eingreifen, nach Zeitplan oder bei einem Ereignis, auf Mainframes, lokalen Rechnern und Cloud-Systemen. Diese Beschreibung entspricht den Funktionen des Produkts, erschwert aber den Vergleich mit Ihren Cron-Jobs. Auch Control-M von BMC, AutoSys, Redwood RunMyJobs, ActiveBatch, Tidal und JAMS verwenden den Begriff.
Workload-Automatisierung, Cron, Workflow-Automatisierung und RPA im Überblick
Die vier Ansätze unterscheiden sich in Auslöser, Art der Aufgabe und Ausführungsort. Cron führt zu einer festgelegten Zeit einen Befehl auf einem Rechner aus. Workload-Automatisierung führt Jobs auf mehreren Servern aus, ausgelöst durch Zeitpunkte, Ereignisse oder Ergebnisse anderer Jobs. Workflow-Automatisierung ruft Anwendungs-APIs auf oder wartet auf Personen. RPA kombiniert Bildschirmaktionen mit API-Aufrufen.
| Merkmal | Cron | Workload-Automatisierung | Workflow-Automatisierung | RPA |
|---|---|---|---|---|
| Auslöser | Eine Uhrzeit | Zeitpunkte, Kalender, Ereignisse und Ergebnisse anderer Jobs | Anwendungsereignisse, übermittelte Formulare und Zeitpläne | Ein Zeitplan, ein Ereignis oder eine Person |
| Arbeitseinheit | Ein Befehl | Ein Job auf einem Rechner: Skript, Stapellauf, Übertragung oder ERP-Job | Ein Schritt, der eine Anwendungs-API aufruft | Eine aufgezeichnete Folge von Aktionen in der Oberfläche und API-Aufrufen |
| Ausführungsort | Ein Rechner | Mehrere Rechner und Dienste unter zentraler Kontrolle, über Agenten, agentenlose Verbindungen oder Integrationen | Die Automatisierungsplattform, die SaaS-APIs aufruft | Eine Bot-Laufzeitumgebung in einer Desktop- oder Serversitzung |
| Abhängigkeiten und Fehler | Keine integrierte Behandlung; die Ausgabe wird per E-Mail gesendet | Abhängigkeitsgraph, Wiederholungsversuche, Warnmeldungen, Ausführungsverlauf | Fehlerverzweigungen und Wiederholungsversuche je Workflow | Ausnahmebehandlung je Bot |
| Beispielwerkzeuge | cron | Control-M, AutoSys, IBM Workload Automation; für ähnliche Jobs: Rundeck, Dagu und Kestra | n8n und Zapier; BPM-Suiten für Genehmigungen | UiPath, Automation Anywhere |
Ist Cron ein Werkzeug zur Workload-Automatisierung?
Nein. Cron ist ein zeitgesteuerter Job-Scheduler für einen einzelnen Rechner. Laut der Handbuchseite zu cron(8) prüft Cron jede Minute, welche Jobs fällig sind, und sendet die Ausgabe an den Eigentümer der Crontab. Die Reihenfolge der Jobs, die Koordination von Rechnern, den Verlauf und die Warnmeldungen muss der Betreiber verwalten.
Die Handbuchseite zu crontab(5) ergänzt, dass MAILTO="" diese E-Mails deaktiviert, auch wenn ein Job fehlschlägt. Hier sehen Sie einen Export um 01:00 Uhr und einen Ladevorgang um 02:00 Uhr sowie die übliche Behelfslösung:
# BEFORE: illustration only; do not install these commented entries.
# 0 1 * * * /opt/jobs/export-orders.sh
# 0 2 * * * /opt/jobs/load-warehouse.sh
# AFTER: replace both old entries with this single entry.
# The load runs only if the export exits successfully.
0 1 * * * /opt/jobs/export-orders.sh && /opt/jobs/load-warehouse.sh
Die Zeile mit && sieht wie eine Abhängigkeit aus. Sie umfasst aber nur einen Rechner und einen Rückgabecode. Dadurch bleiben fünf Lücken. Außerhalb dieser Zeile gibt es keine Regel für den Fall, dass Job X erfolgreich war, oder dafür, Job Y nach einem Fehler in Job X auszuführen. Rechnerübergreifende Koordination fehlt. Dadurch kann ein Ladevorgang auf dem Warehouse-Server nicht auf einen Export auf dem Datenbankserver warten. Der Verlauf besteht nur aus den Protokollen der einzelnen Skripte. Außer der per E-Mail gesendeten Ausgabe gibt es keine Warnung, und die kann ungelesen bleiben. Außerdem holt cron(8) keinen Eintrag nach, wenn der Rechner zur vorgesehenen Minute ausgeschaltet war. Laut Handbuch laufen die täglichen, wöchentlichen und monatlichen Systemjobs, die früher in /etc/crontab standen, nun standardmäßig mit dem separaten Werkzeug anacron. Markerdateien, Wrapper-Skripte und Befehlsfolgen mit && dienen dazu, diese Lücken zu umgehen.
BMC erklärt die Abgrenzung aus Anbietersicht in seinem Beitrag über Job-Scheduling und WLA. Beim Job-Scheduling laufen Stapeljobs auf einer Plattform. Workload-Automatisierung koordiniert abhängige Jobs zentral über mehrere Server und Umgebungen hinweg. BMC nennt die Windows-Aufgabenplanung als Beispiel für einen im Betriebssystem enthaltenen Scheduler. Cron erfüllt diese Aufgabe unter Linux und Unix. Der Unterschied liegt im Umfang: eine Plattform oder mehrere mit Abhängigkeiten untereinander.
Welche WLA-Funktionen Sie bereits ohne WLA-Werkzeug haben
Drei verbreitete Werkzeuge decken einen Teil der WLA-Funktionen ab. Ein systemd-Kalendertimer (OnCalendar=) mit Persistent=true holt einen Lauf nach, den der Rechner ausgeschaltet verpasst hat. Ein Kubernetes-CronJob mit concurrencyPolicy: Forbid überspringt einen Lauf, wenn der vorherige noch läuft. flock verhindert, dass sich zwei Instanzen eines Cron-Jobs überschneiden. Dafür benötigen Sie kein WLA-Produkt.
Das Handbuch zu systemd.timer erklärt, dass mit Persistent=true der letzte Auslösezeitpunkt gespeichert wird. Die Service-Unit startet sofort, wenn sie während der Inaktivität des Timers mindestens einmal hätte starten sollen. Auf diesem Rechner gibt es eine Nachholaktivierung für die verpassten Kalenderläufe. Dafür sind zwei Unit-Dateien statt einer Crontab-Zeile nötig. Ein Vergleich von Cron und systemd-Timern zeigt, was die zusätzliche Einrichtung bringt.
Die Kubernetes-Dokumentation zu CronJobs nennt Allow als Standardwert von concurrencyPolicy. Damit dürfen beide Instanzen laufen. Forbid überspringt den neuen Lauf, und Replace ersetzt den laufenden Job durch den neuen. Außerhalb von Kubernetes verwaltet flock(1) Sperren aus Shell-Skripten und hält eine Sperre, solange der jeweilige Befehl läuft. Mit -n schlägt die zweite Instanz fehl, statt zu warten. So verhindert */5 * * * * flock -n /tmp/sync.lock /opt/jobs/sync.sh, dass sich zwei Synchronisierungen überschneiden.
Überschneidungen oder auflaufende Ausführungen lassen sich mit einer Sperre oder durch Änderungen am Job beheben. Ein anderer Scheduler löst das Problem nicht. Wenn ein alle fünf Minuten geplanter Job gelegentlich zehn Minuten dauert, benötigt er doppelt so viel Zeit wie vorgesehen. Eine Sperre verhindert die Anhäufung. Den Rest lösen Sie, indem Sie den Job beschleunigen, ihm mehr Ressourcen geben oder ihn seltener ausführen. Ein WLA-Produkt meldet die Überschreitung an anderer Stelle, verhindert sie aber nicht. In einer Diskussion auf r/sysadmin über sich überschneidende Cron-Jobs empfiehlt die am höchsten bewertete Antwort eine Sperrprüfung. flock wird mehrfach genannt, und eine Antwort fasst die Aufgabe des Schedulers zusammen: „Cron führt Befehle aus. Das macht es sehr gut.“
Keines der drei Werkzeuge liefert einen rechnerübergreifenden Abhängigkeitsgraphen oder einen zentralen Ausführungsverlauf. Diese beiden Funktionen können den Einsatz eines WLA-Werkzeugs rechtfertigen.
Wie sich Workload-Automatisierung von Workflow-Automatisierung unterscheidet
Die Ansätze unterscheiden sich darin, was wo ausgeführt wird, unabhängig davon, ob ein Mensch beteiligt ist. Workload-Automatisierung führt Skripte, Datenladevorgänge und Dateiübertragungen auf Servern aus. Workflow-Automatisierung verknüpft Anwendungs-APIs. Ein Ablauf in n8n oder Zapier kann zum Beispiel aus einem Formular einen CRM-Eintrag erstellen. Auch Genehmigungen lassen sich über ein Werkzeug für das Geschäftsprozessmanagement (BPM) weiterleiten.
Der Begriff wird für drei Dinge verwendet. Erstens für Workload-Automatisierung selbst. Zweitens für die Integration von Anwendungen. Die Dokumentation von n8n beschreibt n8n als Workflow-Automatisierungswerkzeug mit einer Fair-Code-Lizenz, das KI-Funktionen mit der Automatisierung von Geschäftsprozessen verbindet. n8n und die anderen selbst gehosteten Zapier-Alternativen verbinden einen Auslöser in einer Anwendung mit Aufrufen an andere Anwendungen. Drittens bezeichnet der Begriff BPM, bei dem Formulare und Genehmigungsketten jeden Schritt zurückhalten, bis jemand handelt.
Stonebranch, ein WLA-Anbieter, zieht die Grenze bei der menschlichen Beteiligung. In einem Vergleich von 2022 schreibt der Anbieter, dass Schritte der Workflow-Automatisierung typischerweise zwischen Personen ablaufen, etwa bei Genehmigungen. WLA-Jobs benötigen dagegen normalerweise keinen solchen Austausch. Für BPM passt dieses Kriterium. Aber auch ein n8n-Workflow, der Bestellungen aus einem Online-Shop in eine Tabelle überträgt, kommt ohne menschliches Eingreifen aus. Nach diesem Kriterium würde er in dieselbe Kategorie fallen wie ein Mainframe-Stapellauf. Die Abgrenzung richtet sich hier deshalb nach der Art der Arbeit: Jobs auf Infrastruktur, Aufrufe zwischen Anwendungen oder Schritte, die auf Menschen warten.
Das Wort „Workflow“ allein taugt nicht zur Abgrenzung. BMC bewirbt Control-M als Möglichkeit, „geschäftskritische Workflows zu orchestrieren“, und zwar auf Mainframes sowie in Cloud-, verteilten und SaaS-Umgebungen. Die Dokumentation von Apache Airflow beschreibt Airflow als Plattform zum Entwickeln, Planen und Überwachen von Workflows.
Einige Auslöser gibt es in beiden Werkzeugklassen. n8n-Workflows können nach Zeitplan starten. Ein selbst gehosteter Aufbau für Social-Media-Beiträge löst seinen Workflow etwa mehrmals am Tag über einen Zeitplan aus. Workload-Scheduler können Jobs auch bei Ereignissen starten, zum Beispiel beim Eintreffen einer Datei.
Wie sich Workload-Automatisierung von RPA unterscheidet
Workload-Automatisierung führt Jobs auf Servern im Hintergrund einer Anwendung aus. Bei der robotergestützten Prozessautomatisierung (RPA) klicken, tippen und kopieren Bots Werte in der Oberfläche wie ein Mensch. RPA kann auch APIs aufrufen. Das kennzeichnende Merkmal ist die Bedienung einer Benutzeroberfläche.
IBMs Einführung in RPA behandelt beide Aspekte: RPA verbindet APIs mit Interaktionen über Benutzeroberflächen, um Anwendungen zu integrieren und wiederkehrende Aufgaben zwischen Unternehmens- und Produktivitätsanwendungen auszuführen. Der RPA-Anbieter UiPath betont die Bildschirmbedienung und beschreibt Bots, die mit Bildschirmen und Systemen interagieren, „indem sie menschliche Handlungen nachahmen“. Stonebranch beschreibt die Abgrenzung aus Sicht der WLA: WLA steuert Hintergrundprozesse und Datenflüsse, während RPA typischerweise menschliche Arbeit an einer Oberfläche automatisiert. Bietet eine Anwendung eine API oder eine Schnittstelle zur Stapelverarbeitung, kann ein geplanter Job sie direkt aufrufen. RPA ist dann sinnvoll, wenn der Zugriff nur über die Oberfläche möglich ist.
Wo Airflow, Rundeck, Kestra und Dagu einzuordnen sind
Mehrere Open-Source-Werkzeuge übernehmen Aufgaben der Workload-Automatisierung, ohne den Begriff zu verwenden. Sie führen geplante und abhängige Jobs mit Wiederholungsversuchen und Verlauf aus und bezeichnen sich als Orchestratoren, Runbook-Automatisierung oder Workflow-Engines. Apache Airflow konzentriert sich auf Datenpipelines. Rundeck, Kestra und Dagu decken Betriebsaufgaben und allgemeines Scheduling ab.
So beschreiben sich die Projekte:
- Airflow: „Airflow-Workflows werden vollständig in Python definiert“, etwa für Batch-Datenpipelines, maschinelles Lernen und Modelltraining (Apache-2.0).
- Rundeck: Ein Open-Source-Dienst zur Runbook-Automatisierung mit Webkonsole, Kommandozeilenwerkzeugen und Web-API, der Aufgaben auf mehreren Knoten ausführt (Apache-2.0).
- Kestra: Eine ereignisgesteuerte Plattform zur Orchestrierung und Zeitplanung (Apache-2.0).
- Dagu: Macht aus vorhandenen Skripten und Runbooks produktive Workflows mit Zeitplanung, Wiederholungsversuchen, menschlichen Aufgaben und Ausführungsverlauf. Jobs werden in YAML definiert (GPL-3.0).
In seinen häufig gestellten Fragen zur WLA vertritt Stonebranch die Auffassung, dass Werkzeuge wie Airflow speziell für Workflows im Data Engineering entwickelt sind und WLA in einer größeren Umgebung Airflow-Jobs auslösen und verwalten kann. Das ist die Sicht eines Anbieters, deckt sich aber mit dem Datenfokus, den Airflow selbst beschreibt. Für Betriebsteams zählt, wie Jobs definiert werden und wer sie pflegen kann. In einer Diskussion auf r/sysadmin über eine kostenlose Alternative zu Control-M lehnte der Verfasser die Python-DAGs von Airflow ab und äußerte dieselben Bedenken zu Kestra. Das ist die Erfahrung eines Teams. Kestra bietet mittlerweile einen No-Code-Editor, in dem sich Workflows über Formulare ohne YAML erstellen lassen. Prüfen Sie, ob die aktuelle Oberfläche für die Personen geeignet ist, die die Jobs pflegen.
Was ist aus dem Magic Quadrant für Workload-Automatisierung geworden?
Gartner behandelt diesen Markt inzwischen als Service Orchestration and Automation Platforms (SOAP). Laut der Ankündigung von BMC erschien der erste Magic Quadrant für SOAP im September 2024. BMC fasst Gartners Definition als Kombination aus Workflow-Orchestrierung, Workload-Automatisierung und Ressourcenbereitstellung zusammen. Workload-Automatisierung bleibt der Kern der Job-Ausführung in einer SOAP.
Zuvor gab es einen Gartner Magic Quadrant für Workload-Automatisierung. SOS GmbH, das Unternehmen hinter JobScheduler, gab seine Platzierung in diesem Bericht bekannt, den Gartner im Februar 2012 veröffentlichte.
Eine Suite wie Control-M steht nun in einem SOAP-Quadranten und wirbt mit Workflow-Orchestrierung. Damit wurde aus Sicht des Autors die Analystenkategorie rund um denselben Ausführungskern erweitert. Stellt ein Anbieter SOAP in den Vordergrund, können Sie einen Workload-Scheduler als Kern seines Angebots erwarten.
So wählen Sie ein Werkzeug für Ihre Jobs
Die Art der Jobs bestimmt die Werkzeugklasse. Für unabhängige Jobs auf einem Rechner genügen Cron oder ein systemd-Timer. Für abhängige Jobs auf wenigen Rechnern, die einen Verlauf und Warnungen benötigen, kommen Open-Source-Scheduler oder Orchestratoren infrage. Unternehmensweite Umgebungen mit Geschäftskalendern, ERP-Stapelverarbeitung und Prüfanforderungen sind der Einsatzbereich von WLA-Suiten für Unternehmen.
Verwenden Sie auf der ersten Stufe flock für Jobs, die länger als geplant laufen können, und Persistent=true bei OnCalendar=-Timern, die Ausführungen nach einer Ausfallzeit nachholen sollen. Auf der nächsten Stufe eignen sich Rundeck, Kestra und Dagu etwa für eine Gruppe von Cron-Jobs, die nur in der richtigen Reihenfolge laufen müssen. Für Datenpipelines eignet sich ein Orchestrator wie Airflow. Die höchste Stufe umfasst Kalender zum Monatsabschluss, Mainframe- und ERP-Jobs sowie Prüfer, die Aufzeichnungen zu jedem Lauf verlangen. Control-M, AutoSys und andere WLA- und SOAP-Suiten für Unternehmen richten sich an solche Umgebungen.
Die Zahl der Jobs sagt wenig darüber aus, wann Sie ein anderes Werkzeug brauchen. Zwei bessere Anzeichen: Ein Job muss auf das Ergebnis eines anderen Jobs auf einem anderen Rechner warten, oder am Morgen kann niemand ohne Anmeldung auf jedem Rechner sagen, was nachts lief. Eine zeitlich gestaffelte Kette ist einfach, bis Jobs zum ersten Mal in der falschen Reihenfolge laufen. Dann müssen Sie den Ladevorgang wiederholen, Berichte mit veralteten Daten finden und die Zahlen erklären. Listen Sie zunächst alle geplanten Jobs auf, markieren Sie Abhängigkeiten von anderen Jobs und schätzen Sie, wie lange Sie brauchen, um herauszufinden, was auf jedem Rechner lief. Bleibt die Spalte für Abhängigkeiten leer und reicht eine Minute, ist Cron bereits das passende Werkzeug.
Häufig gestellte Fragen
Ist Apache Airflow ein Werkzeug zur Workload-Automatisierung?
Apache Airflow führt in Python geschriebene Datenpipelines für Batch-Ladevorgänge, maschinelles Lernen und Modelltraining als geplante, abhängige Jobs aus und stellt einen Ausführungsverlauf bereit. Für Datenteams erfüllt es damit WLA-Aufgaben. Die Airflow-Dokumentation beschreibt das Werkzeug jedoch als Workflow-Plattform und verwendet den Begriff Workload-Automatisierung nicht.
Was sind Beispiele für Workload-Automatisierung?
Beispiele sind ein nächtlicher Datenbankexport mit anschließendem Datenladevorgang auf einem anderen Server, eine Dateiübertragung an einen Partner am Tagesende, ERP-Stapelläufe zum Monatsende und eine Sicherungskette, die jede Kopie vor dem nächsten Schritt überprüft. Ein WLA-Werkzeug kann diese Jobs einplanen und abhängige Schritte zurückhalten, bis die jeweilige Voraussetzung erfolgreich erfüllt ist.
Was bedeutet SOAP im Zusammenhang mit Workload-Automatisierung?
SOAP steht hier für Service Orchestration and Automation Platform, Gartners aktuelle Bezeichnung für die Kategorie. Nach der Zusammenfassung von BMC erweitert die Kategorie Workload-Automatisierung um Workflow-Orchestrierung und Ressourcenbereitstellung. Sie hat mit SOAP, dem vom W3C veröffentlichten XML-Nachrichtenstandard für Webdienste, nichts zu tun.
Ist Workload-Automatisierung dasselbe wie Job-Scheduling?
Die Konzepte sind ähnlich. Laut BMC enthalten die gängigen Betriebssysteme einen Scheduler für Jobs auf dem jeweiligen Rechner, etwa die Windows-Aufgabenplanung. Unter Linux übernimmt Cron diese Rolle. Workload-Automatisierung kommt hinzu, wenn Jobs auf verschiedenen Servern voneinander abhängen. BMC zieht die Grenze zwischen einer Plattform und mehreren.
Diskussion
Kommentare
Melden Sie sich an, um mitzudiskutieren.