Ga naar hoofdinhoud
50% korting alle plannen, beperkte tijd. Vanaf $2.48/mo
Resterend: 15 min
Developer-tools en DevOps

Wat is workloadautomatisering? De verschillen met cron, workflowautomatisering en RPA

S Door Samer 15 min leestijd
Een centrale planner coördineert een database-export en de daarvan afhankelijke laadtaak in het datawarehouse.

Stel je twee regels in een crontab voor: een export begint om 01:00 en het laden van het datawarehouse om 02:00. Dat uur ertussen is de enige maatregel die ervoor moet zorgen dat het laden op de export wacht. Duurt de export op een nacht langer of mislukt hij halverwege, dan begint het laden toch om 02:00, leest het bestand van gisteren en eindigt zonder foutmelding. Als niemand de foutmail van de export leest, valt het probleem niet op. Voor cron zijn beide taken op tijd begonnen.

Met workloadautomatisering kan het datawarehouse wachten tot de export is geslaagd. De term komt vooral voor op websites van leveranciers en binnen bedrijfs-IT, bij producten zoals Control-M en AutoSys. Een deel van het jargon komt terug bij workflowautomatisering en robotgestuurde procesautomatisering. Het verschil zit in wat elk hulpmiddel uitvoert en hoe het de uitvoering start.

De korte versie

  • Workloadautomatisering (WLA) voert afhankelijke IT-taken op meerdere servers centraal uit, zoals gegevens laden, bestanden overzetten en ERP-batchtaken. Het biedt nieuwe pogingen, uitvoeringsgeschiedenis en waarschuwingen bij fouten.
  • Cron start op de geplande minuut een opdracht op één machine en mailt de uitvoer. De volgorde, coördinatie tussen hosts en uitvoeringsgeschiedenis regel je zelf.
  • Workflowautomatisering koppelt apps bij gebeurtenissen, bijvoorbeeld via n8n of Zapier, of stuurt goedkeuringen door naar mensen. Robotgestuurde procesautomatisering (RPA) bedient het scherm van een app zoals een mens dat doet. WLA voert taken uit op de servers achter die apps.
  • Gebruik bij overlappende cron-uitvoeringen een vergrendeling zoals flock of pas de taak zelf aan. Overlap alleen is geen reden om een WLA-product te kopen.

Wat is workloadautomatisering?

Workloadautomatisering (WLA) gebruikt software om IT-taken zoals nachtelijke gegevensladingen, bestandsoverdrachten en ERP-batchruns vanaf één punt in de juiste volgorde op meerdere machines uit te voeren. De software start taken volgens een schema of bij een gebeurtenis, wacht tot voorafgaande taken zijn geslaagd, probeert mislukte taken opnieuw, bewaart een geschiedenis en waarschuwt bij fouten of overschrijding van de looptijd.

Een afhankelijkheid is voor een planner een regel over resultaten: voer de laadtaak alleen uit als de export slaagt en waarschuw de dienstdoende medewerker bij een fout. Een tijdsinterval is slechts een schatting van de duur van de eerste taak. Naast dat basisprincipe bieden WLA-leveranciers vaak vergelijkbare functies:

  • Afhankelijkheden tussen taken, inclusief vertakkingen bij fouten
  • Starten op tijdstip, volgens een bedrijfskalender (alleen werkdagen, zonder feestdagen) of bij een gebeurtenis zoals een binnenkomend bestand
  • Uitvoering op afstand via geïnstalleerde agents, verbindingen zonder agent of dienstintegraties, afhankelijk van product en doel
  • Nieuwe pogingen, tijdslimieten en het beëindigen van vastgelopen taken
  • Geschiedenis van wat waar en wanneer is uitgevoerd, hoe lang het duurde en met welke afsluitstatus
  • Waarschuwingen bij fouten, overschrijding van de ingestelde looptijd en dreigende overschrijding van een deadline uit een SLA
  • Gemiste taken inhalen zodra een host weer beschikbaar is

IBM omschrijft IBM Workload Automation als een platform voor de coördinatie van onbeheerde en gebeurtenisgestuurde taken in hybride omgevingen. Praktisch betekent dit dat één planner taken zonder menselijke bediening start, op tijdstip of bij een gebeurtenis, op mainframes, lokale machines en cloudsystemen. De beschrijving klopt met de functies, maar de terminologie maakt vergelijking met je bestaande cron-taken lastig. Control-M van BMC, AutoSys, Redwood RunMyJobs, ActiveBatch, Tidal en JAMS gebruiken de term ook.

Workloadautomatisering, cron, workflowautomatisering en RPA vergeleken

De vier verschillen in wat ze in gang zet, wat ze uitvoeren en waar dat gebeurt. Cron voert op een vast tijdstip een opdracht uit op één machine. Workloadautomatisering voert taken uit op meerdere hosts, op basis van tijdstippen, gebeurtenissen of de uitkomst van andere taken. Workflowautomatisering roept app-API’s aan of wacht op mensen. RPA combineert handelingen op het scherm met API-aanroepen.

Aspect Cron Workloadautomatisering Workflowautomatisering RPA
Waardoor het start Een tijdstip Tijdstippen, kalenders, gebeurtenissen en uitkomsten van andere taken App-gebeurtenissen, formulierinzendingen en tijdschema’s Een schema, een gebeurtenis of een persoon
Werkeenheid Een opdracht Een taak op een host: script, batchrun, overdracht of ERP-taak Een stap die de API van een app aanroept Een opgenomen reeks handelingen in de interface en API-aanroepen
Waar de tool draait Eén machine Meerdere hosts en diensten onder centrale regie, via agents, verbindingen zonder agent of integraties Het automatiseringsplatform, dat SaaS-API’s aanroept Een botomgeving in een desktop- of serversessie
Afhankelijkheden en fouten Geen ingebouwde afhandeling; uitvoer wordt gemaild Afhankelijkheidsgraaf, nieuwe pogingen, waarschuwingen en uitvoeringsgeschiedenis Foutvertakkingen en nieuwe pogingen per workflow Afhandeling van uitzonderingen per bot
Voorbeelden van hulpmiddelen cron Control-M, AutoSys en IBM Workload Automation; voor vergelijkbare taken: Rundeck, Dagu en Kestra n8n en Zapier; BPM-suites voor goedkeuringen UiPath, Automation Anywhere

Is cron een hulpmiddel voor workloadautomatisering?

Afzonderlijke cron-taken kunnen na een mislukte export verouderde gegevens laden. Bij taken met afhankelijkheden wacht de laadtaak voor het datawarehouse op een geslaagde export.

Nee. Cron is een tijdgestuurde taakplanner voor één machine. Volgens de handleiding van cron(8) controleert cron elke minuut welke taken aan de beurt zijn en mailt het de uitvoer naar de eigenaar van de crontab. De beheerder regelt de volgorde, coördinatie tussen hosts, geschiedenis en waarschuwingen.

De handleiding van crontab(5) vermeldt dat MAILTO="" die e-mails uitschakelt, ook bij een mislukte taak. Hier zie je een export om 01:00 en een laadtaak om 02:00, met daaronder de gebruikelijke oplossing:

# BEFORE: illustration only; do not install these commented entries.
# 0 1 * * * /opt/jobs/export-orders.sh
# 0 2 * * * /opt/jobs/load-warehouse.sh

# AFTER: replace both old entries with this single entry.
# The load runs only if the export exits successfully.
0 1 * * * /opt/jobs/export-orders.sh && /opt/jobs/load-warehouse.sh

De regel met && lijkt op een afhankelijkheid, maar geldt voor één host en één afsluitcode. Daardoor blijven vijf beperkingen bestaan. Buiten die regel kun je niet instellen dat een taak na succes van X begint of dat Y bij een fout in X wordt uitgevoerd. Coördinatie tussen hosts ontbreekt, dus de laadtaak op de warehouseserver kan niet op de export op de databaseserver wachten. De geschiedenis beperkt zich tot wat ieder script logt. De enige waarschuwing is uitvoer per e-mail, die ongelezen kan blijven. Cron(8) haalt ook geen taak in waarvan de geplande minuut tijdens uitval van de host verstreek. Volgens de handleiding lopen de dagelijkse, wekelijkse en maandelijkse systeemtaken die vroeger in /etc/crontab stonden nu standaard via het afzonderlijke programma anacron. Markeringsbestanden, wrapperscripts en ketens met && zijn manieren om die beperkingen te omzeilen.

BMC beschrijft het onderscheid vanuit leveranciersperspectief in zijn uitleg over taakplanning en WLA. Taakplanning voert volgens BMC batches uit op één platform, terwijl workloadautomatisering afhankelijke taken centraal coördineert over meerdere servers en omgevingen. BMC noemt de Windows Taakplanner als voorbeeld van een planner die bij gangbare besturingssystemen wordt geleverd. Cron heeft een vergelijkbare rol in Linux en Unix. Het onderscheid zit in de schaal: één platform of meerdere platforms met onderlinge afhankelijkheden.

WLA-functies die je al hebt zonder WLA-hulpmiddel

Drie gangbare hulpmiddelen leveren een deel van de WLA-functies. Een systemd-kalendertimer (OnCalendar=) met Persistent=true haalt een uitvoering in die is gemist terwijl de machine uit stond. Een Kubernetes CronJob met concurrencyPolicy: Forbid slaat een uitvoering over als de vorige nog loopt. flock voorkomt dat twee instanties van een cron-taak tegelijk draaien. Hiervoor is geen WLA-product nodig.

Volgens de handleiding van systemd.timer slaat Persistent=true het laatste activatietijdstip op schijf op. De service-unit wordt direct geactiveerd als die minstens één keer geactiveerd had moeten worden terwijl de timer inactief was. Zo krijg je één inhaalactivatie voor gemiste kalendertaken op die host, maar heb je twee unitbestanden nodig in plaats van één crontab-regel. Een vergelijking van cron en systemd-timers laat zien wat die extra configuratie oplevert.

In de Kubernetes CronJob-documentatie is Allow de standaard voor concurrencyPolicy, zodat beide instanties mogen draaien. Forbid slaat de nieuwe uitvoering over en Replace vervangt de lopende taak door de nieuwe. Buiten Kubernetes beheert flock(1) vergrendelingen vanuit shellscripts en houdt het de vergrendeling vast zolang de opdracht loopt. Met -n mislukt de tweede instantie zonder te wachten. Zo voorkomt */5 * * * * flock -n /tmp/sync.lock /opt/jobs/sync.sh dat twee synchronisaties tegelijk draaien.

Overlappende of ophopende uitvoeringen los je op met een vergrendeling of door de taak aan te passen. Een andere planner helpt daar niet bij. Een taak die om de vijf minuten start en soms tien minuten duurt, heeft dan twee keer zoveel tijd nodig als ingepland. Een vergrendeling voorkomt ophoping. Versnel de taak, geef haar meer middelen of voer haar minder vaak uit om de rest op te lossen. Met een WLA-product wordt de overschrijding elders gemeld, maar blijft die bestaan. In een discussie op r/sysadmin over overlappende cron-taken stelt de populairste reactie een controle op een vergrendeling voor, wordt flock herhaaldelijk genoemd en vat iemand het samen: ‘Cron voert opdrachten uit. Dat doet het erg goed.’

Geen van de drie tools biedt een afhankelijkheidsgraaf tussen hosts of een centrale uitvoeringsgeschiedenis. Die functies kunnen de kosten van een WLA-hulpmiddel rechtvaardigen.

Het verschil tussen workloadautomatisering en workflowautomatisering

Het verschil zit in wat waar draait, ongeacht of een persoon betrokken is. Workloadautomatisering voert scripts, gegevensladingen en bestandsoverdrachten uit op servers. Workflowautomatisering koppelt app-API’s, bijvoorbeeld met een n8n- of Zapier-workflow die van een formulierinzending een CRM-record maakt, of leidt goedkeuringen door via een tool voor bedrijfsprocesbeheer (BPM).

De term automatisering wordt op drie manieren gebruikt. De eerste is workloadautomatisering zelf. De tweede is automatisering via integraties. In de documentatie van n8n wordt n8n omschreven als een workflowautomatiseringstool met een fair-code-licentie die AI-functies combineert met bedrijfsprocesautomatisering. n8n en de andere zelfgehoste Zapier-alternatieven koppelen een trigger in één app aan aanroepen naar andere apps. De derde is BPM, waarbij formulieren en goedkeuringsketens per stap op iemand wachten.

Stonebranch, een WLA-leverancier, trekt de grens bij mensen. In een vergelijking uit 2022 stelt het dat stappen van workflowautomatisering doorgaans van persoon naar persoon gaan, bijvoorbeeld bij goedkeuringen, en dat WLA-taken meestal geen menselijke interactie vereisen. Dat onderscheid werkt bij BPM, maar een n8n-workflow die webwinkelbestellingen naar een spreadsheet kopieert heeft evenmin een persoon nodig. Volgens diezelfde indeling zou de workflow bij een mainframebatch terechtkomen. Daarom is bepalend wat er draait: infrastructuurtaken, aanroepen tussen apps of stappen die op mensen wachten.

Het woord ‘workflow’ alleen maakt geen onderscheid. BMC presenteert Control-M als een manier om ‘bedrijfskritieke workflows te orkestreren’ op mainframes en in cloud-, gedistribueerde en SaaS-omgevingen. De documentatie van Apache Airflow noemt Airflow een platform om workflows te ontwikkelen, plannen en bewaken.

De hulpmiddelen delen enkele triggers. n8n-workflows kunnen op een tijdstip starten. Zo gebruikt een zelfgehoste oplossing voor berichten op sociale media een Schedule Trigger een paar keer per dag. Workloadplanners kunnen ook taken starten bij gebeurtenissen zoals de aankomst van een bestand.

Het verschil tussen workloadautomatisering en RPA

Workloadautomatisering voert taken uit op servers, achter de interface van een app. Robotgestuurde procesautomatisering (RPA) werkt in de interface: bots klikken, typen en kopiëren waarden zoals mensen. RPA kan ook API’s aanroepen. De bediening van de gebruikersinterface onderscheidt RPA.

De uitleg over RPA van IBM behandelt beide kanten: RPA combineert API’s en interacties met de gebruikersinterface om bedrijfs- en productiviteitsapps te integreren en terugkerende taken ertussen uit te voeren. RPA-leverancier UiPath legt de nadruk op de schermbediening en beschrijft bots die met schermen en systemen werken ‘door menselijke handelingen na te bootsen’. Stonebranch beschrijft het onderscheid vanuit WLA: WLA beheert systeemprocessen en datastromen achter de schermen, terwijl RPA doorgaans menselijk werk in een interface automatiseert. Als een app een API of batchinterface biedt, kan een geplande taak die rechtstreeks aanroepen. RPA komt van pas als het scherm de enige toegang tot het systeem is.

Waar Airflow, Rundeck, Kestra en Dagu passen

Verschillende opensourcetools voeren geplande en afhankelijke taken uit met nieuwe pogingen en uitvoeringsgeschiedenis, zonder de term workloadautomatisering te gebruiken. Ze noemen zichzelf orchestrators, tools voor runbookautomatisering of workflow-engines. Apache Airflow richt zich op datapijplijnen. Rundeck, Kestra en Dagu richten zich op beheertaken en algemene planning.

Zo beschrijven de projecten zichzelf:

  • Airflow: ‘Airflow-workflows worden volledig in Python gedefinieerd’, onder meer voor batchdatapijplijnen, machinaal leren en modeltraining (Apache-2.0).
  • Rundeck: een opensourcedienst voor runbookautomatisering met een webconsole, opdrachtregeltools en een web-API. De dienst voert automatisering uit op een groep nodes (Apache-2.0).
  • Kestra: een platform voor gebeurtenisgestuurde orkestratie en planning (Apache-2.0).
  • Dagu: zet bestaande scripts en runbooks om in productieworkflows met planning, nieuwe pogingen, menselijke taken en uitvoeringsgeschiedenis. Taken worden gedefinieerd in YAML (GPL-3.0).

Stonebranch zegt in zijn veelgestelde vragen over WLA dat tools zoals Airflow bedoeld zijn voor workflows in data-engineering en dat WLA Airflow-taken kan starten en beheren in een grotere omgeving. Dat is een leveranciersperspectief, maar sluit aan bij de focus van Airflow op data. Voor beheerteams telt vooral hoe taken worden gedefinieerd en wie ze kan onderhouden. In een discussie op r/sysadmin over een gratis Control-M-alternatief wees de schrijver de Python-DAG’s van Airflow af en noemde een vergelijkbaar bezwaar bij Kestra. Dat weerspiegelt de ervaring van één team. Kestra biedt inmiddels een editor zonder code om workflows via formulieren te bouwen zonder YAML te schrijven. Kijk of de huidige bewerkomgeving geschikt is voor de mensen die de taken onderhouden.

Wat is er gebeurd met het Magic Quadrant voor workloadautomatisering?

Gartner behandelt deze markt nu als Service Orchestration and Automation Platforms (SOAP). Volgens de aankondiging van BMC verscheen het eerste Magic Quadrant voor SOAP in september 2024. BMC vat de definitie van Gartner samen als een combinatie van workfloworkestratie, workloadautomatisering en het beschikbaar stellen van resources. Workloadautomatisering blijft de kern voor het uitvoeren van taken in een SOAP.

Eerder publiceerde Gartner een Magic Quadrant voor workloadautomatisering. SOS GmbH, het bedrijf achter JobScheduler, maakte bekend in dat rapport te staan. Gartner publiceerde het in februari 2012.

Een suite zoals Control-M staat nu in een SOAP-kwadrant en legt de nadruk op workfloworkestratie. Volgens de auteur is de categorie verbreed rond dezelfde uitvoeringskern. Als een leverancier SOAP uitlicht, kun je daarom een workloadplanner verwachten als centraal onderdeel van het aanbod.

Het juiste hulpmiddel voor je taken kiezen

Keuzeschema voor planners voor taken op één host, afhankelijke beheertaken, datapijplijnen en workloadautomatisering binnen organisaties.

Het soort taak bepaalt welk hulpmiddel past. Voor onafhankelijke taken op één host volstaan cron of een systemd-timer. Afhankelijke taken op enkele hosts die een geschiedenis en waarschuwingen nodig hebben, passen bij een opensourceplanner of orchestrator. Organisatiebrede omgevingen met bedrijfskalenders, ERP-batchtaken en auditvereisten zijn het werkterrein van zakelijke WLA-suites.

Gebruik eerst flock voor taken die kunnen uitlopen en Persistent=true voor OnCalendar=-timers die na uitval een uitvoering moeten inhalen. Op het volgende niveau zijn Rundeck, Kestra en Dagu geschikt voor een reeks cron-taken die alleen in de juiste volgorde hoeft te draaien. Voor datapijplijnen past een orchestrator zoals Airflow. Op het hoogste niveau komen er maandafsluitingskalenders, mainframe- en ERP-taken en auditors die een registratie van elke uitvoering vragen bij. Control-M, AutoSys en andere zakelijke WLA- en SOAP-suites richten zich op dit soort omgevingen.

Het aantal taken zegt weinig over wanneer een ander hulpmiddel nodig is. Sterkere signalen zijn een taak die op het resultaat van een taak op een andere machine wacht, of een ochtend waarop niemand zonder inloggen op elke machine weet wat er ’s nachts draaide. Taken met tijdsintervallen koppelen is goedkoop tot ze voor het eerst in de verkeerde volgorde draaien. Dan moet je de laadtaak opnieuw uitvoeren, uitzoeken welke rapporten verouderde gegevens gebruikten en de cijfers toelichten. Maak eerst een lijst van geplande taken, markeer de taken die van andere resultaten afhangen en schat hoe lang het kost om op elke host de uitvoeringen te controleren. Als de afhankelijkheidskolom leeg blijft en één minuut voldoende is, is cron al het juiste hulpmiddel.

Veelgestelde vragen

Is Apache Airflow een hulpmiddel voor workloadautomatisering?

Apache Airflow voert in Python geschreven datapijplijnen, zoals batchladingen, machinaal leren en modeltraining, uit als geplande en afhankelijke taken met een uitvoeringsgeschiedenis. Voor datateams valt dat onder werk dat typisch is voor WLA. Airflow beschrijft zichzelf in de documentatie echter als workflowplatform en gebruikt de term workloadautomatisering niet.

Wat zijn voorbeelden van workloadautomatisering?

Een nachtelijke database-export gevolgd door het laden op een andere server, bestandsoverdracht naar een partner aan het einde van de dag, ERP-batchruns bij de maandafsluiting en een back-upketen waarbij elke kopie vóór de volgende stap wordt gecontroleerd. Een WLA-tool kan elke taak plannen en afhankelijke stappen tegenhouden totdat de voorgaande taak is geslaagd.

Wat betekent SOAP bij workloadautomatisering?

SOAP staat hier voor Service Orchestration and Automation Platform, de huidige naam van Gartner voor deze categorie. Volgens de samenvatting van BMC voegt de categorie workfloworkestratie en het beschikbaar stellen van resources toe aan workloadautomatisering. Ze staat los van SOAP, de door het W3C gepubliceerde XML-berichtenstandaard voor webservices.

Is workloadautomatisering hetzelfde als taakplanning?

De begrippen liggen dicht bij elkaar. BMC wijst erop dat belangrijke besturingssystemen een planner voor taken op die machine bevatten, zoals de Windows Taakplanner. Op Linux vervult cron die rol. Workloadautomatisering komt erbij als taken op verschillende servers van elkaar afhangen. Volgens BMC is het onderscheid één platform of meerdere.

Delen

Discussie

Reacties

Log in om mee te praten.

Meer van de blog

Blijf lezen.

Klaar om uit te rollen? Vanaf $2,48/mnd.

Onafhankelijke cloud, sinds 2008. AMD EPYC, NVMe, 40 Gbps. 14 dagen niet-goed-geld-terug.