crontab에 두 줄이 있다고 가정해 보겠습니다. 내보내기는 01:00에, 데이터 웨어하우스 적재는 02:00에 시작합니다. 적재를 내보내기 뒤에 실행하도록 하는 장치는 한 시간 간격뿐입니다. 어느 날 밤 내보내기가 길어지거나 중간에 실패해도 적재는 02:00에 시작해 전날 파일을 읽고 정상 종료합니다. 아무도 내보내기 오류 메일을 읽지 않으면 문제를 알아차리지 못합니다. cron에서는 두 작업 모두 제시간에 시작했기 때문입니다.
워크로드 자동화를 쓰면 내보내기가 성공할 때까지 웨어하우스 적재를 대기시킬 수 있습니다. 이 용어는 주로 공급업체 사이트와 기업 IT 부서에서 Control-M, AutoSys 같은 제품과 함께 쓰입니다. 워크플로 자동화 및 로봇 프로세스 자동화와 공유하는 용어도 많습니다. 차이는 각 도구가 무엇을 실행하고 어떻게 시작하는지에 있습니다.
요약
- 워크로드 자동화(WLA)는 데이터 적재, 파일 전송, ERP 배치 처리처럼 종속성이 있는 IT 작업을 여러 서버에서 중앙 관리해 실행합니다. 재시도, 실행 기록, 실패 알림을 제공합니다.
- cron은 한 시스템에서 예약된 시각에 명령을 시작하고 출력을 메일로 보냅니다. 작업 순서, 호스트 간 조율, 실행 기록은 운영자가 관리합니다.
- 워크플로 자동화는 n8n이나 Zapier처럼 이벤트에 따라 앱을 연결하거나 사람에게 승인 요청을 전달합니다. 로봇 프로세스 자동화(RPA)는 사람이 하듯 앱 화면을 조작합니다. WLA는 그런 앱 뒤에 있는 서버에서 작업을 실행합니다.
- cron 실행이 겹치면
flock같은 잠금을 사용하거나 작업 설계를 수정합니다. 실행이 겹친다는 이유만으로 WLA 제품을 구입할 필요는 없습니다.
워크로드 자동화란?
워크로드 자동화(WLA)는 야간 데이터 적재, 파일 전송, ERP 배치 같은 IT 작업을 여러 시스템에서 올바른 순서로 중앙 실행하는 소프트웨어입니다. 일정이나 이벤트에 맞춰 작업을 시작하고 선행 작업이 성공할 때까지 대기시킵니다. 실패한 작업을 재시도하고 실행 기록을 남기며 실패나 실행 시간 초과를 알립니다.
스케줄러에서 종속성은 결과에 관한 규칙입니다. 내보내기가 성공해야 적재를 실행하고, 실패하면 당직자에게 알립니다. 시간 간격에는 첫 작업에 얼마나 걸릴지에 대한 추정만 들어 있습니다. 이 기본 원리 외에도 WLA 제품의 기능은 상당 부분 겹칩니다.
- 실패 시 실행할 분기를 포함한 작업 간 종속성
- 시간, 업무 달력(공휴일을 제외한 근무일) 또는 파일 도착 같은 이벤트에 따른 실행
- 제품과 대상에 따라 설치된 에이전트, 에이전트 없는 연결 또는 서비스 연동을 이용한 원격 실행
- 재시도, 제한 시간, 응답하지 않는 작업 종료
- 무엇이 어디서 언제 얼마나 오래 실행됐으며 어떤 종료 상태를 반환했는지 보여 주는 기록
- 실패 알림, 설정된 실행 시간을 넘겼을 때의 알림, 작업이나 워크플로가 완료 기한을 놓칠 위험이 있을 때의 SLA 알림
- 호스트가 중단된 동안 놓친 작업을 호스트 복구 후 실행하는 기능
IBM은 IBM Workload Automation을 하이브리드 환경의 무인 작업과 이벤트 기반 작업을 조율하는 플랫폼으로 설명합니다. 쉽게 말해 하나의 스케줄러가 정해진 시각이나 이벤트에 따라 메인프레임, 온프레미스 시스템, 클라우드에서 사람 없이 작업을 실행합니다. 제품 기능에는 맞는 설명이지만 용어만 보면 기존 cron 작업과 비교하기 어렵습니다. BMC의 Control-M과 AutoSys, Redwood RunMyJobs, ActiveBatch, Tidal, JAMS도 이 용어를 사용합니다.
워크로드 자동화, cron, 워크플로 자동화, RPA 비교
네 도구의 차이는 실행 조건, 실행 내용, 실행 위치에 있습니다. cron은 정해진 시각에 한 시스템에서 명령을 실행합니다. 워크로드 자동화는 시간, 이벤트, 다른 작업의 결과를 기준으로 여러 호스트에서 작업을 실행합니다. 워크플로 자동화는 앱 API를 호출하거나 사람의 처리를 기다립니다. RPA는 화면 조작과 API 호출을 결합합니다.
| 항목 | Cron | 워크로드 자동화 | 워크플로 자동화 | RPA |
|---|---|---|---|---|
| 실행 조건 | 정해진 시각 | 시간, 달력, 이벤트, 다른 작업의 결과 | 앱 이벤트, 양식 제출, 일정 | 일정, 이벤트 또는 사용자 |
| 작업 단위 | 명령 하나 | 호스트의 작업: 스크립트, 배치 실행, 전송 또는 ERP 작업 | 앱 API를 호출하는 단계 | 기록된 UI 조작과 API 호출의 순서 |
| 실행 환경 | 시스템 한 대 | 에이전트, 에이전트 없는 연결 또는 연동을 통해 중앙 제어하는 여러 호스트와 서비스 | SaaS API를 호출하는 자동화 플랫폼 | 데스크톱 또는 서버 세션의 봇 실행 환경 |
| 종속성과 실패 처리 | 내장 처리 기능은 없으며 출력은 메일로 전송 | 종속성 그래프, 재시도, 알림, 실행 기록 | 워크플로별 오류 분기 및 재시도 | 봇별 예외 처리 |
| 도구 예시 | cron | Control-M, AutoSys, IBM Workload Automation. 유사 작업에는 Rundeck, Dagu, Kestra | n8n, Zapier. 승인에는 BPM 제품군 | UiPath, Automation Anywhere |
cron은 워크로드 자동화 도구인가요?
아닙니다. cron은 한 시스템에서 시간에 따라 작업을 예약하는 스케줄러입니다. cron(8) 매뉴얼 페이지에 따르면 cron은 매분 실행할 작업을 확인하고 crontab 소유자에게 출력을 메일로 보냅니다. 작업 순서, 호스트 간 조율, 실행 기록, 알림은 운영자가 담당합니다.
crontab(5) 페이지에 따르면 MAILTO=""를 설정하면 작업이 실패하더라도 이 메일이 전송되지 않습니다. 아래는 01:00 내보내기와 02:00 적재 설정, 그리고 흔히 사용하는 우회 방법입니다.
# BEFORE: illustration only; do not install these commented entries.
# 0 1 * * * /opt/jobs/export-orders.sh
# 0 2 * * * /opt/jobs/load-warehouse.sh
# AFTER: replace both old entries with this single entry.
# The load runs only if the export exits successfully.
0 1 * * * /opt/jobs/export-orders.sh && /opt/jobs/load-warehouse.sh
&&가 있는 줄은 종속성처럼 보이지만 호스트 하나와 종료 코드 하나만 처리하므로 다섯 가지 한계가 있습니다. 이 줄 밖에서는 작업 X가 성공한 다음에 실행하거나, X가 실패하면 Y를 실행하도록 할 수 없습니다. 호스트 간 조율이 없어 웨어하우스 서버의 적재가 데이터베이스 서버의 내보내기를 기다릴 수 없습니다. 실행 기록은 각 스크립트가 남기는 로그뿐입니다. 알림은 메일 출력뿐이며 아무도 읽지 않을 수 있습니다. 또 호스트가 중단된 동안 예정된 분이 지나면 cron(8)은 해당 항목을 다시 실행하지 않습니다. 매뉴얼에는 예전에 /etc/crontab에 있던 일간, 주간, 월간 시스템 작업을 이제 별도 도구 anacron이 기본으로 실행한다고 나와 있습니다. 마커 파일, 래퍼 스크립트, && 체인은 이러한 한계를 우회하는 방법입니다.
BMC는 작업 스케줄링과 WLA를 비교한 설명에서 공급업체 관점의 차이를 제시합니다. 작업 스케줄링은 한 플랫폼에서 배치를 실행하는 데 비해 WLA는 여러 서버와 환경의 종속 작업을 중앙에서 조율합니다. BMC는 주요 운영체제에 기본 제공되는 스케줄러의 예로 Windows 작업 스케줄러를 듭니다. Linux와 Unix에서 cron이 비슷한 역할을 합니다. 차이는 범위입니다. 한 플랫폼에서 끝나는지, 여러 플랫폼의 종속성을 다루는지에 달려 있습니다.
별도 도구 없이 사용할 수 있는 WLA 기능
흔히 쓰는 도구 세 가지로 WLA 기능의 일부를 구현할 수 있습니다. systemd 캘린더 타이머(OnCalendar=)에 Persistent=true를 설정하면 시스템이 꺼진 동안 놓친 실행을 보완할 수 있습니다. Kubernetes CronJob에 concurrencyPolicy: Forbid를 설정하면 이전 실행이 진행 중일 때 새 실행을 건너뜁니다. flock은 동일한 cron 작업이 중복 실행되지 않게 합니다. 세 가지 모두 WLA 제품이 필요 없습니다.
systemd.timer 매뉴얼에 따르면 Persistent=true는 최근 트리거 시각을 디스크에 기록합니다. 타이머가 비활성 상태인 동안 서비스 유닛이 한 번 이상 시작됐어야 한다면 타이머가 재개될 때 즉시 실행합니다. 해당 호스트에서 놓친 예약을 한 번의 실행으로 보완할 수 있지만, crontab 한 줄 대신 유닛 파일 두 개가 필요합니다. cron과 systemd 타이머 비교에서 이 추가 설정이 어떤 이점을 주는지 확인할 수 있습니다.
Kubernetes CronJob 문서에 따르면 concurrencyPolicy의 기본값인 Allow는 두 실행을 모두 허용합니다. Forbid는 새 실행을 건너뛰고, Replace는 진행 중인 작업을 새 작업으로 교체합니다. Kubernetes 밖에서는 flock(1)으로 셸 스크립트에서 잠금을 관리하고 명령이 실행되는 동안 잠금을 유지할 수 있습니다. -n을 사용하면 두 번째 실행은 대기하지 않고 실패합니다. 따라서 */5 * * * * flock -n /tmp/sync.lock /opt/jobs/sync.sh는 두 동기화 작업이 겹치지 않게 합니다.
실행이 겹치거나 밀리면 잠금을 사용하거나 작업 자체를 수정합니다. 스케줄러를 바꿔도 문제는 해결되지 않습니다. 5분마다 실행하는 작업에 때로 10분이 걸린다면 배정된 시간의 두 배가 필요합니다. 잠금으로 작업이 밀리는 것을 방지하고, 남은 문제는 작업을 빠르게 만들거나 리소스를 더 주거나 실행 빈도를 줄여 해결합니다. WLA 제품은 시간 초과가 보고되는 위치만 바꿀 뿐 초과 자체를 없애지 않습니다. cron 작업 중복 실행을 다룬 r/sysadmin 토론에서는 가장 많은 추천을 받은 답변이 잠금 확인을 권했고, flock이 여러 차례 언급됐습니다. 한 답변은 “Cron은 명령을 실행한다. 그 일은 아주 잘한다”고 정리했습니다.
세 도구 모두 호스트 간 종속성 그래프나 중앙 실행 기록을 제공하지 않습니다. 이 두 기능이 필요하면 WLA 도구의 비용을 정당화할 수 있습니다.
워크로드 자동화와 워크플로 자동화의 차이
차이는 사람이 참여하는지보다 무엇을 어디에서 실행하는지에 있습니다. 워크로드 자동화는 서버에서 스크립트, 데이터 적재, 파일 전송을 실행합니다. 워크플로 자동화는 n8n 또는 Zapier로 양식 제출을 CRM 레코드로 바꾸는 식으로 앱 API를 연결하거나, 비즈니스 프로세스 관리(BPM) 도구를 통해 승인을 전달합니다.
자동화라는 말은 여기서 세 가지 뜻으로 쓰입니다. 첫째는 워크로드 자동화입니다. 둘째는 연동 기반 자동화입니다. n8n 문서는 n8n을 AI와 비즈니스 프로세스 자동화를 결합한 fair-code 라이선스의 워크플로 자동화 도구라고 설명합니다. n8n과 기타 자체 호스팅 Zapier 대안은 한 앱의 트리거를 다른 앱의 API 호출과 연결합니다. 셋째는 BPM입니다. 양식과 승인 체인의 각 단계는 사람이 처리할 때까지 대기합니다.
WLA 공급업체 Stonebranch는 사람의 참여를 기준으로 나눕니다. 2022년 비교 글에서 워크플로 자동화의 단계는 승인처럼 보통 사람과 사람 사이에 전달되며, WLA 작업에는 일반적으로 그런 상호작용이 없다고 설명합니다. 이 기준은 BPM에는 맞습니다. 그러나 온라인 상점 주문을 스프레드시트에 복사하는 n8n 워크플로에도 사람이 필요하지 않습니다. 같은 기준이면 메인프레임 배치 작업과 같은 범주에 들어갑니다. 따라서 이 글에서는 인프라 작업, 앱 간 호출, 사람의 처리를 기다리는 단계 중 무엇을 실행하는지로 구분합니다.
‘워크플로’라는 단어만으로 두 유형을 구별하기는 어렵습니다. BMC는 Control-M을 메인프레임, 클라우드, 분산 시스템, SaaS 환경에서 “비즈니스에 중요한 워크플로를 오케스트레이션”하는 도구로 소개합니다. Apache Airflow 문서는 Airflow를 워크플로 개발, 예약, 모니터링을 위한 플랫폼이라고 설명합니다.
일부 시작 조건은 양쪽에서 모두 사용합니다. n8n 워크플로는 정해진 시각에 시작할 수 있습니다. 예를 들어 자체 호스팅 소셜 미디어 게시 구성에서는 하루에 몇 번 Schedule Trigger를 실행합니다. WLA 스케줄러 역시 파일 도착 같은 이벤트에 따라 작업을 시작할 수 있습니다.
워크로드 자동화와 RPA의 차이
워크로드 자동화는 앱 인터페이스 뒤에 있는 서버에서 작업을 실행합니다. 로봇 프로세스 자동화(RPA)는 화면에서 동작합니다. 봇이 사람처럼 클릭하고 입력하고 값을 복사합니다. RPA도 API를 호출할 수 있으며, 사용자 인터페이스 조작이 구별되는 특징입니다.
IBM의 RPA 설명은 두 기능을 모두 다룹니다. RPA는 API와 사용자 인터페이스 조작을 결합해 기업용 앱과 생산성 앱을 통합하고 앱 간 반복 작업을 수행합니다. RPA 공급업체 UiPath는 화면에 초점을 맞춰 봇이 “사람의 행동을 모방해” 화면과 시스템을 조작한다고 설명합니다. Stonebranch는 두 방식의 차이를 설명합니다. WLA 관점에서 보면, WLA는 백엔드 시스템 프로세스와 데이터 흐름을 관리하고, RPA는 보통 사람이 화면에서 하는 일을 자동화합니다. 앱에 API나 배치 인터페이스가 있으면 예약 작업이 직접 호출할 수 있습니다. 화면으로만 시스템에 접근할 수 있다면 RPA가 유용합니다.
Airflow, Rundeck, Kestra, Dagu의 역할
몇몇 오픈 소스 도구는 WLA라는 이름을 쓰지 않으면서도 예약된 종속 작업을 실행하고 재시도와 실행 기록을 제공합니다. 오케스트레이터, 런북 자동화 도구 또는 워크플로 엔진 등으로 불립니다. Apache Airflow는 데이터 파이프라인을 중심으로 하고, Rundeck, Kestra, Dagu는 운영 작업과 일반 스케줄링에 쓰입니다.
각 프로젝트의 설명은 다음과 같습니다.
- Airflow: “Airflow 워크플로는 전부 Python으로 정의합니다.” 배치 데이터 파이프라인, 머신러닝, 모델 학습 등에 사용합니다(Apache-2.0).
- Rundeck: 웹 콘솔, 명령줄 도구, 웹 API를 갖추고 여러 노드에서 자동화를 실행하는 오픈 소스 런북 자동화 서비스입니다(Apache-2.0).
- Kestra: 이벤트 기반 오케스트레이션과 스케줄링 플랫폼입니다(Apache-2.0).
- Dagu: 기존 스크립트와 런북을 예약, 재시도, 사람이 처리하는 작업, 실행 기록을 갖춘 운영용 워크플로로 바꿉니다. 작업은 YAML로 정의합니다(GPL-3.0).
Stonebranch는 WLA 관련 FAQ에서 Airflow와 같은 도구가 데이터 엔지니어링 워크플로를 위해 설계되었고, WLA는 더 큰 환경 안에서 Airflow 작업을 시작하고 관리할 수 있다고 설명합니다. 공급업체의 관점이지만 Airflow 자체의 데이터 중심 설명과도 일치합니다. 운영팀에는 작업을 어떻게 정의하며 누가 유지보수할 수 있는지가 중요합니다. r/sysadmin에서 무료 Control-M 대안을 찾는 글의 작성자는 Airflow의 Python DAG를 선택하지 않았으며 Kestra에도 비슷한 우려를 나타냈습니다. 한 팀의 경험이지만, 현재 Kestra는 YAML 없이 양식으로 워크플로를 만드는 노코드 편집기를 제공합니다. 실제 유지보수 담당자에게 현재 편집 방식이 맞는지 확인하세요.
워크로드 자동화 Magic Quadrant는 어떻게 바뀌었나요?
Gartner는 현재 이 시장을 서비스 오케스트레이션 및 자동화 플랫폼(SOAP)으로 다룹니다. BMC 발표에 따르면 첫 SOAP Magic Quadrant는 2024년 9월에 나왔습니다. BMC는 Gartner의 정의를 워크플로 오케스트레이션, 워크로드 자동화, 리소스 프로비저닝을 결합한 것으로 요약합니다. 작업 실행의 중심은 여전히 워크로드 자동화입니다.
이전에는 Gartner의 워크로드 자동화 Magic Quadrant가 있었습니다. JobScheduler를 개발한 SOS GmbH는 Gartner가 2012년 2월에 발행한 해당 보고서에 포함됐다고 발표했습니다.
Control-M 같은 제품군은 현재 SOAP 사분면에 포함되며 워크플로 오케스트레이션을 강조합니다. 글쓴이의 해석으로는 작업 실행이라는 중심 기능을 유지하면서 분석 범주가 넓어진 것입니다. 공급업체가 SOAP를 앞세운다면 제품의 중심에 워크로드 스케줄러가 있을 것으로 예상할 수 있습니다.
작업에 맞는 도구 선택
작업의 성격에 따라 도구 유형이 달라집니다. 호스트 한 대의 독립 작업에는 cron이나 systemd 타이머가 충분합니다. 몇 대의 호스트에서 종속 작업을 실행하고 기록과 알림이 필요하다면 오픈 소스 스케줄러나 오케스트레이터가 적합합니다. 업무 달력, ERP 배치, 감사 요건이 있는 조직 전체 환경에는 엔터프라이즈 WLA 제품군이 맞습니다.
첫 단계에서는 오래 걸릴 수 있는 작업에 flock을 적용하고, 중단 이후 실행을 보완해야 하는 OnCalendar= 타이머에 Persistent=true를 설정합니다. 다음 단계에서 Rundeck, Kestra, Dagu는 순서대로만 실행하면 되는 cron 작업 묶음을 처리할 수 있습니다. 데이터 파이프라인에는 Airflow 계열 오케스트레이터가 맞습니다. 가장 높은 단계에는 월말 마감 달력, 메인프레임과 ERP 작업, 모든 실행 기록을 요구하는 감사가 포함됩니다. Control-M, AutoSys 및 기타 엔터프라이즈 WLA와 SOAP 제품군은 이런 환경을 대상으로 합니다.
작업 수는 상위 도구로 넘어갈 때를 알려 주는 좋은 지표가 아닙니다. 더 분명한 신호는 한 작업이 다른 시스템의 작업 결과를 기다려야 하거나, 아침에 모든 시스템에 로그인해야 전날 밤 무엇이 실행됐는지 알 수 있는 경우입니다. 시차로 작업을 연결하면 처음 순서가 어긋나기 전까지는 비용이 적게 듭니다. 그 뒤에는 적재를 다시 하고 오래된 데이터를 사용한 보고서를 찾아 수치를 설명해야 합니다. 먼저 예약 작업을 나열하고 다른 작업 결과에 의존하는 항목을 표시한 뒤, 각 호스트에서 무엇이 실행됐는지 확인하는 데 걸리는 시간을 추산합니다. 종속성 항목이 없고 확인에 1분이면 충분하다면 cron이 이미 적합한 도구입니다.
자주 묻는 질문
Apache Airflow는 워크로드 자동화 도구인가요?
Apache Airflow는 Python으로 작성된 데이터 파이프라인을 스케줄과 종속성이 있는 작업으로 실행하고 실행 기록을 보관합니다. 배치 적재, 머신러닝, 모델 학습 등 데이터 팀이 수행하는 WLA에 가까운 작업입니다. 다만 Airflow 문서는 워크플로 플랫폼이라고 설명하며 워크로드 자동화라는 이름은 사용하지 않습니다.
워크로드 자동화의 예에는 무엇이 있나요?
야간 데이터베이스 내보내기 후 다른 서버에서 적재하기, 하루가 끝날 때 파트너에게 파일 전송하기, 월말 ERP 배치 실행, 다음 단계로 넘어가기 전에 각 사본을 검증하는 백업 체인이 예입니다. WLA 도구는 각 작업을 예약하고 선행 작업이 성공할 때까지 종속 단계를 대기시킬 수 있습니다.
워크로드 자동화에서 SOAP는 무엇을 뜻하나요?
여기서 SOAP는 Gartner가 현재 이 범주에 사용하는 Service Orchestration and Automation Platform, 즉 서비스 오케스트레이션 및 자동화 플랫폼을 뜻합니다. BMC의 요약에 따르면 워크로드 자동화에 워크플로 오케스트레이션과 리소스 프로비저닝을 더한 것입니다. W3C가 발표한 웹 서비스 XML 메시징 표준 SOAP와는 관계가 없습니다.
워크로드 자동화와 작업 스케줄링은 같은 개념인가요?
두 개념은 비슷합니다. BMC는 주요 운영체제에 해당 시스템의 작업을 예약하는 도구가 포함된다고 설명합니다. Windows 작업 스케줄러가 예이며, Linux에서는 cron이 그 역할을 합니다. 여러 서버의 작업이 서로 의존하기 시작하면 워크로드 자동화가 필요합니다. BMC는 단일 플랫폼을 다루는지 여러 플랫폼을 다루는지를 기준으로 구분합니다.
토론
댓글
토론에 참여하려면 로그인하세요.