Ana içeriğe geç
%50 indirim tüm planlarda, sınırlı süreyle. Başlangıç fiyatı $2.48/mo
Kalan süre: 15 dk.
Geliştirici Araçları ve DevOps

İş yükü otomasyonu nedir? Cron, iş akışı otomasyonu ve RPA’dan farkları

S Yazan Samer 15 dk okuma
Merkezi bir zamanlayıcı, veri tabanı dışa aktarımını ve buna bağlı veri ambarı yüklemesini koordine eder.

Bir crontab dosyasında iki satır düşünün: dışa aktarma 01:00’de, veri ambarına yükleme 02:00’de başlıyor. Aradaki bir saat, yüklemenin dışa aktarma tamamlandıktan sonra başlamasını sağlayan tek düzenleme. Bir gece dışa aktarma uzar veya yarıda başarısız olursa yükleme yine 02:00’de başlar, dünkü dosyayı okur ve hata vermeden biter. Dışa aktarmanın hata e-postasını kimse okumazsa sorun fark edilmez. Cron açısından iki görev de zamanında başlamıştır.

İş yükü otomasyonu, veri ambarına yüklemeyi dışa aktarma başarıyla tamamlanana kadar bekletebilir. Terim daha çok sağlayıcı sitelerinde ve kurumsal BT birimlerinde, Control-M ve AutoSys gibi ürünlerle birlikte karşınıza çıkar. İş akışı otomasyonu ve robotik süreç otomasyonuyla ortak terimler kullanır. Araçlar, neyi çalıştırdıkları ve çalışmayı nasıl başlattıkları bakımından ayrılır.

Kısa Versiyon

  • İş yükü otomasyonu (WLA), veri yükleme, dosya aktarımı ve ERP toplu işleri gibi birbirine bağımlı BT görevlerini birden fazla sunucuda merkezi olarak çalıştırır. Yeniden deneme, yürütme geçmişi ve hata uyarıları sunar.
  • Cron bir komutu tek makinede planlanan dakikada başlatır ve çıktıyı e-postayla gönderir. Görev sırasını, makineler arası eşgüdümü ve yürütme geçmişini sizin yönetmeniz gerekir.
  • İş akışı otomasyonu, n8n ve Zapier örneklerinde olduğu gibi olaylara göre uygulamaları birbirine bağlar veya onayları kişilere iletir. Robotik süreç otomasyonu (RPA) bir uygulamanın ekranını insan gibi kullanır. WLA ise bu uygulamaların arkasındaki sunucularda görev çalıştırır.
  • Cron çalıştırmaları çakışıyorsa flock gibi bir kilit kullanın veya görevin tasarımını değiştirin. Çakışma tek başına bir WLA ürünü satın alma gerekçesi değildir.

İş yükü otomasyonu nedir?

İş yükü otomasyonu (WLA), gece veri yükleme, dosya aktarımı ve ERP toplu işleri gibi BT görevlerini doğru sırayla, birden fazla makinede, tek merkezden çalıştıran yazılımdır. Görevleri zamanlama veya olay üzerine başlatır, önkoşullar başarıyla tamamlanana kadar bekletir, başarısız görevleri yeniden dener, geçmişi kaydeder ve hata ya da süre aşımında uyarı verir.

Zamanlayıcı için bağımlılık, sonuca bağlı bir kuraldır: dışa aktarma başarılıysa yüklemeyi başlat, başarısızsa nöbetçiye haber ver. Zaman aralığı ise ilk görevin süresine dair bir tahmindir. WLA ürünleri bu temel özelliğin yanında genellikle benzer olanaklar sunar:

  • Hata durumunda izlenecek dallar da dahil olmak üzere görev bağımlılıkları
  • Saat, iş takvimi (yalnızca iş günleri, resmî tatiller hariç) veya dosya gelişi gibi olaylarla tetikleme
  • Ürün ve hedefe göre kurulu ajanlar, ajansız bağlantılar veya hizmet entegrasyonlarıyla uzaktan çalıştırma
  • Yeniden deneme, zaman aşımı ve takılan görevleri sonlandırma
  • Neyin nerede, ne zaman, ne kadar süreyle ve hangi çıkış durumuyla çalıştığını gösteren geçmiş
  • Hata uyarıları, görev ayarlanan süreyi aştığında verilen uyarılar ve gerekli tamamlanma süresi tehlikeye girdiğinde SLA uyarıları
  • Makine kapalıyken zamanı gelen bir görevi makine döndüğünde çalıştırarak kaçırılan yürütmeleri telafi etme

IBM, IBM Workload Automation ürününü hibrit ortamlarda gözetimsiz ve olay güdümlü görevleri koordine eden bir platform olarak tanımlar. Pratikte bir zamanlayıcı; ana bilgisayar, şirket içi ve bulut makinelerinde görevleri saate veya olaya göre, insan müdahalesi olmadan başlatır. Tanım ürünün işlevlerine uyar, ancak kullanılan terimler mevcut cron görevleriyle karşılaştırmayı zorlaştırabilir. BMC’nin Control-M ürünü, AutoSys, Redwood RunMyJobs, ActiveBatch, Tidal ve JAMS da bu terimi kullanır.

İş yükü otomasyonu, cron, iş akışı otomasyonu ve RPA karşılaştırması

Dört yaklaşımın tetikleyicileri, çalıştırdıkları işler ve çalıştıkları yerler farklıdır. Cron, belirli bir saatte tek makinede komut çalıştırır. İş yükü otomasyonu zamana, olaylara veya diğer görevlerin sonuçlarına göre birden fazla sunucuda görev çalıştırır. İş akışı otomasyonu uygulama API’lerini çağırır veya insanların işlem yapmasını bekler. RPA ekran işlemleriyle API çağrılarını birleştirir.

Özellik Cron İş yükü otomasyonu İş akışı otomasyonu RPA
Tetikleyici Belirli bir saat Saat, takvim, olay veya başka görevlerin sonuçları Uygulama olayları, form gönderimleri ve zamanlamalar Zamanlama, olay veya insan
İş birimi Komut Bir makinedeki görev: betik, toplu işlem, aktarım veya ERP işi Uygulama API’sini çağıran adım Kaydedilmiş arayüz işlemleri ve API çağrıları dizisi
Çalıştığı ortam Tek makine Ajanlar, ajansız bağlantılar veya entegrasyonlarla merkezi olarak yönetilen birden fazla makine ve hizmet SaaS API’lerini çağıran otomasyon platformu Masaüstü veya sunucu oturumundaki bot çalışma ortamı
Bağımlılıklar ve hatalar Yerleşik işleme yoktur; çıktı e-postayla gönderilir Bağımlılık grafiği, yeniden denemeler, uyarılar ve yürütme geçmişi İş akışı başına hata dalları ve yeniden denemeler Bot başına istisna yönetimi
Örnek araçlar cron Control-M, AutoSys ve IBM Workload Automation; benzer görevler için Rundeck, Dagu ve Kestra n8n ve Zapier; onaylar için BPM paketleri UiPath, Automation Anywhere

Cron bir iş yükü otomasyonu aracı mı?

Bağımsız cron girdileri, dışa aktarma başarısız olduğunda eski verileri yükleyebilir. Bağımlılığa göre çalışan görevler, dışa aktarma başarılı olana kadar veri ambarına yüklemeyi bekletir.

Hayır. Cron tek makineye yönelik, zamana dayalı görev zamanlayıcısıdır. cron(8) kılavuz sayfasına göre cron her dakika hangi görevlerin çalışması gerektiğini denetler ve çıktıyı crontab sahibine e-postayla gönderir. Görev sırasını, makineler arası eşgüdümü, geçmişi ve uyarıları operatör yönetir.

crontab(5) sayfası, MAILTO="" ayarının görev başarısız olduğunda bile bu e-postaları kapattığını belirtir. Aşağıda 01:00’de dışa aktarma, 02:00’de yükleme ve yaygın geçici çözüm gösteriliyor:

# BEFORE: illustration only; do not install these commented entries.
# 0 1 * * * /opt/jobs/export-orders.sh
# 0 2 * * * /opt/jobs/load-warehouse.sh

# AFTER: replace both old entries with this single entry.
# The load runs only if the export exits successfully.
0 1 * * * /opt/jobs/export-orders.sh && /opt/jobs/load-warehouse.sh

&& içeren satır bir bağımlılık gibi görünür. Ancak tek makineye ve tek çıkış koduna bağlıdır. Bu nedenle beş eksik kalır. Satır dışında, X başarılı olunca bir görevi veya X başarısız olunca Y’yi çalıştırma kuralı yoktur. Makineler arasında eşgüdüm olmadığından ambar sunucusundaki yükleme, veri tabanı sunucusundaki dışa aktarmayı bekleyemez. Geçmiş, betiklerin kendi günlükleriyle sınırlıdır. Tek uyarı e-postayla gelen çıktıdır ve okunmayabilir. Makine kapalıyken zamanı geçen bir girdiyi cron(8) yeniden çalıştırmaz. Kılavuza göre, eskiden /etc/crontab içinde yer alan günlük, haftalık ve aylık sistem görevleri artık varsayılan olarak ayrı bir araç olan anacron ile çalışır. İşaret dosyaları, sarmalayıcı betikler ve && zincirleri bu eksikleri telafi etmek için kullanılır.

BMC, görev zamanlama ile WLA’yı karşılaştıran yazısında sağlayıcının bakışını anlatır. Görev zamanlama tek platformda toplu işler çalıştırırken iş yükü otomasyonu bağımlı görevleri birden fazla sunucu ve ortamda merkezi olarak koordine eder. BMC, başlıca işletim sistemlerindeki yerleşik zamanlayıcılara örnek olarak Windows Görev Zamanlayıcı’yı verir. Cron, Linux ve Unix’te benzer bir iş görür. Fark kapsamdır: tek platform veya aralarında bağımlılık olan birden fazla platform.

Ayrı bir araç olmadan kullanabileceğiniz WLA özellikleri

Üç yaygın araç WLA özelliklerinin bir bölümünü karşılar. Persistent=true ayarlı bir systemd takvim zamanlayıcısı (OnCalendar=), makine kapalıyken kaçırılan bir çalıştırmayı telafi eder. concurrencyPolicy: Forbid ayarlı bir Kubernetes CronJob, önceki çalıştırma devam ediyorsa yenisini atlar. flock aynı cron görevinin iki örneğinin çakışmasını önler. Bunların hiçbiri WLA ürünü gerektirmez.

systemd.timer kılavuzu, Persistent=true ayarının son tetikleme zamanını diske kaydettiğini açıklar. Zamanlayıcı etkin değilken hizmet biriminin en az bir kez tetiklenmesi gerekiyorduysa birim hemen başlatılır. Böylece makinede kaçırılan takvim çalıştırmaları tek bir etkinleştirmeyle telafi edilir, ancak bir crontab satırı yerine iki birim dosyası gerekir. Cron ve systemd zamanlayıcılarının karşılaştırması bu ek yapılandırmanın ne sağladığını gösterir.

Kubernetes CronJob belgelerine göre concurrencyPolicy varsayılanı Allow değeridir ve iki örnek de çalışabilir. Forbid yeni çalıştırmayı atlar, Replace ise çalışan görevi yenisiyle değiştirir. Kubernetes dışında flock(1), kabuk betiklerinden kilitleri yönetir ve komut çalışırken kilidi tutar. -n ile ikinci örnek beklemek yerine başarısız olur. Böylece */5 * * * * flock -n /tmp/sync.lock /opt/jobs/sync.sh iki eşitleme işleminin çakışmasını önler.

Çakışan veya biriken çalıştırmaları kilitle ya da görevi değiştirerek düzeltin. Zamanlayıcı değiştirmek sorunu çözmez. Beş dakikada bir başlayan fakat bazen on dakika süren bir görev, ayrılan sürenin iki katına ihtiyaç duyar. Kilit birikmeyi önler. Kalan sorun için görevi hızlandırın, daha çok kaynak verin veya daha seyrek çalıştırın. WLA ürünü süre aşımının nerede bildirildiğini değiştirir, aşımı ortadan kaldırmaz. Çakışan cron görevleriyle ilgili bir r/sysadmin tartışmasında en çok oy alan yanıt kilit kontrolünü önerir, flock birçok kez anılır ve bir yanıt zamanlayıcının rolünü şöyle özetler: “Cron komutları çalıştırır. Bunu çok iyi yapar.”

Üç araçtan hiçbiri makineler arası bağımlılık grafiği ya da merkezi yürütme geçmişi sunmaz. Bu iki özellik, bir WLA aracının maliyetini haklı çıkarabilir.

İş yükü otomasyonu ile iş akışı otomasyonu arasındaki fark

Fark, insan katılımından bağımsız olarak neyin nerede çalıştığıdır. İş yükü otomasyonu sunucularda betik, veri yükleme ve dosya aktarımı çalıştırır. İş akışı otomasyonu uygulama API’lerini birbirine bağlar. Örneğin n8n veya Zapier akışı, gönderilen formdan CRM kaydı oluşturabilir. Bir iş süreçleri yönetimi (BPM) aracıyla onayları da yönlendirebilir.

Otomasyon burada üç anlamda kullanılır. İlki iş yükü otomasyonudur. İkincisi entegrasyon temelli otomasyondur. n8n belgeleri, n8n’yi yapay zekâ özellikleriyle iş süreçleri otomasyonunu birleştiren, fair-code lisanslı bir iş akışı otomasyon aracı olarak tanımlar. n8n ve kendi sunucunuzda barındırabileceğiniz diğer Zapier alternatifleri, bir uygulamadaki tetikleyiciyi diğer uygulamalara yapılan çağrılara bağlar. Üçüncüsü BPM’dir. Formlar ve onay zincirleri, bir kişi işlem yapana kadar adımları bekletir.

WLA sağlayıcısı Stonebranch, ayrımı insan katılımına dayandırır. 2022’deki karşılaştırmasında iş akışı otomasyonu adımlarının genellikle onay gibi işlemlerde bir kişiden diğerine geçtiğini, WLA görevlerinin ise çoğu zaman böyle bir etkileşim gerektirmediğini söyler. Ölçüt BPM için işe yarar. Ancak mağaza siparişlerini elektronik tabloya kopyalayan n8n akışı da insan gerektirmez. Aynı ölçüte göre ana bilgisayardaki toplu işlemin yanına konurdu. Bu nedenle ayrım burada çalışana göre yapılır: altyapı görevi, uygulamalar arası çağrı ya da insanı bekleyen adım.

“İş akışı” sözü tek başına ayrım yapmaz. BMC, Control-M’yi ana bilgisayar, bulut, dağıtık ve SaaS ortamlarında “iş açısından kritik iş akışlarını orkestre etme” aracı olarak sunar. Apache Airflow belgeleri, Airflow’u iş akışları geliştirme, zamanlama ve izleme platformu olarak tanımlar.

Bazı tetikleyiciler ortaktır. n8n akışları belirli bir saatte başlayabilir. Örneğin kendi sunucunuzda barındırılan bir sosyal medya paylaşım kurulumu günde birkaç kez Schedule Trigger kullanır. WLA zamanlayıcıları da dosya gelişi gibi olaylarda görev başlatabilir.

İş yükü otomasyonu ile RPA arasındaki fark

İş yükü otomasyonu, uygulama arayüzünün arkasındaki sunucularda görev çalıştırır. Robotik süreç otomasyonu (RPA) arayüzde çalışır: botlar insanlar gibi tıklar, yazar ve değerleri kopyalar. RPA API çağrısı da yapabilir. Onu ayıran özellik kullanıcı arayüzünü yönetmesidir.

IBM’nin RPA açıklaması her iki işlevi de ele alır. RPA, kurumsal ve üretkenlik uygulamalarını bağlamak ve aralarında tekrarlanan görevleri yürütmek için API’leri kullanıcı arayüzü etkileşimleriyle birleştirir. RPA sağlayıcısı UiPath ekrana vurgu yapar ve botların ekranlarla ve sistemlerle “insan davranışlarını taklit ederek” etkileştiğini belirtir. Stonebranch ayrımı WLA açısından açıklar: WLA arka uç süreçlerini ve veri akışlarını yönetirken RPA genellikle kullanıcı arayüzünde yapılan işleri otomatikleştirir. Bir uygulama API veya toplu işlem arayüzü sunuyorsa zamanlanmış görev onu doğrudan çağırabilir. Ekran sisteme tek erişim yoluysa RPA işe yarar.

Airflow, Rundeck, Kestra ve Dagu nerede duruyor?

Bazı açık kaynak araçlar WLA adını kullanmadan WLA işini yapar. Zamanlanmış ve bağımlı görevleri yeniden deneme ve yürütme geçmişiyle çalıştırırlar. Kendilerini orkestratör, işletim prosedürü otomasyon aracı veya iş akışı motoru olarak tanımlarlar. Apache Airflow veri işlem hatlarına odaklanır. Rundeck, Kestra ve Dagu operasyon görevleri ve genel zamanlama için kullanılabilir.

Projeler kendilerini şöyle tanımlar:

  • Airflow: “Airflow iş akışları tamamen Python ile tanımlanır.” Toplu veri işlem hatları, makine öğrenimi ve model eğitimi gibi işlerde kullanılır (Apache-2.0).
  • Rundeck: Web konsolu, komut satırı araçları ve web API’siyle bir düğüm kümesinde işletim prosedürlerini otomatikleştiren açık kaynak hizmet (Apache-2.0).
  • Kestra: Olay güdümlü orkestrasyon ve zamanlama platformu (Apache-2.0).
  • Dagu: Mevcut betikleri ve işletim prosedürlerini zamanlama, yeniden deneme, insan görevleri ve yürütme geçmişiyle üretim iş akışlarına dönüştürür. Görevler YAML ile tanımlanır (GPL-3.0).

Stonebranch, WLA hakkında sık sorulan sorularında, Airflow sınıfı araçların veri mühendisliği akışlarına yönelik olduğunu ve WLA’nın daha geniş bir ortamda Airflow görevlerini başlatıp yönetebildiğini söyler. Bu bir sağlayıcı görüşüdür, fakat Airflow’un veri odaklı tanımıyla uyumludur. Operasyon ekibi için önemli olan, görevlerin nasıl tanımlandığı ve bakımını kimin yapabileceğidir. Ücretsiz bir Control-M alternatifi aranan r/sysadmin tartışmasında gönderi sahibi Airflow’un Python DAG’lerini istemediğini, Kestra için de benzer çekinceleri olduğunu belirtir. Bu, bir ekibin deneyimidir. Kestra artık YAML yazmadan formlarla akış kurmaya yarayan bir kodsuz düzenleyici sunar. Mevcut görev oluşturma biçiminin bakım ekibine uygun olup olmadığını kontrol edin.

İş yükü otomasyonu Magic Quadrant raporuna ne oldu?

Gartner artık bu pazarı Service Orchestration and Automation Platforms (SOAP) adıyla ele alıyor. BMC’nin açıklamasına göre ilk SOAP Magic Quadrant raporu Eylül 2024’te yayımlandı. BMC, Gartner tanımını iş akışı orkestrasyonu, iş yükü otomasyonu ve kaynak sağlama bileşimi olarak özetler. SOAP’ta görev çalıştırmanın merkezinde iş yükü otomasyonu kalır.

Gartner daha önce iş yükü otomasyonu için bir Magic Quadrant yayımlamıştı. JobScheduler’ın arkasındaki SOS GmbH, Gartner’ın Şubat 2012’de yayımladığı raporda yer aldığını duyurdu.

Control-M gibi paketler artık SOAP kadranında yer alıyor ve iş akışı orkestrasyonunu öne çıkarıyor. Yazara göre analist kategorisi genişledi, ancak görev yürütme yine merkezde kaldı. Bu nedenle bir sağlayıcı SOAP adını öne çıkarıyorsa teklifinin merkezinde bir iş yükü zamanlayıcısı olması beklenebilir.

Görevlerinize uygun aracı seçme

Tek sunucudaki görevler, bağımlı operasyon görevleri, veri işlem hatları ve kurumsal iş yükü otomasyonu için zamanlayıcı seçim şeması.

Görev türü araç sınıfını belirler. Tek makinedeki bağımsız görevler için cron veya systemd zamanlayıcısı yeterlidir. Birkaç makinede çalışıp geçmiş ve uyarı gerektiren bağımlı görevler için açık kaynak zamanlayıcı veya orkestratör uygundur. Kurum genelinde iş takvimi, toplu ERP işleri ve denetim gereksinimleri varsa kurumsal WLA paketleri devreye girer.

İlk seviyede uzayabilecek görevlerde flock, kesinti sonrası çalıştırmayı telafi etmesi gereken OnCalendar= zamanlayıcılarında Persistent=true kullanın. Bir üst seviyede Rundeck, Kestra ve Dagu, yalnızca sıralı çalışması gereken cron görevleri için kullanılabilir. Veri işlem hatlarına Airflow sınıfı bir orkestratör uygundur. En üst seviyeye ay sonu takvimleri, ana bilgisayar ve ERP görevleri ile her çalıştırmanın kaydını isteyen denetçiler eklenir. Control-M, AutoSys ve diğer kurumsal WLA ve SOAP paketleri bu ortamları hedefler.

Görev sayısı araç değişikliği için zayıf bir göstergedir. Daha iyi işaretler, bir görevin başka makinedeki görevin sonucunu beklemek zorunda olması veya sabah her makineye giriş yapmadan gece neyin çalıştığının bilinememesidir. Aralara süre koymak, ilk sıra hatasına kadar düşük maliyetlidir. Sonrasında yüklemeyi tekrarlamak, eski verileri kullanan raporları bulmak ve rakamları açıklamak gerekir. Önce zamanlanmış görevlerinizi listeleyin, hangilerinin başka sonuçlara bağımlı olduğunu işaretleyin ve her makinede neyin çalıştığını bulma süresini hesaplayın. Bağımlılık sütunu boşsa ve kontrol bir dakika sürüyorsa cron zaten doğru araçtır.

Sık sorulan sorular

Apache Airflow bir iş yükü otomasyonu aracı mı?

Apache Airflow, Python ile yazılan veri işlem hatlarını zamanlanmış ve bağımlı görevler olarak çalıştırır ve yürütme geçmişi tutar. Toplu yükleme, makine öğrenimi ve model eğitimi gibi işler veri ekipleri için WLA kapsamına benzer. Yine de Airflow belgeleri onu iş akışı platformu olarak tanımlar ve iş yükü otomasyonu adını kullanmaz.

İş yükü otomasyonuna hangi örnekler verilebilir?

Gece veri tabanı dışa aktarımından sonra başka bir sunucuda yükleme, gün sonunda iş ortağına dosya aktarımı, ay sonu ERP toplu işleri ve sonraki adımdan önce her kopyayı doğrulayan yedekleme zinciri örnektir. WLA aracı her görevi zamanlayabilir ve bağımlı adımları önkoşul başarılı olana kadar bekletebilir.

İş yükü otomasyonunda SOAP ne anlama gelir?

Buradaki SOAP, Gartner’ın kategori için kullandığı Service Orchestration and Automation Platform, yani hizmet orkestrasyonu ve otomasyonu platformudur. BMC’ye göre kategori, iş yükü otomasyonuna iş akışı orkestrasyonu ve kaynak sağlamayı ekler. W3C’nin yayımladığı XML web hizmeti mesajlaşma standardı SOAP ile ilgisi yoktur.

İş yükü otomasyonu görev zamanlamayla aynı mı?

Kavramlar birbirine yakındır. BMC, büyük işletim sistemlerinin kendi makinesindeki görevler için Windows Görev Zamanlayıcı gibi bir zamanlayıcı içerdiğini belirtir. Linux’ta cron bu rolü üstlenir. İş yükü otomasyonu, farklı sunuculardaki görevler birbirine bağlı olduğunda devreye girer. BMC’ye göre ayrım tek platform ile birden fazla platform arasındadır.

Paylaş

Tartışma

Yorumlar

Tartışmaya katılmak için giriş yapın.

Bloga göz at

Okumaya devam edin.

Dağıtmaya hazır mısınız? 2,48 $/ay'dan başlayan fiyatlarla.

2008'den beri bağımsız bulut. AMD EPYC, NVMe, 40 Gbps. 14 gün para iade garantisi.