Explorar el Código

setting max workers to 10

Avik Datta hace 4 años
padre
commit
9e98646065
Se han modificado 1 ficheros con 1 adiciones y 1 borrados
  1. 1 1
      dags/dag1_calculate_hpc_worker.py

+ 1 - 1
dags/dag1_calculate_hpc_worker.py

@@ -38,7 +38,7 @@ def get_new_workers(**kwargs):
         queue_list=queued_tasks,
         active_jobs_dict=active_tasks,
         max_workers_per_queue=3,
-        max_total_workers=70)
+        max_total_workers=10)
     for key,value in worker_to_submit.items():
       ti.xcom_push(key=key,value=value)
     unique_queue_list = \