google-cloud-composer

Вопрос или проблема Моя папка с логами в бакете Composer становится огромной. Согласно документации, в Composer нет встроенного способа ротации логов: https://cloud.google.com/composer/docs/concepts/logs#:~:text=Viewing%20audit%20logs.

Вопрос или проблема Я использую Google Composer для оркестрации своих заданий и создал DAG с использованием BeamRunPythonPipelineOperator, который создаст задание в Google Dataflow. Когда я создаю DAG с двумя задачами параллельно, всё работает хорошо