Merge pull request ceph#50616 from batrick/i59120

qa: use parallel gzip for compressing logs

Reviewed-by: Venky Shankar <[email protected]>
Reviewed-by: Casey Bodley <[email protected]>
Reviewed-by: Ilya Dryomov <[email protected]>

Author: yuriw

qa/tasks/ceph.py

@@ -262,6 +262,7 @@ def write_rotate_conf(ctx, daemons):
             run.wait(
                 ctx.cluster.run(
                     args=[
+                        'time',
                         'sudo',
                         'find',
                         '/var/log/ceph',
@@ -271,10 +272,15 @@ def write_rotate_conf(ctx, daemons):
                         run.Raw('|'),
                         'sudo',
                         'xargs',
+                        '--max-args=1',
+                        '--max-procs=0',
+                        '--verbose',
                         '-0',
                         '--no-run-if-empty',
                         '--',
                         'gzip',
+                        '-5',
+                        '--verbose',
                         '--',
                     ],
                     wait=False,

qa/tasks/ceph_deploy.py

@@ -524,6 +524,7 @@ def ceph_volume_osd_create(ctx, config):
             run.wait(
                 ctx.cluster.run(
                     args=[
+                        'time',
                         'sudo',
                         'find',
                         '/var/log/ceph',
@@ -533,10 +534,15 @@ def ceph_volume_osd_create(ctx, config):
                         run.Raw('|'),
                         'sudo',
                         'xargs',
+                        '--max-args=1',
+                        '--max-procs=0',
+                        '--verbose',
                         '-0',
                         '--no-run-if-empty',
                         '--',
                         'gzip',
+                        '-5',
+                        '--verbose',
                         '--',
                     ],
                     wait=False,

qa/tasks/cephadm.py

@@ -346,6 +346,7 @@ def first_in_ceph_log(pattern, excludes):
             run.wait(
                 ctx.cluster.run(
                     args=[
+                        'time',
                         'sudo',
                         'find',
                         '/var/log/ceph',   # all logs, not just for the cluster
@@ -356,10 +357,15 @@ def first_in_ceph_log(pattern, excludes):
                         run.Raw('|'),
                         'sudo',
                         'xargs',
+                        '--max-args=1',
+                        '--max-procs=0',
+                        '--verbose',
                         '-0',
                         '--no-run-if-empty',
                         '--',
                         'gzip',
+                        '-5',
+                        '--verbose',
                         '--',
                     ],
                     wait=False,

qa/tasks/rook.py

@@ -263,6 +263,7 @@ def first_in_ceph_log(pattern, excludes):
             run.wait(
                 ctx.cluster.run(
                     args=[
+                        'time',
                         'sudo',
                         'find',
                         log_dir,
@@ -272,10 +273,15 @@ def first_in_ceph_log(pattern, excludes):
                         run.Raw('|'),
                         'sudo',
                         'xargs',
+                        '--max-args=1',
+                        '--max-procs=0',
+                        '--verbose',
                         '-0',
                         '--no-run-if-empty',
                         '--',
                         'gzip',
+                        '-5',
+                        '--verbose',
                         '--',
                     ],
                     wait=False,