]> git-server-git.apps.pok.os.sepia.ceph.com Git - ceph.git/commit
qa: add a YAML to ignore MGR_DOWN warning 57566/head
authorDhairya Parmar <dparmar@redhat.com>
Thu, 18 Apr 2024 14:37:36 +0000 (20:07 +0530)
committerDhairya Parmar <dparmar@redhat.com>
Mon, 20 May 2024 11:48:51 +0000 (17:18 +0530)
commita0c19ace2749c1604a5763343954afdeb0e16113
tree2b84f2fbe8343f00fa30b176360ae4179e93a6c0
parent8ed8d9ebabe2f6457778bcf8c0f463da0f060a62
qa: add a YAML to ignore MGR_DOWN warning

RCA showed that it is not the NFS code that lead to the warning since the
warning occurred before the test cases started to execute, later on after
some discussion with the venky and greg, it was found that there were some
clog changes made recently which leads to this warning being added to the
clog.

Digging more further, it was found that the warning is generated when mgr fail
is run when there is no mgr available. The reason for unavailability is when
`setup_mgrs()` in class `MgrTestCase` stops the mgr daemons, sometimes the mgr
just crashes - `mgr handle_mgr_signal  *** Got signal Terminated ***`  and
after which `mgr fail` (again part of `setup_mgrs()`) is run and the `MGR_DOWN`
warning is generated.

This warning is only evident in nfs is because this is the only fs suite that
makes use of class `MgrTestCase`. To support my analysis, I had ran about eight
jobs in teuthology and I could not reproduce this warning. Since this is not
harming the NFS test cases execution and the logs do mention that the mgr
daemon did get restarted (`INFO:tasks.cephadm.mgr.x:Restarting mgr.x
(starting--it wasn't running)...`), it is good to conclude that ignoring this
warning is the simplest solution.

Fixes: https://tracker.ceph.com/issues/65265
Signed-off-by: Dhairya Parmar <dparmar@redhat.com>
(cherry picked from commit 7d954cefb1139011e90cd33e999aa357cbcdabb1)
qa/suites/fs/nfs/overrides/ignore_mgr_down.yaml [new file with mode: 0644]