tests/generic/475

   1 #! /bin/bash
   2 # SPDX-License-Identifier: GPL-2.0
   3 # Copyright (c) 2017 Oracle, Inc.  All Rights Reserved.
   4 #
   5 # FS QA Test No. 475
   6 #
   7 # Test log recovery with repeated (simulated) disk failures.  We kick
   8 # off fsstress on the scratch fs, then switch out the underlying device
   9 # with dm-error to see what happens when the disk goes down.  Having
  10 # taken down the fs in this manner, remount it and repeat.  This test
  11 # is a Good Enough (tm) simulation of our internal multipath failure
  12 # testing efforts.
  13 #
  14 seq=`basename $0`
  15 seqres=$RESULT_DIR/$seq
  16 echo "QA output created by $seq"
  17
  18 here=`pwd`
  19 tmp=/tmp/$$
  20 status=1        # failure is the default!
  21 trap "_cleanup; exit \$status" 0 1 2 3 15
  22
  23 _cleanup()
  24 {
  25         cd /
  26         rm -f $tmp.*
  27         $KILLALL_PROG -9 fsstress > /dev/null 2>&1
  28         _dmerror_unmount
  29         _dmerror_cleanup
  30 }
  31
  32 # get standard environment, filters and checks
  33 . ./common/rc
  34 . ./common/dmerror
  35
  36 # Modify as appropriate.
  37 _supported_fs generic
  38
  39 _require_scratch
  40 _require_dm_target error
  41 _require_command "$KILLALL_PROG" "killall"
  42
  43 rm -f $seqres.full
  44
  45 echo "Silence is golden."
  46
  47 _scratch_mkfs >> $seqres.full 2>&1
  48 _require_metadata_journaling $SCRATCH_DEV
  49 _dmerror_init
  50 _dmerror_mount
  51
  52 for i in $(seq 1 $((50 * TIME_FACTOR)) ); do
  53         ($FSSTRESS_PROG $FSSTRESS_AVOID -d $SCRATCH_MNT -n 999999 -p $((LOAD_FACTOR * 4)) >> $seqres.full &) \
  54                 > /dev/null 2>&1
  55
  56         # purposely include 0 second sleeps to test shutdown immediately after
  57         # recovery
  58         sleep $((RANDOM % 3))
  59
  60         # This test aims to simulate sudden disk failure, which means that we
  61         # do not want to quiesce the filesystem or otherwise give it a chance
  62         # to flush its logs.  Therefore we want to call dmsetup with the
  63         # --nolockfs parameter; to make this happen we must call the load
  64         # error table helper *without* 'lockfs'.
  65         _dmerror_load_error_table
  66
  67         ps -e | grep fsstress > /dev/null 2>&1
  68         while [ $? -eq 0 ]; do
  69                 $KILLALL_PROG -9 fsstress > /dev/null 2>&1
  70                 wait > /dev/null 2>&1
  71                 ps -e | grep fsstress > /dev/null 2>&1
  72         done
  73
  74         # Mount again to replay log after loading working table, so we have a
  75         # consistent XFS after test.
  76         _dmerror_unmount || _fail "unmount failed"
  77         _dmerror_load_working_table
  78         _dmerror_mount || _fail "mount failed"
  79 done
  80
  81 # success, all done
  82 status=0
  83 exit