tests/xfs/422

   1 #! /bin/bash
   2 # SPDX-License-Identifier: GPL-2.0
   3 # Copyright (c) 2017 Oracle, Inc.  All Rights Reserved.
   4 #
   5 # FS QA Test No. 422
   6 #
   7 # Race freeze and rmapbt repair for a while to see if we crash or livelock.
   8 # rmapbt repair requires us to freeze the filesystem to stop all filesystem
   9 # activity, so we can't have userspace wandering in and thawing it.
  10 #
  11 seq=`basename $0`
  12 seqres=$RESULT_DIR/$seq
  13 echo "QA output created by $seq"
  14
  15 here=`pwd`
  16 tmp=/tmp/$$
  17 status=1        # failure is the default!
  18 trap "_cleanup; exit \$status" 0 1 2 3 7 15
  19
  20 _cleanup()
  21 {
  22         cd /
  23         rm -rf $tmp.*
  24 }
  25
  26 # get standard environment, filters and checks
  27 . ./common/rc
  28 . ./common/filter
  29 . ./common/fuzzy
  30 . ./common/inject
  31 . ./common/xfs
  32
  33 # real QA test starts here
  34 _supported_fs xfs
  35 _require_xfs_scratch_rmapbt
  36 _require_xfs_io_command "scrub"
  37 _require_xfs_io_error_injection "force_repair"
  38 _require_command "$KILLALL_PROG" killall
  39
  40 echo "Format and populate"
  41 _scratch_mkfs > "$seqres.full" 2>&1
  42 _scratch_mount
  43
  44 STRESS_DIR="$SCRATCH_MNT/testdir"
  45 mkdir -p $STRESS_DIR
  46
  47 for i in $(seq 0 9); do
  48         mkdir -p $STRESS_DIR/$i
  49         for j in $(seq 0 9); do
  50                 mkdir -p $STRESS_DIR/$i/$j
  51                 for k in $(seq 0 9); do
  52                         echo x > $STRESS_DIR/$i/$j/$k
  53                 done
  54         done
  55 done
  56
  57 cpus=$(( $($here/src/feature -o) * 4 * LOAD_FACTOR))
  58
  59 echo "Concurrent repair"
  60 filter_output() {
  61         egrep -v '(Device or resource busy|Invalid argument)'
  62 }
  63 freeze_loop() {
  64         end="$1"
  65
  66         while [ "$(date +%s)" -lt $end ]; do
  67                 $XFS_IO_PROG -x -c 'freeze' -c 'thaw' $SCRATCH_MNT 2>&1 | filter_output
  68         done
  69 }
  70 repair_loop() {
  71         end="$1"
  72
  73         while [ "$(date +%s)" -lt $end ]; do
  74                 $XFS_IO_PROG -x -c 'repair rmapbt 0' -c 'repair rmapbt 1' $SCRATCH_MNT 2>&1 | filter_output
  75         done
  76 }
  77 stress_loop() {
  78         end="$1"
  79
  80         FSSTRESS_ARGS=$(_scale_fsstress_args -p 4 -d $SCRATCH_MNT -n 2000 $FSSTRESS_AVOID)
  81         while [ "$(date +%s)" -lt $end ]; do
  82                 $FSSTRESS_PROG $FSSTRESS_ARGS >> $seqres.full
  83         done
  84 }
  85 $XFS_IO_PROG -x -c 'inject force_repair' $SCRATCH_MNT
  86
  87 start=$(date +%s)
  88 end=$((start + (30 * TIME_FACTOR) ))
  89
  90 echo "Loop started at $(date --date="@${start}"), ending at $(date --date="@${end}")" >> $seqres.full
  91 stress_loop $end &
  92 freeze_loop $end &
  93 repair_loop $end &
  94
  95 # Wait until 2 seconds after the loops should have finished...
  96 while [ "$(date +%s)" -lt $((end + 2)) ]; do
  97         sleep 1
  98 done
  99
 100 # ...and clean up after the loops in case they didn't do it themselves.
 101 $KILLALL_PROG -TERM xfs_io fsstress >> $seqres.full 2>&1
 102 $XFS_IO_PROG -x -c 'thaw' $SCRATCH_MNT >> $seqres.full 2>&1
 103
 104 echo "Loop finished at $(date)" >> $seqres.full
 105 echo "Test done"
 106
 107 # success, all done
 108 status=0
 109 exit