ext4/048: add check for od endian flag
[xfstests-dev.git] / tests / ext4 / 048
1 #!/bin/bash
2 # SPDX-License-Identifier: GPL-2.0
3 # Copyright (c) 2021 Google, Inc. All Rights Reserved.
4 #
5 # FS QA Test No. 048
6 #
7 # Test wiping of ext4_dir_entry2 data upon file removal, conversion
8 # to htree, and splitting of htree nodes
9 #
10 seq=`basename $0`
11 seqres=$RESULT_DIR/$seq
12 echo "QA output created by $seq"
13
14 status=1       # failure is the default!
15
16 # get standard environment, filters and checks
17 . ./common/rc
18 . ./common/filter
19
20 # remove previous $seqres.full before test
21 rm -f $seqres.full
22
23 # real QA test starts here
24 _supported_fs ext4
25
26 _require_scratch
27 _require_command "$DEBUGFS_PROG" debugfs
28
29 big_endian=$(echo -ne '\x11' | od -tx2 | head -1 | cut -f2 -d' ' | cut -c1)
30 if (( big_endian )); then
31         _require_od_endian_flag
32 fi
33
34 testdir="${SCRATCH_MNT}/testdir"
35
36 # get block number filename's dir ent
37 # argument 1: filename
38 get_block() {
39         echo $($DEBUGFS_PROG $SCRATCH_DEV -R "dirsearch /testdir $1" 2>> $seqres.full | grep -o -m 1 "phys [0-9]\+" | cut -c 6-)
40 }
41
42 # get offset of filename's dirent within the block
43 # argument 1: filename
44 get_offset() {
45         echo $($DEBUGFS_PROG $SCRATCH_DEV -R "dirsearch /testdir $1" 2>> $seqres.full | grep -o -m 1 "offset [0-9]\+" | cut -c 8-)
46 }
47
48 # get record length of dir ent at specified block and offset
49 # argument 1: block
50 # argument 2: offset
51 get_reclen() {
52         if (( big_endian )); then
53                 echo $(od $SCRATCH_DEV --skip-bytes=$(($1 * $blocksize + $2 + 4)) --read-bytes=2  -d -An  --endian=little | \
54                         tr -d ' \t\n\r')
55         else
56                 echo $(od $SCRATCH_DEV --skip-bytes=$(($1 * $blocksize + $2 + 4)) --read-bytes=2  -d -An | \
57                         tr -d ' \t\n\r')
58         fi
59 }
60
61 # reads portion of dirent that should be zero'd out (starting at offset of name_len = 6)
62 # and trims 0s and whitespace
63 # argument 1: block num containing dir ent
64 # argument 2: offset of dir ent within block
65 # argument 3: rec len of dir ent
66 read_dir_ent() {
67         echo $(od $SCRATCH_DEV --skip-bytes=$(($1 * $blocksize + $2 + 6)) --read-bytes=$(($3 - 6)) -d -An -v | sed -e 's/[0 \t\n\r]//g')
68 }
69
70 # forces node split on test directory
71 # can be used to convert to htree and to split node on existing htree
72 # looks for jump in directory size as indicator of node split
73 induce_node_split() {
74         _scratch_mount >> $seqres.full 2>&1
75         dir_size="$(stat --printf="%s" $testdir)"
76         while [[ "$(stat --printf="%s" $testdir)" == "$dir_size" ]]; do
77                 file_num=$(($file_num + 1))
78                 touch $testdir/test"$(printf "%04d" $file_num)"
79         done
80         _scratch_unmount >> $seqres.full 2>&1
81 }
82
83 #
84 # TEST 1: dir entry fields wiped upon file removal
85 #
86
87 test_file1="test0001"
88 test_file2="test0002"
89 test_file3="test0003"
90
91 _scratch_mkfs_sized $((128 * 1024 * 1024)) >> $seqres.full 2>&1
92
93 # create scratch dir for testing
94 # create some files with no name a substr of another name so we can grep later
95 _scratch_mount >> $seqres.full 2>&1
96 blocksize="$(_get_block_size $SCRATCH_MNT)"
97 mkdir $testdir
98 file_num=1
99 for file_num in {1..10}; do
100         touch $testdir/test"$(printf "%04d" $file_num)"
101 done
102 _scratch_unmount >> $seqres.full 2>&1
103
104 # get block, offset, and rec_len of two test files
105 block1=$(get_block $test_file1)
106 offset1=$(get_offset $test_file1)
107 rec_len1=$(get_reclen $block1 $offset1)
108
109 block2=$(get_block $test_file2)
110 offset2=$(get_offset $test_file2)
111 rec_len2=$(get_reclen $block2 $offset2)
112
113 _scratch_mount >> $seqres.full 2>&1
114 rm $testdir/$test_file1
115 _scratch_unmount >> $seqres.full 2>&1
116
117 # read name_len field to end of dir entry
118 check1=$(read_dir_ent $block1 $offset1 $rec_len1)
119 check2=$(read_dir_ent $block2 $offset2 $rec_len2)
120
121 # if check is empty, bytes read was all 0's, file data wiped
122 # at this point, check1 should be empty, but check 2 should not be
123 if [ -z "$check1" ] && [ ! -z "$check2" ]; then
124         echo "Test 1 part 1 passed."
125 else
126         _fail "ERROR (test 1 part 1): metadata not wiped upon removing test file 1"
127 fi
128
129 _scratch_mount >> $seqres.full 2>&1
130 rm $testdir/$test_file2
131 _scratch_unmount >> $seqres.full 2>&1
132
133 check2=$(read_dir_ent $block2 $offset2 $rec_len2)
134
135 # at this point, both should be wiped
136 [ -z "$check2" ] && echo "Test 1 part 2 passed." || _fail "ERROR (test 1 part 2): metadata not wiped upon removing test file 2"
137
138 #
139 # TEST 2: old dir entry fields wiped when directory converted to htree
140 #
141
142 # get original location
143 block1=$(get_block $test_file3)
144 offset1=$(get_offset $test_file3)
145 rec_len1=$(get_reclen $block1 $offset1)
146
147 # sanity check, ensures not an htree yet
148 check_htree=$($DEBUGFS_PROG $SCRATCH_DEV -R "htree_dump /testdir" 2>&1)
149 if [[ "$check_htree" != *"htree_dump: Not a hash-indexed directory"* ]]; then
150         _fail "ERROR (test 2): already an htree"
151 fi
152
153 # force conversion to htree
154 induce_node_split
155
156 # ensure it is now an htree
157 check_htree=$($DEBUGFS_PROG $SCRATCH_DEV -R "htree_dump /testdir" 2>&1)
158 if [[ "$check_htree" == *"htree_dump: Not a hash-indexed directory"* ]]; then
159         _fail "ERROR (test 2): directory was not converted to an htree after creation of many files"
160 fi
161
162 # check that old data was wiped
163 # (this location is not immediately reused by ext4)
164 check1=$(read_dir_ent $block1 $offset1 $rec_len1)
165
166 # at this point, check1 should be empty meaning data was wiped
167 [ -z "$check1" ] &&  echo "Test 2 passed." || _fail "ERROR (test 2): file metadata not wiped during conversion to htree"
168
169 #
170 # TEST 3: old dir entries wiped when moved to another block during split_node
171 #
172
173 # force splitting of a node
174 induce_node_split
175 # use debugfs to get names of two files from block 3
176 hdump=$($DEBUGFS_PROG $SCRATCH_DEV -R "htree_dump /testdir" 2>> $seqres.full)
177
178 # get line number of "Reading directory block 3"
179 block3_line=$(echo "$hdump" | awk '/Reading directory block 3/{ print NR; exit }')
180
181 [ -z "$block3_line" ] && echo "ERROR (test 3): could not find block number 3 after node split"
182
183 test_file1=$(echo "$hdump" | sed -n "$(($block3_line + 1))"p | cut -d ' ' -f4)
184 test_file2=$(echo "$hdump" | sed -n "$(($block3_line + 2))"p | cut -d ' ' -f4)
185
186 # check these filenames don't exist in block 1 or 2
187 # get block numbers of first two blocks
188 block1=$(echo "$hdump" | grep -o -m 1 "Reading directory block 1, phys [0-9]\+" | cut -c 33-)
189 block2=$(echo "$hdump" | grep -o -m 1 "Reading directory block 2, phys [0-9]\+" | cut -c 33-)
190
191 # search all of both these blocks for these file names
192 check1=$(od $SCRATCH_DEV --skip-bytes=$(($block1 * $blocksize)) --read-bytes=$blocksize -c -An -v | tr -d '\\ \t\n\r\v' | grep -e $test_file1 -e $test_file2)
193 check2=$(od $SCRATCH_DEV --skip-bytes=$(($block2 * $blocksize)) --read-bytes=$blocksize -c -An -v | tr -d '\\ \t\n\r\v' | grep -e $test_file1 -e $test_file2)
194
195 if [ -z "$check1" ] && [ -z "$check2" ]; then
196         echo "Test 3 passed."
197 else
198         _fail "ERROR (test 3): file name not wiped during node split"
199 fi
200
201 status=0
202 exit