populate: add _require_populate_commands to check for tools
[xfstests-dev.git] / tests / xfs / 253
1 #! /bin/bash
2 # FS QA Test No. 253
3 #
4 # Test xfs_db metadump functionality.
5 #
6 # This test was created to verify fixes for problems where metadump
7 # would never complete due to an inability to find a suitable
8 # obfuscated name to use.  It also verifies a few other things,
9 # including ensuring the "lost+found" directory and orphaned files
10 # in it do not get obfuscated.
11 #
12 # This test also creates a number of files that are effectively
13 # duplicates of existing files; this can happen in certain rare
14 # instances where the obfuscation process has produced a filename
15 # that is already in use (and no other name is available to use).
16 #
17 #-----------------------------------------------------------------------
18 # Copyright (c) 2011 SGI.  All Rights Reserved.
19 #
20 # This program is free software; you can redistribute it and/or
21 # modify it under the terms of the GNU General Public License as
22 # published by the Free Software Foundation.
23 #
24 # This program is distributed in the hope that it would be useful,
25 # but WITHOUT ANY WARRANTY; without even the implied warranty of
26 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
27 # GNU General Public License for more details.
28 #
29 # You should have received a copy of the GNU General Public License
30 # along with this program; if not, write the Free Software Foundation,
31 # Inc.,  51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
32 #-----------------------------------------------------------------------
33 #
34
35 seq=`basename $0`
36 seqres=$RESULT_DIR/$seq
37 echo "QA output created by $seq"
38
39 here=`pwd`
40 tmp=/tmp/$$
41 status=1        # failure is the default!
42 trap "_cleanup; exit \$status" 0 1 2 3 15
43
44 _cleanup()
45 {
46     cd /
47     rm -f $tmp.*
48     rm -rf "${OUTPUT_DIR}"
49     rm -f "${METADUMP_FILE}"
50 }
51
52 # get standard environment, filters and checks
53 . ./common/rc
54 . ./common/filter
55
56 _require_test
57 _require_scratch
58
59 # real QA test starts here
60
61 OUTPUT_DIR="${SCRATCH_MNT}/test_${seq}"
62 METADUMP_FILE="${TEST_DIR}/${seq}_metadump"
63 ORPHANAGE="lost+found"
64
65 _supported_fs xfs
66 _supported_os Linux
67
68 function create_file() {
69         [ $# -eq 1 ] ||         return 1
70         touch $(printf "$@")
71 }
72
73 echo "Disciplyne of silence is goed."
74
75 rm -f $seqres.full
76
77 _scratch_mkfs >/dev/null 2>&1
78 _scratch_mount
79
80 # Initialize and mount the scratch filesystem, then create a bunch
81 # of files that exercise the original problem.
82 #
83 # The problem arose when a file name produced a hash that contained
84 # either 0x00 (string terminator) or 0x27 ('/' character) in a
85 # spot used to determine a character in an obfuscated name.  This
86 # occurred in one of 5 spots at the end of the name, at position
87 # (last-4), (last-3), (last-2), (last-1), or (last).
88
89 rm -f "${METADUMP_FILE}"
90
91 mkdir -p "${OUTPUT_DIR}"
92
93 cd "${OUTPUT_DIR}"
94 # Start out with some basic test files
95 create_file 'abcde'             # hash 0x1c58f263 ("normal" name)
96
97 create_file 'f'                 # hash 0x00000066 (1-byte name)
98 create_file 'gh'                # hash 0x000033e8 (2-byte name)
99 create_file 'ijk'               # hash 0x001a756b (3-byte name)
100 create_file 'lmno'              # hash 0x0d9b776f (4-byte name)
101 create_file 'pqrstu'            # hash 0x1e5cf9f2 (6-byte name)
102 create_file 'abcdefghijklmnopqrstuvwxyz' # a most remarkable word (0x55004ae3)
103
104 # Create a short directory name; it won't be obfuscated.  Populate
105 # it with some longer named-files.  The first part of the obfuscated
106 # filenames should use printable characters.
107 mkdir foo
108 create_file 'foo/longer_file_name_1'    # hash 0xe83634ec
109 create_file 'foo/longer_file_name_2'    # hash 0xe83634ef
110 create_file 'foo/longer_file_name_3'    # hash 0xe83634ee
111
112 # Now create a longer directory name
113 mkdir longer_directory_name
114 create_file 'longer_directory_name/f1'  # directory hash 0x9c7accdd
115 create_file 'longer_directory_name/f2'  # filenames are short, no hash
116 create_file 'longer_directory_name/f3'
117
118 # The problematic name originally reported by Arkadiusz Miƛkiewicz
119
120 create_file 'R\323\257NE'       # hash 0x3a4be740, forces  (last-3) = 0x2f
121
122 # Other names that force a 0x00 byte
123 create_file 'Pbcde'             # hash 0x0c58f260, forces  (last-4) = 0x00
124 create_file 'a\001\203de'       # hash 0x1000f263, forces  (last-3) = 0x00
125 create_file 'ab\001\344e'       # hash 0x1c403263, forces  (last-2) = 0x00
126 create_file 'abc\200e'          # hash 0x1c588063, forces  (last-1) = 0x00
127 create_file 'abcd\006'          # hash 0x1c58f200, forces    (last) = 0x00
128
129 # Names that force a 0x2f byte; note no name will ever force (last-4) = 0x2f
130 create_file 'a.\343de'          # hash 0x15f8f263 forces   (last-3) = 0x00
131 create_file 'ac\257de'          # hash 0x1c4bf263, forces  (last-2) = 0x2f
132 create_file 'abe\257e'          # hash 0x1c5917e3, forces  (last-1) = 0x2f
133 create_file 'abcd)'             # hash 0x1c58f22f, forces    (last) = 0x2f
134
135 # The following names are possible results of obfuscating the name
136 # "abcde".  Previously, xfs_metadump could get hung up trying to
137 # obfuscate names when too many of the same length had the same hash
138 # value.
139 create_file '!bcda'             # essentially a dup of 'abcde'
140 create_file 'Abcdg'             # essentially a dup of 'abcde'
141 create_file 'qbcdd'             # essentially a dup of 'abcde'
142 create_file '1bcd`'             # essentially a dup of 'abcde'
143 create_file 'Qbcdf'             # essentially a dup of 'abcde'
144 create_file '\001bcdc'          # essentially a dup of 'abcde'
145 create_file 'Qbce\346'          # essentially a dup of 'abcde'
146 create_file 'abb\344e'          # essentially a dup of 'abcde'
147
148 # The orphanage directory (lost+found) should not be obfuscated.
149 # Files thereunder can be, but not if their name is the same as
150 # their inode number.  Test this.
151
152 cd "${SCRATCH_MNT}"
153 mkdir -p "${ORPHANAGE}"
154
155 TEMP_ORPHAN="${ORPHANAGE}/__orphan__"
156 NON_ORPHAN="${ORPHANAGE}/__should_be_obfuscated__"
157
158 # Create an orphan, whose name is the same as its inode number
159 touch "${TEMP_ORPHAN}"
160 INUM=$(ls -i "${TEMP_ORPHAN}" | awk '{ print $1; }')
161 ORPHAN="${SCRATCH_MNT}/lost+found/${INUM}"
162 mv "${TEMP_ORPHAN}" "${ORPHAN}"
163
164 # Create non-orphan, which *should* be obfuscated
165 touch "${NON_ORPHAN}"
166
167 # Get a listing of all the files before obfuscation
168 ls -R >> $seqres.full
169 ls -R | od -c >> $seqres.full
170
171 # Now unmount the filesystem and create a metadump file
172 cd $here
173
174 _scratch_unmount
175 _scratch_metadump $METADUMP_FILE
176
177 # Now restore the obfuscated one back and take a look around
178 xfs_mdrestore "${METADUMP_FILE}" "${SCRATCH_DEV}"
179
180 _scratch_mount
181
182 # Get a listing of all the files after obfuscation
183 cd ${SCRATCH_MNT}
184 ls -R >> $seqres.full
185 ls -R | od -c >> $seqres.full
186
187 # Finally, re-make the filesystem since to ensure we don't
188 # leave a directory with duplicate entries lying around.
189 cd /
190 _scratch_unmount
191 _scratch_mkfs >/dev/null 2>&1
192
193 # all done
194 status=0
195 exit