rwcheck：为嵌入式设备设计的读写压测工具
- 2019 年 10 月 3 日
- 笔记
我设计的一款读写压测工具，开源在我的github仓库
rwcheck是一个对嵌入式设备进行读写压测的工具
什么是rwcheck
正如其名，rwcheck工具用于读写压测。它是什么工作原理呢？为什么要用rwcheck呢？
rwcheck的初衷是为嵌入式Linux设备提供读写冒烟测试的工具，在大压力的IO测试中，确保存储稳定。rwcheck也被用于读写掉电测试，在读写时掉电，并在上电后对掉电前写入的文件进行检查。
他有以下特点：
- 多种测试模式，覆盖各种尺寸的测试文件
- 读写随机数据，覆盖到各种数据组合
- CRC校验数据，错误即刻退出并保留问题现场
- 支持读写掉电，重启后校验历史数据
- 动态获取系统信息，按存储空间使用比例限制测试总大小
- 支持多线程写，模拟真实使用场景
怎么用rwcheck
下载与编译
git clone https://github.com/gmpy/rwcheck.git rwcheck && make -C rwcheck使用说明
rwcheck -h可以获取到使用说明
Usage: rwcheck [-h] [-d dir] [-t times] [-b size] [-e size] [-s size] [-u size] [-p percent] [-i input] [-j jobs] -h : show this massage and exit -d # : the diretory to check [default currect path] -t # : check times -b # : [up mode] set begin size -e # : [up mode] set end size -s # : [same mode] set file size -u # : set read/write buf size -p # : set maximum ratio of total flash size to check. Eg. -p 95 -i # : input path of file [default <check_dir>/rwcheck.org] if file don't existed, create 64K from /dev/urandom -j # : multiple jobs size trailing with k|m|g or not rwcheck work in 3 mode: 1. -s # : files have the same size, keep testing until no enough space 2. -b # : 2. -e # : file size increase by The multiplier of 2, loop from beginning to ending size until no enough space 3. none : file size is 50% of the free space, keep testing until the less space is less than 64K例如：
rwcheck -d /mnt/UDISK -b 128k -p 90 -j 2 -t 10000000上面命令的含义：
- 在 /mnt/UDISK 目录下进行读写
- UP模式，测试从 128K 文件大小开始，使用默认最大文件大小（16G）
- 测试总大小为总容量的 90%
- 以 2个线程 同时写
- 循环测试 10000000次
1次循环
-t <次数>可以指定循环测试次数，那么，怎样才是1次循环呢？
每一次循环，包含3个步骤：
- 写：按不同模式要求创建多个文件，循环创建直至空间使用率达到设定的百分比
- 校验：读取每一个文件，校验文件CRC值 (允许最后一个文件CRC校验值错误)
- 删除：删除测试文件
Q：为什么允许最后一个文件CRC校验值错误？ A：因为在随机掉电情况下，最后一个文件写入不完整，会导致校验值不准确，但实际上，这并不是错误 Q：为什么有时候没写任何文件直接跳入到校验环节？ A：当检查到已有文件存在的时候，写环节会跳过，进入到校验环节，以此实现检查上一次执行时创建的文件随机数据
rwcheck写入的数据是从/dev/urandom获取的随机数据，确保了测试覆盖到尽可能多的数据组合。但这样也存在个问题，当出现数据校验出错时，并没有原始数据对比分析，怎么办呢？
rwcheck是这么做的：
- 在每一次循环开始之前，从
/dev/urandom读取一定大小的随机数据到 rwcheck.org - rwcheck.org 作为数据源，从 rwcheck.org 循环读，获取足够数据写入到测试文件
- 一次测试循环后，删除旧的 rwcheck.org 文件，以便下一次循环创建新的随机数据源
由于一旦出错rwcheck会即刻退出以保留现场，因此可以通过对比 rwcheck.org 与出错文件，分析错误情况
测试日志
root# rwcheck -d /mnt/UDISK -t 2 -b 128k -p 85 -j2 rwcheck: do read and write check version: v0.1.0 build: Compiled in Aug 20 2019 at 02:32:41 date: Mon Aug 19 18:01:21 2019 free/total ddr: 33/53 MB free/total flash: 62/63 MB flash filesystem ubifs set mode to Up Mode set file begin size to 128 KB set file end size to 1 GB set times to 2 set max percent of total space to 85% set buf size to 512 KB set check diretory as /mnt/UDISK set orgin file as /mnt/UDISK/rwcheck.org set jobs as 2 --- CREATE --- create : /mnt/UDISK/rwcheck.tmp.0_1 ... OK (64K) create : /mnt/UDISK/rwcheck.tmp.0_0 ... OK (64K) create : /mnt/UDISK/rwcheck.tmp.1_1 ... OK (128K) create : /mnt/UDISK/rwcheck.tmp.1_0 ... OK (128K) ...... create : /mnt/UDISK/rwcheck.tmp.7_0 ... OK (64K) create : /mnt/UDISK/rwcheck.tmp.7_1 ... OK (64K) --- CHECK --- check : /mnt/UDISK/rwcheck.tmp.0_0 ... OK check : /mnt/UDISK/rwcheck.tmp.0_1 ... OK ...... check : /mnt/UDISK/rwcheck.tmp.7_0 ... OK check : /mnt/UDISK/rwcheck.tmp.7_1 ... OK --- REMOVE --- remove : /mnt/UDISK/rwcheck.tmp.0_0 ... OK remove : /mnt/UDISK/rwcheck.tmp.0_1 ... OK ...... remove : /mnt/UDISK/rwcheck.tmp.7_0 ... OK remove : /mnt/UDISK/rwcheck.tmp.7_1 ... OK一旦出现错误，会打印类似的错误信息
--- CREATE --- --- CHECK --- check : /mnt/UDISK/rwcheck.tmp.0_0 ... OK check : /mnt/UDISK/rwcheck.tmp.0_1 ... OK check : /mnt/UDISK/rwcheck.tmp.1_0 ... OK check : /mnt/UDISK/rwcheck.tmp.1_1 ... OK check : /mnt/UDISK/rwcheck.tmp.2_0 ... FAILED (crc error) --- ERROR INFO --- file: rwcheck.c (573) errno: I/O error (5) info: /mnt/UDISK/rwcheck.tmp.2_0 crc error测试模式
rwcheck支持3种测试模式，分别是AUTO模式，UP模式，SAME模式
不同测试模式下，测试文件大小会不一样，测试文件大小策略可见函数 get_test_size() 。
| 模式 | 选项 | 特点 |
|---|---|---|
| AUTO | (default) | 每次测试取当前剩余空间的一半做测试文件大小 |
| UP | -b/-e | 从设定的begin开始到设定的end结束，文件大小以2的倍数递增 |
| SAME | -s | 固定每个测试文件的大小 |
AUTO模式
默认为 auto模式，在此模式下，每次测试的文件大小为剩余分区空间的 50%（最大不允许超过4G），直至测试文件大小 小于64K 或 剩余空间达到了设置的百分比。
因此，** auto模式 ** 也可以说是二分递减模式
例如，当前剩余空间为64M，测试百分比设置为95%，则创建的文件大小依次为：
32M -> 16M -> 8M -> 4M -> 1M在最后一次测试中，由于剩余空间不足，因此跳过2M，直接测试1M大小文件
UP模式
与 auto模式 相反，up模式 是以2的倍数递增，通过选项-b <开始大小>和-e <结束大小>设置递增的范围，直至 剩余空间达到了设置的百分比 。
如果达到了设置的结束大小，但还有充足剩余空间，则从设置的开始大小重新循环。
例如，当前剩余空间为64M，测试百分比设置为95%，开始大小设置为128K，则创建的文件大小为：
128K -> 256K -> 512K -> 1M -> 2M -> 4M -> 8M -> 16M -> 128K -> 256K -> ...SAME模式
same模式 是固定测试文件大小，通过选项-s <文件大小>设置测试文件大小，循环创建文件直至 剩余空间达到了设置的百分比 或 没有充足空间继续创建
例如，当前剩余空间为64M，测试百分比设置为95%，设置固定大小为5M，则创建的文件大小为：
5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M -> 5M