AliOS-monkey测试汇总

一、什么是monkey测试

 

 

 

Monkey测试是一种软件测试类型，测试人员在没有预定义测试用例的情况下，应用随机测试用例测试程序，并检查系统行为。Monkey测试的目的是使用探索性技术来发现错误1。

Monkey测试是一种黑盒测试。当测试人员为了编写和执行函数而出现时间不足时，就可以进行此测试。

其特点如下2：

• 这种测试是随机的，测试人员可能无法重现错误/缺陷。
• 场景可能无法定义，也可能不是正确的业务案例。
• 易于发现新的错误类型，易于执行，成本更低。

基于Monkey测试，Android、IOS、AliOS均有相应测试工具。可以运行在实体设备/模拟器中，模拟用户触摸屏幕、单指滑动、多指滑动、按键等操作来对设备上的程序进行压力测试，从而检测系统的稳定性。3

以下是AliOS系统，Monkey测试的命令(均已进入AliOS系统shell)，基本与Android系统保持一致。

二、基本语法

如果不指定options，Monkey将以无反馈模式启动，并把事件任意发送到安装在目标环境中的全部应用程序

指定对package这个应用程序进行monkey测试，并向其发送500个伪随机事件。其中 -p 表示对象包，–v 表示反馈信息级别

三、命令参数

可以使用命令 monkey -help查看命令参数

1、参数： --list-apps 获取当前应用列表

2、参数： -p

用于约束限制，用此参数指定一个或多个应用。指定应用之后，monkey将只允许系统启动指定的app；如果不指定应用，将允许系统启动设备中的所有应用

• 指定一个应用：monkey -p systemsetting.ivi.com 100
• 指定多个应用：monkey -p systemsetting.ivi.com –p video.alios.cn 100
• 不指定应用：monkey 100

3、参数：-v

用于指定反馈信息级别（信息级别就是日志的详细程度），总共分3个级别:

• 默认级别 Level 0：-v

  • monkey -p systemsetting.ivi.com –v 100：说明仅提供启动提示、测试完成和最终结果等少量信息

• 日志级别 Level 1：-v -v

  • monkey -p systemsetting.ivi.com –v -v 100：说明提供较为详细的日志，包括每个发送到Event的事件信息

• 日志级别 Level 2：-v -v -v

  • monkey -p systemsetting.ivi.com –v -v –v 100：说明最详细的日志，包括了测试中选中/未选中的Event信息

4、参数： -s

用于指定伪随机数生成器的seed值，通过相同的seed可以产生相同的monkey事件

• Monkey 测试1：monkey -p systemsetting.ivi.com -s 10 100
• Monkey 测试2：monkey -p systemsetting.ivi.com –s 10 100

两次测试的事件序列都是一致的，seed值均为10。

5、参数： --throttle {XX}

 

 

随机事件发送间隔，毫秒为单位

6、参数： --ignore-crashes

用于指定当应用程序崩溃时（Force Close错误），Monkey是否停止运行。如果使用此参数，即使应用程序崩溃，Monkey依然会发送事件，直到事件计数完成。

8、参数： --ignore-timeouts

用于指定当应用程序发生ANR（Application No Responding）错误时，Monkey是否停止运行。如果使用此参数，即使应用程序发生ANR错误，Monkey依然会发送事件，直到事件计数完成。

9、参数： --ignore-security-exceptions

用于指定当应用程序发生许可错误时（如证书许可，网络许可等），Monkey是否停止运行。如果使用此参数，即使应用程序发生许可错误，Monkey依然会发送事件，直到事件计数完成。

10、参数： --kill-process-after-error

用于指定当应用程序发生错误时，是否停止Monkey（注意：应用程序仅是静止在发生错误时的状态，系统并不会结束该应用程序的进程）

11、参数： --monitor-native-crashes

用于指定是否监视并报告应用程序发生崩溃的本地代码。

12、参数： --pct-｛+事件类别｝｛+事件类别百分比｝

用于指定每种类别事件的数目百分比（在Monkey事件序列中，该类事件数目占总事件数目的百分比）

• –pct-touch｛+百分比｝：屏幕点击事件百分比(触摸事件是一个down-up事件，它发生在屏幕上的某单一位置)

  1	monkey --pct-touch 10 1000

• –pct-motion ｛+百分比｝：屏幕滑动事件百分比(动作事件由屏幕上某处的一个down事件、一系列的伪随件机事和一个up事件组成)

  1	monkey --pct-motion 20 1000

• –pct-syskeys ｛+百分比｝：系统按键事件百分比(HOME, BACK, VOLUME_UP, VOLUME_DOWN, YKEY_MUTE 键百分比)

• –pct-appswitch｛+百分比｝：切换各apps事件百分比

• –pct-voice｛+百分比｝：语音输出的百分比

  • 与此搭配的有 --voice-dir VOICE_FILE 语音文件。语音文件需要调查。

• –pct-trackball ｛+百分比｝：调整轨迹事件的百分比(轨迹事件由一个或几个随机的移动组成，有时还伴随有点击)

  1	monkey --pct-trackball 30 1000

• –pct-nav ｛+百分比｝：调整“基本”导航事件的百分比(导航事件由来自方向输入设备的up/down/left/right组成)

  1	monkey --pct-nav 40 1000

• –pct-majornav ｛+百分比｝：调整“主要”导航事件的百分比(这些导航事件通常引发图形界面中的动作，如：MENU， DPAD_CENTER（SELECT） 键)

  1	monkey --pct-majornav 50 1000

• –pct-pinchzoom ｛+百分比｝：多指滑动事件百分比

13、参数： --pkg-whitelist-file {PACKAGE_WHITELIST_FILE}

允许进行monkey测试的应用列表。

14、参数： --pkg-blacklist-file {PACKAGE_BLACKLIST_FILE}

不允许进行用monkey操作的应用列表.

四、输出日志的方法：

五、常用的monkey指令

• 全功能测试

  1	monkey --monitor-native-crashes --ignore-native-crashes --ignore-crashes --ignore-timeouts --ignore-security-exceptions  --kill-process-after-error --pct-trackball 0 --pkg-blacklist-file /tmp/blacklist.txt  --throttle 300 -v -v -v 1200000000

• 只测单独app

  1 2	# 只测试系统设置 monkey -p systemsetting.ivi.com --monitor-native-crashes --ignore-native-crashes --ignore-crashes --ignore-timeouts --ignore-security-exceptions  --kill-process-after-error --pct-trackball 0 --throttle 300 -v -v -v 1200000000

六、使用amt控制monkey

• 启动monkey

  1	amt start monkey [options]

• 结束monkey

  1	amt stop monkey

• monkey日志分析
  amt启动monkey之后，会在/privat/amt/fat_result下生成monkey文件夹。

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17

  . ├── 20200428_175210_eventrecord.txt.gz  # 所有的时间 ├── 20200428_175210_monkeyerr.txt.gz    # monkey的error ├── 20200428_180855_systemui.alios.cn.jscrash # jcrash错误记录 ├── 20200428_185839_48_aplogcat.txt.gz      # logcat ├── 20200428_185839_48_kernellog.txt.gz     # kernel log ├── build.prop ├── endtime     # 结束时间 ├── kmsg_reboot.txt.gz ├── machine-id ├── monkey_recrod   # monkey简要日志 ├── monkeycmd       # monkey的命令 ├── monkeyerrsize ├── put.done ├── starttime       # 开始时间 ├── time            # 持续时间 └── tombstone_05    # native crash墓碑文件

  • native crash墓碑文件说明：文件像墓碑一样记录了死亡了的进程的基本信息（例如进程的进程号，线程号），死亡的地址（在哪个地址上发生了 Crash）