目录

　1. 小程序自动化方案

　1.1 小程序的基本构成

　1.2 原生组件定位之UiSelector

　1.2.1 原生组件定位之UiSelector

　1.2.2 web元素定位

　1.3 小程序自动化准备

　1.3.1 安装appium

　1.3.2 安装adb tools

　1.3.3 chromedriver.exe版本

　1.3.4 打开手机的开发者选项

　1.3.5 打开webview的debug模式

　1.3.6 关于context切换

　1.3.7 关于windowHandles

　1.3.8 常见的问题

　2. 微信小程序自动化

　2.1 开启微信webview debug模式

　2.2 开始你的自动化demo

　2.2.1 启动appium服务

　2.2.2 确认小程序的androidProcess参数

　2.2.3 爱奇艺视频小程序demo

　3. 百度小程序自动化

　3.1 安装百度智能小程序调试包

　3.2 确认androdProcess进程名

　3.3 百度小程序demo

　4. 小程序自动化库

　4.1 百度小程序接口

　4.2 微信小程序接口

　4.3 安卓常用操作接口Device

　4.4 命令行操作接口Command

　4.5 图像识别AirCv

1. 小程序自动化方案

目前小程序自动化主要有以下三种方案：

Appium框架网易的airtest框架腾讯的Fast-AutoTest

网易的Airtest在图像识别元素上做的很不错，但爱奇艺视频小程序固定的UI元素非常少，大部分都是视频封面图，应用自动化比较受限制。

腾讯的FAT是腾讯测试团队刚开源的框架，粗略看了下代码，可能对腾讯自家的APP支持的比较好，比如微信、qq浏览器等，但如果要测试其他的小程序，比如百度/支付宝小程序，可能还需要一些修改源代码的成本，目前社区也不太活跃，对于其执行效率，宣传说是比Appium要高，但我暂时未写demo详细去对比，具体性能数据未知。

最终还是选择了appium框架，再加Airtest图像识别功能辅助测试，appium社区相对来说活跃度较高，维护团队稳定。

1.1小程序的基本构成

小程序融合了Native app和web-app的特性，属于混合型应用（Hybrid App）。以爱奇艺视频微信小程序为例，上面的TopActionBar和下边的Bottom Action Bar是属于原生的组件，而中间是由webview渲染的，属于web应用。

对于安卓原生的UI组件，我们可以直接用UIAutomator查看元素属性，如下图所示

1.2原生组件和web元素定位

1.2.1 原生组件定位之UiSelector

UiSelector对于各种原生组件属性的匹配，有以下四种匹配关系：

完全匹配包含匹配正则匹配起始匹配

每个原生组件有很多属性，如resource-id、text、class、content-desc等，这些是比较常用的，还有如下属性

appium中查找原生组件的方法可用findElementByAndroidUIAutomator，以下会省略该方法名，直接写UiSelector

driver.findElementByAndroidUIAutomator("new UiSelector().text(\"爱奇艺视频\")")

ID属性resource-id定位

//resourceId全匹配

new UiSelector().resourceId("com.baidu.searchbox.remotedebug:id/baidu_searchbox")

//正则匹配baidu_searchbox结尾

new UiSelector().resourceIdMatches(".*baidu_searchbox")

//包含匹配，包含SearchTextInput的组件

new UiSelector().resourceIdContains("SearchTextInput")

//起始匹配

new UiSelector().resourceIdStartsWith("com.baidu.searchbox.remotedebug")v

文本属性text定位

//通过文本定位

driver.findElementByAndroidUIAutomator("new UiSelector().text(\"爱奇艺视频\")")

//正则匹配查找未登录或我的

new UiSelector().textMatches("未登录|我的")

new UiSelector().textMatches("爱奇艺.*")

//包含我的

new UiSelector().textContains("我的")

//以首开头

new UiSelector().textStartsWith("首")

//查找界面中文本为“微信红包”的第3个组件

new UiSelector().text("微信红包").instance(2);

描述属性content-desc

//通过文本定位

driver.findElementByAndroidUIAutomator("new UiSelector().description(\"更多\")")

new UiSelector().descriptionMatches("更多\w+")

new UiSelector().descriptionContains("更多")

new UiSelector().descriptionStartsWith("更多")

其他属性

//类名为android.widget.RelativeLayout，下标index为5的

new UiSelector().className("android.widget.RelativeLayout").index(5);

//包名为com.android.deskclock的第五个组件

new UiSelector().packageName("com.android.deskclock").instance(5)

//checkable属性为true的

new UiSelector().checkable(true);

new UiSelector().longClickable(true).index(4);

节点关系复杂定位

　　- 父:Parent

　　- 子: Children

　　- 同胞: Sibling

　　- 先辈: Ancestor

　　- 后代:Descendant

//childselector查找子类

new UiScrollable(new UiSelector().scrollable(true)

.childSelector(new UiSelector().text("Android")))

//formParent查找父类

new UiSelector().resourceId("com.baidu.searchbox.remotedebug:id/search_list")

.fromParent(new UiSelector().className("android.widget.LinearLayout").index(1));

1.2.2 web元素定位

文档较多，不列举

1.3小程序自动化准备

JAVA: 1.8

node js : 10.14.2

adb: 1.0.40

appium : 1.8.1

1.3.1 安装appium

安装node环境

$ node -v

v10.14.2

$ npm -v

6.4.1

利用npm全局安装appium

npm install appium@1.8.1 -g

#安装需要一定时间，安装完成后

$ appium -v

1.8.1

1.3.2 安装adb tools

$ adb --version

Android Debug Bridge version 1.0.40

Version 4986621

Installed as D:\Program Files\androidsdk\Android\Sdk\platform-tools\adb.exe

1.3.3 chromedriver.exe版本

appiumDriver切换webview context需要用到chromedriver，每个app使用的webview版本可能不同，所以需要不同版本的chromedriver与之对应。详见：　

1.3.4 打开手机的开发者选项

每个手机开启的方式不一样，自行搜索。

小米手机需要打开开发者选项、安全模式、关闭miui优化

开启后，通过命令adb devices验证，如果能发现设备说明开启成功

ceshi@DESKTOP-UE2D6JR F:\android-perf-recorder

> adb devices

List of devices attached

ce96dc1b device

d24c3bcc device

adb无法识别的问题排查

确认数据线没问题

按教程：

还是不行的话，重新弄一个androidsdk吧。

1.3.5 打开webview的debug模式

要实现小程序的自动化，一个非常重要的步骤就是打开app webview的debug模式。但是app一般不会提供debug模式。验证debug模式是否开启，可以通过如下步骤：

打开APP的小程序，数据线连接至电脑PC打开chrome浏览器输入chrome://inspect找到小程序的webview，点击inspect，可看到小程序界面

如果能看到小程序使用的webview，那么表明该webview的debug已开启

1.3.6 关于context切换

appium原本是设计为NATIVE_APP的自动化，为了支持混合应用或APP里的webv页面测试，所以有这一概念。默认拉起app后，进入的NATIVE_APP，一般还会有WEBVIEW_xxx可以查看当前所有的context，python版本：

driver=webdriver.Remote('', desired_caps)

driver.contexts

['NATIVE_APP', 'WEBVIEW_com.tencent.mm:tools', 'WEBVIEW_com.tencent.mm:toolsmp']

>>>driver.switch_to.context(u'WEBVIEW_com.tencent.mm:tools')

>>>driver.page_source

'<!DOCTYPE html><html xmlns="" ......

1.3.7 关于windowHandles

windowhandle可以看成是chrome里一个标签页，小程序每跳转一个新页面，会生成一个新的window handle，但driver并不会自动切换新的window，所以每次查找元素前，都需要手动切换到相应的window，否则会报no such element

目前能想到的笨办法是，找一个能标识每个页面的唯一性元素，然后遍历每个页签，如果page_source有该元素，则切到该页签

>>>driver.window_handles

['CDwindow-56b52630-ffcc-4b1f-88cc-c26d4b5e10ed', 'CDwindow-3168289f-c448-4597-bf21-cf825fd29b5c', 'CDwindow-4a0d4647-27a5-4cfa-92a7-357ee6901c2a']

>>>driver.switch_to.window('CDwindow-3168289f-c448-4597-bf21-cf825fd29b5c')

>>>driver.current_window_handle

'CDwindow-3168289f-c448-4597-bf21-cf825fd29b5c'

>>>driver.title

'中国新说唱官方投票通道'

>>>driver.switch_to.window('CDwindow-4a0d4647-27a5-4cfa-92a7-357ee6901c2a')

>>>driver.title

''

>>>driver.switch_to_window('CDwindow-56b52630-ffcc-4b1f-88cc-c26d4b5e10ed')

>>>driver.title

'百度一下'

1.3.8 常见的问题

切换context一直卡住，appium报chrome not reachable

确认webview的debug模式开启

确认chrome://inspect可以看到小程序

确认androidProcess正确

微信小程序的话确认是从搜一搜入口进去

查找appium的日志看报错

查找元素时报no sucn element

打印pageSource，看是否有相应元素

打印出所有windowHandles，遍历所有看是否有相应元素

如果没有，那就不是小程序的webview context，确认androidProcess是否正确

chrome version must be >xx

chromedriver版本与小程序的webview版本不匹配

解决：启动appium时指定--chromedriver-executable参数，或者将appium的默认chromedriver.exe版本替换

微信点击搜一搜报错

appium 1.8.1，java-client6.1.0

driver.findElementByAndroidUIAutomator("text(\"搜一搜\")").click()

该行代码报

UiAutomator exited unexpectedly with code 4294967295

，

不是缺少

/data/local/tmp/AppiumBootstrap.jar

，

重启手机也不是很好使

看日志是堆栈溢出：[UIAUTO STDOUT] INSTRUMENTATION_RESULT: shortMsg=java.lang.StackOverflowError

改为用adb点击搜一搜也是一样的结果。，说前面有程序没结束，所以手动清理了后台的微信进程。并设置微信不能一直保持后台运行。还是没解决。

解决：换为uiautomator2版本。

uiautomator2一直提示安装uiautomator2.server和uiautomator2.server.test

解决：小米手机的话，打开usb安装，并关闭miui优化

或者修改uiautomator2-server源码：

点击报错：java.lang.StackOverflowError

java.lang.StackOverflowError: stack size 1037KB\n\tat android.util.SparseArray.get

想拉微信却拉起了chrome浏览器

解决：加上以下配置

caps.setCapability(MobileCapabilityType.BROWSER_NAME,"");

uiautomator2报签名错误

java.lang.SecurityException: Permission Denial: starting instrumentation

ComponentInfo{io.appium.uiautomator2.server.test/androidx.test.runner.AndroidJUnitRunner}

from pid=19303, uid=19303 not allowed because package io.appium.uiautomator2.server.test

does not have a signature matching the target io.appium.uiautomator2.server

原因是安装了不同的uiautomator版本，卸载原来的就行。

解决：

adb uninstall io.appium.uiautomator2.server.test