我们之前介绍了webrtc自动化测试框架kite的基本概念。了解到以下两点：
- kite由4个主要组件构成
- kite通过配置文件来指定测试用例脚本和参数
我们通过r命令来运行测试用例。对于一个实用的测试用例来讲，测试数据或者说用例参数应该可以灵活指定，而不能写死在配置文件中，或者每次通过手动修改配置文件来运行不同的测试数据。
Kite整合的allure是一个非常好的测试报表，但是也并不能完全满足所有需求。它只是从日志中提取了执行步骤和结果，也没有太多可供分析的数据。
对于自动化测试，我们希望可以是无人值守的，跑完用例就能自动得到结果。而Allure需要你估计一下用例运行时间，然后自己去刷一下页面，看一下结果。
显然，上述这些需求都需要在Kite基础上进行定制开发。
如果你深入理解了kite的框架构成和运行原理，就可以对其进行定制开发。
KTMS是笔者基于上述需求对Kite做的二次开发，是一套可视化测试管理系统，包含以下功能：
- 可以配置测试账号、测试接口、浏览器版本等测试数据
- 可以通过组合测试步骤的方式配置测试用例，手动（点一下）或自动（定时任务）运行测试用例
- 可以自动收集测试数据，包括当前执行步骤、失败原因等，可通过钉钉发送测试结果
设计思路为：
- 给测试人员提供配置界面，可添加和修改测试数据
- 对测试过程进行抽象，提取出相关测试步骤，提供开关以决定是否运行
- 可以由测试用例生成测试任务
- 在selenium hub节点，部署一个agent，监听测试任务
- agent获取测试任务对应的测试配置，根据需要修改kite配置文件，并运行新的用例
- 测试用例脚本在启动时从数据库（MySQL及redis）读取所需数据，并上报每个步骤的结果数据到数据库
- 测试任务执行完成后，更新数据库中的任务状态，并通过钉钉发送通知给测试人员
技术栈：
- python、flask
- MySQL、redis
- nodejs
当前web页面一般通过video标签来播放视频（点播或直播），我们在做音视频的自动化测试时，需要通过程序自动检测是否有视频流。
在具体的实践中，有两种方法可以实现视频流的检测：
- video标签的属性
var video = document.getElementsByTagName('video');
var isPalying = !(video.paused || video.ended || video.seeking || video.readyState < video.HAVE_FUTURE_DATA);
- 比较不同时刻的视频图像
- 在页面上构造一个canvas，在其上绘制当前视频的图像
- 通过getImageData获取图像的RGBA数据，简单计算（如求和）得到一个数值
- 隔一段时间（如1秒）再依次获取若干图像的计算值
- 通过比较这几个图像计算值是否相等，可以判断这段时间内是否有活动的视频流
- 可综合上述两种方法进行视频流的检测
方法2详细细节可加QQ群【KITE-WebRTC自动化测试】讨论。
Kite是一个用于测试WebRTC跨浏览器互操作性的测试引擎。
- 支持编写跨平台的自动化的Java或JavaScript测试脚本
- 支持Linux、Windows、Mac、iOS和Android系统
- 支持Chrome、Firefox、Safari、Opera、MicroftEdge等主流Web浏览器
- 支持Mobile Native Apps on Android, iOS
- 支持Desktop Native Apps on Windows and MacOS
- 支持Electron Apps
【工作原理】：
一个完整的KITE测试环境由以下几部分组成：
此为selenium测试集群的中心节点，是一个运行selenium.jar的Java进程。
用于管理node，包括接受node的注册、和node之间的保活、选择node并向node派发测试指令。
- selenium grid node，称之为proxy
此为selenium测试集群的执行节点，也是一个运行selenium.jar的Java进程
其主要作用为接受hub发送的测试指令，并通过webdriver运行测试指令
和浏览器通信，“远程”操控浏览器
通过kite或者说selenium提供的测试sdk，编写自动化测试脚本，支持Java、js等多种语言
Kite集成了Selenium（automates browsers）gird测试框架，可以构建出一个分布式测试环境。用户通过client连接selenium hub，hub选择合适的测试node来执行测试用例，并将测试结果保存至Allure（开源的测试报告框架），测试结果可通过浏览器查看。
Selenium Grid是一个分布式测试框架，如下图所示：
想要熟练使用kite，需要先了解selenium。
2. 安装
- 依赖项目
- Windows
- 安装Git
- 安装JDK：下载安装包，安装后设置环境变量JAVA_HOME，并将%JAVA_HOME%\bin添加到PATH环境变量中
- 安装Maven：下载编译好的zip文件，解压；添加环境变量MAVEN_HOME，并将%MAVEN_HOME%\bin添加到PATH环境变量中：
- 执行mvn -version检查安装结果
- 修改conf/settings.xml，添加阿里的Maven源镜像：
- 安装kite2.0
- 从github下载源码，存放源码的路径中不能有空格。进入KITE目录。
- 执行bat，用于设置KITE_HOME环境变量以及添加工具脚本到PATH中。根据脚本提示安装selenium local grid，注意默认配置中浏览器版本是否和本机匹配，若不一致，需要修改scripts\windows\gridCofnig.bat。
- 这个过程可能由于网络原因导致下载失败，需要手动下载相关文件并放到相应的目录中：
Selenium.jar：下载，然后复制jar到KITE\localGrid\selenium.jar
ChromeDriver: 下载，然后解压复制到KITE\localGrid\chrome\chromedriver.exe
GeckDriver：下载，然后解压复制到KITE\localGrid\firefox\geckodriver.exe
然后再运行一次configure.bat。成功后会看到下边的几个窗口：
打开http://localhost:4444/grid/console，可以看到两个Selenium节点
- 配置：iceconnection.local.config.json
{
"name": "IceConnectionTest JS",
"callable": true,
"remotes": [ //配置hub
{
"type": "local",
"remoteAddress": "http://localhost:4444/wd/hub"
}
],
"tests": [
{
"name": "IceConnectionTest",
"tupleSize": 2, //打开的node个数
"description": "This test check the ICEConnection state between two browsers communicating via appr.tc",
"testImpl": "IceConnectionTest.js", //测试用例主脚本
"payload" : { //测试用例所需参数，可根据需要灵活配置
"url": "https://appr.tc",
"testTimeout": 60,
"statsCollectionTime": 3,
"statsCollectionInterval": 1,
"getStats": true,
"selectedStats": [
"candidate-pair",
"inbound-rtp",
"outbound-rtp",
"track"
]
}
}
],
"browsers": [ //浏览器配置
{
"browserName": "chrome",
"version": "73",
"platform": "WINDOWS",
"flags": []
}
]
}
- 主脚本：js版
const {TestUtils, WebDriverFactory, KiteBaseTest, Status} = require('kite-common');
const globalVariables = TestUtils.getGlobalVariables(process);
// Steps & checks
const {OpenAppUrlStep, ConnectToAppRoomStep, GetStatsStep} = require('./steps');
const {PeerConnectionCheck, RemoteVideoDisplayCheck} = require('./checks');
// KiteBaseTest config
const capabilities = require(globalVariables.capabilitiesPath);
const payload = require(globalVariables.payloadPath);
//Main Class
class IceConnectionTest extends KiteBaseTest {
constructor(name, globalVariables, capabilities, payload)
{
super(name, globalVariables, capabilities, payload);
}
async testScript() {
try {
this.driver = await WebDriverFactory.getDriver(this.capabilities,this.capabilities.remoteAddress);
//测试步骤
let openAppUrlStep = new OpenAppUrlStep(this);
await openAppUrlStep.execute(this);
let connectToAppRoomStep = new ConnectToAppRoomStep(this);
await connectToAppRoomStep.execute(this);
let peerConnectionCheck = new PeerConnectionCheck(this);
await peerConnectionCheck.execute(this);
let remoteVideoDisplayCheck = new RemoteVideoDisplayCheck(this);
await remoteVideoDisplayCheck.execute(this);
let getStatsStep = new GetStatsStep(this);
await getStatsStep.execute(this);
// End of Test reportWebDriverUtils
this.report.setStopTimestamp();
} catch (error) {
console.log(error);
} finally {
await this.driver.quit();
}
this.reporter.generateReportFiles();
let value = this.report.getJsonBuilder();
TestUtils.writeToFile(this.reportPath + '/result.json', JSON.stringify(value));
}
}
module.exports = IceConnectionTest;
var test = new IceConnectionTest('IceConnection Test', globalVariables, capabilities, payload);
test.testScript();
- TestSteps
- OpenAppUrlStep//open appr.tc
- ConnectToAppRoomStep//根据当前时间生成roomId，在tc页面设置//roomId，并进入房间
- PeerConnectionCheck//通过js获取iceConnectionState
- RemoteVideoDisplayCheck
- GetStatsStep//获取sdp信息
Kite框架分析
- KiteBaseTest
- name, numberOfParticipant, capabilities
- report(AllurTestReport), reporter //测试报告相关
- payload //测试用例配置传入的参数
- testScript() //子类必须实现此函数：构造TestStep并调用execute()
- TestStep
- dsescription
- report(AllurTestReport)
- execute() //调用setp()，并设置report信息和状态
- skip(), finish()
- step() //子类必须实现此函数：实现本测试步骤的逻辑
近期评论