日常的迭代或者技术改造之后，系统常常会出现一些功能丢失、新增接口权限和页面白屏等问题。尽管事后可以依靠监控大盘查看监控数据来定位问题，但是这些手段是滞后的，无法提前发现系统已有问题。
为了保障系统的稳定性和强壮性，常见的方案包括代码层面覆盖单元测试，保证已有代码的强壮性，如前端平台商家组已经推行单元测试用例覆盖，但是也存在以下问题：
除了单元测试保障之外，系统集成测试在保障质量方面也起着重要作用。然而，集成测试同样面临时间成本高、遗漏问题、重复性测试等挑战。特别是在功能全量回归场景下, 测试用例数量庞大，手动回归测试变得非常繁琐。尽管业界已经有一些成熟的自动化回归集成方案，例如通过录制手段来自动生成测试用例，但这种方案仍然存在一些挑战：
确实，为了应对迭代变更带来的挑战，的确需要寻找更灵活有效的自动化回归方案。我们研发了一款创新的测试工具—Monkey Testing(简称Monkey)。本文将深入阐述Monkey的出发点、创新过程以及落地情况，探讨其可行性和价值。
Monkey , 也有人叫做搞怪测试，一般指用毫无规律的指令或操作去测试被测系统，观察被测系统的稳定性。
基于Monkey自动化平台与前端平台B端大仓组件的配套研究方向，围绕B端单品组件ProTable、ProForm自动化测试可行性验证。首先模拟真实用户行为，通过数据填充，模拟不同类型的数据输入，并通过Click事件触发条件搜索, 来达到验证接口异常场景下的健壮性的目的。同时，我们将通过劫持请求、捕获JS执行上下文错误、网页截图判定白屏等方式，发现潜在的稳定性问题，从而提高系统的稳定性。
我们提供低成本的自动化回归方案，需要具有以下效果：
Monkey端侧自动化能力
图片
图片
图片
上述Monkey自动化测试实现，主要分为以下四个阶段：
Monkey通过模拟真实用户的随机操作(例如点击、滚动、输入等）来测试应用程序的输入输出是否具有稳定性和健壮性，以此来发现应用程序中的问题和异常行为，例如崩溃、卡死、界面异常等等，覆盖系统各个功能模块，发现潜在问题。
图片
Monkey以其简单粗暴的方式随机生成用户输入来模拟各种用户行为，具有以下特点：
尽管Monkey有很大的优势，但也存在一些局限性：
为了收敛Monkey 随机性，达到更加精细化执行测试目的 ，我们将探索Monkey与B端组件二相互结合的可行性测试。
大仓组件旨在解决前端平台应用中的交互一致性和可复用性问题。结合大仓组件，我们可以将组件固化的操作行为拆解为多个测试步骤，每个步骤对应多条测试用例，以确保每个组件都具有各自的交互流程。在Monkey执行过程中的用例脚本阶段，能够准确模拟用户行为，从而消除Monkey测试中的随机性。
图片
操作行为分析
对ProTable组件的操作行为进行分析时，可以着重考虑以下方面：
拆解步骤
以ProTable组件为例，可以将组件的操作行为拆解成以下步骤：
步骤1：组件加载
步骤2：筛选和搜索和重置
边界：这块我们能做的是模拟用户输入行为按钮点击触发搜索。
步骤3：分页切换
边界：这块我们能做的是 模拟点击页码行为 劫持请求是否异常。
步骤4：数据列渲染
注意事项
安全区域操作约束在测试环境中，一些删除或更改操作可能会导致测试数据的不一致性或损坏，因此需要对测试环境中的点击行为进行约束，确保在安全区域内进行操作。
// 检查一个元素是否在另外一个元素中 原理类似于JQ $("#container").has(".selector"); const isSafeArea = (parentElement, childElement) => { const childClassNames = Array.from(childElement.classList); return childClassNames.every(className => parentElement.querySelector(`.${className}`));};const layoutContentElement = document.querySelector('.layout-content');const isisSafeAreaResult = isSafeArea(layoutContentElement,element)优化导航栏点击许多B端系统中，导航栏是一个常见的元素。为了更加精确地进行测试并提高效率，我们需要规避导航栏的点击或者A链接点击跳转，专注于当前页面的操作。
element.matches('a')
图片
操作行为分析
对ProForm组件的操作行为进行分析时，可以着重考虑以下方面：
拆解步骤
以ProForm组件为例，可以将组件的操作行为拆解成以下步骤：
步骤1：组件加载
步骤2：表单输入填充
边界：开发FormFilter 函数尽量满足通用的场景下的数据渐入能力；目前文件上传场景、下拉联动场景、远程搜索场景未覆盖。
步骤3：表单验证
边界：Monkey本身不具备带有规则限制表单填充能力；数据来源于ProTable页面数据和Input Types类型数据填充。
步骤4：表单提交
步骤5：表单取消
ProForm准确提交率
衡量标准：通过劫持接口请求来判断Proform是否成功提交，并且服务端接口是否返回状态码200。
指标说明：
统计过程如下：
图片
根据当前数据统计，前端准确提交率约为60%+，绕过服务端校验准确提交率约为20%+。
图片
表单项数据填充主要有2种类型，分别为Input types填充和劫持表格数据源实现精准填充。
图片
01表单项 - Input types 通用填充
B端系统未接入类型检测工具, 接口请求参数类型约束不严格。Monkey 会根据 Input Types 类型随机生成字符串，填充表单项以触发接口调用，发现接口参数类型错误。
1. Input types 类型穷举表单项的填充方式(MDN输入元素)：文本类型(input type="text")、数据类型 (input type="number")、邮箱类型 (input type="email")、日期类型(input type="date")、单选框 类型(input type="radio")、复选框类型(input type="checkbox")
图片
图片
// input type 集合const defaultMapElements = { textarea: fillTextAreaElement, 'input[type="text"]': fillTextElement, 'input[type="password"]': fillTextElement, 'input[type="number"]': fillNumberElement, select: fillSelect, 'input[type="radio"]': fillRadio, 'input[type="checkbox"]': fillCheckbox, 'input[type="email"]': fillEmail, 'input:not([type])': fillTextElement, }; // 填充逻辑 const fillTextElement = async (element, character) => { const selectedCharacters = Array.from({ length: 5 }, () =>randomizer.getCharacter[Math.floor(Math.random() * randomizer.getCharacter.length)]).join(''); const newValue = element.value + (character ? character : selectedCharacters); if (element) { triggerSimulatedOnChange(element, newValue, window.HTMLInputElement.prototype); return newValue; } }; // Hacky function to trigger react, angular & vue.js onChange on input const triggerSimulatedOnChange = (element, newValue, prototype) => { const lastValue = element.value; element.value = newValue; const nativeInputValueSetter = Object.getOwnPropertyDescriptor(prototype, 'value').set; nativeInputValueSetter.call(element, newValue); const event = new Event('input', { bubbles: true }) as CustomEvent; // React 15 event.simulated = true; // React >= 16 let tracker = element._valueTracker; if (tracker) { tracker.setValue(lastValue); } element.dispatchEvent(event); };2. 接口参数类型错误
案例：后台页面Barcode条件筛选系统异常。
归因：前端未限制Barcode只能输入Number类型；服务端用Long类型字段接收BarCode字段，随机输入了String类型的值时，系统出现异常。
图片
图片
图片
图片
02表单项 - 精准填充
图片
说明：在 ProTable 筛选和 ProForm 表单项数据填充场景下，希望数据填充能够精确匹配，表单项的数据源来自于 ProTable 表格数据。统计该数据是为了衡量表格数据与ProTable & ProForm 输入项的匹配率指标，该指标为辅助性指标。指标的数值越高，ProTable场景代表覆盖筛选场景越多；Proform场景代表表单校验验证通过率越高。根据目前的数据统计，整体匹配率占比约为 50%+左右。
案例：后台页面筛选条件返回结果错误。
归因：接口字段改动，前端接口请求参数字段名错误。
为解决服务端接口字段调整导致前端无法及时感知接口参数变化的问题，我们拟计划接入文档接口平台开放API。通过查询接口API获取请求参数、响应参数及其类型，以验证前后端接口参数的一致性。若接口正常但文档定义存在问题，可反向约束规范接口定义文档流程。
图片
通过劫持请求、捕获JS执行上下文错误、网页截图判定白屏等方式，来快速检测页面故障。
图片
除了上述捕获的错误问题,还列举些其他常见错误。这里我们通过场景模拟，验证Monkey的错误捕获能力。
1. 模拟接口请求404场景 - 劫持请求检测
图片
2. 模拟白屏场景 - 白屏检测
3. 模拟JS 执行上下文异常 - 劫持JSError检测
在用例管理的前期阶段，我们将首先支持系统生成的通用类型用例。这些通用类型用例是根据业务需求在开发过程中编写的，涵盖B端系统的主要功能和常见场景。经过验证和测试后，这些用例可以作为基准用例使用。
为了满足不同场景下的测试需求，将逐步开放定制能力。为用户提供文档和示例、可视化配置界面以及插件化扩展机制，降低用户编写用例的难度和上手成本。具体内容如下：
我们成功接入了《运营后台系统》项目，并顺利完成了流程。经过数据收集和清洗等步骤，产出了数据分析报告。
图片
图片
图片
注：在每次任务中，错误数量保持相对稳定的水平。
Monkey作为一种创新的测试工具，为系统稳定性的保障提供了新的思路和方法。通过结合B端组件可行性探索，我们发现Monkey在实际项目中具有良好的应用前景和价值。根据数据分析结果，Monkey在系统稳定性的提升方面展现出了巨大的潜力。通过对有效错误率、分类错误项和优化方案的分析，我们发现Monkey可以帮助识别各种类型的错误，从而提升系统的稳定性和可靠性。这些数据清晰地展示了Monkey在实际项目中的应用前景和价值，预示着Monkey将为系统稳定性的提升带来新的可能性。
在未来的优化计划中，我们将重点关注以下几个方面：
本文链接：http://www.28at.com/showinfo-26-80204-0.htmlMonkey自动化工具结合B端组件可行性探索
声明：本网页内容旨在传播知识，若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。邮件：2376512515@qq.com
Copyright © 2016-2023 天津谷骐科技有限公司 版权所有 sitemap.xml
违法及侵权请联系：2376512515@qq.com 津ICP备18001702号
津公网安备 12010102000574号
