V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
StarkWhite
V2EX  ›  程序员

APIAuto 2.1.0 发布,机器学习随机测试,全方位覆盖测试场景

  •  
  •   StarkWhite · 2020-01-14 15:19:27 +08:00 · 1721 次点击
    这是一个创建于 1754 天前的主题,其中的信息可能已经有所发展或是发生改变。

    更新内容

    1.新增随机测试,随机生成数字、从数据库查值等来动态替换请求参数;

    2.新增顺序测试,顺序遍历数字、从数据库查值等来动态替换请求参数;

    具体内容见 Releases

    APIAuto

    机器学习测试、自动生成代码、自动静态检查、自动生成文档与注释等,做最先进的接口管理工具。
    支持 HTTP POST 提交 JSON 参数的 API。针对 APIJSON 做了静态检查、生成代码、格式化等大量优化。

    特点功能

    • 自动生成接口文档,清晰可读永远最新
    • 自动校验与格式化,支持高亮和收展
    • 自动生成各种语言代码,一键下载
    • 自动管理与测试接口用例,一键共享
    • 自动给请求 JSON 加注释,一键切换
    • 自动保存历史请求记录,一键恢复

    自动化接口测试

    https://github.com/TommyLemon/APIAuto/blob/master/apijson/JSONResponse.js

    前后对比测试 compareWithBefore

    不用写任何代码,只需要点一下 回测测试的图标按钮 (左区域右上角,类似刷新的图标),
    就会自动测试所有测试用例(除了登录和退出登录),并对比每一个测试用例前后两次请求的结果,
    然后给出结论:结果正确、新增字段、缺少字段、值改变、值类型改变、状态码改变等。
    每一个测试用例测完后都会有 左侧按钮用于显示测试结果和切换前后的请求结果,
    右侧按钮用于 纠错,中间的是下载按钮用于下载两次的请求,背景色用于标记接口变更的严重程度。
    如果这次的结果是对的,可以点击 [对的,纠错] 按钮来上传新的正确结果作为后续的对比标准。

    机器学习测试 compareWithStandard, updateStandard

    在 前后对比测试 的基础上,通过 简单统计 + 场景优化提取返回结果 Response JSON 的校验模型
    包括每一层的所有键值对的名称、类型、长度、取值范围等,它还能精准定位到数组内的数据,
    例如 []/7/Comment/id,原来的 前后对比测试 只能到 []。
    在第一次会生成校验模型,这时就已经比前后对比测试有约 20% 的准确度提升,
    随着纠错次数增加,模型会更新地越来越精准,一般一个测试用例达到 12 次后,
    就会相当于高级测试工程师对每个接口根据具体的业务需求来编写测试代码所能达到的效果。

    开启和使用机器测试:
    1.点击右区域 第 3 个图标按钮(点击查看共享),会进入测试用例界面;
    2.点击 切换机器学习的按钮(机器学习:已关闭),会开启机器学习;
    3.点击左区域 最右侧的图标按钮(回归测试)。

    打开 在线工具 试试

    http://apijson.org:8000/auto/

    还可以看 视频演示

    https://i.youku.com/i/UNTg1NzI1MjQ4MA==/videos?spm=a2hzp.8244740.0.0

    总结

    以前编写测试代码来实现自动化测试,解决手动测试的繁琐、无聊、易出错;

    APIAuto 的自动化接口回归测试连代码都不用写了,点点按钮就能完成整个自动化测试过程。

    不仅能节约大量的测试代码开发成本,省去接口测试与接口开发人员的沟通时间,避免各种原来导致的误会、争吵等;

    还能通过每次改动代码后跑一遍测试,及时且提前(在同事、领导、用户发现前)发现 bug,

    减少后续发现甚至在线上发生问题导致大量损失的风险。

    GitHub 右上角点 ⭐Star 支持下本项目吧,谢谢^_^

    https://github.com/TommyLemon/APIAuto

    6 条回复    2020-01-14 20:44:01 +08:00
    StarkWhite
        1
    StarkWhite  
    OP
       2020-01-14 15:21:49 +08:00
    chendy
        2
    chendy  
       2020-01-14 15:23:01 +08:00
    没错,还是那个男人
    StarkWhite
        3
    StarkWhite  
    OP
       2020-01-14 15:24:22 +08:00
    @chendy 是啊,多么熟悉的风格,一眼就看穿了
    TommyStandard
        4
    TommyStandard  
       2020-01-14 16:09:59 +08:00
    ...
    TommyStandard
        5
    TommyStandard  
       2020-01-14 16:10:31 +08:00
    @StarkWhite 你怎么这么无聊
    StarkWhite
        6
    StarkWhite  
    OP
       2020-01-14 20:44:01 +08:00
    @TommyStandard 我这可是帮老哥推广啊
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1689 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 16:38 · PVG 00:38 · LAX 09:38 · JFK 12:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.