基于k6和python进行自动化性能测试
时间:2023-06-25 21:27:39来源:华为云开发者联盟

本文分享自华为云社区《 》,作者: 风做了云的梦。

当我们开发完成一个应用程序时,往往需要对其进行性能测试,以帮助我们更好的优化程序以及发现程序中的一些bug。在性能测试中,达到相应的性能指标对于一个软件来说十分重要,在本文中,将介绍一种现代化性能测试工具k6。

k6是一个开源工具,基于JavaScript可以编写k6的测试脚本,测试Web应用程序以及API的性能,支持HTTP等多种协议,可以很好地模拟各种高负载场景,充分验证程序稳定性和性能。k6支持Linux、MacOS等多个平台,通过k6官网根据提示即可在各个平台快速安装k6,终端输入k6 version出现如下显示说明安装成功。


(资料图)

以下是一个简单的k6测试脚本,通过k6的HTTP API模拟Get请求,并且休眠一秒钟:K

import http from "k6/http";import { sleep } from "k6";export default function () {http.get("https://test-api.com");sleep(1);}

通过执行下面这行代码,运行脚本,即可对服务完成测试。

k6 run test-script.js

k6提供了丰富的功能,以下是k6常用的一些API,具体可以参考官网文档介绍:

- http.get(url, [options]):发送GET请求。- http.post(url, body, [options]):发送POST请求。- check(res, checks):检查响应是否符合预期。- group(name, func):将一组请求分组并统计性能指标。- sleep(duration):休眠指定的时间。

k6的测试结果包括以下一些指标,可以根据这些指标,更好的优化程序。

- VUs:虚拟用户的数量。- Iterations:迭代次数。- RPS:每秒钟的请求数。- Duration:测试持续时间。- Data Sent/Received:发送和接收的数据量。- Checks:检查的数量。- Status codes:响应状态码的数量。- Errors:错误的数量。- Latency distribution:延迟分布。

通过Python和k6你可以更加高效的完成符合自己要求的自动化测试,Python可以提供非常多的工具库,用来收集处理k6返回的结果。 我们可以编写以下k6测试脚本,并且通过Python去执行它,相关注释我已经标注出来,在handleSummary函数中,我们可以通过metrics来获取各种测试信息,具体如代码所示,可以参考官网关于metrics的介绍,同时自定义环境变量的使用也十分方便,可以参考代码中的使用方式。

import http from "k6/http";import { check, sleep} from "k6";import {Rate} from "k6/metrics";export default function() {#post请求所需要的body体let requestBody = {"xxx":["xxxxx"],"xxxx": __ENV.MyVar # MyVar为自定义的环境变量,可以通过__ENV调用,在执行脚本时可直接通过MyVar=xxx传值};#urlconst url = "http://example.com";const payload = JSON.stringify(requestBody);const params = {headers: {"Content-Type": "application/json",},timeout: "100s" #每个请求的超时时间};let res = http.post(url, payload, params);#检测结果是否是200OKcheck(res, { "status is 200": (r) =>r.status === 200 });}export function handleSummary(data) {#通过data.metrics中的字段可以获取你想要的一些信息,例如每个请求的持续时间和吞吐量const time = `${data.metrics.http_req_duration.values.avg.toFixed(3)}`;const rps = `${data.metrics.http_reqs.values.rate.toFixed(3)}`;const res = `${time} ${rps}`;console.log(res); # 利用console.log可以将内容打印到控制台return {stdout : res}; #输出到标准输出}

如下是一个Python代码示例,相关代码已经注释,通过Python中的subprocess模块执行k6脚本,并且捕获k6脚本的输出,通过pandas库进行整理输出到excel中。还可以通过argparse库解析命令行参数传入k6脚本中,更加灵活,高效。

# -*- coding: utf-8 -*-import subprocessfrom alive_progress import alive_bar # 非常丰富的进度条工具库from tqdm import tqdm # 进度条工具库import pandas as pd # 可以用来处理文本excel,csv等from collections import OrderedDictimport argparse # 用来解析命令行参数import timeprint("测试时间 : ", time.strftime("%b %d %Y %H:%M:%S", time.gmtime(time.time())))print("************开始测试啦! 祈祷不出错!**************")# 需要测试的测试语句集合test_examples = ["aaaaaaa","bbbbbbb","ccccccc"]dataMap = {"test": test_examples}parser = argparse.ArgumentParser()parser.add_argument("-d", default="60s", help="duration time", dest="duration_time") #解析命令行参数,控制测试时间args = parser.parse_args()print("每条语句测试时间 : ", args.duration_time)vus = ["10", "20", "30", "40"] # 并发数集合 ,分别测试并发数为10,20,30,40的场景cols_name = ["1-avg/ms", "1-rps/s", "10-avg/ms", "10-rps/s","20-avg/ms", "20-rps/s","50-avg/ms", "50-rps/s"] # excel的列名# 循环测试,可以将多个需要测试的语句集合放入到dataMap中for (name, data) in dataMap.items():print("当前测试的项目为 :", name)res = OrderedDict()res["test_examples"] = []for n in cols_name:res[n] = []df = pd.DataFrame(res)excel_name = name + ".xlsx"df.to_excel(excel_name, index=False)for query in data:print("当前测试语句为 :", query)origin = pd.read_excel(excel_name)with alive_bar(len(vus)) as bar:temp_dict = {}temp_dict["test_examples"] = queryfor vu in vus:keyRps = vu + "-rps/s"keyTime = vu + "-avg/ms"MyVar="MyVar=" + query#通过Popen执行k6脚本,并且捕获它的标准输出process = subprocess.Popen(["k6", "run", "--quiet", "script.js", "--env", MyVar, "--vus", vu, "--duration", args.duration_time], stdout=subprocess.PIPE, stderr=subprocess.PIPE)result = process.stdout.read()temp = result.split()temp_dict[keyTime] = temp[0].decode();temp_dict[keyRps] = temp[1].decode();print("并发:", vu, temp[0].decode(), temp[1].decode())bar()#将脚本输出写到excelsave_data = origin.append(temp_dict, ignore_index=True)save_data.to_excel(excel_name, index=False)

执行此Python脚本,可以得到类似以下输出:

参考链接:

1、k6官网文档链接:https://k6.io/docs/

2、k6安装链接:https://k6.io/docs/get-started/installation/

号外

7月7日,华为开发者大会2023 ( Cloud )将拉开帷幕,并将在国内30多个城市、海外10多个国家开设分会场,诚邀您参加这场不容错过的年度开发者盛会,让我们一起开启探索之旅!

我们将携手开发者、客户、合作伙伴,为您呈现华为云系列产品服务与丰富的创新实践,并与您探讨AI、大数据、数据库、PaaS、aPaaS、媒体服务、云原生、安全、物联网、区块链、开源等技术话题,展开全面深入的交流。

大会将汇聚全球科学家、行业领袖、技术专家、社区大咖,开设200多场开发者专题活动,为全球开发者提供面对面交流与合作的机会,共同探讨技术创新和业务发展。

大会官网:

参会购票:

点击( )参与开发者社区活动,观赏技术大咖秀、玩转技术梦工厂,有机会赢取4000元开发者礼包!

欢迎关注“华为云开发者联盟”公众号,获取大会议程、精彩活动和前沿干货。

关注 点击下方,第一时间了解华为云新鲜技术~

标签:

最新
  • 基于k6和python进行自动化性能测试

    本文分享自华为云社区《》,作者:风做了云的梦。当我们开发完成一个应

  • 世界百事通!福建奔驰房车多少钱?福建奔驰商务车怎么样?

    福建奔驰房车多少钱?这款车售价在50万左右,按配置有所不同。 这是

  • 赏民俗品文化 欢度端午假期

    央视新闻客户端消息(新闻联播):端午假期,人们出游赏景、体验民俗,

  • 微速讯:同为汉代名将,为何后世文人更推崇李广,而不是卫青和霍去病?

    反过来,我们再看看李广,李广就不一样了,他的每一次升迁都是和自己的

  • 墙砖用水泥还是瓷砖胶_贴墙砖要用瓷砖胶

    1、看帖哪里了,如果是地面的话只用水泥沙子,但是要贴墙的话有事要用

  • 世界今头条!“科大硅谷”以色列推介会在特拉维夫召开

    科技日报驻以色列记者胡定坤以色列当地时间6月19日下午,“科大硅谷”

  • 防火门顺位器怎么安装

    防火门安全性还,而且防水效果也好,不过在安装防火门的时候,也会安装

  • 当前速读:2031年全球工业元宇宙市场或超900亿美元

    编译 VR陀螺近年来,随着技术的进步,全球工业元宇宙市场发展迅速。图

  • 天天热门:男生会读心术_读心术男生是否喜欢你

    1、你好很高兴回答你的问题百度团队热心为您解答如果满意请采纳也许他

  • 当前速读:惊险!许昌路边的树被吹倒,一女子险些被砸

    大象新闻记者朱力严6月21日,河南许昌突降大雨,路旁的树被风吹倒,一

  • 平高电气新型800千伏隔离开关成功投运

    日前,由平高电气自主研制的首台(套)GW17-800型高压交流隔离开关在陕

  • 文水公安破获一起诈骗案-头条

    今年2月,我局刑侦大队陆续接到省内不同地市的三名群众报案,均称自己

  • 刘德华林嘉欣再演夫妻,帮助柯受良儿子圆电影梦

    文 羊城晚报全媒体记者邵梓恒刘德华及林嘉欣近日再次合作扮演夫妻,为

  • 什么是商旅卡?商旅卡是商务签吗? 今日视点

    什么是商旅卡?商旅卡即商旅人士使用的卡。最早是被航空公司、酒店用

  • 三星在印度海得拉巴开设最大高级体验店_全球观察

    (资料图片)三星在印度海得拉巴开设最大高级体验店,占地3500平方英

  • 三井寿身高体重是多少?三井寿几号球衣?三井寿人气为什么这么高?

    三井寿身高体重是多少?身高:184 cm(高一176cm)体重:70 kg三井寿

  • 旅游
    • 南昌地铁1号线北延段左线盾构顺利始发|世界新要闻

    • 天天资讯:长沙公交集团开展安全生产应急演练活动

    • 深夜突发!这里发生6.2级地震

    • 挑战与选择: 沙特公开对华表态,释放重要信号