使用JMeter：CSV Data Set Config解决数据切换问题

桃扇骨 2023-10-13 08:47 43阅读 0赞

**前情概要**

近期要做一个切换型的项目，需要将对方系统的数据导入到我方系统。

对方只把的数据导给了我们，不提供库对库的数据传输。

虽然我们有标准的接口，但数据量巨大，该如何有效的且正确的传入我方数据库中呢？

**两个思路**

**写脚本**

通过脚本读取文件内容，然后插入对应的数据表中。

要求：对数据结构比较清晰，因为可能涉及到多张关联表的场景。

**调接口**

需要实现遍历读取文件内容，然后赋值给接口参数，保证文件中的数据轮询写入数据库中（不需要考虑写入逻辑，接口已经实现）

综合来看，个人感觉调标准接口是最方便快捷的，于是乎我们就用到了Jmeter--CSV Data Set Config组件。

脚本在运行时会根据接口参数需要选取对应的列作为传参，以此达到参数化使用变量替代的需要。

**实现方式**

**前提条件**

CSV文件需要准备好，将导出的文件，另存为CSV文件，以便JMeter识别（不要直接手工改文件后缀，容易乱码）。

或者用notepad++打开，更改文件格式，查看是否有多余的空格符号等。

使用txt文本写入数据后，转化CSV格式，再次用Notepad++，这时查看数据就正常了。

如果后续获取文件时获取不到或乱码，要多看看上述的操作。

**创建一个线程**

线程数建议设置多个线程，这样效率会高些，否则就是一条一条遍历，效率较慢。

**配置元件》CSV Data Set Config**

配置说明如下：主要配置filename、file encoding、variable names，其它默认即可。

![eec6e09c5e5ee2599fb9a8eac340a0e7.png][]

Filename：文件名称，也可以是路径，名称的话默认读取bin目录下的文件。

File encoding：文件编码，一般写UTF-8。

Variable Names（comma-delimited）：变量列表，多个情况英文下逗号分割。对应文件中每列的值，参数格式$\{bianliang\} 尽量用英文名称，避免乱码问题。

Ignore first time（only used if Variable Names is not empty）：忽略首行，仅当变量名称不为空时使用。当CSV文件没有表头时，选择false。

Delimiter(user '\\t' for tab)：分隔符，txt文件时常用，用于分割一行数据中的多个变量。

Allow quoted data?：是否允许带引号，允许的话变量可以再双引号内。

Recycle on EOF？:是否循环读取CSV文件内容，默认为True。

Stop thread on EOF？：如果线程数超过数据文件中的变量，是否停止？默认为false,为true时无意义。

Sharing mode：共享模式，all threads 文件在所有线程中共享；current thread grop 当前线程组中有效；current thread 当前线程有效。

**Sampler》HTTP请求**

建议添加响应断言，判断接口是否成功返回。post请求body中用到的参数，即是CSV Data Set Config定义的变量，格式$\{\}.：

![c618190c648a5d847291af6d68ccc05f.png][]

**监听器》察看结果树**

建议开启--仅日志错误，否则让你在上万条数据中寻找一条红色的数据还是很难的。

**监听器》聚合报告**

查看合计执行次数、执行时间，了解对应接口tps，以设置合适的tps。

如上设置后，执行，可发现每次请求都遍历获取的对应行数据，切忌重复执行，因为每次都会从文件头开始获取参数。

**注意事项**

**CSV文件是否使用表头**

CSV文件是否要使用表头，要看配置项，Ignore first time（only used if Variable Names is not empty）：true。此时第一行作为标识项，数据从第二列开始读取。

![00fedbfbcca4f519bb55f06b87d1a701.png][]

Ignore first time（only used if Variable Names is not empty）：false。此时数据从第一行开始读取，不需要表头。

![fef3e33098557a08ac48e60f209764f0.png][]

**获取CSV文件为空**

可能是CSV文件损坏或者格式错误，参考前提条件中的说明解决。

**顺序问题**

按照上述顺序创建元件，先声明变量，再引用，否则或找不到变量。

**最后：** 为了回馈铁杆粉丝们，我给大家整理了完整的软件测试视频学习教程，朋友们如果需要可以自行免费领取**`【保证100%免费】`**  
![在这里插 入图片描述][c9cc99a5b00b4900b7269ea5813e9b05.png_pic_center]

**软件测试面试文档**

我们学习必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有字节大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

![在这里插入图片描述][f5caea8e55384ffd9d53fbcef5d509f5.png_pic_center]  
![在这里插入图片描述][1f3393c627094612ba2054e5a8b81725.gif_pic_center]

[eec6e09c5e5ee2599fb9a8eac340a0e7.png]: https://img-blog.csdnimg.cn/img_convert/eec6e09c5e5ee2599fb9a8eac340a0e7.png
[c618190c648a5d847291af6d68ccc05f.png]: https://img-blog.csdnimg.cn/img_convert/c618190c648a5d847291af6d68ccc05f.png
[00fedbfbcca4f519bb55f06b87d1a701.png]: https://img-blog.csdnimg.cn/img_convert/00fedbfbcca4f519bb55f06b87d1a701.png
[fef3e33098557a08ac48e60f209764f0.png]: https://img-blog.csdnimg.cn/img_convert/fef3e33098557a08ac48e60f209764f0.png
[c9cc99a5b00b4900b7269ea5813e9b05.png_pic_center]: https://img-blog.csdnimg.cn/c9cc99a5b00b4900b7269ea5813e9b05.png#pic_center
[f5caea8e55384ffd9d53fbcef5d509f5.png_pic_center]: https://img-blog.csdnimg.cn/f5caea8e55384ffd9d53fbcef5d509f5.png#pic_center
[1f3393c627094612ba2054e5a8b81725.gif_pic_center]: https://img-blog.csdnimg.cn/1f3393c627094612ba2054e5a8b81725.gif#pic_center