QPS3000+的图片压测服务器
大约 3 分钟
QPS3000+的图片压测服务器
- 在针对图片算法服务进行压力测试时，需要高性能的图片服务器
- 自己编写的图片应用性能不一定能达到要求
- 可能因为图片应用自身达不到压测要求，影响算法服务的压测数据
准备工作
需要在服务器先安装好docker，性能结果看文章结尾
步骤
- 参数
| 项目 | key | value |
|---|---|---|
| 地址 | IP | 192.168.0.2 |
| ftp用户名 | FTP_USERNAME | ftpuser |
| ftp密码 | FTP_PASSWORD | abc@123 |
| 宿主机保存目录 | FTP_PATH | /var/ftp |
| ftp地址 | FTP_URL | ftp://192.168.0.2/ |
| 图片请求地址 | PHOTO_URL | http://192.168.0.2/ftpuser/** |
- shell中设置变量(根据自己的实际参数去设置)
export IP=192.168.0.2 # 服务器ip
export FTP_USERNAME=ftpuser # ftp账号
export FTP_PASSWORD=abc@123 # ftp密码
export FTP_PATH=/var/ftp # 图片上传根目录
export FTP_DOCKER_NAME=ftp # ftp容器名称
export NGINX_DOCKER_NAME=nginx # nginx容器名称
安装ftp
- 创建文件目录
mkdir ${FTP_PATH}
- 启动容器
docker pull fauria/vsftpd
docker run -d \
--name ${FTP_DOCKER_NAME} \
--restart=always \
-p 20:20 \
-p 21:21 \
-p 21100-21110:21100-21110 \
-v ${FTP_PATH}:/home/vsftpd \
-e FTP_USER=${FTP_USERNAME} \
-e FTP_PASS=${FTP_PASSWORD} \
-e PASV_ADDRESS=${IP} \
-e PASV_MIN_PORT=21100 \
-e PASV_MAX_PORT=21110 \
fauria/vsftpd
安装nginx
容器启动命令
docker pull nginx:latest
docker run -d \
--name ${NGINX_DOCKER_NAME} \
--restart=always \
-p 80:80 \
-v ${FTP_PATH}/${FTP_USERNAME}:/usr/share/nginx/html/${FTP_USERNAME} \
nginx:latest
重要配置!（nginx）
- 通过ftp上传的图片，访问会报403无权限错误
进入nginx容器，打开/etc/nginx/nginx.conf文件
将
user nginx;
改为
user root;
重启nginx容器
使用
- 打开文件资源管理器，地址栏输入ftp地址，输入账号密码，即可上传图片
ftp://${IP}/
# 即
ftp://192.168.0.2/
- 在浏览器中输入网页地址，，即可获取到图片
http://${IP}/${FTP_USERNAME}/${对应图片路径}
# 即
http://192.168.0.2/ftpuser/${对应图片路径}
性能
使用测试jmeter进行压力测试，返回200状态码判定为成功。
图片上传了1000张图片，循环获取持续3分钟
服务器配置
| 项目 | 配置 |
|---|---|
| 系统 | Ubuntu22.04 |
| CPU | 4核 |
| 内存 | 8G |
| 硬盘 | 120G |
| 网络 | 万兆内网 |
| 软件 | 新系统系统，仅安装docker |
Jmeter、图片参数
| 项目 | 值 |
|---|---|
| 线程数 | 1000 |
| 时长 | 180s(3min) |
| 图片分辨率 | 640*352 |
| 图片平均大小 | 30 - 40 kb/张 |
Jmeter结果
由于是单个请求，QPS=TPS=3257.8/sec
该压测过程中，运行Jmeter的电脑CPU 100%，所以可能是运行电脑性能问题降低了压测结果，所以该结果仅供参考
Jmeter原始报告如下：
| Label | Sample | Average | Min | Max | std.Dev. | Error% | Throughput | Received KB/sec | Sent KB/sec | Avg. Bytes |
|---|---|---|---|---|---|---|---|---|---|---|
| TOTAL | 591303 | 302 | 1 | 70716 | 341.85 | 0.00% | 3257.8/sec | 102582.08 | 555.42 | 32243.4 |
服务器参数
以下统计使用MobaXterm软件连接工具数值，非专业工具，仅供参考
| 项目 | 状态 | 数值 |
|---|---|---|
| CPU | 压测前 | 0% |
| CPU | 压测中 | 40% - 70% |
| 内存 | 压测前 | 0.76G |
| 内存 | 压测中 | 0.77G |
| 总内存 | - | 7.75G |
| Upload | 压测前 | 0.01 Mb/s |
| Upload | 压测中 | 965.55 Mb/s |
| Download | 压测前 | 0.01 Mb/s |
| Download | 压测中 | 1871.02 Mb/s |
总结
该方式搭建的图片服务器可以满足大部分压测场景，服务器CPU资源要求很高，内存资源要求低。