记录多智能体平台的测试用例设计:绑定通用聊天、故障检测与按姓名查询三个子智能体的意图识别应用,给出多智能体协同精度不低于 75%、单智能体意图识别与工具调用精度不低于 82% 的验收标准与典型用例。
- 多智能体应用的平台化构建,多智能体(智能体大类任务3个内,且类别间无明显语义重叠)推理(用户完整和清晰的指令下多智能体协同完成任务的准确性,完成数/指令数)精度≥75%;
- 单智能体(智能体意图识别/工具调用类别6个内,且类别间无明显语义重叠)推理(用户完整和清晰的指令下智能体完成任务的准确性,完成数/指令数)精度≥82%;
应用详情
应用环境:测试环境
应用名称:多智能体—意图识别—swarm
应用地址:http://aigc-chat.test.zoomlion.com/app/f9de27ca-4728-4cc7-9983-4ba54d870c7a
智能体名称:绑定三个子智能体,子智能体分别为:通用聊天智能体『联网搜索工具、腾讯地理信息服务(reverseGeocoder、geocoder)、云谷时区转换服务(convert_timezone、get_current_time)』、故障检测智能体『ZTC500A562-3故障维修方案、ZTC500A562-3故障排查方案』、根据姓名查询信息智能体『根据用户姓名查询用户信息』
应用测试用例
通用聊天智能体
直接回答
1 | 你好,你是谁? |
联网搜索工具
1 | 中国有多少个省级行政区,以及多少个市? |
腾讯地理信息服务(reverseGeocoder、geocoder)
1 | 中联重科总部的经纬度是多少? |
云谷时区转换服务(convert_timezone、get_current_time)
1 | 东五区的时间现在是多少? |
故障检测智能体
ZTC500A562-3故障维修方案
1 | ZTC500A562-3起重机变幅系统下放无动作的主阀故障维修方案 |
ZTC500A562-3故障排查方案
1 | ZTC500A562-3起重机卷扬下放无动作的故障排查方案 |
根据姓名查询信息智能体
根据用户姓名查询用户信息
1 | 查下李坤的工号和职位。 |

