Nanbeige4-3B-Thinking-2511 (FC)
报告所列型号
原生工具调用 · FC
多轮调用综合原榜第 15 名 · 综合准确率原榜第 25 名
报告所列机构:Nanbeige · 许可:apache-2.0 · 型号资料 ↗
- 综合准确率
- 51.4%
- 整套测试估算费用
- 14.14 USD
- 平均延迟
- 13.46 秒
- 延迟标准差
- 26.41 秒
展开其余指标
- 延迟 P95
- 37.45 秒
- 非实时 AST 综合
- 81.58%
- 非实时简单调用
- 63.83%
- 非实时多函数选择
- 93.5%
- 非实时并行调用
- 84.5%
- 非实时多函数并行
- 84.5%
- 实时 AST 综合
- 79.42%
- 实时简单调用
- 86.05%
- 实时多函数选择
- 78.06%
- 实时并行调用
- 75%
- 实时多函数并行
- 70.83%
- 多轮调用综合
- 51.12%
- 多轮基础任务
- 58.5%
- 多轮缺少函数
- 54%
- 多轮缺少参数
- 45%
- 多轮长上下文
- 47%
- 联网搜索综合
- 21.5%
- 含摘要搜索
- 31%
- 无摘要搜索
- 12%
- 记忆综合
- 36.77%
- 键值记忆
- 31.61%
- 向量记忆
- 34.19%
- 递归摘要记忆
- 44.52%
- 相关函数识别
- 75%
- 无关函数识别
- 83.09%
- 格式变化最大差值
- 未提供
- 格式变化标准差
- 未提供