Aira 性能基准与工业目标评测(Benchmarks)
本文档索引 Aira 的真实模型基准测试协议、真实工业目标探测实验规范及各阶段评测结果。 所有基准测试严格基于封闭解析解真值或独立第三方几何工具(如 OCP/OpenCASCADE)回读比对,不依赖模型自述。
评测协议与标准
Section titled “评测协议与标准”- AI-CAD 增长基准协议 (AI-CAD-GROWTH-BENCHMARK.md):
- 测量 AI 建模在**重复规模(Scale)与连续续改深度(Depth)**增长下的 Token 成本、成功率与几何保真度。
- 包含薄壁孔阵列、扫掠管法兰、异形放样截面修改、多体装配参数调整等标准任务。
- 真实目标探测协议 (AI-CAD-TARGET-PROBE.md):
- 采用分阶段真实工业目标产品(如伺服驱动机械云台、多级行星减速机、薄壁防水壳体)探测系统全链路能力边界。
- 验证 AI 在面对真实机械设计意图时的自主组合、约束满足与错误自愈能力。
评测以日期和 Git 提交哈希标识运行。原始 .jsonl 行、捕获内容和日志是本机运行产物,不提交到 Git;经复核且无法仅从源码和命令重现的结论写入现有协议、计划、进度或发布文档并随仓库同步。
results/:增长基准的本机原始运行行。target-probe-results/:R0 至 R6 探测的本机原始运行行。m3-load-results/:M3 负载梯队的本机原始运行行。