实验 5-7:CAD 代码生成 vs 3D 生成模型(Agent 的两条造物路线)¶
《AI Agent 深入》第 5 章配套实验。同一份自然语言规格,分别走「Agent 写 CAD 代码」与「3D 生成模型」两条路线,程序化测量产物尺寸,再用一次变更请求比较两条路线的修改成本;对照组「生成一盆绿植」展示两条路线适用边界的反转。
实验目标¶
主线任务规格:法兰盘,外径 80mm,厚度 10mm,4 个均布 M5 安装孔(孔径 5.5mm),孔位圆直径 60mm。
- 路线 A(代码生成):Agent(Kimi
kimi-k2.5)编写 CadQuery 代码构造零件,本地真实执行,导出 STEP 与 STL。 - 路线 B(生成模型):同一规格走 text-to-3D。混元 Hunyuan3D-2.1 官方 Hugging Face Space 只暴露 image-to-3D 端点,故按业界标准两段式:Gemini(
gemini-2.5-flash-image)由规格文本生成零件产品图 → Hunyuan3D-2.1 公共 Space(gradio_client调/shape_generation,无需密钥)图生 3D,得到 GLB 三角网格。 - 程序化验证:trimesh 测量两条路线产物的外径、厚度、孔数、孔径、孔位圆直径与安装面平整度,与规格逐项比对。
- 变更请求:「安装孔从 M5 改为 M6(孔径 6.5mm)」。路线 A 程序化修补
PARAMS.hole_diameter一个参数(0 次 LLM 调用)重新执行;路线 B 只能改提示词整体重新生成,复测其余尺寸是否漂移。 - 对照组:「一盆绿植」——matplotlib 程序化渲染 vs Gemini 文生图,Kimi 视觉模型(
moonshot-v1-8k-vision-preview)评审自然度,展示适用边界反转。
目录结构¶
cad-vs-diffusion/
├── flange_spec.py # 规格与变更请求的唯一事实来源
├── measure.py # trimesh 网格测量(外径/厚度/孔/平整度)
├── llm.py # Kimi 聊天/视觉调用(带留证)
├── gemini_image.py # Gemini 原生文生图(带留证)
├── route_a_codegen.py # 路线 A:LLM 写 CadQuery → 子进程真实执行 → STEP/STL
├── route_b_gen3d.py # 路线 B:HF 公共 Space Hunyuan3D-2.1 图生 3D
├── control_plant.py # 对照组:程序化绿植 + Vision 评审
├── receipts.py # 外部调用留证(参数/响应/时间戳/耗时,绝不含密钥)
├── validate_manifest.py # manifest 模式校验
├── run_experiment.py # 主流程
├── test_offline.py # pytest 离线测试(不打外部 API)
├── tests/fixtures/ # CadQuery 本地生成的法兰 fixture 网格
├── output/ # 产物:源码、STEP/STL/GLB、图片
└── validation/runs/<run_id>/
├── manifest.json # 正式运行清单(哈希、测量、门禁)
└── receipts/ # 每次外部调用的留证 JSON
配置与运行¶
cd chapter5/cad-vs-diffusion
python -m venv .venv && source .venv/bin/activate
pip install -r requirements.txt
cp env.example .env # 填入密钥(见下),并 export 到环境变量
python run_experiment.py
环境变量(只从环境读取,代码与 manifest 均不落密钥):
KIMI_API_KEY(必填):路线 A 代码生成 + 对照组视觉评审。GEMINI_API_KEY(必填):路线 B 的规格→零件图、对照组文生图。DASHSCOPE_API_KEY/SILICONFLOW_API_KEY(可选备选):本次正式运行中前者返回 401(key 无效)、后者返回 402(余额不足),均未使用,留证见下文。
离线测试(不打外部 API):
正式运行结果摘要¶
正式 run:
exp5-7-cad-vs-diffusion-20260821-015734-v1,完整数据见validation/runs/exp5-7-cad-vs-diffusion-20260821-015734-v1/manifest.json(SHA-256 前 16 位ae7c5fdf685562e5,全文哈希见validation/latest.json)。 10/10 门禁全部通过,9 次外部调用全部留证成功。
主线任务:法兰盘尺寸偏差(测量值 vs 规格,单位 mm)¶
| 尺寸(规格) | 路线 A:CadQuery 代码 | 路线 B:Hunyuan3D-2.1 网格 |
|---|---|---|
| 外径(80) | 80.0(偏差 0.0) | 0.519(偏差 −79.48,−99.4%) |
| 厚度(10) | 10.0(偏差 0.0) | 1.989(偏差 −8.01,−80.1%) |
| 孔数(4) | 4 ✓ | 0 ✗(无通孔) |
| 孔径(5.5) | 5.499(偏差 −0.001) | 无法测量(无孔) |
| 孔位圆直径(60) | 60.0(偏差 0.0) | 无法测量(无孔) |
| 安装面平整度 RMS | 0.0(理想平面) | 0.030(网格单位) |
| 网格 | 水密,2532 面 | 水密,144580 面 |
路线 B 的解读(如实说明):
- Hunyuan3D 输出是归一化到任意单位、任意朝向的三角面片,没有毫米、坐标轴语义。M5 网格的三轴包围盒为
[0.496, 0.519, 1.989]——截面直径约 0.5、高约 2,是一个「细高圆柱」,与规格要求的扁平法兰(直径:厚度 = 8:1)比例完全颠倒;且 4 个安装孔全部丢失(中截面轮廓无内环)。 - 这不是「测量方法挑错了轴」能解释的:即使允许任意旋转与缩放,该网格也没有孔,长径比也错了约 32 倍。点云渲染见
output/render_route_b_m5.png(对比output/render_route_a_m5.png)。 - 输入产品图(Gemini 生成,
output/route_b/flange_m5_input.png)本身有 4 孔,孔是在 2D→3D 重建阶段丢掉的——图生 3D 模型对「贯穿孔洞」这类拓扑特征基本不可见(背面不可见、重建倾向于封闭凸包)。
路线 A 一次成功:Kimi 生成的 17 行 CadQuery 代码(output/route_a/flange_m5.py)全部尺寸在 0.05mm 公差内,唯一的 −0.001mm 孔径偏差来自 STL 三角离散的弦差,STEP 文件则是精确 B-rep。
变更请求:M5 → M6(孔径 5.5 → 6.5)¶
| 路线 A | 路线 B | |
|---|---|---|
| 修改方式 | 程序化修补 PARAMS.hole_diameter 一行 |
改提示词,文生图 + 图生 3D 整体重跑 |
| LLM/模型调用 | 0 次(本地执行 2.1s) | 2 次外部生成(6.9s + 24.6s) |
| 变更后孔径 | 6.499(偏差 −0.001mm) | 仍无孔,无法测量 |
| 其余尺寸漂移 | 外径 0.0、厚度 0.0、孔位 0.0、孔数不变 | 外径 0.519→1.988(漂移 +283%,且法兰轴向从 Z 翻转到 Y)、厚度 −0.0015 |
路线 B 的 M6 重生成(output/render_route_b_m6.png)不仅没长出孔,连零件的摆放朝向都变了——生成模型没有「其余部分保持不变」的概念。
对照组:一盆绿植(适用边界反转)¶
任务:一盆绿植(带花盆的室内观叶植物),写实风格。
| 程序化渲染(matplotlib) | 文生图(Gemini) | |
|---|---|---|
| 产物 | output/control/plant_procedural.png |
output/control/plant_generative.png |
| 视觉评审自然度(1-10) | 3(过于简化,缺乏细节和真实感) | 8(细节丰富,光影效果逼真) |
评审模型(Kimi moonshot-v1-8k-vision-preview)结论:文生图「更接近真实世界的一盆绿植」。原文见 manifest control_group.vision_review。
结论:精确工程对象(法兰盘)——代码生成碾压生成模型(尺寸精确、可参数化修改);开放性自然内容(绿植)——生成模型碾压代码渲染。两条路线的适用边界正好反转。
诚实声明¶
- 路线 B 的网格由真实外部服务(Hugging Face 公共 Space)生成,原始 GLB 原样保存、原样测量;其尺寸、拓扑(有无孔)、表面质量与规格的差距是实验结论的一部分,未做任何修饰。
- 若公共 Space 排队/限流导致路线 B 失败,manifest 中会标
status: incomplete并附原因,不会用 mock 网格冒充。 DASHSCOPE_API_KEY(401 invalid_api_key)与SILICONFLOW_API_KEY(402 余额不足)在本次运行中不可用,相关探测记录如实保留;视觉评审与文生图改走 Kimi / Gemini。