---
title: ""
title_zh: "PhysForge：生成物理可交互的3D资产"
arxiv_id: "2605.05163"
paper_type: "method"
source_kind: "raw"
raw_path: "raw/papers/2026/05/2605.05163.md"
generated: "2026-05-12"
model: "LongCat-Flash-Chat"
quality: "ok"
---

# PhysForge：生成物理可交互的3D资产

## 一句话定位

提出两阶段框架PhysForge，结合VLM物理蓝图规划与扩散模型生成，实现从单视图图像生成功能完整、物理可交互的3D资产。

## 小学生也能听懂

这篇论文教AI像搭积木一样造出能动的3D物体。第一步让AI看懂图片，规划出每个零件的位置和功能；第二步用扩散模型把零件和它们的运动方式（比如门怎么开）一起做出来，最后得到一个既好看又能真实互动的3D模型。

## 为什么值得记录

- 解决了现有3D生成模型只关注静态外观、缺乏物理交互能力的核心瓶颈
- 提出首个将功能逻辑与层级物理融入生成过程的两阶段范式
- 构建大规模物理标注数据集PhysDB（15万资产），填补领域数据空白
- 生成的资产可直接用于机器人仿真与游戏开发，推动具身智能发展

## 核心方法

- 构建PhysDB数据集：包含15万个3D资产，采用四级物理标注体系（整体属性、静态属性、功能属性、交互属性）
- 第一阶段：微调Qwen2.5-VLM作为‘物理架构师’，输入图像+3D体素+可选2D掩码，输出‘层级物理蓝图’（含部件包围盒、材料、功能、运动类型等）
- 第二阶段：基于扩散模型实现几何与运动参数协同生成，创新提出KineVoxel Injection机制，将关节参数编码为特殊体素与几何体素联合去噪
- 训练采用条件流匹配（CFM）目标，设置运动参数损失权重λ_kine=10以强化精度
- 引入66个新token高效表示3D包围盒结构，提升规划效率

## 关键结果

- 在PhysXNet上，PhysForge的CD误差降至9.21，F1-0.05达75.43%，物理属性预测准确率显著优于TRELLIS和PhysXGen
- 在自建PhysDB测试集上，绝对尺度误差仅0.37米，功能与交互属性准确率分别达0.83和0.96
- 部件结构规划在PartObjaverse-Tiny上Bbox IoU达42.95%，无掩码输入时仍保持73.63%体素召回率，证明物理引导有效缓解分解歧义

## 局限与风险

- PhysDB侧重物理属性标注，关节轴数值精度有限，需依赖PartNet-Mobility等补充真实运动参数
- KineVoxel机制依赖VLM输出的语义运动类型（如‘旋转’），对复杂复合运动支持待验证
- 当前仅支持单视图输入，多视图一致性未显式建模

## 适合沉淀的概念

`physics-grounded-3d-generation`, `hierarchical-physical-blueprint`, `kinevoxel-injection`, `part-aware-generation`, `vlm-planning`, `diffusion-based-realization`, `physdb-dataset`, `articulated-object-generation`

## 阅读注意

- 重点关注VLM如何通过物理属性协同预测解决部件分解歧义（见Table 3无掩码结果）
- KineVoxel的8维参数设计（原点+轴+限位）及其与几何体素的融合方式是技术核心
- PhysDB的四级标注体系为后续物理感知生成提供了标准化框架
- 实验对比需区分PhysXNet（已有物理标注）与PhysDB（更丰富功能/交互标签）的不同评估侧重

## 质量说明

- 采用来源：`raw`，`raw/papers/2026/05/2605.05163.md`
- 生成模型：`LongCat-Flash-Chat`
- 源材料判断：论文结构完整，方法描述清晰，实验设计合理，数据与代码已公开，具备可复现性。