返回快讯列表
大模型前沿

MIT、Google 与 Northeastern 推出可修复的 AI 3D 设计工具 InstructMesh

InstructMesh 将 TRELLIS 的 3D 生成与 GPT-4 结合,用户可圈选模型局部并用自然语言修改,再检查是否适合制造。

MIT CSAIL、Google 和 Northeastern 的研究者介绍 InstructMesh,一种面向可制造 3D 物件的交互设计工具。用户可以先用文字或图像提示生成杯子、眼镜、支架和机器人外壳,再圈出需要修正的部分,用自然语言描述修改目标。

系统将 Microsoft 的 TRELLIS 3D 生成能力与 GPT-4 的语言和视觉推理结合,让用户在 潜在表示空间 里编辑几何,而不是从零学习专业建模软件。研究团队用 Thingiverse 的模型测试生成质量,发现约 80% 的重建结果有结构问题;新手随后约九成时间能够识别并修复问题,结果由专家复核。

该工具的意义在于把“看起来像”推进到“可以实际制作”。研究者展示了杯子、哨子、护膝和带电机的 刷毛机器人,并计划加入物理仿真。项目仍是研究系统,论文将在 UIST 发表,不能把当前演示直接当成通用 3D 打印服务。

更多快讯