3D-Bionic-Designer

English | 日本語 | 简体中文

项目介绍

Agent驱动的3D仿生产品设计师，使用Comfyui后端 + Gradio前端。
仅需输入需要参考的生物名称、图片，以及要设计的目标（例如桌子、椅子、小型展馆等），即可以生成对应的仿生产品，并输出响应的文案、图片和3D模型。
LLM / LVM 模型会首先解析输入信息，按照"设计思路文案"→"方案视觉描述文案"→"prompt"→"2D图形输出"→"3D模型输出"的步骤完成自主设计。
所有计算均在本地使用开源模型完成，不需要API及联网功能（安装完成后）。

3D_bio_desigenr_demo_mute-3x.mp4

安装方法

安装Comfyui

安装 comfyui
安装 comfyui-manager
运行 comfyui，并载入工作流文件, 尝试使用comfyui-manager安装缺失的插件。
- 如果无法安装，请手动安装，需要安装的comfyui插件有：Comfyui-Ollama-Describer, comfyui-3D-pack, comfyui-mixlab-nodes, Comfyui-Easy-Use

安装ollama

安装其它依赖

pip install gradio numpy Pillow websocket-client pymeshlab

运行方法

启动ollama
启动Comfyui, 载入工作流文件，测试在comfyui中是否可以正常工作。
修改app.py中的server_address为Comfyui的地址，例如：server_address = "127.0.0.1:8188"
修改app.py中的comfyui_output_path为Comfyui的output路径，例如：comfyui_output_path = "D:/01_DL/ComfyUI_windows_portable/ComfyUI/output"，以确保gradio前端可以访问到ComfyUI的输出。
启动Gradio前端。
```
python app.py
```
访问 127.0.0.1:7860 ，打开运行界面。