摘要
本发明公开了一种融合扩散模型的高分辨率三维重建方法,属于图像数据处理技术领域,包括步骤:构造原始数据集D;构造增强训练集;构造三维重建网络,包括文本编码器、渲染器、VAE编码器、条件扩散模型、VAE解码器、MVS模块;分三个阶段对条件扩散模型进行训练和微调,得到三维重建模型,获取待重建场景的图像序列和文本指令,用三维重建模型进行重建。本发明能在多视角条件下保持高度一致的几何和颜色还原,显著减少拼接伪影。通过语义指导优化,重建模型的纹理细节和结构一致性得到大幅提升。条件扩散采样使得模型在复杂场景下能够精确还原局部细节,提高了实时渲染的稳定性。
技术关键词
三维重建方法
三维重建模型
三维模型
视角
文本编码器
噪声预测
深度图
顶点
网络
重构
重建场景
图像数据处理技术
序列
颜色
解码器
阶段
样本
拼接伪影
训练集