基于生成式人工智能的实时图像渲染生成系统的制作方法
技术特征:
1.一种基于生成式人工智能的实时图像渲染生成系统,其特征在于,包括:待渲染图像参数获取模块,用于响应于交互界面中收到的显示指令,获取所述交互界面中的待渲染图像和渲染参数;射线集合生成模块,用于基于所述待渲染图像和所述渲染参数,生成射线集合;tsdf场隐式面预生成模块,用于预生成截断有向距离函数tsdf场隐式面;交点计算模块,用于计算所述射线集合中的每条射线与所述截断有向距离函数tsdf场隐式面的交点以得到含有交点的所述截断有向距离函数tsdf场隐式面;渲染模块,用于基于含有交点的所述截断有向距离函数tsdf场隐式面,对所述交点所在的tsdf场格子点进行渲染,生成渲染结果;渲染结果显示模块,用于将所述渲染结果显示于所述交互界面;其中,所述渲染模块,包括:tsdf场隐式面区域划分单元,用于对所述含有交点的截断有向距离函数tsdf场隐式面进行局部区域划分以得到tsdf场格子点局部区域的集合;tsdf场格子点像素区域提取重构单元,用于对所述tsdf场格子点局部区域的集合进行像素特征提取,对提取后的tsdf场格子点局部像素特征向量的集合进行维度重构以得到tsdf场格子点局部像素特征;tsdf场格子点像素关联强化单元,用于对所述tsdf场格子点局部像素特征进行基于像素梯度分布的关联强化以得到tsdf场格子点局部像素关联强化特征;渲染结果生成单元,用于基于所述tsdf场格子点局部像素关联强化特征,得到所述渲染结果。
2.根据权利要求1所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场隐式面区域划分单元,用于:将所述含有交点的截断有向距离函数tsdf场隐式面按照交点所在的tsdf场格子点进行局部区域划分以得到所述tsdf场格子点局部区域的集合。
3.根据权利要求2所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场格子点像素区域提取重构单元,包括:tsdf场格子点局部像素特征提取子单元,用于将所述tsdf场格子点局部区域的集合通过基于深度神经网络模型的格子点局部区域像素特征提取器以得到所述tsdf场格子点局部像素特征向量的集合;tsdf场格子点局部像素特征维度重构子单元,用于将所述tsdf场格子点局部像素特征向量的集合按照局部区域划分方式进行维度重构以得到tsdf场格子点局部像素特征矩阵作为所述tsdf场格子点局部像素特征。
4.根据权利要求3所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述基于深度神经网络模型的格子点局部区域像素特征提取器为基于卷积神经网络模型的格子点局部区域像素特征提取器。
5.根据权利要求4所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场格子点像素关联强化单元,包括:tsdf场格子点局部像素梯度幅值计算子单元,用于计算所述tsdf场格子点局部像素特征矩阵中各个位置的多向梯度值分布,并基于所述各个位置的多向梯度值分布确定所述tsdf场格子点局部像素特征矩阵中各个位置的梯度幅度值以得到tsdf场格子点局部像素特征梯度幅度分布特征矩阵;tsdf场格子点局部像素梯度掩码化子单元,用于将所述tsdf场格子点局部像素特征梯度幅度分布特征矩阵输入门控掩码模块进行掩码化处理以得到掩码化tsdf场格子点局部像素特征梯度幅度分布特征矩阵;tsdf场格子点局部像素强化子单元,用于以所述掩码化tsdf场格子点局部像素特征梯度幅度分布特征矩阵作为权重矩阵,对所述tsdf场格子点局部像素特征矩阵进行加权强化以得到tsdf场格子点局部像素关联强化特征矩阵作为所述tsdf场格子点局部像素关联强化特征。
6.根据权利要求5所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场格子点局部像素梯度幅值计算子单元,用于:计算所述tsdf场格子点局部像素特征矩阵中各个特征值的沿宽度方向的梯度幅度值以得到tsdf场格子点局部像素宽度方向特征梯度值特征矩阵;计算所述tsdf场格子点局部像素特征矩阵中各个特征值的沿高度方向的梯度幅度值以得到tsdf场格子点局部像素高度方向特征梯度值特征矩阵;计算所述tsdf场格子点局部像素宽度方向特征梯度值特征矩阵和所述tsdf场格子点局部像素高度方向特征梯度值特征矩阵中对应位置的特征值的平方和的平方根以得到所述tsdf场格子点局部像素特征梯度幅度分布特征矩阵。
7.根据权利要求6所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场格子点局部像素梯度掩码化子单元,用于:将所述tsdf场格子点局部像素特征梯度幅度分布特征矩阵中的每个位置的特征值与预设阈值进行比较以得到所述掩码化tsdf场格子点局部像素特征梯度幅度分布特征矩阵;其中,响应于所述特征值大于所述预设阈值,将大于所述预设阈值的所述特征值设为一;响应于所述特征值小于等于所述预设阈值,将小于等于所述预设阈值的所述特征值设为零。
8.根据权利要求7所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述tsdf场格子点局部像素强化子单元,用于:将所述掩码化tsdf场格子点局部像素特征梯度幅度分布特征矩阵与所述tsdf场格子点局部像素特征矩阵进行按位置点乘后,将点乘后的特征矩阵输入sigmoid函数进行强化处理以得到所述tsdf场格子点局部像素关联强化特征矩阵。
9.根据权利要求8所述的基于生成式人工智能的实时图像渲染生成系统,其特征在于,所述渲染结果生成单元,用于:将所述tsdf场格子点局部像素关联强化特征矩阵通过基于aigc模型的渲染模块以得到所述渲染结果。
技术总结
本申请提供了一种基于生成式人工智能的实时图像渲染生成系统,涉及图像处理领域,其采用基于生成式人工智能的处理和分析技术来对含有交点的截断有向距离函数TSDF场隐式面进行局部区域划分和像素特征提取,并对各个TSDF场格子点局部像素特征进行维度重构,以此根据重构后特征中各个像素梯度的关联强化特征来智能地生成渲染结果。这样,可以更好地捕捉到各个格子点之间的联系,从而在渲染时考虑到更多局部和全局的语义信息,提升渲染质量,实现更为智能化的图像渲染。
技术研发人员:蒋正浩,李睿
受保护的技术使用者:世优(北京)科技股份有限公司
技术研发日:
技术公布日:2024/11/18
技术研发人员:蒋正浩,李睿
技术所有人:世优(北京)科技股份有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
