(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210903807.0 (22)申请日 2022.07.28 (71)申请人 中国电信股份有限公司 地址 100033 北京市西城区金融大街31号 (72)发明人 张琦　刘巧俏　邹航　 (74)专利代理 机构 北京律智知识产权代理有限 公司 11438 专利代理师 王辉 (51)Int.Cl. G06T 17/00(2006.01) G06T 15/00(2011.01) G06V 10/56(2022.01) G06V 10/40(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 图像生成方法及装置、 存 储介质和电子设备 (57)摘要 本公开提供了一种图像生 成方法、 图像生成 装置、 存储介质和电子设备， 涉及图像处理技术 领域。 该图像生成方法包括： 获取与待生成图像 对应的相机位姿， 根据相机位姿确定与待生成图 像中各像素点对应的射线； 针对每条射线上的采 样点， 根据采样点的位置信息确定采样点的特征 信息， 特征信息根据输入图像上与采样点的位置 信息对应的像素点的融合特征信息确定出， 融合 特征信息包括色彩特征信息和深度特征信息； 根 据采样点的位置信息和特征信息， 确定采样点的 色彩信息和密度信息； 利用射线上各采样点的色 彩信息和密度信息， 确定待生 成图像中与射线对 应的像素点的色彩信息， 以生成待生成图像。 本 公开可以提升生成新视角图像的效果。 权利要求书2页 说明书10页 附图6页 CN 115100360 A 2022.09.23 CN 115100360 A 1.一种图像生成方法， 其特 征在于， 包括： 获取与待生成图像对应的相机位姿， 根据 所述相机位姿确定与 所述待生成图像中各像 素点对应的射线； 针对每条所述射线上的采样点， 根据 所述采样点的位置信 息确定所述采样点的特征信 息， 所述特征信息根据输入图像上与所述采样点的位置信息对应的像素点的融合特征信息 确定出， 所述融合特 征信息包括色彩特 征信息和深度特 征信息； 根据所述采样点的位置信息和特 征信息， 确定所述采样点的色彩信息和密度信息； 利用所述射线上各采样点的色彩信 息和密度信 息， 确定所述待生成图像中与 所述射线 对应的像素点的色彩信息， 以生成所述待生成图像。 2.根据权利要求1所述的图像生成方法， 其特 征在于， 所述图像生成方法还 包括： 获取所述输入图像； 确定所述输入图像的色彩特 征信息和深度特 征信息； 将所述输入图像的色彩特 征信息与深度特 征信息融合， 以得到融合特 征信息。 3.根据权利要求2所述的图像生成方法， 其特征在于， 确定所述输入图像的深度 特征信 息包括： 确定所述输入图像的稠密深度图； 对所述稠密深度图进行深度特 征提取操作， 以得到所述输入图像的深度特 征信息。 4.根据权利要求3所述的图像生成方法， 其特征在于， 确定所述输入图像的稠密深度图 包括： 对所述输入图像进行稀疏深度估计， 以得到所述输入图像的稀疏深度图； 对所述稀疏深度图进行稠密深度估计， 以得到所述输入图像的稠密深度图。 5.根据权利要求1所述的图像生成方法， 其特征在于， 根据 所述采样点的位置信 息确定 所述采样点的特 征信息包括： 将所述采样点的三维位置信息转换为 二维位置信息； 如果所述采样点的二维位置信 息为所述输入图像上目标像素点的位置信 息， 则将所述 目标像素点的融合特 征信息确定为所述采样点的特 征信息； 如果所述采样点的二维位置信 息与所述输入图像上所有像素点的位置信 息均不同， 则 确定所述输入图像上与所述采样点的二 维位置信息邻近的像素点， 对与所述采样点的二 维 位置信息邻近的像素点的融合特 征信息进行插值处 理， 以得到所述采样点的特 征信息。 6.根据权利要求1所述的图像生成方法， 其特征在于， 根据 所述采样点的位置信 息和特 征信息， 确定所述采样点的色彩信息和密度信息， 包括： 将所述采样点的位置信 息和特征信 息输入全连接网络， 通过所述全连接网络的预测过 程确定出 所述采样点的色彩信息和密度信息 。 7.根据权利要求1所述的图像生成方法， 其特征在于， 利用所述射线上各采样点的色彩 信息和密度信息， 确定所述待生成图像中与所述 射线对应的像素点的色彩信息， 包括： 以所述射线上各采样点的密度信息作为权重， 对相应的色彩信息进行积分操作， 以确 定出所述待生成图像中与所述 射线对应的像素点的色彩信息 。 8.一种图像生成装置， 其特 征在于， 包括： 射线确定模块， 用于获取与待生成图像对应的相机位姿， 根据所述相机位姿确定与所权　利　要　求　书 1/2 页 2 CN 115100360 A 2述待生成图像中各像素点对应的射线； 特征确定模块， 用于针对每条所述射线上的采样点， 根据所述采样点的位置信息确定 所述采样点的特征信息， 所述特征信息根据输入图像上与所述采样点的位置信息对应的像 素点的融合特 征信息确定出， 所述融合特 征信息包括色彩特 征信息和深度特 征信息； 信息确定模块， 用于根据所述采样点的位置信息和特征信息， 确定所述采样点的色彩 信息和密度信息； 图像生成模块， 用于利用所述射线上各采样点的色彩信息和密度信息， 确定所述待生 成图像中与所述 射线对应的像素点的色彩信息， 以生成所述待生成图像。 9.一种存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序被处理器执行 时实现权利要求1至7中任一项所述的图像生成方法。 10.一种电子设备， 其特 征在于， 包括： 处理器； 以及 存储器， 用于存 储所述处 理器的可 执行指令； 其中， 所述处理器被配置为经由执行所述可执行指令来实现权利要求1至7中任一项所 述的图像生成方法。权　利　要　求　书 2/2 页 3 CN 115100360 A 3