(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111650657.9 (22)申请日 2021.12.3 0 (71)申请人 御光揽数 （杭州） 智能科技有限公司 地址 311122 浙江省杭州市余杭区五常街 道五常大道181号9幢202-9 (72)发明人 彭炳南　陈伟　祁冰芸　彭祎帆　 王锐　李海峰　 (74)专利代理 机构 杭州天勤知识产权代理有限 公司 33224 专利代理师 曹兆霞 (51)Int.Cl. G06K 9/62(2022.01) G06T 5/00(2006.01) G06T 7/11(2017.01) G06T 7/33(2017.01)G06T 7/90(2017.01) H04N 5/217(2011.01) H04N 5/232(2006.01) H04N 9/04(2006.01) G06V 10/764(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 基于轻量化光学成像系统的多场景适用的 成像装置和方法 (57)摘要 本发明公开了一种基于轻量化光学成像系 统的多场景适用的成像方法和装置， 对参考图像 进行场景分类， 以确定每张参考图像的场景类 型， 对每类场景类型包含的参考图像于显示器显 示； 利用轻量化光学系统拍摄显示器上的参考图 像， 对得到的模糊图像经过退化、 去噪、 渐晕矫正 以及分通道色差矫正后， 形成的模糊图像与对应 的参考图像配准形成样本对； 针对每类场景类 型， 利用场景类型对应的样本对优化生成式对抗 网络参数， 以参数优化的生成器作为恢复模型； 应用时， 对 轻量化光学系统采集的实际场景图像 进行场景分类后， 利用实际场景图像所属场景类 型对应的恢复模 型进行质量恢复， 以得到质量恢 复图像。 以能解决轻量化光学系统易出现高模 糊、 高轴外色差的问题。 权利要求书2页 说明书6页 附图2页 CN 114510995 A 2022.05.17 CN 114510995 A 1.一种基于轻量化光学成像系统的多场景适用的成像方法， 其特征在于， 包括以下步 骤： 对参考图像进行场景分类， 以确定每张参考图像的场景类型， 对每类场景类型包含的 参考图像于 显示器显示； 利用轻量化光学系统拍摄显示器上的参考图像， 对得到的模糊图像经过去噪、 渐晕矫 正以及分通道色差矫 正后， 得到的模糊图像与对应的参 考图像配准并构建样本对； 针对每类场景类型， 利用场景类型对应的样本对优化生成式对抗网络参数， 以参数优 化的生成器作为恢复模型； 应用时， 对轻量化光学系统采集的实 际场景图像进行场景分类后， 利用实 际场景图像 所属场景类型对应的恢复模型进行质量恢复， 以得到质量恢复图像。 2.根据权利要求1所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 采用场景分类器对参考图像、 实际场景图像进 行场景分类； 场景分类器根据不同场景 的核心特 征或参考图像的场景 标签进行场景分类。 3.根据权利要求1所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 基于图像单应性变换原理实现图像的分通道色差矫 正。 4.根据权利要求3所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 所述基于图像单应性变换原理实现图像的分通道色差矫 正， 包括： 根据RGB域棋盘格模糊图像与 标准棋盘格参考图像之间的空间对应关系构建每个通道 的单应性矩阵， 利用单应性矩阵将模糊图像的RGB域各个通道的图像变换为参考图像具有 的相对空间位置， 再将各通道对应的相对空间位置合并为 RGB三通道图像， 从而消除色差导 致的不同波长光的位置坐标的偏移， 实现分通道色差矫 正。 5.根据权利要求1所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 模糊图像与对应参 考图像的配准并构建样本对的过程包括： 通过对模糊图像进行分通道色差矫正以实现模糊图像与参考图像的配准， 然后将模糊 图像按照参 考图像尺寸进行裁 剪， 将裁剪后模糊图像与参 考图像拼接， 形成样本对。 6.根据权利要求1所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 所述用轻量 化光学系统包括轻量 化单片镜 头、 或多片轻量 化单片镜 头形成的镜 头组。 7.根据权利要求1所述的基于轻量化光学成像系统的多场景适用的成像方法， 其特征 在于， 在优化生成式对抗网络参数后， 每类场景类型包含的样本对优化得到的生成器参数 与生成器结构作为 一个处理每类场景类型图像的分支， 即为恢复模型。 8.一种基于轻量化光学成像系统的多场景适用的成像装置， 其特征在于， 包括轻量化 光学系统、 场景分类器以及多个恢复模 型， 所述恢复模型通过权利要求 1‑7任一项所述的成 像方法构建； 所述轻量 化光学系统用于对实际场景进行图像采集， 以得到实际场景图像； 所述场景分类器用于对实际场景图像进行场景分类， 以确定实际场景图像的场景类 型； 所述恢复模型用于对输入的同场景类型的实际场景图像进行质量恢复以得到质量恢 复图像。 9.一种基于轻量化光学成像系统的多场景适用的成像方法， 其特征在于， 所述成像方权　利　要　求　书 1/2 页 2 CN 114510995 A 2法采用权利要求8所述的成像装置， 所述成像方法包括以下步骤： 利用轻量 化光学系统对实际场景进行图像采集， 以得到实际场景图像； 利用场景分类 器对实际场景图像进行场景分类， 以确定实际场景图像的场景类型； 根据场景类型选择与场景类型对应的恢复模型对输入的实际场景图像进行质量恢复 以得到质量恢复图像。权　利　要　求　书 2/2 页 3 CN 114510995 A 3