着色任务的关键是物体识别!
三个要点
✔️ 基于实例的着色方法的新训练基础
✔️ 通过在实例和全图层面提取图像特征并优化特征融合,提高了准确性
✔️ 传统的。与方法相比的最新性能
Instance-aware Image Colorization
written by Jheng-Wei Su, Hung-Kuo Chu, Jia-Bin Huang
(Submitted on 21 May 2020)
Comments: Accepted at CVPR2020
Subjects: Computer Vision and Pattern Recognition (cs.CV)
Paper Official Code Demo
介绍:
随着机器学习的发展,将灰度图像转换为彩色图像的任务取得了很大的成功。将老旧的黑白图像转换为彩色图像一直是人们热议的话题,同时也让当时的彩色图像重见天日。然而,在实践中,这个任务是一个不现实的问题,因为它涉及到从单通道灰度图像中预测缺少的两个通道。此外,物体的着色有多种选择,甚至连衣服也可以是红、绿、蓝等多模态问题。
传统方法
传统的方法包括使用参考图像作为指导的用户参与的着色技术,以及随着深度学习的进步,对大型数据集进行学习和着色的着色技术。后者由于具有端到端的着色能力,是着色任务的主要方法,不过它不可避免地依赖于训练数据。
然而,据报道,这些现有方法对于有多个对象的图像,其性能明显差了很多。(图1)
图1:传统方法的当有多个对象时,问题点
在上图中,可以看到由于多个对象的原因,本身的着色效果并不好。像下图中的橙色,特别值得注意的是,图像后面的汽车的着色效果与提出的方法很好。
要阅读更多。
你需要在AI-SCHOLAR注册。
或与本文相关的类别