一、什么是DDColor?
🎨DDColor 是最新的 SOTA 图像上色算法,能够对输入的黑白图像生成自然生动的彩色结果,使用 UNet 结构的骨干网络和图像解码器分别实现图像特征提取和特征图上采样,并利用 Transformer 结构的颜色解码器完成基于视觉语义的颜色查询,最终聚合输出彩色通道预测结果。
🪄 DDColor 可以为历史黑白老照片提供生动自然的着色。
🎲 它甚至可以对动漫游戏中的风景进行着色/重新着色,将您的动画风景转变为逼真的现实生活风格!(图片来源:原神)
该模型适用于多种格式的图像输入,给定黑白图像,生成上色后的彩色图像;给定彩色图像,将自动提取灰度通道作为输入,生成重上色的图像,效果如下图所示。
二、DDColor的模型概述:
DDColor 是最新的 SOTA 图像上色算法,能够对输入的黑白图像生成自然生动的彩色结果。
算法整体流程如下图,使用 UNet 结构的骨干网络和图像解码器分别实现图像特征提取和特征图上采样,并利用 Transformer 结构的颜色解码器完成基于视觉语义的颜色查询,最终聚合输出彩色通道预测结果。
三、DDColor的更新日志🔥:
- [2024-01-28] 支持抱脸推理!感谢@Niels的建议和示例代码,感谢@Skwara修复错误。
- [2024-01-18] 添加复制演示和API!谢谢@晨曦。
- [2023-12-13] 发布DDColor-tiny预训练模型!
- [2023-09-07] 新增模型动物园并发布三个预训练模型!
- [2023-05-15] 训练和推理代码发布!
- [2023-05-05] 在线演示上线!
四、DDColor的网页地址:
1、Github仓库:
https://github.com/piddnad/DDColor
2、在线体验:
https://replicate.com/piddnad/ddcolor
3、论文地址:
https://arxiv.org/abs/2212.11613
五、如何使用DDColor?
为了让更多用户能够轻松体验这一技术,我们将DDColor打包成了一键启动包。现在,您无需繁琐地配置Python环境,只需简单点击即可启动程序,从而避免了潜在的环境配置问题。
1、下载压缩包,解压到电脑D盘,最好不要有中文路径;
2、解压后点击启动.bat文件即可运行(文件可能会被误杀,请添加为);
3、浏览器访问:http://127.0.0.1:7860/,即可正常使用。