GitHub - bloc97/Anime4K: 高质量实时动漫视频升频器

技术背景

在动漫视频领域，为了获得更好的视觉体验，常常需要对视频进行升频处理。然而，传统的升频方法存在诸多问题，如重新编码为 4K 会引入不可逆的损坏、增加磁盘空间占用且不能有效减少熵。Anime4K 就是为解决这些问题而开发的一套开源、高质量的实时动漫升频/去噪算法。它旨在让用户能够实时观看升频后的动漫，同时保留原始内容，为动漫爱好者提供更多选择。

实现步骤

安装

• Windows：支持 GLSL/MPV 和 GLSL/Plex 方式安装。
• Linux：支持 GLSL/MPV 和 GLSL/Plex 方式安装。
• Mac：支持 GLSL/MPV、GLSL/IINA 和 GLSL/Plex 方式安装。

核心代码

文档中未提及核心代码的具体内容，但 Anime4K 是一套可以用任何编程语言实现的算法。以下是一个可能使用 GLSL 实现部分功能的伪代码示例：

// 伪代码示例，非完整实现
// 假设这是一个简单的升频处理函数
void mainImage(out vec4 fragColor, in vec2 fragCoord)
{
    // 这里可以添加具体的升频算法逻辑
    vec2 uv = fragCoord/iResolution.xy;
    // 对颜色进行处理
    vec3 col = texture(iChannel0, uv).rgb;
    // 输出处理后的颜色
    fragColor = vec4(col, 1.0);
}

最佳实践

• Anime4K 针对使用 h.264、h.265 或 VC - 1 编码的原生 1080p 动漫进行了优化，使用时尽量选择此类视频源。
• 对于低分辨率或较旧的动漫内容，虽然 Anime4K 可能也能工作，但效果可能不如在 1080p 视频上。目前正在进行针对低分辨率或旧内容的更好实时升频研究。

常见问题

1. 不适合的视频类型：它不适合降频的 720p、480p 或标准定义的动漫（如 DVD），以及旧动漫（尤其是数字时代之前制作的），因为这些视频存在难以去除的伪影。
2. 与 SRGANs 的区别：Anime4K 不是 SRGANs 的替代品，SRGANs 在低分辨率图像或退化严重的图像上表现更好，但不是实时的。
3. 性能问题：CUDA 加速的 SRGANs/Waifu2x 使用张量核心可以更快且接近实时（约 80ms），但它们的大尺寸严重阻碍了非 CUDA 实现。