Image Quality Assessment: Exploring Quality Awareness via Memory-driven Distortion Patterns Matching

本文提出了一种受人类视觉记忆机制启发的记忆驱动质量感知框架(MQAF),通过构建失真模式记忆库并动态切换双模态评估策略,在降低对高质量参考图像依赖的同时,实现了在有无参考图像场景下均优于现有最先进方法的全参考与无参考图像质量评估。

Xuting Lan, Mingliang Zhou, Xuekai Wei, Jielu Yan, Yueting Huang, Huayan Pu, Jun Luo, Weijia Jia

发布于 2026-02-23
📖 1 分钟阅读☕ 轻松阅读

Each language version is independently generated for its own context, not a direct translation.

这篇论文提出了一种名为 MQAF(记忆驱动的质量感知框架)的新方法,用来给图片“打分”。

为了让你轻松理解,我们可以把图片质量评估想象成**“品酒”“鉴宝”**。

1. 以前的做法:死板的“标准答案”

传统的图片评估方法(全参考 IQA),就像是一个死记硬背的学生

  • 场景:老师(参考图)拿着一张完美的“标准答案”图片,然后让学生(算法)去对比一张有瑕疵的“作业”图片。
  • 问题:如果老师手里的“标准答案”本身也模糊了,或者老师根本不在场(没有参考图),这个学生就彻底懵了,没法打分,或者打出的分数完全不准。
  • 现实困境:在现实生活中(比如手机拍照、网络传输),我们往往拿不到那张完美的“原图”,或者原图在传输中已经受损了。这时候,传统的“死记硬背”方法就失效了。

2. MQAF 的创新:像人类一样“靠经验”

这篇论文的作者发现,人类的大脑在判断一张照片好不好看时,并不是非要拿着原图对比。

  • 人类的机制:当你看到一张模糊的照片,你会想:“这看起来像我上次见过的某张拍糊了的照片,或者像那种老式电视的雪花屏。”你的大脑里有一个**“记忆库”,里面存着各种“模糊”、“噪点”、“偏色”的典型样本**。
  • MQAF 的灵感:作者给 AI 也造了一个**“记忆库”**(Memory Bank)。
    • 这个记忆库里不存完美的原图,而是存**“各种坏掉的图片长什么样”**(比如:这种模糊是像被水淋过,那种模糊是像被磨砂玻璃挡过)。
    • 这个记忆库是可以不断学习和更新的。

3. MQAF 是如何工作的?(双重模式)

MQAF 就像一个聪明的老练鉴宝师,它有两种工作模式:

  • 模式一:有“标准答案”时(参考模式)

    • 如果手里有完美的原图,它会**“双管齐下”**。
    • 一方面,它把作业和原图对比(传统方法)。
    • 另一方面,它还会去查自己的“记忆库”:“这张图里的瑕疵,是不是和我记忆库里存的那种‘JPEG 压缩失真’很像?”
    • 最后,它会根据情况,灵活地决定是更相信原图对比,还是更相信记忆库的经验,给出一个综合分数。
  • 模式二:没有“标准答案”时(无参考模式)

    • 如果原图丢了,或者原图也坏了,它完全依靠记忆库
    • 它会说:“虽然我没见过这张图原本的样子,但我看它的纹理和噪点,跟记忆库里存的那类‘严重模糊’非常匹配。根据我的经验,这张图质量很差。”
    • 这就解决了“没有原图也能打分”的难题。

4. 核心黑科技:去重与独立记忆

为了让这个“记忆库”不混乱,作者还加了一个小技巧:

  • 比喻:想象你的大脑里存了 256 个“瑕疵样本”。如果这 256 个样本长得都差不多(比如都是模糊),那记忆库就浪费了。
  • 做法:MQAF 强迫这 256 个样本**“各管各的”**。有的专门记“模糊”,有的专门记“噪点”,有的专门记“色彩失真”。它们之间互不干扰,互不重复。这样,无论遇到什么奇怪的坏图,记忆库里总有一个“专家”能认出来。

5. 效果怎么样?

  • 实验结果:作者在多个著名的图片测试集上做了实验。
  • 表现:MQAF 就像那个既懂理论又懂实战的鉴宝大师
    • 在有原图时,它比现有的最先进方法更准。
    • 在没有原图时,它依然能给出非常靠谱的分数,吊打那些只能靠“猜”的旧方法。
    • 即使原图本身质量很差,它也能稳住,不会乱打分。

总结

这篇论文的核心思想就是:别死盯着“标准答案”看,要像人一样,把见过的“错误”都记在脑子里,形成经验。

通过建立一个动态的、可学习的“错误记忆库”,MQAF 让 AI 在图片质量评估上变得更聪明、更灵活,不再依赖完美的原图,真正解决了现实世界中“无图可参”的痛点。

在收件箱中获取类似论文

根据您的兴趣定制的每日或每周摘要。Gist或技术摘要,使用您的语言。

试用 Digest →