combHIQA 开源：图像质量评估有了统一契约

图像质量评估IQA领域有一组尴尬的数字对比在 AI 演示数据集上把多个客观指标组合起来斯皮尔曼等级相关系数SROCC从最强单指标的 0.3022 提高到 0.7384。做出这套结果的是波兰什切青西波美拉尼亚理工大学West Pomeranian University of Technology的 Piotr Lech 与 Krzysztof Okarma工具名为 combHIQA论文刊于《SoftwareX》第 36 卷文章编号 103117DOI 为 10.1016/j.softx.2026.103117相关报道出现在 10 月 12 日。但 combHIQA 真正针对的不是“哪个指标更准”而是研究流程本身的混乱。IQA 数据集形态各异有的把平均意见得分MOS表格与失真图像文件夹打包在一起有的用差分 MOSDMOS数值范围不同方向甚至相反——有些约定里数值越低代表感知质量越好。有的数据集带参考图可做全参考FR指标有的只能做无参考NR也称盲评指标没有任何基准真值。野外采集的数据集带着真实拍摄失真实验室数据集则侧重 JPEG 压缩、高斯模糊、几何畸变等合成损伤。在比较或合并任何客观指标之前这些约定都要先对齐若对齐决策散落在笔记本和脚本里实验几乎无法复现和复用。combHIQA 的解法是“契约驱动”的准备流程。研究者必须用显式的准备配置描述源数据集工具随后校验可用定义、把所有主观分数转成统一的“数值越大越好”方向、生成经过验证的图像—分数对照表、计算配置好的质量指标最后导出三份互相衔接的 JSON 文件统一数据集、指标注册表、实验配置。三份文件依次校验构成一个可移植的整体包。关键在于指标注册表是每个指标类型全参考还是无参考与方向越大越好还是越小越好的唯一运行时真值来源逐图记录只保留指标名称和数值数据无法悄悄改写自己的语义。架构上软件分成两个由 JSON 契约连接的部分。准备子系统约占已实现功能的 70%负责识别源数据集结构、校验 MOS 值与图像路径、构建指标注册表、调用指标运行器并导出准备好的包实验子系统负责加载包、归一化指标值、挑选指标子集、可选地优化混合参数、评估预测结果并输出报告。这种拆分的实际好处是计算量大的指标可放到高性能计算集群上跑轻量指标留在普通笔记本上实验核心也不再受某个数据集目录结构牵制。软件用 Python 编写基于 pyIQA 工具箱和 PyTorch在 Linux 下可跑在 CPU 或 CUDA 上以 MIT 许可在 GitHub 发布。数学处理刻意保持透明原始指标用 min-max 归一化低优方向的指标在归一化后反转常量或近似常量列映射为 0.5 以避免数值失败越界数据的裁剪会被记录下来而不是悄悄抹掉。指标选择用的是作者所称的“最有价值预测器”MVP选择器判据很简单候选子集内归一化指标均值与主观分数之间的 SROCC。贪心前向算法逐一评估剩余指标、接受最优候选每一步要求相关系数至少提升 0.001所有被接受的添加、候选得分和最终子集都存进可查阅的选择历史。只有在这个可解释的基线之后实验性优化器才会登场它构造加性与乘性分量结合的非线性混合质量分用差分进化拟合参数以最大化与人类判断的斯皮尔曼相关。作者明确把它标为“实验性”——参数灵活性可能只是在迎合当前数据的特性。验证用四个演示数据集覆盖无参考与全参考场景质量分由单一评估者给出仅作伪 MOS 用于测试软件。除 AI 集外Street 数据集从 0.5673 升到 0.8758Mountain 从 0.6115 升到 0.7084Outdoor 从 0.8423 升到 0.8858。作者强调这些数字只验证工作流不构成指标性能基准。在两个公开数据集上的端到端验证则冷静得多使用 NIQE、PIQE、BRISQUE 等快速无参考指标优化组合只带来有限提升——全分辨率 KonIQ-10k 从 0.5273 到 0.5425小分辨率版本从 0.3688 到 0.3906TID2013 从 0.3672 到 0.4167。TID2013 的单指标结果与 pyIQA 文档报告的基准一致说明计算正确性没有问题。KonIQ-10k 最终选中的组合是 NIQE 与 BRISQUETID2013 选中的是 BRISQUE 与 PIQE。由于选择与优化都在各自数据集内部完成作者提醒这些结果证明的是流程可用而非跨数据集泛化或基准优越。作者对局限同样坦白工具依赖第三方库结果受这些实现和软件环境影响小数据集上组合大量基础指标容易过拟合建议在指定开发数据上拟合参数再用交叉验证或独立测试集评估当前流程不自动实现训练测试划分与跨数据集验证协议设计仍由研究者负责冻结版本没有公开插件 API替换新的指标后端或优化器仍需改代码只是模块化接口把改动范围限制住了。对使用者来说combHIQA 的价值在于可追溯一张图能从源 MOS 行一路追到校验路径表、中间指标表直到最终 JSON 记录一个指标也能从准备期定义经方向校正和选择历史追到任何优化后的混合参数。学生用一个很小的 JSON 配置就能准备数据集并直观看到“分数方向”与“指标方向”的区别。