请选择 进入手机版 | 继续访问电脑版

易学智能

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 1436|回复: 1

论文阅读笔记:Deep Video Quality Assessor

[复制链接]

665

主题

1234

帖子

6561

积分

xdtech

Rank: 5Rank: 5

积分
6561
发表于 2020-12-1 09:10:56 | 显示全部楼层 |阅读模式
Temporal Motion Effect

启发来自视频的时空特性引起的综合掩盖效应。

时间掩盖效应:在存在较大运动时,色相,亮度和尺寸的变化对人来说不太明显。[4]

如果存在强烈的对比度或运动,根据掩盖效果[4,19,20”,失真就不太明显。 [4,19,20]

这一部分:提出了一种自上而下的方法,在该方法中,首先建立了失真与感知得分之间的关系,然后考虑了像素级敏感度基于时空因素。



  • [4] Suchow, J.W., Alvarez, G.A.: Motion silences awareness of visual change. Curr. Biol. 21(2), 140–143 (2011).



  • [19] Legge, G.E., Foley, J.M.: Contrast masking in human vision. JOSA 70(12), 1458–1471 (1980).



  • [20] Kim, H., Lee, S., Bovik, A.C.: Saliency prediction on stereoscopic videos. IEEE Trans. Image Process. 23(4), 1476–1490 (2014)


Temporal Memory for Quality Judgment

这一部分考虑了根据视频中帧的质量得分探索人类的回溯性质量判断模式。

如果视频(视频B)中存在严重失真的帧,即使两者均具有相同的平均质量,人们通常会确定其质量低于具有均匀质量分布的视频(视频A)

Architecture

spatical error map:

表示失真frame 和参考frame的第t帧的归一化形式。

frame difference map:

temporal error map:

是参考帧的帧差

spatio-temporal sensitivity map:

perceptual error map:

, 表示元素逐一相乘

spatial score :

Convolutional Neural Aggregation Network

其中,

实验评价指标:

SROCC(Spearman rank-order correlation coefficient,斯皮尔曼秩相关系数)
PLCC(Pearson linear correlation coefficient,皮尔森线性相关系数)


回复

使用道具 举报

665

主题

1234

帖子

6561

积分

xdtech

Rank: 5Rank: 5

积分
6561
 楼主| 发表于 2020-12-1 09:11:06 | 显示全部楼层
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|易学智能

GMT+8, 2024-3-28 16:57 , Processed in 0.017256 second(s), 20 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表