信息无障碍通道
您的位置:首页>>电脑软件

金山云发布感知评价指标KPA 拨开遮挡高清视频技术的迷雾

发布时间:2020-10-31  来源:互联网    背景: 无障碍通道

  根据Cisco VNI数据,预计到2022年,全球CDN流量规模将达到252EB/m,其中,互联网视频流量占比呈逐年上升趋势。在视频行业高速发展的过程中,带宽、网络得以丰富,视频的高清体验不断提升,分辨率从1k、4k到8k,甚至到超高清。从生物学角度,满足人眼真正的沉浸式需要50k分辨率。高清视频的发展使得用户对视频/图像质量的要求永无止境,其真实体验感受评测难度也相应增加,如何全面客观评价视频画质的质量是否得到提升?

  “针对以上难题,金山云发布图像视频感知评价指标Kingsoft Cloud Perceptual Assessment(KPA),希望以此助力行业实现‘让视频更高清’的目标。”金山云高级研发总监樊鸿飞在近日的LiveVideoStackCon 2020北京(音视频技术大会)上表示。

   比VMAF应用范围更广

  当下,主观质量评价和客观质量评价是行业内两大类图像视频质量评价方法,其中客观质量评价分为全参考评价指标、半参考评价指标和无参考评价指标。据樊鸿飞介绍,目前,能够达到商用级的评价指标非常少,学术界的评价指标主要都是针对有非常明确边界条件约束的场景。商用级的全参考评价指标目前除了PSNR和SSIM之外,就是Netflix在2016年发布的VMAF了,VMAF是第一个开源的商用评价指标,也是高清视频领域的并经之路。无参考评价指标主要有BRISQUE、NIQE和VSFA,金山云KPA选择了无参考这个赛道。

  KPA与VMAF的区别在于,一方面VMAF是全参考的画质视频指标,而KPA是一组无参考的画质视频指标,KPA可以应用在全参考来计算DMOS,同时KPA除了通用的整体质量评价外,还包括子维度质量、局部质量等细分评价指标,应用范围更广泛;另一方面,VMAF针对高清PGC视频有比较强的能力,针对UGC没有进行特殊优化,而KPA主要针对UGC视频。

  金山云KPA主要希望用客观指标来衡量人眼的主观感受。“然而在画质评测行业,用客观指标来衡量主观质量一直以来都是一个世界难题。由于设备分辨率、观测距离、屏幕大小的区别等,观看同一段视频的主观质量体验会存在差距。此外,除了整体分数以外,还有各个子维度的分数,比如色彩、亮度、清晰度、畸变等。另外还涉及到网络卡顿问题、VR视频......,问题非常复杂。因此,金山云KPA并不是用一个算法来解决所有的事情,目前发布的KPA主要针对于UGC视频,对于播放场景的映射也是针对于常用场景,同时我们也在探索包括子维度评价、局部评价、评价映射等主观评价的各细分业务场景指标。”樊鸿飞表示。

   在UGC场景排名问鼎

  针对现有评价指标算法,尤其是无参考评价算法精度较低的问题,金山云KPA主要从两个方向进行了重点研究和优化:一个是数据筛选,另一个是模型攻防。

  在数据层面,通过收集各种场景下UGC及PGC视频,并保证至少50以上的专业评测人员对每个视频进行主观评测,从源头上避免数据主观评测波动和精度问题。同时,对收集到的数据,从内容、场景、质量等多个维度进行平衡筛选,在确保数据规模远超业界开源数据的基础上,提升数据的多样性。在模型层面,通过攻防设计、协同学习、困难样本挖掘等方法,提升模型的鲁棒性和精度,在UGC场景中SROCC和gMAD分数均优于业界知名的有参考算法VMAF。

  金山云KPA可以有效应用于编码及AI方向,避免或减少画质损失,提升视频或图像主观质量。在编码方向,通过KPA对视频进行场景级、帧级等全局质量预测分析,块级局部质量预测分析,结合JND模型作为其最小可察觉主观失真衡量,并由此自动决策出编码所需要的CRF、QP等参数,能更好地匹配人类视觉主观系统,消除视觉感知冗余,在保证主观质量相同的情况下降低码率或者在相同码率下提升主观质量;在AI增强方向,通过将KPA的全局/局部/子维度评价作为不同侧重点的loss或者判别器加入到模型训练中,指导模型朝更好的画质方向进行优化,进一步提升主观画质。

  “在近几年对AI的研究中发现,这项技术可在众多领域广泛应用,且能大幅度提升各领域的原有性能。在画质评测相关的任务中,AI也帮助我们大幅度提升了SROCC和PLCC等指标。未来,我们的重点研究方向包括:1.进一步提升KPA泛化性,完善对各分辨率视频映射能力;2.提升视频编码中JND、RDO等模块算法主观质量;3.利用KPA进行更好的超分辨率、去噪等AI算法研发;4.针对相机拍摄所需要的偏色、暗场、畸变等维度研究评价指标。一方面,我们希望KPA能够抛砖引玉,吸引更多学术界的学者来关注企业应用中真正的诉求;另一方面,希望KPA能够帮助视频行业进一步提升视频质量,推进视频高清应用的发展。”樊鸿飞在演讲最后表示。

特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页 本文来源:互联网

本文评论
百度智能云TechDay业界首发EasyDL OCR,定制化、自动化产品特性掀起效能风暴
OCR(文字识别)技术是最早应用于企业降本增效的 AI 方向之一,如今已逐渐下沉为企业智能化升级的一项...
日期:11-02
金山云发布感知评价指标KPA  拨开遮挡高清视频技术的迷雾
根据Cisco VNI数据,预计到2022年,全球CDN流量规模将达到252EB/m,其中,互联网视频流量占比呈逐年...
日期:10-31
被合并文档虐过的同学看这里!百度如流多人在线协同编辑,省时又省力
最近,市场部的实习生小张着实有点焦虑,起因是公司要办一场晚宴,各部门的需求表都要发到小张这里...
日期:10-29
艾媒咨询报告显示百度输入法发展势头强劲  活跃用户超过5.3亿人
近日,全球领先的移动互联网第三方数据分析机构艾媒咨询(iiMedia Research)发布《2020年秋季中国第...
日期:10-29
真免驱安装,企业会议开启无线安全模式
传统接线投屏方式让会议桌面接线缠绕,杂乱无章,且每次开会总要准备与接线接口相匹配的设备,会议...
日期:10-27
沟通不受限,审批不堆积 深大智能通过华为云WeLink+OA实现办公提速
浙江深大智能集团专注于提供智慧旅游全产业链产品创新、产业规划和运营服务,致力于发展成为拥有旅游...
日期:10-27
云舟伙伴计划|“云磐SECaaS平台”开启云安全运营合作伙伴新模式
安全狗:顺应云安全市场新需求
  今年4月份,国家发改委明确指出新基建所包括的内容。其中,5G、云...
日期:10-26
讯飞输入法&讯飞智能鼠标AI输入“双擎”惊艳1024开发者节
10月23日,2020科大讯飞全球1024开发者节正式开幕,迅速成为科技界的热点事件。随着AI的发展,科技...
日期:10-23
窃取手机盗取资金黑色产业链曝光,腾讯手机管家助力守护手机安全
之前骗子偷手机是为了卖手机换钱,现在骗子偷手机,是为了用你的信息各平台套现。近期,一篇名为《...
日期:10-23
赛诺输入法行业秋季报:AI赋能 语音输入适配多场景
随着手机硬件和操作系统的更新迭代,也让平日沟通使用最频繁的输入法变得更“智能”,能...
日期:10-22
剪映将发布电脑端专业版,支持西瓜视频创作人免费使用
在近日举办的西瓜PLAY好奇心大会上,西瓜视频产品负责人表示,剪映将成为西瓜视频官方创作工具。
日期:10-22
Firefox 82正式版开放下载 新功能抢先看
Mozilla刚刚在FTP服务器上发布了Firefox 82正式版,包括Windows、Linux和MacOS平台。不过当前只能手...
日期:10-20
微信2.5.0 for Mac发布 新增批量管理联系人功能
不久前的PC版微信3.0中带来了通讯录批量管理功能,让不少用户十分欣喜,管理联系人时更加方便了。日...
日期:10-19
当贝市场分享几款广场舞类电视软件,非常适合舞蹈爱好者
如今,广场舞已经成为我国民间最喜闻乐见的一项健身项目,深受中老年人的喜爱。它源于社会生活,产生在...
日期:10-14
中国杨凌农高会APP首发!阿里技术都打造了哪些硬核功能?
距离第27届中国杨凌农业高新科技成果博览会(简称“第27届农高会”)开幕还有不足十天,各...
日期:10-13
Firefox 81.0.2发布:修复无法访问Twitter网站问题
部分 Firefox 用户报告称在升级到 81 版本之后,无法访问 Twitter 网站,并收到“无法修复的网...
日期:10-13
微软正努力让Chrome和Edge的滚动更加流畅
尽管 Chrome 浏览器是全球最受欢迎的桌面浏览器,但这并不意味着它就是完美的浏览器而没有任何问题...
日期:10-12
高德地图“全境智能系统”护航长假出游 助力交管部门疏解拥堵近40万次
今年国庆、中秋假期,群众探亲访友、外出旅游的出行需求高涨。高德地图大数据显示,10月1日至7日,...
日期:10-10
因受追捧而下载激增,Soul国庆登上App Store社交榜首
经过十一小长假的发酵,Soul下载量再次激增。凭借无压力的社交环境,Soul在国庆期间收获了大批年轻...
日期:10-10
上有老下有小,中年人的世界如此不易,安全感从何而来?
时光流逝如白驹过隙,转眼之间,人生从少年变为青年,又从青年步入中年。人到中年,难免要面临各种...
日期:10-09
  专栏介绍
爱萌妮儿 的专栏
爱萌妮儿发表的文章
积分:
自我介绍 :