高级搜索

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

面向三维高效视频编码的深度图错误隐藏

周洋 吴佳忆 陆宇 殷海兵

周洋, 吴佳忆, 陆宇, 殷海兵. 面向三维高效视频编码的深度图错误隐藏[J]. 电子与信息学报, 2019, 41(11): 2760-2767. doi: 10.11999/JEIT180926
引用本文: 周洋, 吴佳忆, 陆宇, 殷海兵. 面向三维高效视频编码的深度图错误隐藏[J]. 电子与信息学报, 2019, 41(11): 2760-2767. doi: 10.11999/JEIT180926
Tan Zheng, Wang Lisheng . The Quantitative Properties of Exponential Stability of Nonlinear Continuous Neural Network[J]. Journal of Electronics & Information Technology, 2001, 23(3): 300-303.
Citation: Yang ZHOU, Jiayi WU, Yu LU, Haibing YIN. Depth Map Error Concealment for 3D High Efficiency Video Coding[J]. Journal of Electronics & Information Technology, 2019, 41(11): 2760-2767. doi: 10.11999/JEIT180926

面向三维高效视频编码的深度图错误隐藏

doi: 10.11999/JEIT180926
基金项目: 浙江省自然科学基金(LY17F020027),国家自然科学基金(61401132, 61572449)
详细信息
    作者简介:

    周洋:男,1979年生,副教授,硕士生导师,研究方向为视频分析和三维视频编解码

    吴佳忆:男,1994年生,硕士生,研究方向为视频差错控制技术

    陆宇:男,1977年生,讲师,研究方向为视频压缩技术

    殷海兵:男,1974年生,教授,研究方向为视频编码与压缩芯片设计

    通讯作者:

    周洋 zhouyang_hz@126.com

  • 中图分类号: TP391

Depth Map Error Concealment for 3D High Efficiency Video Coding

Funds: Zhejiang Province Natural Science Fundation (LY17F020027), The National Natural Science Foundation of China (61401132, 61572449)
  • 摘要: 基于多视点视频序列视点内、视点间存在的相关性,并结合视点间运动矢量共享技术,该文提出一种面向3维高效视频编码中深度序列传输丢包的错误隐藏算法。首先,根据3D高效视频编码(3D-HEVC)的分层B帧预测(HBP)结构和深度图纹理特征,将深度图丢失块分成运动块和静止块;然后,对于受损运动块,使用结合纹理结构的外边界匹配准则来选择相对最优的运动/视差矢量进行基于位移矢量补偿的错误掩盖,而对受损静止块采用参考帧直接拷贝进行快速错误隐藏;最后,使用参考帧拆分重组来获取新的运动/视差补偿块对修复质量较差的重建块进行质量提升。实验结果表明:相较于近年提出的对比算法,该文算法隐藏后的深度帧平均峰值信噪比(PSNR)能提升0.25~2.03 dB,结构相似度测量值(SSIM)能提升0.001~0.006,且修复区域的主观视觉质量与原始深度图更接近。
  • 基础研究是催生原始创新、推动创新体系整体效能提升的动力源泉,是培育新质生产力、激活发展新动能的关键保障,是推动高质量发展、实现高水平科技自立自强的重要支撑。我国设立国家自然科学基金用于资助基础研究,支持人才培养和团队建设[1]。国家自然科学基金委员会(以下简称自然科学基金委)依法管理国家自然科学基金,负责资助计划、项目设置和评审、立项、监督等组织实施工作[2]。自然科学基金委信息科学部一处主要资助信息与通信系统、信息获取与处理、电子科学与技术及其相关交叉领域的基础研究和应用基础研究。其中,电子科学与技术领域涉及从F0118到F0125的8个二级申请代码,涵盖了电路与系统、电磁场与波、物理电子学、敏感电子学与传感器、生物电子学与生物信息处理和医学信息检测与处理等相关领域[3,4]。此外,电子信息与其他领域交叉二级代码F0126下的相关项目也被纳入电子科学与技术领域进行评审,由于该部分每年涉及的项目申请量极少,本文后续统计数据不包括该申请代码。

    2024年度集中受理期间,信息科学部一处电子科学与技术领域共收到重点项目、面上项目、青年科学基金项目、地区项目、优秀青年科学基金项目和国家杰出青年科学基金项目申请共3269项,本文梳理分析了这6类项目的申请和资助情况,旨在为相关人员了解本领域基础研究队伍、主要研究方向以及发展趋势等提供参考。

    根据2023年度征集的指南建议,并结合信息学部“十四五”发展战略规划和优先资助领域,2024年度信息科学部共发布了3个重点项目群和118个重点项目立项领域[4]。其中,电子科学与技术领域发布15个重点项目指南方向,涉及F0118, F0119, F0120, F0122, F0123, F0124和F0125七个二级代码,30家依托单位的申请人共提交项目申请45项,9家依托单位的11项申请获得资助,项目资助率约为24.44%。表1统计了15个重点项目指南方向的申请和资助情况,其中,第1、第3、第7、第9和第13个指南方向虽有项目申请,但均未获资助;第4个指南方向申请4项,资助2项,尽管该指南方向资助了两项申请,但受资助的两项项目针对的应用场景和采取的技术路线各不相同。由表1数据可见,重点项目申请不仅有项目之间的竞争,还有指南间的竞争,同一指南方向也可能资助两项各具特色的项目申请。

    表 1  2024年度重点项目各指南方向申请与资助
    序号重点项目指南申请数资助数
    1硅基主被动复合毫米波成像芯片(F0118)10
    2高能效高速有线通信接口关键技术(F0118)31
    3用于量子态读出的低噪声硅基芯片(F0118)30
    4多功能一体化智能蒙皮与天线关键技术(F0119)42
    5面向通感融合的超宽带抗干扰全双工射频芯片(F0119)31
    6超宽带异形曲面阵列天线多物理场协同设计(F0119)11
    7三维异质集成射频芯片多物理场耦合机理与协同设计方法(F0119)20
    8超大频比天线阵列关键技术(F0119)21
    9硅基太赫兹高分辨率雷达全集成芯片(F0120)40
    10二维材料声表面波物性调控与新型信息器件(F0122)41
    11基于准单晶 AIN 薄膜的高性能射频滤波器(F0122)21
    12有机半导体光电协同感知温室气体传感器(F0123)11
    13肿瘤分子调控元件的功能预测与分析方法(F0124)60
    14微重力环境下的脑结构与功能信息获取及认知调控(F0124)31
    15多模态舌象信息感知与智能分析(F0125)61
    合计4511
    下载: 导出CSV 
    | 显示表格

    2015~2024年期间,电子科学与技术领域共有94家依托单位提交了284项重点项目申请,其中41家依托单位的86项申请获得资助。表2统计了各年度申请与获得重点项目的依托单位数和占比情况,各年度重点项目的总申请数、总资助数和资助率情况。总体来看,当年申请重点项目的依托单位数总是小于项目的总申请数,2024年度差距最大,达到15,说明同一家依托单位有多项重点项目申请。比较当年获重点项目资助的单位数和项目的总资助数,其中,资助单位数与资助数相等的年份占了一半,但近五年内,2021年度和2024年度两次出现最大差距2,一定程度反映了承担领域重点项目的优势单位不足。

    表 2  2015~2024各年度重点项目申请与资助情况
    年度 依托单位 申请与资助
    申请单位 资助单位 占比(%) 申请数 资助数 资助率(%)
    2015 6 4 66.67 10 5 50.00
    2016 12 5 41.67 14 5 35.71
    2017 32 12 37.50 40 12 30.00
    2018 15 6 40.00 18 6 33.33
    2019 20 6 30.00 26 7 26.92
    2020 31 8 25.81 37 8 21.62
    2021 25 9 36.00 38 11 28.95
    2022 21 9 42.86 26 9 34.62
    2023 22 11 50.00 30 12 40.00
    2024 30 9 30.00 45 11 24.44
    下载: 导出CSV 
    | 显示表格

    表3统计了近十年领域各二级代码重点项目立项、申请与资助情况。从资助率来看,近十年领域重点项目的平均资助率为30.28%,其中F0123资助率最高,达到35.48%;F0121资助率最低,十年间仅有一项申请,且未获资助;F0119资助率位列第二,但十年间该二级代码的重点项目申请数和资助数均最多,获资助项目的方向分别为:电磁场理论和电磁计算10项、天线理论与技术9项、射频器件电路与系统10项和电磁成像及应用6项。生物与医学电子信息获取和处理是十四五期间信息科学部优先发展领域之一,涉及二级代码F0124和F0125。学科处围绕该优先发展领域,广泛组织领域专家研讨,2023年设立“医学影像信息处理前沿理论、方法及应用”重点项目群指南,当年资助6项。F0125医学信息检测与处理二级代码下,2015~2024年共收到申请62项,获得资助16项,近五年支持了10项。F0124生物信息检测与处理代码下获资助的6项均在近五年期间。

    表 3  2015~2024领域各二级代码重点项目总申请与资助情况
    二级代码申请数资助数资助率(%)
    F011823730.43
    F01191063533.02
    F012013323.08
    F0121100.00
    F012228828.57
    F0123311135.48
    F012420630.00
    F0125621625.81
    合计2848630.28
    下载: 导出CSV 
    | 显示表格

    2024年,自然科学基金项目指南取消了面上项目连续两年申请未获资助后暂停一年申请的限制,电子科学与技术领域面上项目申请比2023年度增加约52%,达到1577项,其中2项申请被初筛,原因分别为个人信息不实和申请材料不符合《指南》要求[5]。经通讯评审和会议评审后,获资助185项,资助率约为11.73%。按申请人性别统计,男性申请人1237项,约占总申请数的78.4%,远高于女性申请人的340项;男性申请人获资助比率为12.61%,也高于女性申请人的8.53%。

    本年度,面上项目申请依托单位数为361家,比2023年增加了67家。其中申请数50项及以上的依托单位有2家,46家依托单位的申请数在10~49项之间,34家依托单位的申请数在5~9项之间。申请数5项以下的依托单位共279家,其中148家依托单位的申请数为1项。表4统计了面上项目申请量排名前五的依托单位申请与资助情况。其中,电子科技大学的申请数和获资助数量最多,分别达到73项和17项。这五家依托单位的总申请数约占领域总申请数的14.46%,获资助项目数约占总资助数的25.41%。从依托单位的单位资助率(本单位获资助数/本单位申请数)来看,上海交通大学的资助率最高,是本领域面上项目平均资助率(11.73%)的2倍多。

    表 4  2024年度面上项目申请数排名前十的依托单位申请与资助情况
    单位名称 申请数 资助数 单位资助率(%)
    电子科技大学 73 17 23.29
    西安电子科技大学 50 9 18.00
    上海交通大学 36 11 30.56
    杭州电子科技大学 35 3 8.57
    东南大学 34 7 20.59
    合计 228 47 20.61
    下载: 导出CSV 
    | 显示表格

    本年度,面上项目申请人的最小年龄为28岁,最大年龄为76岁;获得面上项目资助的申请人最小年龄为29岁,最大年龄为62岁,图1按申请人年龄段统计了2024年度领域面上项目申请与资助情况。其中,申请数量和获资助数最多的年龄段在36~40周岁之间,该年龄段的资助率达到13.58%,高于平均资助率11.73%;其次是41~45周岁的年龄段,该年龄段的资助率为8.96%,比平均资助率低2.77%,这两个年龄段申请人的项目申请和资助占比分别达到了60.49%和59.46%;60岁以上的申请人数虽少,但资助率在各年龄段中最高,达到16.67%;30岁及以下的申请人数最少,仅有7人,但资助率达到14.28%,在各年龄段中位居第二。

    图 1  2024年度领域面上项目申请与资助按年龄段分布情况

    表5给出了近五年领域各二级代码面上项目的总申请和资助情况。总体来看,F0119电磁场与波申请数和获得资助数最多,其次是F0125医学信息检测与处理,F0123敏感电子学与传感器位列第三,F0121微波光子学申请数和获得资助数最少。从资助率来看,F0122物理电子学资助率最高,达到19.86%,其次是F0121微波光子学,F0123敏感电子学与传感器资助率最低。

    表 5  2020~2024年度领域各二级代码面上项目总申请与资助情况
    二级代码申请数资助数资助率(%)
    F01184237317.26
    F0119162426816.50
    F01201722816.28
    F01211182319.49
    F01224338619.86
    F0123100313413.36
    F01244858517.53
    F0125131320115.31
    合计557189816.12
    下载: 导出CSV 
    | 显示表格

    图2按年份统计了2020~2024 年间F0123代码面上项目的资助率与学科平均资助率情况。可见,近五年F0123 代码的年度资助率始终低于当年学科的平均资助率。其原因可能在于:(1)敏感电子学与传感器涉及电子、物理、化学、材料等多个学科交叉,项目申请可能侧重传感机理、器件设计、工艺制备以及传感系统等不同方面;(2)敏感电子学与传感器涉及的器件种类多样,涉及光、声、电、磁、力、温度等以及各种气体等不同类型的传感。评审专家观点各异,评价尺度不一致,相较于其他代码形成共识难。近年来,学科处已关注到该情况,通过完善专家库、组织专题研讨会、提高会议重点讨论比例等方式,鼓励该方向的研究人员开展基础和应用基础研究,其资助率与领域平均资助率的差距正逐步缩小,从2020年的最大3.62%缩小到2024年的1.39%。

    图 2  2020~2024年F0123代码面上项目资助率变化图

    2024 年,电子科学与技术领域的青年项目申请量比2023年增加了229项,达到1276项,增幅约21.87%,涉及的依托单位数从369家增加到了430家。其中,4项青年项目申请未按《指南》要求提供导师同意函被初筛,申请人主动要求撤回申请1项,其余1271项申请经过通讯评审和会议评审后,有123家依托单位的264位申请人获得了资助,资助率约为20.69%。获青年项目资助的依托单位数约占申请该类项目依托单位总数的 28.6%,低于2023年的36.59%。

    从依托单位申请量来看,2024年度电子科技大学以46项的申请量位列第一,其次是东南大学22项,中国人民解放军国防科技大学和杭州电子科技大学均为21项,并列第三。与本年度面上项目相比,青年项目申请量在10项及以上的依托单位仅有24家。从申请人性别看,男性申请人共757项,约占总申请数的59.33%,女性申请人共519项,与本年度面上项目申请相比,女性申请人由21.56%提高到了40.67%。但获资助的青年项目中,男性申请人占比约为71.21%,女性申请人占比仅为28.79%。从申请人年龄看,最小申请者年龄为26岁,最大为40岁,表6统计了各年龄的项目申请与资助情况。可见,青年项目申请人的年龄主要集中在29~35周岁之间,申请数量约占总数量的83.70%,资助数占总资助数的88.64%。领域各二级代码的青年项目申请与资助情况如表7所示,其中,F0118电路与系统的资助率最低,F0121微波光子学的资助率最高但申请量最少,F0119电磁场与波的申请量最多。

    表 6  2024年度各年龄下青年项目申请与资助情况
    年龄(周岁)申请数资助数资助率(%)
    262150.00
    2712216.67
    28601830.00
    291223931.97
    301284333.59
    311653923.64
    321673319.76
    331623018.52
    341762514.20
    351482516.89
    363538.57
    373239.38
    383013.33
    392528.00
    401200.00
    下载: 导出CSV 
    | 显示表格
    表 7  2024年度领域各二级代码青年项目总申请与资助情况
    二级代码申请数资助数资助率(%)
    F0118621016.13
    F01193818321.78
    F0120441227.27
    F012129827.59
    F0122841922.62
    F01232615119.54
    F0124741925.68
    F01253416218.18
    合计127626420.69
    下载: 导出CSV 
    | 显示表格

    表8给出了近五年领域各二级代码青年项目的申请和资助情况,其中,F0119电磁场与波申请数和资助数最多,其次是F0125医学信息检测与处理,F0123敏感电子学与传感器位列第三,F0121微波光子学最少。从近五年各二级代码的平均资助率来看,F0121的资助率最高,达到29.66%,其余各二级代码在总平均资助率23.22%附近波动。

    表 8  2020~2024年度领域各二级代码青年项目申请与资助情况
    二级代码申请数资助数资助率(%)
    F01182857124.91
    F0119164938823.53
    F01201714023.39
    F01211183529.66
    F01223679325.34
    F012393220622.10
    F01243227924.53
    F0125118725621.57
    合计5031116823.22
    下载: 导出CSV 
    | 显示表格

    2024年度,电子科学与技术领域收到来自68家依托单位的地区项目申请162项,其中1项申请因申请人博士在读,未按指南要求在申请书附件中上传导师同意函被初筛。经通讯与会议评审后资助23项,资助率约为14.20%。表9统计了各二级代码的申请数、获资助数和资助率。统计结果表明,F0118和F0122资助率最高,为20%;F0125申请量第二多,但资助率偏低;F0121仅有1项申请,且未获得资助。

    表 9  2024年度领域各二级代码地区基金项目申请与资助情况
    二级代码申请数资助数资助率(%)
    F011815320.00
    F011944715.91
    F012010110.00
    F0121100.00
    F012210220.00
    F012323313.04
    F012423417.39
    F01253638.33
    合计1622314.20
    下载: 导出CSV 
    | 显示表格

    表10按依托单位所在省份统计了2024年度地区项目申请、资助和资助率的情况,其中,江西、广西和贵州申请数量位居前三,占12个省份总和的56.79%,获资助项目数是总资助数的56.52%。

    表 10  2024年度地区项目申请与资助随省份分布情况
    省份(简称)申请数资助数资助率(%)
    江西4449.09
    广西29620.69
    贵州19315.79
    云南1715.88
    甘肃14321.43
    宁夏1119.09
    新疆900.00
    内蒙古8337.50
    海南5120.00
    陕西3133.33
    四川200.00
    湖南100.00
    合计1622314.20
    下载: 导出CSV 
    | 显示表格

    图3统计了2020~2024年地区项目的申请数、资助数和资助率情况。近五年,地区基金申请数量逐步增加,从2020年的102项,增加到2024年的162项,增幅58.82%。资助数量略有增加,从18项增加到23项,资助率总体呈现下降趋势,从2020年的17.65%下降到2024年的14.20%。

    图 3  2020~2024年地区项目的申请和资助情况

    2024年度,领域受理来自52家依托单位的优青项目申请116项,经函评后推荐会议答辩项目12项,最终获资助8项。表11给出了领域各二级代码下优青项目申请数、会议答辩数、资助数及资助率。其中,F0119电磁场与波的申请数量最多,达到37项;其次是F0123敏感电子学与传感器,申请25项;F0125医学信息检测与处理排第三,申请24项;F0118、F0120和F0121申请数最少,均为4项。获资助的8项中,3项为F0125医学信息检测与处理,研究方向分别为医学影像处理、医学成像检测和医学影像重建与手术导航;F0119电磁场与波2项,研究方向分别为计算电磁学算法和人工电磁媒质;F0123敏感电子学与传感器2项,研究方向分别为穿戴式敏感材料与传感器和多功能传感器与集成系统;F0124 生物电子学与生物信息处理1项,研究方向为生物信息处理与分析。

    表 11  2024年度领域各二级代码优青项目申请与资助情况
    二级代码申请数答辩数资助数资助率(%)
    F01184000.00
    F011937325.41
    F01204200.00
    F01214000.00
    F01226100.00
    F012325228.00
    F012412118.33
    F0125243312.50
    合计1161286.90
    下载: 导出CSV 
    | 显示表格

    2024年度,领域优青项目申请人中男性97人、女性19人,获资助项目中男性6人、女性2人。图4给出了本年度优青项目申请人的年龄分布情况,其中申请人最小年龄为30岁,最大为40岁;获资助项目中,33岁和36岁各2人,1人34岁、1人37岁、1人39岁,还有1人40岁。

    图 4  2024年度领域申请与资助的优青项目申请人年龄分布情况

    2024年度,优秀青年科学基金项目(港澳)开始并入优秀青年科学基金项目一起评审。本年度,领域受理来自澳门特别行政区的优青项目申请1项,申请代码为F0123;香港特别行政区的优青项目申请6项,其中2项申请代码为F0119,4项申请代码为F0125,但均未获资助。自然科学基金委2019年开始设立优秀青年科学基金项目(港澳)以来,2019~2023年领域共受理项目申请9项,其中2项申请代码为F0118,1项F0119,5项F0123,1项F0125;资助2项,申请代码分别为F0118和F0123。

    2024年度,领域受理了来自48家依托单位的杰青项目申请93项,经函评后推荐会议答辩项目9项,最终获资助6项,表12列出了各二级代码的项目申请与资助情况。本年度,F0119电磁场与波的申请数量最多,达到26项;其次是F0125医学信息检测与处理,申请数量23项;F0123敏感电子学与传感器排第三,申请数21项;而F0121微波光子学申请数为0。获得资助的分别是F0124生物电子学与生物信息处理1项,研究方向为生物信息处理;F0125医学信息检测与处理2项,研究方向分别为医学信息获取与处理、医学成像;F0119电磁场与波3项,研究方向分别为计算电磁学、微波天线和射频电路技术。

    表 12  2024年度领域各二级代码杰青项目申请与资助情况
    二级代码申请数答辩数资助数资助率(%)
    F01183000.00
    F0119264311.54
    F01203000.00
    F01210000.00
    F01226000.00
    F012321200.00
    F012411114.35
    F012523222.15
    合计93966.45
    下载: 导出CSV 
    | 显示表格

    作为2024年度国家自然科学基金深化人才资助体制机制改革举措之一,女性申请杰青的年龄限制放宽到48周岁,以给予她们更多承担项目的机会,着力培养女性科技领军人才。2024年度,领域女性申请人数从2023年的9人增加至20人,其中1人获资助。图5给出了申请人性别和年龄分布情况,其中,男性申请人平均年龄为41.92岁,女性申请人平均年龄为44.45岁。获资助的6位申请人,年龄最小为38岁,最大为43岁,平均年龄41.67岁。

    图 5  2024年度杰青项目申请人性别和年龄分布

    扩大港澳地区依托单位范围,向港澳地区依托单位开放杰青项目申请是2024年度深化人才资助体制机制改革的另一举措。2024年度,领域共受理2项来自香港特别行政区的杰青项目申请,其中1项经函评后进入会议答辩。

    图6统计了近五年领域杰青项目的申请数、资助数和资助率。可见,申请数量从 2020 年的 59 项增加至 2024 年的93项,呈现逐年上升趋势;2021年度项目申请量最少,资助数也最少,仅为3项;近五年项目平均资助率为6.76%,其中 2021年资助率最低,为5.36%,2020年资助率最高,达到8.47%。

    图 6  近五年领域杰青项目申请和资助情况

    本文介绍了自然科学基金委信息科学部信息一处2024 年集中受理期间 “电子科学与技术” 领域收到的6类项目申请与资助情况。2025年即将到来,期待广大科研工作者深入社会生产生活一线,了解市场需求和产业动态,找准领域真问题,在新一轮的自然科学基金项目申请中占得先机。

  • 图  1  算法总体流程图

    图  2  丢失块周围邻块位移矢量的选择

    图  3  PSNR逐帧测试结果曲线图

    图  4  Poznanstreet第3视点第3帧错误隐藏结果

    图  5  Kendo第3视点第3帧主观测试结果

    表  1  组合参考块对应表

    参考列表参考帧号L0L1
    R00R01R0KR10R11R1K
    L0R00P0B00B01B0iB0K
    R01P1B10B11B1iB1K
    PiBi0Bi1BiiBiK
    R0KPKBK0BK1BKiBKK
    L1R10B00B10Bi0BK0PK+1
    R11B01B11Bi1BK1PK+2
    B0iB1iBiiBKiPK+i
    R1KB0KB1KBiKBKKP2K
    下载: 导出CSV

    表  2  QP=30, 25时各测试序列重建图像平均PSNR计算结果(dB)

    QP序列原始错误率50%错误率25%错误率10%
    文献[6]文献[7]MVC本文算法文献[6]文献[7]MVC本文算法文献[6]文献[7]MVC本文算法
    30Kendo42.76136.40636.12235.89437.10337.89637.35936.78638.31039.44938.92538.02539.833
    Bookarrival39.92336.93235.91135.65637.52537.86537.17136.52638.28638.33837.69937.38938.747
    Poznanstreet44.02839.59338.83436.66240.86441.15541.02840.79941.89041.45041.21940.98342.171
    Balloon40.57438.71338.51237.69139.26939.51439.45638.34739.83939.70639.63838.48539.958
    25Kendo45.87436.73636.54836.09637.49939.22738.05837.28739.65541.36839.68839.13341.501
    Bookarrival41.62537.98136.73336.35438.27038.41137.48836.94739.92139.72839.19638.46340.187
    Poznanstreet46.12239.95538.92837.06641.56141.72341.17840.80242.31942.11341.79741.20742.622
    Balloon44.02240.82939.43439.15641.24741.89941.27740.89442.14942.23442.15841.08442.612
    下载: 导出CSV

    表  3  QP=30, 25时各测试序列重建图像平均SSIM计算结果

    QP序列原始错误率50%错误率25%错误率10%
    文献[6]文献[7]MVC本文算法文献[6]文献[7]MVC本文算法文献[6]文献[7]MVC本文算法
    30Kendo0.98670.97080.96880.96470.97210.97800.97760.97330.97850.98190.98160.97660.9822
    Bookarrival0.95650.94820.94570.94220.94950.95030.94810.94520.95100.95250.95180.94770.9534
    Poznanstreet0.97950.97320.97200.97140.97590.97460.97400.97380.97670.97510.97500.97440.9769
    Balloon0.97670.97380.97330.97200.97430.97450.97420.97360.97510.97470.97460.97430.9757
    25Kendo0.98740.97220.96960.96600.97510.97890.97830.97650.97960.98280.98240.97950.9832
    Bookarrival0.97010.95770.95470.95390.95980.96340.96270.96130.96410.96430.96420.96330.9655
    Poznanstreet0.98780.98180.98030.97960.98240.98250.98210.98160.98480.98430.98410.98240.9849
    Balloon0.98550.98100.98030.97960.98210.98340.98330.98280.98390.98410.98360.98350.9844
    下载: 导出CSV

    表  4  各测试序列解码运行时间(s)

    序列原解码文献[6]文献[7]MVC本文
    Kendo188.71231.45198.83192.07194.19
    Balloon172.35216.14178.13173.82174.69
    Bookarrival175.86219.35183.19177.18179.13
    Poznanstreet483.67558.15498.68484.68486.07
    下载: 导出CSV
  • LI Yufeng and CHEN Ruining. Motion vector recovery for video error concealment based on plane fitting[J]. Computer Engineering &Applications, 2018, 54(2): 182–187. doi: 10.3778/j.issn.1002-8331.1608-0085
    XU Dawen and WANG Rangding. Two-dimensional reversible data hiding-based approach for intra-frame error concealment in H.264/AVC[J]. Journal of Visual Communication& Image Representation, 2016, 47(2): 369–379. doi: 10.1016/j.jvcir.2013.12.008
    ZABIHI S M, GHANEI Y H, and MEHRSHAD N. Adaptive temporal error concealment method based on the MB behavior estimation in the video[C]. The 7th International Conference on Computer and Knowledge Engineering. Mashhad, Iran, 2017: 193–198.
    EL-SHAFAI W, EL-RABAIE S, EL-HALAWANY M M, et al. Recursive Bayesian filtering-based error concealment scheme for 3D video communication over severely lossy wireless channels[J]. Circuits Systems & Signal Processing, 2018(20): 1–32. doi: 10.1007/s00034-018-0786-8
    周洋, 蒋刚毅, 郁梅, 等. 面向HBP编码格式的立体视频B帧整帧丢失分层错误隐藏算法[J]. 电子与信息学报, 2014, 36(2): 377–383. doi: 10.3724/SP.J.1146.2013.00528

    ZHOU Yang, JIANG Gangyi, YU Mei, et al. A hierarchical error concealment algorithm for entire B-frame loss in stereoscopic video coding with hierarchical B pictures[J]. Journal of Electronics &Information Technology, 2014, 36(2): 377–383. doi: 10.3724/SP.J.1146.2013.00528
    SONG K, CHUNG T, OH Y, et al. Error concealment of multi-view video sequences using inter-view and intra-view correlations[J]. Journal of Visual Communication & Image Representation, 2009, 20(4): 281–292. doi: 10.1016/j.jvcir.2009.02.002
    PENG Yantsung and COSMAN P C. Weighted boundary matching error concealment for HEVC using block partition decisions[C]. The 48th Asilomar Conference on Signals, Systems & Computers, Grove, USA, 2014: 921–925. doi: 10.1109/ACSSC.2014.7094587.
    KHATTAK S, MAUGEY T, HAMZAOUI R, et al. Temporal and inter-view consistent error concealment technique for multiview plus depth video[J]. IEEE Transactions on Circuits & Systems for Video Technology, 2016, 26(5): 829–840. doi: 10.1109/TCSVT.2015.2418631
    LIU Shujie, CHEN Ying, WANG Yekui, et al. Frame loss error concealment for multiview video coding[C]. IEEE International Symposium on Circuits and Systems (ISCAS 2008), Washington, USA, 2008: 3470–3473.
    ZHOU Yuan, XIANG Wei, and WANG Gengkun. Frame loss concealment for multiview video transmission over wireless multimedia sensor networks[J]. IEEE Sensors Journal, 2015, 15(3): 1892–1901. doi: 10.1109/JSEN.2014.2366511
    HUANG Pincheng, LIN Jieru, LI Gwolong, et al. Improved depth-assisted error concealment algorithm for 3D video transmission[J]. IEEE Transactions on Multimedia, 2017, 19(11): 2625–2632. doi: 10.1109/TMM.2017.2694218
    TAI Shenchuan, WANG Chuenching, HONG Chienshiang, et al. An efficient full frame algorithm for object-based error concealment in 3D depth-based video[J]. Multimedia Tools & Applications, 2016, 75(16): 9927–9947. doi: 10.1007/s11042-015-2899-4
    时琳, 刘荣科, 李君烨. 基于深度信息的立体视频错误隐藏方法[J]. 电子与信息学报, 2012, 34(7): 1678–1684. doi: 10.3724/SP.J.1146.2011.01107

    SHI Ling, LIU Rongke, and LI Junye. Error concealment based on depth information for stereoscopic video coding[J]. Journal of Electronics &Information Technology, 2012, 34(7): 1678–1684. doi: 10.3724/SP.J.1146.2011.01107
    YANG Meng, LAN Xuguang, ZHENG Nanning, et al. Depth-assisted temporal error concealment for intra frame slices in 3-D video[J]. IEEE Transactions on Broadcasting, 2014, 60(2): 385–393. doi: 10.1109/TBC.2014.2321676
    YAN Bo and ZHOU Jie. Efficient frame concealment for depth image-based 3-D video transmission[J]. IEEE Transactions on Multimedia, 2012, 14(3): 936–941. doi: 10.1109/TMM.2012.2184743
    MERKLE P, MULLER K, MARPE D, et al. Depth intra coding for 3D video based on geometric primitives[J]. IEEE Transactions on Circuits & Systems for Video Technology, 2016, 26(3): 570–582. doi: 10.1109/TCSVT.2015.2407791
    HEWAGE C T E R, WORRALL S, DOGAN S, et al. Frame concealment algorithm for stereoscopic video using motion vector sharing[C]. 2008 IEEE International Conference on Multimedia and Expo, Hannover, Germany, 2008: 485–488. doi: 10.1109/ICME.2008.4607477.
    ASSUNCAO P, MARCELINO S, SOARES S, et al. Spatial error concealment for intra-coded depth maps in multiview video-plus-depth[J]. Multimedia Tools &Applications, 2017, 76(12): 13835–13858. doi: 10.1007/s11042-016-3766-7
    HTM Reference Software 14.0. http://hevc.kw.bbc.co.uk/git/w/jctvc-3de.git, 2016.
    WANG Zhou, BOVIK A C, SHEIKH H R, et al. Image quality assessment: From error visibility to structural similarity[J]. IEEE Transactions on Image Processing, 2004, 13(4): 600–612. doi: 10.3969/j.issn.1006-8961.2006.12.00.003
  • 加载中
图(5) / 表(4)
计量
  • 文章访问数:  2216
  • HTML全文浏览量:  1034
  • PDF下载量:  43
  • 被引次数: 0
出版历程
  • 收稿日期:  2018-09-30
  • 修回日期:  2019-04-05
  • 网络出版日期:  2019-05-21
  • 刊出日期:  2019-11-01

目录

/

返回文章
返回