首页 > 专利 > 宁波大学 > 一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法专利详情

一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2016-07-05
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2016-12-21
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2018-04-17
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2036-07-05
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201610534911.1 申请日 2016-07-05
公开/公告号 CN106162195B 公开/公告日 2018-04-17
授权日 2018-04-17 预估到期日 2036-07-05
申请年 2016年 公开/公告年 2018年
缴费截止日
分类号 H04N19/467H04N19/593H04N19/147H04N19/154H04L9/08H04L9/00 主分类号 H04N19/467
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 4
权利要求数量 5 非专利引证数量 1
引用专利数量 2 被引证专利数量 0
非专利引证 1、全文. 王家骥,等.一种基于帧内预测模式的HEVC视频信息隐藏《.光电子 激光》.2014,第25卷(第8期),全文.;
引用专利 CN103024402A、US2015/0245061A1 被引证专利
专利权维持 2 专利申请国编码 CN
专利事件 事务标签 公开、实质审查、授权
申请人信息
申请人 第一申请人
专利权人 宁波大学 当前专利权人 宁波大学
发明人 蒋刚毅、王静、宋洋、杨家辉 第一发明人 蒋刚毅
地址 浙江省宁波市江北区风华路818号 邮编 315211
申请人数量 1 发明人数量 4
申请人所在省 浙江省 申请人所在市 浙江省宁波市
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
宁波奥圣专利代理事务所 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
周珏
摘要
本发明公开了一种基于单深度帧内模式的3D‑HEVC深度视频信息隐藏方法,其包括信息嵌入和信息提取;在信息嵌入过程中,解析左右视点深度图像中编码树单元中编码单元对应的编码模式,当为单深度帧内编码模式时,构建像素值候选列表并比较列表中的两个元素:若两者相等且提取的密钥位信息为1,则利用加密信息调制该像素值的索引值,完成隐秘信息嵌入;若两者不相等,则对深度为2或3的编码单元,当右和下相邻编码单元的编码模式均不为单深度帧内编码模式且右上、右、右下、左下和下相邻编码单元各自的预测模式均不属于各自相应的模式范围时,利用加密信息调制该像素值的索引值,完成隐秘信息嵌入;优点是安全性较高、计算复杂度较低,且对码率影响较小。
  • 摘要附图
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图1a
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图1b
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2a
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2b
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2c
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2d
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2e
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
  • 说明书附图:图2f
    一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2018-04-17 授权
2 2016-12-21 实质审查的生效 IPC(主分类): H04N 19/467 专利申请号: 201610534911.1 申请日: 2016.07.05
3 2016-11-23 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于包括信息嵌入和信息提取两部分;
所述的信息嵌入部分的具体步骤为:
①_1、令Sorg表示原始的立体视频,将Sorg的左视点彩色视频记为 将 对应的左视点深度视频记为 将Sorg的右视点彩色视频记为 将 对应的右视点深度视频记为
并令W表示待嵌入的隐秘信息,W中包含n个比特的值,W={w1,w2,…,wi,…,wn-1,wn};然后通过3D-HEVC标准编码平台对 以及 进行压缩编码,得到目标视频流,记
为str.binorg;其中, 中的左视点彩色图像、 中的左视点深度图像、 中的右视点彩色图像、 中的右视点深度图像的宽度均为M且高度均为N, 中包含的左视点彩色图像的总帧数、 中包含的左视点深度图像的总帧数、 中包含的右视点彩色图像的总帧数、中包含的右视点深度图像的总帧数均为F, w1、w2、wi、wn-1和wn对应表
示W中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w1、w2、wi、wn-1和wn为0或1,1≤i≤n;
①_2、利用logistics混沌映射产生一个包含n个比特的值的二值伪随机序列,将该二值伪随机序列作为密钥,并记为E,E={e1,e2,…,ei,…,en-1,en};然后对W中的每个比特的值与E中的每个比特的值一一对应进行异或,得到加密信息,记为W',W'={w'1,w'2,…,w'i,…,w'n-1,w'n};其中,产生密钥E的初始值信息随意给定,e1、e2、ei、en-1和en对应表示E中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,e1、e2、ei、en-1和en为0或1,w'1、w'2、w'i、w'n-1和w'n对应表示W'中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w'1、w'2、w'i、w'n-1和w'n为0或
1,1≤i≤n;
①_3、以帧为单位解析目标视频流str.binorg,将目标视频流str.binorg中当前待解析的帧定义为当前帧;
①_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤①_
5;否则,执行步骤①_8;
①_5、以编码树单元为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤①_6;
①_6、按照当前解析块的最优分割模式,以分割完成的编码单元为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为 将对应的编码模式记为 其中,k为正整数,k∈[1,64], 的尺寸大小为8×8、16×
16、32×32或64×64, 然后执行以下步骤:
①_6a、将当前解析块中正在处理的编码单元定义为当前编码单元;
①_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编
码模式,那么执行步骤①_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤①_6c;
①_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 第1个像素
值的索引值为0,将第2个像素值记为 第2个像素值的索引值为1,其中,
并从密钥E中读取第j个比特的值ej,从加密信息W'中读取第i个
比特的值w'i,其中,1≤j≤n,j的初始值为1,1≤i≤n,i的初始值为1;然后执行步骤①_6d;
①_6d、判断 与 是否相等,如果两者相等,则执行步骤①_6e;否则,执行步骤①_
6f;
①_6e、如果ej为1,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的隐秘信息嵌入过程,然后令j=j+1,令i=i+1,再执行步骤①_6i;如果ej为0,则令j=j+1,再执行步骤①_6i;其中,j=j+1和i=i+1中的“=”为赋值符号;
①_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤①_6g;如果depth为0或1,则执行步骤①_6i;其中,depth∈{0,1,2,3};
①_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤①_6i;否则,执行步骤①_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元;
①_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的嵌入隐秘信息过程,然后令i=i+1,再执行步骤①_6i;
否则,执行步骤①_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元;
①_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤①_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤①-7;
①_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤①_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤①_8;
①_8、将目标视频流str.binorg中下一帧待解析的帧作为当前帧,然后返回步骤①_4继续执行,直至目标视频流str.binorg中的所有帧均处理完毕,得到嵌入隐秘信息的视频流str.bindec;
①_9、将产生密钥E的初始值信息传送到信息提取端;
所述的信息提取部分的具体步骤为:
②_1、将嵌入隐秘信息的视频流定义为目标视频流,记为str.bindec;
②_2、根据信息嵌入端发送的产生密钥E的初始值信息,利用logistics混沌映射产生一个与信息嵌入端相同的密钥E;
②_3、以帧为单位解析目标视频流str.bindec,将目标视频流str.bindec中当前待解析的帧定义为当前帧;
②_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤②_
5;否则,执行步骤②_8;
②_5、以编码树单元为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤②_6;
②_6、按照当前解析块的最优分割模式,以分割完成的编码单元为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为 将对应的编码模式记为 其中,k为正整数,k∈[1,64], 的尺寸大小为8×8、16×
16、32×32或64×64, 然后执行以下步骤:
②_6a、将当前解析块中正在处理的编码单元定义为当前编码单元;
②_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编
码模式,那么执行步骤②_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤②_6c;
②_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 将第2个像
素值记为 其中, 并从密钥E中读取第j个比特的值ej,其中,1
≤j≤n,j的初始值为1;然后执行步骤②_6d;
②_6d、判断 与 是否相等,如果两者相等,则执行步骤②_6e;否则,执行步骤②_
6f;
②_6e、如果ej为1,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令j=j+1,令i=i+1,再执行步骤②_6i;如果ej为0,则令j=j+1,再执行步骤②_6i;其中,1≤i≤n,i的初始值为1, 为0或1,j=j+1和i=i+1中的“=”为赋值符号;
②_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤②_6g;如果depth为0或1,则执行步骤②_6i;其中,depth∈{0,1,2,3};
②_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤②_6i;否则,执行步骤②_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元;
②_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令i=i+1,再执行步骤②_6i;否则,执行步骤②_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元;
②_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤②_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤②_7;
②_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤②_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤②_8;
②_8、将目标视频流str.bindec中下一帧待解析的帧作为当前帧,然后返回步骤②_4继续执行,直至目标视频流str.bindec中的所有帧均处理完毕,完成隐秘信息提取;
②_9、将得到的n个加密信息比特值构成加密信息,记为
然后对 中的每个加密信息比特值与E中的每个比特的值一一对应进行异或,得到解密的隐秘信息,记为 其中, 和 对应表示得
到的第1个加密信息比特值、第2个加密信息比特值、第i个加密信息比特值、第n-1个加密信息比特值和第n个加密信息比特值, 和 为0或1,
和 对应表示 中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值, 和 为0或1。

2.根据权利要求1所述的一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于所述的步骤①_6e和所述的步骤①_6h中的利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值的具体过程为:将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值记为 将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值记为

3.根据权利要求1所述的一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于所述的步骤①_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;
当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合。

4.根据权利要求1所述的一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于所述的步骤②_6e和所述的步骤②_6h中的解析当前编码单元对应的编码模式的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值 的具体过程为:将当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值记为 则有

5.根据权利要求1所述的一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于所述的步骤②_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;
当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合。
说明书

技术领域

[0001] 本发明涉及一种视频信息隐藏技术,尤其是涉及一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法。

背景技术

[0002] 在网络和通信技术迅速发展的同时,信息安全问题变得日益严重,信息隐藏技术是解决这一问题的有效方法。随着三维视频在电影产业和娱乐应用等方面的逐渐流行,人们越来越关注高效率视频编码(High Efficiency Video Coding,HEVC)标准在三维视频上的拓展,即3D-HEVC编码标准。深度视频是三维视频的重要组成部分,其不用于用户直接观看,主要用于绘制虚拟彩色视点。由于深度视频的部分深度失真不一定会造成虚拟彩色视点的失真,因此,研究3D-HEVC编码标准下的深度视频信息隐藏技术具有重要意义。
[0003] 目前,现有的视频信息隐藏算法主要是基于单通道视频编码标准研究的,且随着HEVC标准的广泛应用,基于单通道HEVC编码标准的信息隐藏技术已经取得了初步发展。如:WANG等人提出与HEVC帧内预测模式相关的信息隐藏算法,由于该算法需要用修改后的预测模式重新编码,因此该算法的复杂度较高。又如:Tew等人根据嵌入的信息指导编码单元分割,同时也考虑了量化后非零的DCT系数的奇偶调制,使得该算法的整体性能得到了提升。
然而,目前现有的三维视频信息隐藏算法较少,如:Yang等人提出了一种基于量化索引调制的3D视频盲水印算法,该算法将水印信息嵌入在深度视频的DCT系数上,该算法具有较强的鲁棒性,但是该算法是针对深度视频原始域的信息隐藏,嵌入的信息经编码压缩后有可能丢失。现有的压缩域的三维视频信息隐藏算法主要是基于单通道H.264编码标准的三维视频编码标准扩展研究的,如:SONG等人提出的一种可逆的多视点视频信息隐藏算法,其通过引入内积的思想,在b4帧编码块的运动矢量上进行信息隐藏,该算法具有较好的不可感知性,且能实现信息可逆。由于3D-HEVC编码标准的压缩性能明显优于H.264的三维视频编码标准扩展,3D-HEVC编码标准适用于更高清视频序列的压缩编码,因此研究基于3D-HEVC编码标准的三维视频信息隐藏算法很有必要。由于深度视频具有大量的平滑区域和尖锐的边缘区域,因此以上的彩色视频的信息隐藏技术如果直接用在深度视频上,则信息隐藏算法的性能并不一定会达到预期的效果。就3D-HEVC编码标准,其存在一种“单深度帧内模式”,这种模式是专门针对深度视频的平滑区域,而基于单通道H.264编码标准的三维视频编码标准扩展不具备该编码模式,因此需要研究一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法。

发明内容

[0004] 本发明所要解决的技术问题是提供一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其安全性较高、计算复杂度较低,且对码率影响较小。
[0005] 本发明解决上述技术问题所采用的技术方案为:一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其特征在于包括信息嵌入和信息提取两部分;
[0006] 所述的信息嵌入部分的具体步骤为:
[0007] ①_1、令Sorg表示原始的立体视频,将Sorg的左视点彩色视频记为 将 对应的左视点深度视频记为 将Sorg的右视点彩色视频记为 将 对应的右视点深度视频记为 并令W表示待嵌入的隐秘信息,W中包含n个比特的值,W={w1,w2,…,wi,…,wn-1,wn};然后通过3D-HEVC标准编码平台对 以及 进行压缩编码,得到目标视频
流,记为str.binorg;其中, 中的左视点彩色图像、 中的左视点深度图像、 中的右视点彩色图像、 中的右视点深度图像的宽度均为M且高度均为N, 中包含的左视点彩色图像的总帧数、 中包含的左视点深度图像的总帧数、 中包含的右视点彩色图像的总帧数、 中包含的右视点深度图像的总帧数均为F, w1、w2、wi、wn-1和wn对
应表示W中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w1、w2、wi、wn-1和wn为0或1,1≤i≤n;
[0008] ①_2、利用logistics混沌映射产生一个包含n个比特的值的二值伪随机序列,将该二值伪随机序列作为密钥,并记为E,E={e1,e2,…,ei,…,en-1,en};然后对W中的每个比特的值与E中的每个比特的值一一对应进行异或,得到加密信息,记为W',W'={w'1,w'2,…,w'i,…,w'n-1,w'n};其中,产生密钥E的初始值信息随意给定,e1、e2、ei、en-1和en对应表示E中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,e1、e2、ei、en-1和en为0或1,w'1、w'2、w'i、w'n-1和w'n对应表示W'中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w'1、w'2、w'i、w'n-1和w'n为0或1,1≤i≤n;
[0009] ①_3、以帧为单位解析目标视频流str.binorg,将目标视频流str.binorg中当前待解析的帧定义为当前帧;
[0010] ①_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤①_5;否则,执行步骤①_8;
[0011] ①_5、以编码树单元为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤①_6;
[0012] ①_6、按照当前解析块的最优分割模式,以分割完成的编码单元为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为将 对应的编码模式记为 其中,k为正整数,k∈[1,64], 的尺寸大小为8×8、16×16、32×32或64×64, 然后执行以下步
骤:
[0013] ①_6a、将当前解析块中正在处理的编码单元定义为当前编码单元;
[0014] ①_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编码模式,那么执行步骤①_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤①_6c;
[0015] ①_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 第1个像素值的索引值为0,将第2个像素值记为 第2个像素值的索引值为1,其中,
并从密钥E中读取第j个比特的值ej,从加密信息W'中读取第i个
比特的值w'i,其中,1≤j≤n,j的初始值为1,1≤i≤n,i的初始值为1;然后执行步骤①_6d;
[0016] ①_6d、判断 与 是否相等,如果两者相等,则执行步骤①_6e;否则,执行步骤①_6f;
[0017] ①_6e、如果ej为1,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的隐秘信息嵌入过程,然后令j=j+1,令i=i+1,再执行步骤①_6i;如果ej为0,则令j=j+1,再执行步骤①_6i;其中,j=j+1和i=i+1中的“=”为赋值符号;
[0018] ①_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤①_6g;如果depth为0或1,则执行步骤①_6i;其中,depth∈{0,1,2,3};
[0019] ①_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤①_6i;否则,执行步骤①_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元;
[0020] ①_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的嵌入隐秘信息过程,然后令i=i+1,再执行步骤①_6i;否则,执行步骤①_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元;
[0021] ①_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤①_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤①-7;
[0022] ①_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤①_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤①_8;
[0023] ①_8、将目标视频流str.binorg中下一帧待解析的帧作为当前帧,然后返回步骤①_4继续执行,直至目标视频流str.binorg中的所有帧均处理完毕,得到嵌入隐秘信息的视频流str.bindec;
[0024] ①_9、将产生密钥E的初始值信息传送到信息提取端;
[0025] 所述的信息提取部分的具体步骤为:
[0026] ②_1、将嵌入隐秘信息的视频流定义为目标视频流,记为str.bindec;
[0027] ②_2、根据信息嵌入端发送的产生密钥E的初始值信息,利用logistics混沌映射产生一个与信息嵌入端相同的密钥E;
[0028] ②_3、以帧为单位解析目标视频流str.bindec,将目标视频流str.bindec中当前待解析的帧定义为当前帧;
[0029] ②_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤②_5;否则,执行步骤②_8;
[0030] ②_5、以编码树单元为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤②_6;
[0031] ②_6、按照当前解析块的最优分割模式,以分割完成的编码单元为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为将 对应的编码模式记为 其中,k为正整数,k∈[1,64], 的尺寸大小为8×8、16×16、32×32或64×64, 然后执行以下步
骤:
[0032] ②_6a、将当前解析块中正在处理的编码单元定义为当前编码单元;
[0033] ②_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编码模式,那么执行步骤②_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤②_6c;
[0034] ②_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 将第2个像素值记为 其中, 并从密钥E中读取第j个比特的值ej,其
中,1≤j≤n,j的初始值为1;然后执行步骤②_6d;
[0035] ②_6d、判断 与 是否相等,如果两者相等,则执行步骤②_6e;否则,执行步骤②_6f;
[0036] ②_6e、如果ej为1,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令j=j+1,令i=i+1,再执行步骤②_6i;如果ej为0,则令j=j+1,再执行步骤②_6i;其中,1≤i≤n,i的初始值为1, 为0或1,j=j+1和i=i+1中的“=”为赋值符号;
[0037] ②_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤②_6g;如果depth为0或1,则执行步骤②_6i;其中,depth∈{0,1,2,3};
[0038] ②_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤②_6i;否则,执行步骤②_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元;
[0039] ②_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令i=i+1,再执行步骤②_6i;否则,执行步骤②_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元;
[0040] ②_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤②_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤②_7;
[0041] ②_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤②_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤②_8;
[0042] ②_8、将目标视频流str.bindec中下一帧待解析的帧作为当前帧,然后返回步骤②_4继续执行,直至目标视频流str.bindec中的所有帧均处理完毕,完成隐秘信息提取;
[0043] ②_9、将得到的n个加密信息比特值构成加密信息,记为然后对 中的每个加密信息比特值与E中的每个比特的
值一一对应进行异或,得到解密的隐秘信息,记为 其中,
和 对应表示得到的第1个加密信息比特值、第2个加密信息比特值、
第i个加密信息比特值、第n-1个加密信息比特值和第n个加密信息比特值,
和 为0或1, 和 对应表示 中的第1个比特的
值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,
和 为0或1。
[0044] 所述的步骤①_6e和所述的步骤①_6h中的利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值的具体过程为:将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值记为 将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值记为
[0045] 所述的步骤①_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合。
[0046] 所述的步骤②_6e和所述的步骤②_6h中的解析当前编码单元对应的编码模式的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值 的具体过程为:将当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值记为 则有
[0047] 所述的步骤②_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM模式构成的预测模式集合。
[0048] 与现有技术相比,本发明的优点在于:
[0049] 1)本发明方法为首次在3D-HEVC压缩域中进行信息隐藏,同时也是首次在3D-HEVC深度视频中进行信息隐藏,本发明方法利用3D-HEVC编码标准中提出的单深度帧内编码模式(专门针对深度视频平滑区域的编码)进行隐秘信息嵌入和隐秘信息提取,而由于H.264编码标准在三维视频上的扩展不具有单深度帧内编码模式,因此本发明方法不同于H.264编码标准在三维视频上的扩展的压缩域的信息隐藏方法,两者不能通用。
[0050] 2)本发明方法在信息嵌入部分中利用logistics混沌映射产生一个二值伪随机序列作为密钥,利用该密钥加密待嵌入的隐秘信息,同时结合密钥对待嵌入隐秘信息的编码单元进行位置选择,有效地提高了本发明方法的安全性。
[0051] 3)本发明方法通过构建编码模式为单深度帧内编码模式的编码单元的编码模式的像素值候选列表,在像素值候选列表中的2个像素值相等且从密钥中提取的信息比特的值为1时,利用从加密信息中提取的信息比特的值对编码单元的编码模式的像素值的索引值进行索引调制,实现隐秘信息嵌入;而在像素值候选列表中的2个像素值不相等、编码单元的深度为2或3且编码单元的右相邻编码单元和下相邻编码单元的编码模式不为单深度帧内编码模式时,通过对编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元的预测模式的判别,选择是否对编码单元进行隐秘信息嵌入,这样隐秘信息嵌入方式很好地避免了误差漂移现象。
[0052] 4)本发明方法在信息提取部分中,加密信息能够盲提取,不需要原始视频的参与,计算复杂度低。

实施方案

[0061] 以下结合附图实施例对本发明作进一步详细描述。
[0062] 本发明提出的一种基于单深度帧内模式的3D-HEVC深度视频信息隐藏方法,其包括信息嵌入和信息提取两部分。
[0063] 所述的信息嵌入部分的总体实现框图如图1a所示,其具体步骤为:
[0064] ①_1、令Sorg表示原始的立体视频,将Sorg的左视点彩色视频记为Lcorg,将Lcorg对应的左视点深度视频记为 将Sorg的右视点彩色视频记为 将 对应的右视点深度视频记为 并令W表示待嵌入的隐秘信息,W中包含n个比特的值,W={w1,w2,…,wi,…,wn-1,wn};然后通过3D-HEVC标准编码平台对 以及 进行压缩编码,得到目标
视频流,记为str.binorg;其中, 中的左视点彩色图像、 中的左视点深度图像、 中的右视点彩色图像、 中的右视点深度图像的宽度均为M且高度均为N, 中包含的左视点彩色图像的总帧数、 中包含的左视点深度图像的总帧数、 中包含的右视点彩色图像的总帧数、 中包含的右视点深度图像的总帧数均为 w1、w2、wi、
wn-1和wn对应表示W中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w1、w2、wi、wn-1和wn为0或1,1≤i≤n。
[0065] 在对 以及 进行压缩编码时是依次对 中的第1帧左视点彩色图像、 中的第1帧左视点深度图像、 中的第1帧右视点彩色图像、 中的第1帧右视点深度图像进行压缩编码,依次类推,直至依次对 中的第F帧左视点彩色图像、 中的第F帧左视点深度图像、 中的第F帧右视点彩色图像、 中的第F帧右视点深度图像进行压缩编码,完成整个编码过程。
[0066] ①_2、利用logistics混沌映射产生一个包含n个比特的值的二值伪随机序列,将该二值伪随机序列作为密钥,并记为E,E={e1,e2,…,ei,…,en-1,en};然后对W中的每个比特的值与E中的每个比特的值一一对应进行异或,得到加密信息,记为W',W'={w'1,w'2,…,w'i,…,w'n-1,w'n};其中,产生密钥E的初始值信息随意给定,e1、e2、ei、en-1和en对应表示E中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,e1、e2、ei、en-1和en为0或1,w'1、w'2、w'i、w'n-1和w'n对应表示W'中的第1个比特的值、第2个比特的值、第i个比特的值、第n-1个比特的值和第n个比特的值,w'1、w'2、w'i、w'n-1和w'n为0或1,1≤i≤n。
[0067] ①_3、以帧为单位解析目标视频流str.binorg,将目标视频流str.binorg中当前待解析的帧定义为当前帧。
[0068] ①_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤①_5;否则,执行步骤①_8。
[0069] ①_5、以编码树单元(CTU)为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤①_6。
[0070] ①_6、按照当前解析块的最优分割模式,以分割完成的编码单元(CU)为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为 将 对应的编码模式记为 其中,k为正整数,k∈[1,64],当前解析块的尺寸大小为64×64,当前解析块在编码完成后可以分割成若干个编码单元,尺寸大小为8×8、16×16、32×32或64×64,当编码单元的尺寸大小为64×64时,说明当前解析块没有分割,保持原来大小,这时只有1个编码单元,因此k的取值仅为1,当前解析块如果全分为尺寸大小为8×8的编码单元,则有64个编码单元,因此k的取值为从1至64,当前解析块如果全分为尺寸大小为32×32的编码单元时,有4个编码单元,因此k的取值为1、2、3、4,当前解析块如果分为不同尺寸大小的编码单元,如分为尺寸大小为8×8、16×16、32×32的编码单元,则根据编码单元的个数确定了k的取值,故k∈[1,64], 的尺寸大小为8×8、16×16、32×32或64×64, 然后执行以下步骤:
[0071] ①_6a、将当前解析块中正在处理的编码单元定义为当前编码单元。
[0072] ①_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编码模式,那么执行步骤①_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤①_6c。
[0073] ①_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 第1个像素值的索引值为0,将第2个像素值记为 第2个像素值的索引值为1,其中,
并从密钥E中读取第j个比特的值ej,从加密信息W'中读取第i个
比特的值w'i,其中,1≤j≤n,j的初始值为1,1≤i≤n,i的初始值为1;然后执行步骤①_6d。
[0074] ①_6d、判断 与 是否相等,如果两者相等,则执行步骤①_6e;否则,执行步骤①_6f。
[0075] ①_6e、如果ej为1,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的隐秘信息嵌入过程,然后令j=j+1,令i=i+1,再执行步骤①_6i;如果ej为0,则令j=j+1,再执行步骤①_6i;其中,j=j+1和i=i+1中的“=”为赋值符号。
[0076] 在此具体实施例中,步骤①_6e中的利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值的具体过程为:将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值记为 将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值记为
[0077] ①_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤①_6g;如果depth为0或1,则执行步骤①_6i;其中,depth∈{0,1,2,3}。
[0078] ①_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤①_6i;否则,执行步骤①_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元。
[0079] ①_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值,并对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值进行熵编码,至此已完成当前编码单元的嵌入隐秘信息过程,然后令i=i+1,再执行步骤①_6i;否则,执行步骤①_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元。
[0080] 在此具体实施例中,步骤①_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合。
[0081] 在此具体实施例中,步骤①_6h中的利用w'i对当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值进行索引调制,得到当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值的具体过程为:将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的索引值记为 将当前编码单元进行压缩编码时当前编码单元对应的编码模式 所选的像素值的嵌入隐秘信息后的索引值记为
[0082] ①_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤①_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤①-7。
[0083] ①_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤①_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤①_8。
[0084] ①_8、将目标视频流str.binorg中下一帧待解析的帧作为当前帧,然后返回步骤①_4继续执行,直至目标视频流str.binorg中的所有帧均处理完毕,得到嵌入隐秘信息的视频流str.bindec。
[0085] ①_9、将产生密钥E的初始值信息传送到信息提取端,在信息提取端只需要知道初始值信息就能产生相同的密钥。
[0086] 所述的信息提取部分的总体实现框图如图1b所示,其具体步骤为:
[0087] ②_1、将嵌入隐秘信息的视频流定义为目标视频流,记为str.bindec。
[0088] ②_2、根据信息嵌入端发送的产生密钥E的初始值信息,利用logistics混沌映射产生一个与信息嵌入端相同的密钥E;如果直接将信息嵌入端的密钥E传送给信息提取端,则边信息太大,由于产生密钥的过程比较简单,只要给定初始值就能重现密钥,因此在信息提取端只需根据信息嵌入端发送的产生密钥E的初始值信息,重新产生即可得到与信息嵌入端相同的密钥E。
[0089] ②_3、以帧为单位解析目标视频流str.bindec,将目标视频流str.bindec中当前待解析的帧定义为当前帧。
[0090] ②_4、判断当前帧是否为左视点深度图像或右视点深度图像,如果是,则执行步骤②_5;否则,执行步骤②_8。
[0091] ②_5、以编码树单元(CTU)为单位解析当前帧,将当前帧中当前待解析的编码树单元定义为当前解析块,然后执行步骤②_6。
[0092] ②_6、按照当前解析块的最优分割模式,以分割完成的编码单元(CU)为单位,依序解析当前解析块中的每个编码单元对应的编码模式,将当前解析块中的第k个编码单元记为 将 对应的编码模式记为 其中,k为正整数,k∈[1,64],当前解析块的尺寸大小为64×64,当前解析块在编码完成后可以分割成若干个编码单元,尺寸大小为8×8、16×16、32×32或64×64,当编码单元的尺寸大小为64×64时,说明当前解析块没有分割,保持原来大小,这时只有1个编码单元,因此k的取值仅为1,当前解析块如果全分为尺寸大小为8×8的编码单元,则有64个编码单元,因此k的取值为从1至64,当前解析块如果全分为尺寸大小为32×32的编码单元时,有4个编码单元,因此k的取值为1、2、3、4,当前解析块如果分为不同尺寸大小的编码单元,如分为尺寸大小为8×8、16×16、32×32的编码单元,则根据编码单元的个数确定了k的取值,故k∈[1,64], 的尺寸大小为8×8、16×16、32×32或64×64, 然后执行以下步骤:
[0093] ②_6a、将当前解析块中正在处理的编码单元定义为当前编码单元。
[0094] ②_6b、假设当前编码单元为 则如果当前编码单元对应的编码模式 为帧内编码模式,那么执行步骤②_6i;如果当前编码单元对应的编码模式 为单深度帧内编码模式,那么执行步骤②_6c。
[0095] ②_6c、按照单深度帧内编码模式的编码原理,构建当前编码单元对应的编码模式的像素值候选列表,记为 中包含2个像素值,将第1个像素值记为 将第2个像素值记为 其中, 并从密钥E中读取第j个比特的值ej,其
中,1≤j≤n,j的初始值为1;然后执行步骤②_6d。
[0096] ②_6d、判断 与 是否相等,如果两者相等,则执行步骤②_6e;否则,执行步骤②_6f。
[0097] ②_6e、如果ej为1,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令j=j+1,令i=i+1,再执行步骤②_6i;如果ej为0,则令j=j+1,再执行步骤②_6i;其中,1≤i≤n,i的初始值为1, 为0或1,j=j+1和i=i+1中的“=”为赋值符号。
[0098] 在此具体实施例中,步骤②_6e中的解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值 的具体过程为:将当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值记为 则有
[0099] ②_6f、解析当前编码单元的深度depth,如果depth为2或3,则执行步骤②_6g;如果depth为0或1,则执行步骤②_6i;其中,depth∈{0,1,2,3}。
[0100] ②_6g、判断当前编码单元的右相邻编码单元或下相邻编码单元的编码模式是否为单深度帧内编码模式,如果是,则执行步骤②_6i;否则,执行步骤②_6h;其中,当前编码单元的右相邻编码单元为位于当前编码单元的右侧且与当前编码单元相邻的编码单元,当前编码单元的下相邻编码单元为位于当前编码单元的下侧且与当前编码单元相邻的编码单元。
[0101] ②_6h、判断当前编码单元的右上相邻编码单元、右相邻编码单元、右下相邻编码单元、左下相邻编码单元和下相邻编码单元各自的预测模式是否属于各自相应的模式范围,如果都不满足,则解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值,记为 至此已完成当前编码单元的隐秘信息提取过程,然后令i=i+1,再执行步骤②_6i;否则,执行步骤②_6i;其中,当前编码单元的右上相邻编码单元为位于当前编码单元的右上侧且与当前编码单元相邻的编码单元,当前编码单元的右下相邻编码单元为位于当前编码单元的右下侧且与当前编码单元相邻的编码单元,当前编码单元的左下相邻编码单元为位于当前编码单元的左下侧且与当前编码单元相邻的编码单元。
[0102] 在此具体实施例中,步骤②_6h中的当前编码单元的右上相邻编码单元相应的模式范围为由数字标识为0及2至10的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的右相邻编码单元相应的模式范围为由数字标识为0及1至25的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的右下相邻编码单元相应的模式范围为由数字标识为0、1及11至25的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的左下相邻编码单元相应的模式范围为由数字标识为0及26至34的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合;当前编码单元的下相邻编码单元相应的模式范围为由数字标识为0、1及11至34的预测模式构成的预测模式集合或由DMM(Depth modeling modes)模式构成的预测模式集合。
[0103] 在此具体实施例中,步骤②_6h中的解析当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值,得到第i个加密信息比特值 的具体过程为:将当前编码单元对应的编码模式 的像素值的嵌入隐秘信息后的索引值记为 则有
[0104] ②_6i、将当前解析块中下一个待处理的编码单元作为当前编码单元,然后返回步骤②_6b继续执行,直至当前解析块中的所有编码单元均处理完毕,再执行步骤②_7。
[0105] ②_7、将当前帧中下一个待解析的编码树单元作为当前解析块,然后返回步骤②_6继续执行,直至当前帧中的所有编码树单元均处理完毕,再执行步骤②_8。
[0106] ②_8、将目标视频流str.bindec中下一帧待解析的帧作为当前帧,然后返回步骤②_4继续执行,直至目标视频流str.bindec中的所有帧均处理完毕,完成隐秘信息提取。
[0107] ②_9、将得到的n个加密信息比特值构成加密信息,记为然后对 中的每个加密信息比特值与E中的每个比特的
值一一对应进行异或,得到解密的隐秘信息,记为 其中,
和 对应表示得到的第1个加密信息比特值、第2个加密信息比特值、第i
个加密信息比特值、第n-1个加密信息比特值和第n个加密信息比特值,
和 为0或1, 和 对应表示 中的第1个比特的值、第2个比特的值、第i
个比特的值、第n-1个比特的值和第n个比特的值, 和 为0或1。
[0108] 为验证本发明方法的有效性和可行性,对本发明方法进行试验。
[0109] 采用的测试序列为Balloons立体视频序列的3视点和5视点、Newspaper立体视频序列的2视点和4视点、Kendo立体视频序列的3视点和5视点、Shark立体视频序列的1视点和9视点、PoznanStreet立体视频序列的3视点和5视点、UndoDancer立体视频序列的1视点和9视点,前三个立体视频序列的分辨率为1024×768,后三个立体视频序列的分辨率为1920×
1088。测试软件为3D-HEVC标准的编码平台HTM13.0,使用All-intra配置文件,编码100帧,彩色视频编码的QP值为25、30、35、40,相应的深度视频编码的QP值为34、39、42、45,其他配置参数为平台默认值。下面分别从嵌入容量、比特率变化、立体视频序列的不可感知性等方面评价本发明方法的性能。
[0110] 1)嵌入容量和比特率变化
[0111] 嵌入容量和比特率变化是信息隐藏方法的主要性能指标。表1给出了针对Balloons立体视频序列、Newspaper立体视频序列、Kendo立体视频序列、Shark立体视频序列、PoznanStreet立体视频序列、UndoDancer立体视频序列,本发明方法的嵌入容量和比特率变化率的测试结果,表1中嵌入容量给出的是所有深度图像的嵌入容量的均值,比特率变化率BRI的定义如下: 其中,Rpro表示经本发明方法处理后视频编码
的码率,Rorg表示原始视频编码的码率。
[0112] 嵌入容量与立体视频序列的分辨率和编码的QP值有关。分辨率与嵌入容量成正比,编码的QP值与嵌入容量成反比。分辨率越大说明编码单元的数量越多,可嵌入的载体多;增大QP的值对编码单元的编码模式的率失真影响较大,影响最优分割模式的选择。从表1中可以看出,所有编码的QP值下平均每帧深度图像的嵌入容量为244bit,信息嵌入前后立体视频序列的比特率变化率在0.03%~0.25%,平均变化率为0.12%,说明本发明方法提供的嵌入容量较大,对比特率影响较小。
[0113] 表1本发明方法的嵌入容量和比特率变化率的测试结果
[0114]
[0115] 2)立体视频序列的不可感知性
[0116] 立体视频的不可感知性也是立体视频信息隐藏方法的一个性能指标,即嵌入信息前后立体视频的质量无明显下降。由于深度视频并不直接用于用户观看,而是用来绘制虚拟视点,因此嵌入信息后深度视频的质量变化可以通过绘制视点的质量来体现。选取Balloons立体视频序列、Newspaper立体视频序列和Shark立体视频序列来进行说明。图2a给出了原始的Balloons立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的4视点的第1帧图像;图2b给出了原始的Newspaper立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的3视点的第1帧图像;图2c给出了原始的Shark立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的5视点的第1帧图像;图2d给出了原始的Balloons立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的4视点的第1帧图像;图2e给出了原始的Newspaper立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的3视点的第1帧图像;图2f给出了原始的Shark立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的5视点的第1帧图像。比较图2a与图2d、比较图2b与图2e、比较图2c与图2f,可以看出隐秘信息嵌入前后绘制视点的质量并无明显失真,说明本发明方法的立体视频不可感知性较好。
[0117] 嵌入隐秘信息前后立体视频的质量变化除了从主观上进行观察外,还可以从客观指标上考虑,这里主要从峰值信噪比(Peak Signal-Noise-Ratio,PSNR)和结构相似度(Structural similarity index,SSIM)两个指标入手。表2给出了原始的Balloons立体视频序列、原始的Newspaper立体视频序列、原始的Kendo立体视频序列、原始的Shark立体视频序列、原始的PoznanStreet立体视频序列、原始的UndoDancer立体视频序列分别压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的视点质量,及原始的Balloons立体视频序列、原始的Newspaper立体视频序列、原始的Kendo立体视频序列、原始的Shark立体视频序列、原始的PoznanStreet立体视频序列、原始的UndoDancer立体视频序列分别压缩编码生成视频流,视频流解码得到的立体视频序列绘制的视点质量。表2中嵌入隐秘信息前后PSNR和SSIM的变化量ΔPSNR和ΔSSIM的计算公式为:ΔPSNR=PSNRpro-PSNRorg,ΔSSIM=SSIMpro-SSIMorg,其中,PSNRpro表示生成的视频流经本发明方法处理后解码得到的立体视频序列绘制的视点与原始视点之间的PSNR,SSIMpro表示生成的视频流经本发明方法处理后解码得到的立体视频序列绘制的视点与原始视点之间的SSIM,PSNRorg表示生成的视频流解码得到的立体视频序列绘制的视点与原始视点之间的PSNR,和SSIMorg表示生成的视频流解码得到的立体视频序列绘制的视点与原始视点之间的SSIM,本试验中通过ΔPSNR和ΔSSIM的大小来进行立体视频不可感知性的说明。
[0118] 从表2中可以看出,不同的QP值编码立体视频序列,解码重建后得到的立体视频序列所绘制的视点质量不同,QP值越大,绘制的视点质量越差,主要是因为增大QP值,对深度视频的压缩程度越大,失真较大,因此绘制的视点质量也会下降。嵌入隐秘信息前后的视频流解码得到的立体视频序列绘制的视点质量的PSNR的绝对值差异范围在0~0.0139dB,经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量的PSNR值比未经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量的PSNR值平均下降了0.00141dB,说明本发明方法对绘制的视点质量影响轻微。由于有时候PSNR值与人的主观感受不一致,所以表2也给出了SSIM值,经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量的SSIM值比未经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量的SSIM值平均下降了0.000006,从而进一步说明了本发明方法对立体视频的不可感知性较好,这主要是因为本发明方法在编码模式为单深度帧内编码模式的编码单元的编码模式的像素值候选列表中的元素相同的情况下,利用隐秘信息调制像素值候选列表中的像素值的索引值,不会对该编码单元造成任何失真;而在像素值候选列表中的元素不同的情况下,由于考虑了误差漂移问题,因此本发明方法也只会对当前的编码单元产生失真。
[0119] 表2经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量与未经本发明方法处理后的视频流解码得到的立体视频序列绘制的视点质量
[0120]

附图说明

[0053] 图1a为本发明方法的信息嵌入部分的总体实现框图;
[0054] 图1b为本发明方法的信息提取部分的总体实现框图;
[0055] 图2a为原始的Balloons立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的4视点的第1帧图像;
[0056] 图2b为原始的Newspaper立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的3视点的第1帧图像;
[0057] 图2c为原始的Shark立体视频序列压缩编码生成视频流,视频流解码得到的立体视频序列绘制的5视点的第1帧图像;
[0058] 图2d为原始的Balloons立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的4视点的第1帧图像;
[0059] 图2e为原始的Newspaper立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的3视点的第1帧图像;
[0060] 图2f为原始的Shark立体视频序列压缩编码生成视频流,视频流经本发明方法处理后解码得到的立体视频序列绘制的5视点的第1帧图像。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号