【发明授权】视频播放方法、装置及电子装置_OPPO广东移动通信有限公司_201710812084.2 

申请/专利权人:OPPO广东移动通信有限公司

申请日:2017-09-11

发明/设计人:张学勇

公开(公告)日:2021-01-12

代理机构:深圳市智圈知识产权代理事务所(普通合伙)

公开(公告)号:CN107734385B

代理人:谭逢

主分类号:H04N21/44(20110101)

地址:523860 广东省东莞市长安镇乌沙海滨路18号

分类号:H04N21/44(20110101);H04N21/442(20110101);G06T7/50(20170101);G06T7/70(20170101)

优先权:

专利状态码:有效-授权

法律状态:2021.01.12#授权;2019.07.30#著录事项变更;2018.03.20#实质审查的生效;2018.02.23#公开

摘要:本发明公开了一种视频播放方法、装置及电子装置,其中方法包括:通过获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像;根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;获取当前用户的多帧深度图像;根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离;在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频,从而根据用户的情况个性化地提供具有合适内容的动态视频,提高动态视频的播放效率,提高用户的动态视频观看体验。

主权项:1.一种视频播放方法,其特征在于,包括:获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;获取当前用户的多帧深度图像,所述当前用户为当前观看所述动态物体的所述动态视频的用户;根据所述当前用户的多帧深度图像,确定所述当前用户相对于用户起点的移动方向和移动距离,根据所述动态视频各帧图像中动态物体的深度数据,确定所述动态物体相对于动态物体起点的移动方向和移动距离,根据所述当前用户相对于用户起点的移动方向和移动距离、所述动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定所述当前用户与所述动态物体之间的距离;在所述距离小于等于预设的距离阈值时,查询预存的数据库,获取与所述距离阈值匹配的所述动态物体执行相应动作的视频,并播放与所述距离阈值匹配的所述视频。

全文数据:视频播放方法、装置及电子装置技术领域[0001]本发明涉及图像处理技术领域,特别涉及一种视频播放方法、装置及电子装置。背景技术[0002]现有的视频播放方法,需要用户点击相应的视频文件进行播放,或者拖拽播放进度条来控制视频文件的播放位置,无法根据用户的情况个性化地提供合适内容的动态视频,降低动态视频播放效率,影响动态视频观看效果,影响用户的动态视频观看体验。发明内容[0003]本发明的实施例提供了一种视频播放方法、装置及电子装置。[0004]本发明实施方式的视频播放方法包括:[0005]获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;[0006]根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;[0007]获取当前用户的多帧深度图像;[0008]根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离;[0009]在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频。[0010]本发明实施方式的视频播放装置,包括深度图像采集组件和处理器。所述处理器用于,获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;所述深度图像采集组件用于获取当前用户的多帧深度图像;所述处理器还用于,根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离;在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频。[0011]本发明实施方式的电子装置包括一个或多个处理器、存储器和一个或多个程序。其中所述一个或多个程序被存储在所述存储器中,并且被配置成由所述一个或多个处理器执行,所述程序包括用于执行上述的视频播放方法的指令。[0012]本发明实施方式的计算机可读存储介质包括与能够摄像的电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成上述的视频播放方法。[0013]本发明实施方式的视频播放方法、视频播放装置、电子装置和计算机可读存储介质通过获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像;根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;获取当前用户的多帧深度图像;根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离;在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频,从而根据用户的情况个性化地提供具有合适内容的动态视频,提高动态视频的播放效率,提高用户的动态视频观看体验。[0014]本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。附图说明[0015]本发明上述的和或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:[0016]图1是本发明某些实施方式的视频播放方法的流程示意图。[0017]图2是本发明某些实施方式的视频播放装置的模块示意图。[0018]图3是本发明某些实施方式的电子装置的结构示意图。[0019]图4是本发明某些实施方式的视频播放方法的流程示意图。[0020]图5是本发明某些实施方式的视频播放方法的流程示意图。[0021]图6a至图6e是根据本发明一个实施例的结构光测量的场景示意图。[0022]图7a和图7⑹根据本发明一个实施例的结构光测量的场景示意图。[0023]图8是本发明某些实施方式的视频播放方法的流程示意图。[0024]图9是本发明某些实施方式的电子装置的模块示意图。[0025]图10是本发明某些实施方式的电子装置的模块示意图。具体实施方式[0026]下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。[0027]请一并参阅图1至2,本发明实施方式的视频播放方法用于电子装置1000。视频播放方法包括:[0028]SI01、获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像。[0029]S102、根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据。[0030]S103、获取当前用户的多帧深度图像。[0031]S104、根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离。[0032]S105、在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频。[0033]请参阅图3,本发明实施方式的视频播放方法可以由本发明实施方式的视频播放装置100实现。本发明实施方式的视频播放装置100用于电子装置1000。视频播放装置100包括深度图像采集组件12和处理器20。本实施例中,步骤101、步骤102、步骤104、步骤105可以由处理器20实现,步骤103可以由深度图像采集组件12实现。另外,视频播放装置100还可以包括可见光摄像头11,用于获取3D背景中动态物体的动态视频。[0034]也就是说,处理器20可用于获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像;根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;深度图像采集组件12可用于获取当前用户的多帧深度图像;处理器20还可用于根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离;在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频。[0035]本实施例中,3D背景中可以设置有一个或者多个动态物体的动态视频,视频播放装置可以获取一个或者多个动态视频各帧图像中动态物体的深度数据,根据一个或者多个动态视频中动态物体的深度数据以及当前用户的多帧深度图像,确定当前用户与动态物体之间的距离,进而确定要播放的视频。[0036]本实施例中,步骤102具体可以包括:对动态视频中的各帧图像进行识别,获取各帧图像中的动态物体区域;从各帧图像对应的深度图像中获取与动态物体区域对应的深度数据。[0037]具体的,视频播放装置可以获取动态视频中的各帧图像,对每帧图像进行识别,获取每帧图片中的特征点,将每帧图片中的特征点与预存的动态物体的特征点进行比对,获取每帧图片中动态物体所在的区域,根据动态物体所在的区域从对应的深度图像中获取动态物体的深度数据。[0038]本实施例中,预设的距离阈值的数量为至少一个。对应的,步骤105具体可以包括:在距离小于等于预设的距离阈值时,查询预存的数据库,获取与距离阈值匹配的动态物体执行相应动作和或发出相应声音的视频;播放与距离阈值匹配的视频。[0039]例如,假设动态物体为猫,在当前用户与猫之间的距离小于等于第一距离阈值时,播放猫静止不动,看向当前用户方位的视频;或者,播放猫摇尾巴的视频。在当前用户与猫之间的距离小于等于第二距离阈值时,播放猫开始叫并逃跑的视频。其中,第二距离阈值小于第一距离阈值。[0040]另外,还需要进行说明的是,本实施例中,视频播放装置可以结合当前用户与动态物体之间的距离,以及该距离的变化情况来确定动态物体待执行的动作和或待发出的声音,并获取对应的视频进行播放。例如,在当前用户与猫之间的距离逐渐减小并减小至第二距离阈值时,播放猫开始叫并逃跑的视频;在当前用户与猫之间的距离逐渐增大并增大至第一距离阈值时,可以播放猫停止逃跑并转头看向当前用户所在方位的视频。[0041]本发明实施方式的视频播放装置100可以应用于本发明实施方式的电子装置1000。也即是说,本发明实施方式的电子装置1000包括本发明实施方式的视频播放装置IOOo[0042]在某些实施方式中,电子装置1000包括手机、平板电脑、笔记本电脑、智能手环、智能手表、智能头盔、智能眼镜等。[0043]本发明实施方式的视频播放方法,通过获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像;根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;获取当前用户的多帧深度图像;根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离;在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频,从而根据用户的情况个性化地提供具有合适内容的动态视频,提高动态视频的播放效率,提高用户的动态视频观看体验。[0044]请参阅图4,在某些实施方式中,步骤103具体可以包括以下步骤:[0045]S1031、向当前用户投射结构光。[0046]Sl032、拍摄经当前用户调制的多帧结构光图像。[0047]S1033、解调多帧结构光图像的各个像素对应的相位信息以得到多帧深度图像。[0048]请再参阅图3,在某些实施方式中,深度图像采集组件12包括结构光投射器121和结构光摄像头122。步骤1031可以由结构光投射器121实现,步骤1032和步骤1033可以由结构光摄像头122实现。[0049]也即是说,结构光投射器121可用于向当前用户投射结构光;结构光摄像头122可用于拍摄经当前用户调制的多帧结构光图像;解调多帧结构光图像的各个像素对应的相位信息以得到多帧深度图像。[0050]具体地,结构光投射器121将一定模式的结构光投射到当前用户的面部或躯体上后,在当前用户的面部或躯体的表面会形成由当前用户调制后的结构光图像。结构光摄像头122拍摄经调制后的结构光图像,再对结构光图像进行解调以得到深度图像。其中,结构光的模式可以是激光条纹、格雷码、正弦条纹、非均匀散斑等。[0051]请参阅图5,在某些实施方式中,步骤1033解调多帧结构光图像的各个像素对应的相位信息以得到多帧深度图像的过程具体可以包括以下步骤:[0052]S10331、针对多帧结构光图像中的各帧结构光图像,解调结构光图像中各个像素对应的相位信息。[0053]S10332、将相位信息转化为深度信息。[0054]S10333、根据深度信息生成深度图像。[0055]请再参阅图2,在某些实施方式中,步骤10331、步骤10332和步骤10333均可以由结构光摄像头122实现。[0056]也即是说,结构光摄像头122可进一步用于针对多帧结构光图像中的各帧结构光图像,解调结构光图像中各个像素对应的相位信息;将相位信息转化为深度信息;以及根据深度信息生成深度图像。[0057]具体地,与未经调制的结构光相比,调制后的结构光的相位信息发生了变化,在结构光图像中呈现出的结构光是产生了畸变之后的结构光,其中,变化的相位信息即可表征物体的深度信息。因此,结构光摄像头122首先解调出结构光图像中各个像素对应的相位信息,再根据相位信息计算出深度信息,从而得到最终的深度图像。[0058]为了使本领域的技术人员更加清楚的了解根据结构光来采集当前用户的面部或躯体的深度图像的过程,下面以一种应用广泛的光栅投影技术条纹投影技术为例来阐述其具体原理。其中,光栅投影技术属于广义上的面结构光。[0059]如图6a所示,在使用面结构光投影的时候,首先通过计算机编程产生正弦条纹,并将正弦条纹通过结构光投射器121投射至被测物,再利用结构光摄像头122拍摄条纹受物体调制后的弯曲程度,随后解调该弯曲条纹得到相位,再将相位转化为深度信息即可获取深度图像。为避免产生误差或误差耦合的问题,使用结构光进行深度信息采集前需对深度图像采集组件12进行参数标定,标定包括几何参数例如,结构光摄像头122与结构光投射器121之间的相对位置参数等)的标定、结构光摄像头122的内部参数以及结构光投射器121的内部参数的标定等。[0060]具体而言,第一步,计算机编程产生正弦条纹。由于后续需要利用畸变的条纹获取相位,比如采用四步移相法获取相位,因此这里产生四幅相位差为f的条纹,然后结构光投射器121将该四幅条纹分时投射到被测物(图6a所示的面具上,结构光摄像头122采集到如图6b左边的图,同时要读取如图6b右边所示的参考面的条纹。[0061]第二步,进行相位恢复。结构光摄像头122根据采集到的四幅受调制的条纹图(BP结构光图像计算出被调制相位,此时得到的相位图是截断相位图。因为四步移相算法得到的结果是由反正切函数计算所得,因此结构光调制后的相位被限制在[-π,θ之间,也就是说,每当调制后的相位超过[π3],其又会重新开始。最终得到的相位主值如图6c所示。[0062]其中,在进行相位恢复过程中,需要进行消跳变处理,即将截断相位恢复为连续相位。如图6⑹所示,左边为受调制的连续相位图,右边是参考连续相位图。[0063]第三步,将受调制的连续相位和参考连续相位相减得到相位差(即相位信息),该相位差表征了被测物相对参考面的深度信息,再将相位差代入相位与深度的转化公式公式中涉及到的参数经过标定),即可得到如图6e所示的待测物体的三维模型。[0064]应当理解的是,在实际应用中,根据具体应用场景的不同,本发明实施例中所采用的结构光除了上述光栅之外,还可以是其他任意图案。[0065]作为一种可能的实现方式,本发明还可使用散斑结构光进行当前用户的深度信息的米集。[0066]具体地,散斑结构光获取深度信息的方法是使用一基本为平板的衍射元件,该衍射元件具有特定相位分布的浮雕衍射结构,横截面为具有两个或多个凹凸的台阶浮雕结构。衍射元件中基片的厚度大致为1微米,各个台阶的高度不均匀,高度的取值范围可为0.7微米〜0.9微米。图7a所示结构为本实施例的准直分束元件的局部衍射结构。图7〇3为沿截面A-A的剖面侧视图,横坐标和纵坐标的单位均为微米。散斑结构光生成的散斑图案具有高度的随机性,并且会随着距离的不同而变换图案。因此,在使用散斑结构光获取深度信息前,首先需要标定出空间中的散斑图案,例如,在距离结构光摄像头122的0〜4米的范围内,每隔1厘米取一个参考平面,则标定完毕后就保存了400幅散斑图像,标定的间距越小,获取的深度信息的精度越高。随后,结构光投射器121将散斑结构光投射到被测物(即当前用户)上,被测物表面的高度差使得投射到被测物上的散斑结构光的散斑图案发生变化。结构光摄像头122拍摄投射到被测物上的散斑图案(即结构光图像后,再将散斑图案与前期标定后保存的400幅散斑图像逐一进行互相关运算,进而得到400幅相关度图像。空间中被测物体所在的位置会在相关度图像上显示出峰值,把上述峰值叠加在一起并经过插值运算后即可得到被测物的深度信息。[0067]由于普通的衍射元件对光束进行衍射后得到多数衍射光,但每束衍射光光强差别大,对人眼伤害的风险也大。即便是对衍射光进行二次衍射,得到的光束的均匀性也较低。因此,利用普通衍射元件衍射的光束对被测物进行投射的效果较差。本实施例中采用准直分束元件,该元件不仅具有对非准直光束进行准直的作用,还具有分光的作用,即经反射镜反射的非准直光经过准直分束元件后往不同的角度出射多束准直光束,且出射的多束准直光束的截面面积近似相等,能量通量近似相等,进而使得利用该光束衍射后的散点光进行投射的效果更好。同时,激光出射光分散至每一束光,进一步降低了伤害人眼的风险,且散斑结构光相对于其他排布均匀的结构光来说,达到同样的采集效果时,散斑结构光消耗的电量更低。[0068]请参阅图8,在某些实施方式中,步骤104根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离的步骤具体可以包括:[0069]S1041、根据当前用户的多帧深度图像,确定当前用户相对于用户起点的移动方向和移动距离。[0070]S1042、根据动态视频各帧图像中动态物体的深度数据,确定动态物体相对于动态物体起点的移动方向和移动距离。[0071]S1043、根据当前用户相对于用户起点的移动方向和移动距离、动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定当前用户与动态物体之间的距离。[0072]请再参阅图2,在某些实施方式中,步骤1041、步骤1042和步骤1043均可以由处理器20实现。[0073]也即是说,处理器20可进一步用于根据当前用户的多帧深度图像,确定当前用户相对于用户起点的移动方向和移动距离;根据动态视频各帧图像中动态物体的深度数据,确定动态物体相对于动态物体起点的移动方向和移动距离;根据当前用户相对于用户起点的移动方向和移动距离、动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定当前用户与动态物体之间的距离。[0074]具体的,处理器20可以根据当前用户的多帧深度图像,确定多帧深度图像中,当前用户相对于深度图像采集组件,或者相对于其他参照物的位置信息;根据各帧深度图像中当前用户的位置信息,确定当前用户相对于用户起点的移动方向和移动距离。处理器20还可以根据动态视频各帧图像中动态物体的深度数据,确定动态物体相对于深度图像采集组件,或者相对于其他参照物的位置信息;根据动态物体的位置信息,确定动态物体相对于动态物体起点的移动方向和移动距离。进而根据当前用户相对于用户起点的移动方向和移动距离、动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定用户与动态物体之间的距离,以便与预设的距离阈值进行比较。[0075]请一并参阅图3和图9,本发明实施方式还提出一种电子装置1000。电子装置1000包括视频播放装置100。视频播放装置100可以利用硬件和或软件实现。视频播放装置100包括成像设备10和处理器20。[0076]成像设备10包括可见光摄像头11和深度图像采集组件12。[0077]具体地,可见光摄像头11包括图像传感器111和透镜112。其中,图像传感器111包括彩色滤镜阵列如Bayer滤镜阵列),透镜112的个数可为一个或多个。图像传感器111中的每一个成像像素感应来自拍摄场景中的光强度和波长信息,生成一组原始图像数据;图像传感器111将该组原始图像数据发送至处理器20中,处理器20对原始图像数据进行去噪、插值等运算后即得到彩色的图像;处理器20可按多种格式对原始图像数据中的每个图像像素逐一处理,例如,每个图像像素可具有8、10、12或14比特的位深度,处理器20可按相同或不同的位深度对每一个图像像素进行处理。[0078]深度图像采集组件12包括结构光投射器121和结构光摄像头122,深度图像采集组件12可用于捕捉当前用户的深度信息以得到深度图像。结构光投射器121用于将结构光投射至当前用户,其中,结构光图案可以是激光条纹、格雷码、正弦条纹或者随机排列的散斑图案等。结构光摄像头122包括图像传感器1221和透镜1222,透镜1222的个数可为一个或多个。图像传感器1221用于捕捉结构光投射器121投射至当前用户上的结构光图像。结构光图像可由深度采集组件12发送至处理器20进行解调、相位恢复、相位信息计算等处理以获取当前用户的深度信息。[0079]在某些实施方式中,可见光摄像头11与结构光摄像头122的功能可由一个摄像头实现,也即是说,成像设备10仅包括一个摄像头和一个结构光投射器121,上述摄像头不仅可以拍摄原始图像,还可拍摄结构光图像。[0080]除了采用结构光获取深度图像外,还可通过双目视觉方法、基于飞行时间差TimeofFlight,T0F等深度像获取方法来获取当前用户的深度图像。[0081]处理器20进一步用于获取3D背景中动态物体的动态视频,以及动态视频对应的多帧深度图像;根据多帧深度图像,对动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;根据当前用户的多帧深度图像以及动态视频各帧图像中动态物体的深度数据,确定当前用户与动态物体之间的距离;在距离小于等于预设的距离阈值时,获取动态物体执行相应动作和或发出相应声音的视频,并播放视频。[0082]此外,视频播放装置100还包括图像存储器30。图像存储器30可内嵌在电子装置1000中,也可以是独立于电子装置1000外的存储器,并可包括直接存储器存取(DirectMemoryAccess,DMA特征。可见光摄像头11采集的图像数据或深度图像采集组件12采集的结构光图像相关数据均可传送至图像存储器30中进行存储或缓存。处理器20可从图像存储器30中读取原始图像数据,也可从图像存储器30中读取结构光图像相关数据以进行处理得到深度图像。另外,图像数据和深度图像还可存储在图像存储器30中,以供处理器20随时调用处理。[0083]视频播放装置100还可包括显示器50。显示器50可直接显示动态物体执行相应动作和或发出相应声音的视频以供用户观看,或者由图形引擎或图形处理器(GraphicsProcessingUnit,GPU进行进一步的处理。视频播放装置100还包括编码器解码器60,编码器解码器60可编解码深度图像等的图像数据,编码的图像数据可被保存在图像存储器30中,并可以在图像显示在显示器50上之前由解码器解压缩以进行显示。编码器解码器60可由中央处理器CentralProcessingUnit,CPU、GPU或协处理器实现。换言之,编码器解码器60可以是中央处理器CentralProcessingUnit,CPU、GPU、及协处理器中的任意一种或多种。[0084]视频播放装置100还包括控制逻辑器40。成像设备10在成像时,处理器20会根据成像设备获取的数据进行分析以确定成像设备10的一个或多个控制参数例如,曝光时间等)的图像统计信息。处理器20将图像统计信息发送至控制逻辑器40,控制逻辑器40控制成像设备10以确定好的控制参数进行成像。控制逻辑器40可包括执行一个或多个例程如固件)的处理器和或微控制器。一个或多个例程可根据接收的图像统计信息确定成像设备10的控制参数。[0085]请参阅图10,本发明实施方式的电子装置1000包括一个或多个处理器200、存储器300和一个或多个程序310。其中一个或多个程序310被存储在存储器300中,并且被配置成由一个或多个处理器200执行。程序310包括用于执行上述任意一项实施方式的视频播放方法的指令。[0086]例如,程序310包括用于执行以下步骤所述的视频播放方法的指令:[0087]获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;[0088]根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;[0089]获取当前用户的多帧深度图像;[0090]根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离;[0091]在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频。[0092]再例如,程序310还包括用于执行以下步骤所述的视频播放方法的指令:[0093]向所述当前用户投射结构光;[0094]拍摄经所述当前用户调制的多帧结构光图像;[0095]解调所述多帧结构光图像的各个像素对应的相位信息以得到所述多帧深度图像。[0096]本发明实施方式的计算机可读存储介质包括与能够摄像的电子装置1000结合使用的计算机程序。计算机程序可被处理器200执行以完成上述任意一项实施方式的视频播放方法。[0097]例如,计算机程序可被处理器200执行以完成以下步骤所述的视频播放方法:[0098]针对所述多帧结构光图像中的各帧结构光图像,解调所述结构光图像中各个像素对应的相位信息;[0099]将所述相位信息转化为深度信息;和[0100]根据所述深度信息生成所述深度图像。[0101]再例如,计算机程序还可被处理器200执行以完成以下步骤所述的视频播放方法;[0102]根据所述当前用户的多帧深度图像,确定所述当前用户相对于用户起点的移动方向和移动距离;[0103]根据所述动态视频各帧图像中动态物体的深度数据,确定所述动态物体相对于动态物体起点的移动方向和移动距离;[0104]根据所述当前用户相对于用户起点的移动方向和移动距离、所述动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定所述当前用户与所述动态物体之间的距离。[0105]在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。[0106]此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。[0107]流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。[0108]在流程图中表示或在此以其他方式描述的逻辑和或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM,只读存储器ROM,可擦除可编辑只读存储器EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器CDROM。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。[0109]应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列PGA,现场可编程门阵列FPGA等。[0110]本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。[0111]此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。[0112]上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

权利要求:1.一种视频播放方法,其特征在于,包括:获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;获取当前用户的多帧深度图像;根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离;在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频。2.根据权利要求1所述的方法,其特征在于,所述获取所述当前用户的多帧深度图像,包括:向所述当前用户投射结构光;拍摄经所述当前用户调制的多帧结构光图像;解调所述多帧结构光图像的各个像素对应的相位信息以得到所述多帧深度图像。3.根据权利要求2所述的方法,其特征在于,所述解调所述多帧结构光图像的各个像素对应的相位信息以得到所述多帧深度图像,包括:针对所述多帧结构光图像中的各帧结构光图像,解调所述结构光图像中各个像素对应的相位信息;将所述相位信息转化为深度信息;和根据所述深度信息生成所述深度图像。4.根据权利要求1所述的方法,其特征在于,所述根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据,包括:对所述动态视频中的各帧图像进行识别,获取各帧图像中的动态物体区域;从各帧图像对应的深度图像中获取与所述动态物体区域对应的深度数据。5.根据权利要求1所述的方法,其特征在于,所述根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离,包括:根据所述当前用户的多帧深度图像,确定所述当前用户相对于用户起点的移动方向和移动距离;根据所述动态视频各帧图像中动态物体的深度数据,确定所述动态物体相对于动态物体起点的移动方向和移动距离;根据所述当前用户相对于用户起点的移动方向和移动距离、所述动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定所述当前用户与所述动态物体之间的距离。6.根据权利要求1所述的方法,其特征在于,所述预设的距离阈值的数量为至少一个;所述在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频,包括:在所述距离小于等于预设的距离阈值时,查询预存的数据库,获取与所述距离阈值匹配的动态物体执行相应动作和或发出相应声音的视频;播放与所述距离阈值匹配的视频。7.—种视频播放装置,其特征在于,包括:处理器,所述处理器用于,获取3D背景中动态物体的动态视频,以及所述动态视频对应的多帧深度图像;根据所述多帧深度图像,对所述动态视频中的各帧图像进行处理,获取各帧图像中动态物体的深度数据;深度图像采集组件,所述深度图像采集组件用于获取当前用户的多帧深度图像;所述处理器还用于,根据所述当前用户的多帧深度图像以及所述动态视频各帧图像中动态物体的深度数据,确定所述当前用户与所述动态物体之间的距离;在所述距离小于等于预设的距离阈值时,获取所述动态物体执行相应动作和或发出相应声音的视频,并播放所述视频。8.根据权利要求7所述的装置,其特征在于,所述深度图像采集组件包括结构光投射器和结构光摄像头,所述结构光投射器用于向所述当前用户投射结构光;所述结构光摄像头用于,拍摄经所述当前用户调制的多帧结构光图像;解调所述多帧结构光图像的各个像素对应的相位信息以得到所述多帧深度图像。9.根据权利要求8所述的装置,其特征在于,所述结构光摄像头还用于,针对所述多帧结构光图像中的各帧结构光图像,解调所述结构光图像中各个像素对应的相位信息;将所述相位信息转化为深度信息;和根据所述深度信息生成所述深度图像。10.根据权利要求7所述的装置,其特征在于,所述处理器还用于,对所述动态视频中的各帧图像进行识别,获取各帧图像中的动态物体区域;从各帧图像对应的深度图像中获取与所述动态物体区域对应的深度数据。11.根据权利要求7所述的装置,其特征在于,所述处理器还用于,根据所述当前用户的多帧深度图像,确定所述当前用户相对于用户起点的移动方向和移动距离;根据所述动态视频各帧图像中动态物体的深度数据,确定所述动态物体相对于动态物体起点的移动方向和移动距离;根据所述当前用户相对于用户起点的移动方向和移动距离、所述动态物体相对于动态物体起点的移动方向和移动距离,以及用户起点与动态物体起点之间的位置关系,确定所述当前用户与所述动态物体之间的距离。12.根据权利要求7所述的装置,其特征在于,所述预设的距离阈值的数量为至少一个;所述处理器还用于,所述在所述距离小于等于预设的距离阈值时,查询预存的数据库,获取与所述距离阈值匹配的动态物体执行相应动作和或发出相应声音的视频;播放与所述距离阈值匹配的视频。13.—种电子装置,其特征在于,所述电子装置包括:一个或多个处理器;存储器;和一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,并且被配置成由所述一个或多个处理器执行,所述程序包括用于执行权利要求1至6任意一项所述的视频播放方法的指令。14.一种计算机可读存储介质,其特征在于,包括与能够摄像的电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成权利要求1至6任意一项所述的视频播放方法。

百度查询: OPPO广东移动通信有限公司 视频播放方法、装置及电子装置