CN113473156B - 一种自由视点视频传输方法以及相关设备 - Google Patents
一种自由视点视频传输方法以及相关设备 Download PDFInfo
- Publication number
- CN113473156B CN113473156B CN202010333599.6A CN202010333599A CN113473156B CN 113473156 B CN113473156 B CN 113473156B CN 202010333599 A CN202010333599 A CN 202010333599A CN 113473156 B CN113473156 B CN 113473156B
- Authority
- CN
- China
- Prior art keywords
- target
- video
- view
- angle
- visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000005540 biological transmission Effects 0.000 title claims abstract description 27
- 230000000007 visual effect Effects 0.000 claims abstract description 204
- 238000004891 communication Methods 0.000 claims description 44
- 238000004590 computer program Methods 0.000 claims description 16
- 238000005516 engineering process Methods 0.000 claims description 11
- 230000008569 process Effects 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 22
- 230000006870 function Effects 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 8
- 230000004044 response Effects 0.000 description 7
- 230000003993 interaction Effects 0.000 description 5
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
- H04N21/43635—HDMI
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请公开了一种自由视点视频传输方法以及相关设备,用以向用户推送或下发自由视点视频,实现向用户提供可选择观看视角的自由视点观影服务。该方法包括:接收用户设备发送的包括对象标识以及视角信息的视频请求消息;从所述对象标识对应的目标对象的多个视角中,确定与所述视角信息匹配的目标视角;根据所述目标视角对应的视频,确定所述视角信息对应的目标视频;向所述用户设备发送所述目标视频。
Description
技术领域
本申请涉及通信领域,特别涉及一种自由视点视频传输方法以及相关设备。
背景技术
通过自由视点技术向用户直播多个相机同步采集的内容,还可以在交互模式下为用户提供360°观看视角中任一视角的内容。例如,在赛事直播场景中,用户可以通过自由视点技术,选择任意视角,观看赛事直播。由于,自由视点技术受到高性能的计算硬件设备的限制,用户设备无法接收及处理自由视角视频。因此,在现有自由视点技术应用场景中,缺少传输自由视角视频的解决方案。
发明内容
本申请示例性的实施方式中提供一种自由视点视频传输方法以及相关设备,用以向用户推送或下发自由视点的视角视频,实现向用户提供用户选择的观看视角的自由视点视频服务。
根据示例性的实施方式中的一方面,提供一种自由视点视频传输方法,包括:
接收用户设备发送的包括对象标识以及视角信息的视频请求消息;
从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角;
根据目标视角对应的视频,确定视角信息对应的目标视频;
向用户设备发送目标视频。
上述实施例中,网络设备基于用户设备发送的视频请求消息中的对象标识和视角信息,确定向用户设备发送的目标视频,并直接向用户设备发送目标视频,由于确定目标视频的过程发生在网络设备,仅需要网络设备具有高性能的计算处理能力,因而用户设备不需要具有高性能的计算处理能力,网络设备对自由视角视频进行处理,根据用户设备发送视频请求消息中视角信息,在网络设备直接将目标视频提供给用户,用户设备无需接收或处理全部自由视角视频,仅接收网络设备发送的目标视频,实现向用户提供其请求的目标视频。
在一些示例性的实施方式中,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,包括:
若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
上述实施例中,目标对象的多个视角为目标对象当前可以为用户提供视角视频的多个视角,若用户设备发送的视频请求消息中的视角信息对应的视角,为可以为用户提供视角视频的多个视角之一,将该视角作为目标视角,向用户发送目标视角对应的目标视频,也是向用户发送当前可以为用户提供视角视频中目标视角对应的视频,提升视频请求消息的响应速度。
在一些示例性的实施方式中,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,包括:
若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角;或
若多个视角中未包括视角信息对应的视角,则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
上述实施例中,目标对象的多个视角为目标对象当前可以为用户提供视角视频的多个视角,其中,不包括视频请求消息中的视角信息对应的视角时,可以确定与视频请求消息中的视角信息对应的视角差值最小的视角作为目标视角,向用户提供目标视角对应的视频,提升视频请求消息的响应速度。也可以与视角信息对应的角度的差值在预设范围的至少一个视角,作为目标视角,若目标视角数量为一个,向用户提供目标视角对应的视频,提升视频请求消息的响应速度,若目标视角数量不为一个,基于目标视角对应的视频为用户生成目标视频,实现向用户提供任一视角视频,提供自由视点服务。
在一些示例性的实施方式中,根据目标视角对应的视频,确定视角信息对应的目标视频,包括:
若目标视角为一个,则将目标视角对应的视频确定为目标视频;或
若目标视角为多个,则基于目标视角对应的视频,生成目标视频。
上述实施例中,向用户提供目标视角对应的视频,提升视频请求消息的响应速度,实现向用户提供任一视角视频,提供自由视点服务。
在一些示例性的实施方式中,方法还包括:
在生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
上述实施例中,由于网络设备侧目标对象的视角数量增多,可从目标对象的多个视角中匹配到用户请求的视角或者接近用户请求的视角,提升匹配速度,从而提升向响应用户设备视频请求消息的速度。
根据示例性的实施方式中的一方面,一种自由视点视频传输方法,方法包括:
向网络设备发送携带对象标识以及视角信息的视频请求消息;
接收目标视频;
展示目标视频;
其中,目标视频是网络设备根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
根据示例性的实施方式中的一方面,一种网络设备,网络设备包括通信单元、存储器和处理器;
存储器用于存储计算机程序或指令;
处理器用于执行存储器中的计算机程序或指令实现下列过程:
通过通信单元接收用户设备发送的包括对象标识以及视角信息的视频请求消息,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,并根据目标视角对应的视频,确定视角信息对应的目标视频;并通过通信单元向用户设备发送目标视频。
在一些示例性的实施方式中,处理器,具体用于:
若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
在一些示例性的实施方式中,处理器,具体用于:
若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角;或
若多个视角中未包括视角信息对应的视角,则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
在一些示例性的实施方式中,处理器,具体用于:
若目标视角为一个,则将目标视角对应的视频确定为目标视频;或
若目标视角为多个,则基于目标视角对应的视频,生成目标视频。
在一些示例性的实施方式中,处理器,还用于:生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
根据示例性的实施方式中的一方面,提供一种用户设备,所述用户设备包括通信单元和显示器;
通信单元,用于向网络设备发送携带对象标识以及视角信息的视频请求消息,以及接收目标视频;
显示器,用于显示通过通信单元接收的目标视频;
其中,目标视频是网络设备根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
根据示例性的实施方式中的一方面,提供一种用户设备,包括:
通信单元,用于向网络设备发送携带对象标识以及视角信息的视频请求消息,以及接收目标视频;
显示器,用于显示目标视频;
其中,目标视频是网络设备根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
根据示例性的实施方式中的一方面,提供一种视频传输装置,装置包括:
接收单元,用于接收用户设备发送的包括对象标识以及视角信息的视频请求消息;
处理单元,用于从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,以及根据目标视角对应的视频,确定视角信息对应的目标视频;
发送单元,用于向用户设备发送目标视频。
在一些示例性的实施方式中,处理单元,具体用于:
若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
在一些示例性的实施方式中,处理单元,具体用于:
若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角;或
若多个视角中未包括视角信息对应的视角,则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
在一些示例性的实施方式中,处理单元,具体用于:
若目标视角为一个,则将目标视角对应的视频确定为目标视频;或
若目标视角为多个,则基于目标视角对应的视频,生成目标视频。
在一些示例性的实施方式中,处理单元,具体用于:
在生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
根据示例性的实施方式中的一方面,提供一种视频传输装置,装置包括:
发送单元,用于向网络设备发送携带对象标识以及视角信息的视频请求消息;
处理单元,用于展示接收到的目标视频,其中,目标视频是网络设备根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
在符合本领域常识的基础上,上述各优选条件,可任意组合,即得本申请各较佳实施例。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示例性示出了本申请中网络设备和用户设备通信方式的示意图;
图2示例性示出的自由视角场景中采集设备与视角的示意图;
图3示例性示出了本发明实施例提供的一种网络设备的结构示意图;
图4示例性示出了本发明实施例提供的另一种网络设备的结构示意图;
图5示例性示出了本发明实施例提供的又一种网络设备的结构示意图;
图6示例性示出了本发明实施例提供的一种用户设备的结构示意图;
图7示例性示出了本发明实施例提供的另一种用户设备的结构示意图;
图8示例性示出了本发明实施例提供的又一种用户设备的结构示意图;
图9示例性示出了本申请提供的自由视点视频传输方法应用于自由视点场景中网络设备和用户设备交互的流程示意图;
图10示例性示出了本发明实施例提供的应用于网络设备侧的一种自由视点视频传输方法示意流程图;
图11示例性示出了本发明实施例提供的应用于用户设备侧的一种自由视点视频传输方法示意流程图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清除、详尽地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
图1示例性示出了本申请中网络设备和用户设备通信方式示意图,如图1所示,网络设备101可以为多个用户设备102提供自由视点服务,用户设备102可以通过移动通信网络103与网络设备101进行交互,用户设备102也可以通过局域网104与网络设备101进行交互,例如,用户设备102与网络设备101在同一局域网中,通过有线连接方式105(比如宽带)进行交互;也可以通过无线连接方式(比如WIFI)进行交互。
用户设备102与网络设备101也可以不在同一个局域网中,通过无线移动网络连接,比如4G、5G等。
用户设备102可以是智能电视、智能手机等具有显示目标视频功能的电子设备。用户设备102还可以为不具有显示目标视频功能的电子设备。若用户设备102为不具有显示目标视频功能的电子设备,可以通过高清晰度多媒体(High Definition Multimedia,HDMI)接口与显示设备连接,将接收到的网络设备101的目标视频进行转换后通过HDMI接口发给显示设备进行显示。
网络设备101可以是中继网络设备,接收视频服务器发送的视频码流,视频码流为如图2中示出的自由视角场景中拍摄某一对象(赛事、演唱会等直播场景中的对象)的多个采集设备201在不同视角202同步拍摄的视频码流。网络设备101可以对接收的视频码流进行解码,并通过解码可以获得采集设备201拍摄的原生视角视频,采集设备201拍摄时的视角可记为原生视角。另外,网络设备101可以基于原生视角视频生成多个虚拟视角的虚拟视角视频,虚拟视角为除了原生视角之外的任一视角。
网络设备101可以也可以是服务器,接收采集设备201发送的视频码流,网络设备101可以对接收的视频码流进行解码,并通过解码可以获得采集设备201拍摄的原生视角视频,网络设备101可以基于原生视角视频生成多个虚拟视角的虚拟视角视频。需要说明的是,网络设备101可以是由多个服务器组成的系统,对视频码流处理的过程由任一个或多个服务器执行。
用户可以通过用户设备102选择任一个视角进行观看,并在选择视角时触发向网络设备101发送视频请求消息。
图3示例性示出了本发明实施例提供的一种网络设备101的结构示意图,如图3所示,网络设备101包括通信单元301、存储器302和处理器303;
存储器302用于存储计算机程序或指令;
处理器303用于执行存储器302中的计算机程序或指令实现下列过程:
通过通信单元301接收用户设备发送的包括对象标识以及视角信息的视频请求消息,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,并根据目标视角对应的视频,确定视角信息对应的目标视频;并通过通信单元301向用户设备发送目标视频。
通信单元301可以包括收发无线信号的天线模块、蓝牙模块、WiFi模块。通信单元301也可以包括收发有线信号的信号处理装置及传输线缆。
网络设备101中的通信单元301用于接收用户设备102发送的包括对象标识以及视角信息的视频请求消息。通信单元301还用户向用户设备发送处理器303确定的视角信息对应的目标视频。
在实际应用场景中用户设备102可以根据用户触发选择某个对象某个视角操作,向网络设备101发送携带该对象表示以及该视角对应的视角信息的视频请求消息。例如,用户进行XX赛事直播,观看视角为30°的选择操作,触发向网络设备101发送携带XX赛事直播标识,以及视角为30°对应视角信息的视频请求消息。
处理器303,用于从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角,并根据目标视角对应的视频,确定视角信息对应的目标视频。
网络设备101中的处理器303可以是至少一个具备自由视点技术处理能力的处理器芯片。网络设备101中的处理器303用于从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角。以及根据目标视角对应的视频,确定视角信息对应的目标视频。处理器303可以根据任一用户设备102发送的视频请求消息,并相应该视频该请求消息向该用户设备102发送用户所请求的视频。其中,用户所请求的视频是基于视频请求消息中的对象标识以及视角信息确定的。通信单元301可将接收到的数据传输给处理器303,由处理器303通过解码或解析等方式,确定接收到的数据为用户设备发送的视频请求消息。
需要说明的是,本发明处理器303实现上述实施例功能,可以由一个或多个处理器实现,如果是多个处理器,多个处理器之间可以同步或异步协同处理,多个处理器可以位于一个或多个设备中。
进一步地,处理器303用于若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
网络设备101中存储有对象标识对应的目标对象的多个视角的视频,需要说明的是,网络设备101存储有目标对象的多个视角的视频,可以包括网络设备101预先存储的原生视角的视频,也可以包括虚拟视角的视频。
网络设备101存储的目标对象的多个视角的视频时,处理器303还可以生成目标对象的视角与视频对应关系的列表。处理器303可以通过确定视频请求消息中携带的视角信息对应的视角,是否在目标对象的视角与视频对应关系的列表,来确定目标对象的多个视角中是否包括视频请求消息携带的视角信息对应的视角。
目标视角用于确定向用户设备102发送的目标视频。处理器303确定目标对象的多个视角中包括视频请求消息中的视角信息对应的视角,可将视频请求消息中的视角信息对应的视角确定为目标视角,将网络设备101存储的目标对象的目标视角对应的视频,确定为目标视频。
进一步地,处理器303用于若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角。
处理器303可以通过确定视频请求消息中携带的视角信息对应的视角,不在目标对象的视角与视频对应关系的列表,来确定目标视频的多个视角中未包括视频请求消息中携带的视角信息对应的视角。通过差值计算,确定视频请求消息中的视频信息对应的角度与目标对象多个视角的角度差值,并将角度差值最小的视角作为目标视角,若角度差值最小的视角有两个,在两者中任选一个视角作为目标视角。例如,视频请求消息中的视频信息对应的角度为25°,目标对象的多个视角分别为5°、10°、13°、20°,通过差值计算,分别计算多个视角与25°的角度差值,其中角度差值最小的视角为20°,将20°作为目标视角。再例如,视频请求消息中的视频信息对应的角度为25°,目标对象的多个视角分别为5°、10°、19°、31°,通过差值计算,分别计算多个视角与25°的角度差值,其中角度差值最小的视角为19°和31°,从将视角为19°和31°两个视角中,选择一个视角作为目标视角。
进一步地,若多个视角中未包括视角信息对应的视角,则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
处理器303,可以通过确定视频请求消息中携带的视角信息对应的视角,不在目标对象的视角与视频对应关系的列表,来确定目标视频的多个视角中未包括视频请求消息中携带的视角信息对应的视角。通过差值计算,确定目标对象多个视角与视频请求消息中视频信息对应角度的角度差值,以及角度差值是否再预设范围内。从与视频请求消息中视频信息对应角度的角度差值在预设范围内的视角中,选择一个视角作为目标视角,或者选择多个视角作为目标视角。
进一步地,处理器303用于在生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
进一步地,处理器303判断视频信息匹配的目标视角是否为一个,若是,将目标视角对应的视频确定为目标视频,否则,基于目标视角对应的视频,生成目标视频。
处理器303确定出的目标视角为一个视角时,将网络设备101中存储的目标视角对应的视频,确定为需要向用户设备102发送的目标视频。处理器303确定出的目标视角为多个视角时,处理器303可以根据目标视角对应的视频,通过拼接技术,生成目标对象的虚拟视角视频,生成的虚拟视角视频为视频请求消息中携带的视频信息对应的视角的视频。
图4示例性示出了的另一种网络设备101的结构示意图,如图4所示,本发明实施例示出的网络设备101包括:
处理器410;
用于存储处理器410可执行指令的存储器420;
其中,处理器410用于指令并执行下列步骤:
接收用户设备102发送的包括对象标识以及视角信息的视频请求消息;
从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角;
根据目标视角对应的视频,确定视角信息对应的目标视频;
向用户设备102发送目标视频。
其中,处理器410了集成收发信息的功能,可以直接接收外部设备发送的数据,并对数据进行处理,也具备直接向外部设备发送数据的能力。
一种可能的实施方式中,本发明提供的网络设备101,处理器410具体用于:
若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
一种可能的实施方式中,本发明提供的网络设备101,处理器410具体用于:
若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角;
或若多个视角中未包括视角信息对应的视角,则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
一种可能的实施方式中,本发明提供的网络设备101,处理器410具体用于:
若目标视角为一个,则将目标视角对应的视频确定为目标视频;
或若目标视角为多个,则基于目标视角对应的视频,生成目标视频。
一种可能的实施方式中,本发明提供的网络设备101,处理器410还用于:
在生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
在示例性实施例中,还提供了一种包括指令的存储介质,例如包括指令的存储器420,上述指令可由网络设备101的处理器410执行以完成上述方法。可选地,存储介质可以是非临时性计算机可读存储介质,例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
图5示出了本发明实施例提供的又一种网络设备101结构示意图。该网络设备101终端可以包括处理器501以及存储有计算机程序指令的存储器502。
具体地,上述处理器501可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个自由视点视频传输方法。
存储器502可以包括用于存储数据或指令的大容量存储器。举例来说而非限制,存储器502可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器502可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器502可在数据处理装置的内部或外部。在特定实施例中,存储器502是非易失性固态存储器。在特定实施例中,存储器502包括只读存储器(ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器501通过读取并执行存储器502中存储的计算机程序指令,以实现上述实施例中的自由视点视频传输方法。
在一个示例中,该网络设备101还可包括通信接口503和总线510。其中,如图5所示,处理器501、存储器502、通信接口503通过总线510连接并完成相互间的通信。
通信接口503,主要用于实现本发明实施例中各模块、装置、单元和/或用户设备102之间的通信。
总线510包括硬件、软件或两者,将该网络设备101的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其它图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其它合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线510可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
图6示例性示出了一种用户设备102的结构示意图,如图6所示,本发明实施例示出的用户设备102包括:通信单元601和显示器602;
通信单元601,用于向网络设备101发送携带对象标识以及视角信息的视频请求消息,以及接收目标视频;
用户设备102可以根据用户触发选择某个对象某个视角操作,向网络设备101发送携带该对象表示以及该视角对应的视角信息的视频请求消息。例如,用户进行XX赛事直播,观看视角为30°的选择操作,触发通过通信单元601向网络设备101发送携带XX赛事直播表示,以及视角为30°对应视角信息的视频请求消息。
显示器602,用于显示通过通信单元601接收的目标视频;
其中,目标视频是网络设备101根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
用户设备102通过通信单元601接收网络设备发送的目标视频。还可以接收到的数据发送给用户设备102中的处理器等模块处理,并通过用户设备102的显示器602进行展示,实现为用户提供自由视点服务。其中,目标视频是网络设备101根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。通信单元601可以包括收发无线信号的天线模块、蓝牙模块、WiFi模块。通信单元601也可以包括收发有线信号的信号处理装置及传输线缆。显示器602可以为液晶显示屏或触摸屏。
图7示例性示出了本发明实施例提供的用户设备102的结构示意图,如图7所示,用户设备102可提供广播接收功能的网络电视功能。用户设备102可以实施为,数字电视、网络电视、互联网协议电视(IPTV)等。
用户设备102,可以是液晶显示器、有机发光显示器、投影设备。具体显示设备类型、尺寸大小和分辨率等不作限定。
用户设备102还与网络设备101通过多种通信方式进行数据通信。这里可允许用户设备102通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。网络设备101可以向用户设备102提供各种内容和互动。示例的,用户设备102可以发送视频请求消息和接收视频。网络设备101可以一组,也可以多组,可以一类或多类服务器。通过网络设备101提供自由视点等其他网络服务内容。
用户设备102中可以包括通信器710、检测器720、控制器730、存储器740、显示器750、供电电源760。
通信器710,是用于根据各种通信协议类型与中继设备或视频服务器等网络设备101进行发送视频请求消息以及接收目标视频的通信的组件。
检测器720,是用户设备102用于采集外部环境或与外部交互的信号的组件。检测器720可以包括声音采集器,如麦克风,可以用于接收用户的声音,如用户控制用户设备102的控制指令的语音信号。
控制器730,通过运行存储在存储器740上的各种软件控制程序(如操作系统和各种应用程序),来控制用户设备102的工作和响应用户的操作。例如,控制器可实现为芯片(System-on-a-Chip,SOC)。
控制器730可以控制用户设备102的整体操作。例如:响应于接收到用于选择在显示器750上显示的对象的以及视角的GUI对象的用户输入命令,控制器730便可以执行与由用户输入命令选择的对象以及视角有关的操作。例如,控制器可实现为SOC(System onChip,,系统级芯片)或者MCU(Micro Control Unit,微控制单元)。
其中,该对象可以是可选对象中的任何一个,例如超链接或图标。该与所选择的对象有关的操作,例如显示连接到超链接页面、文档、图像等操作,或者执行与对象相对应的程序的操作。该用于选择GUI对象的用户输入命令,可以是通过连接到用户设备102的各种输入装置(例如,鼠标、键盘、触摸板、控制装置等)输入命令或者与由用户说出语音相对应的语音命令。基于选择GUI对象的用户输入命令,可以生成视频请求消息。
图形处理器731,用于产生各种图形对象,如图标、操作菜单、以及用户输入指令显示图形等。图形处理器731可以包括运算器,用于通过接收用户输入各种交互指令进行运算,进而根据显示属性显示各种对象;以及包括渲染器,用于产生基于运算器得到的各种对象,将进行渲染的结果显示在显示器750上。
CPU处理器732,用于执行存储在存储器740中的操作系统和应用程序指令。以及根据接收的用户输入选择对象和视角的指令,确定用户触发的视频请求消息,并在响应于用户触发的指令在接收到目标视频后来执行各种应用程序、数据和内容的处理,以便最终显示和播放目标视频内容。
通信接口733,可包括第一接口到第n接口。这些接口可以是经由网络被连接到网络设备101的网络接口。
存储器740,用于存储驱动和控制用户设备102运行的各种类型的数据、软件程序或应用程序。存储器740可以包括易失性和/或非易失性存储器。而术语“存储器”包括存储器740、控制器730的RAM251和ROM252、或用户设备102中的存储卡。
在一些实施例中,存储器740具体用于存储驱动用户设备102中控制器730的运行程序;存储用户设备102内置的和用户从外部设备下载的各种应用程序;存储用于配置由显示器750提供的各种GUI、与GUI相关的各种对象及用于选择GUI对象的选择器的视觉效果图像等数据。
在一些实施例中,存储器740具体用于存储检测器720、外部装置接口733、显示器750等的驱动程序和相关数据,例如从外部装置接口接收的外部数据(例如目标视频数据)或用户接口接收的用户数据(例如选择对象和视角时的按键信息、语音信息、触摸信息等)。
网络设备101与用户设备102同处于一个局域网的场景中,用户设备102还具有外部装置接口,是提供用户设备102与网络设备101间视频请求消息以及目标视频传输的组件。其中,外部装置接口可以包括:高清多媒体接口(HDMI)端子。
图8示例性示出了本发明实施例提供的用户设备102的结构示意图,如图8所示,用户设备102可以为移动终端,用户设备102包括:射频(radio frequency,RF)电路810、存储器820、显示单元830、音频电路840、处理器850、以及电源860等部件。
RF电路810可用于在收发与网络设备101交互的消息或目标视频的接收,可以接收网络设备101的下行数据后交给处理器850处理;可以将上行数据发送给网络设备101。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。
存储器820可用于存储软件程序及数据。处理器850通过运行存储在存储器820的软件程序或数据,从而执行通信终端100的各种功能以及数据处理。存储器820可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器820存储有使得用户设备102能运行的操作系统。本申请中存储器820可以存储操作系统及各种应用程序。
显示单元830可用于接收输入的数字或字符信息,产生与用户设备102的用户设置以及功能控制有关的信号输入,具体地,显示单元830可以包括设置在用户设备102正面的触摸屏831,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。
显示单元830还可用于显示由用户输入的信息或提供给用户的信息以及用户设备102的各种菜单的图形用户界面(graphical user interface,GUI)。具体地,显示单元830可以包括设置在用户设备102正面的显示屏832。其中,显示屏832可以采用液晶显示器、发光二极管等形式来配置。显示单元830可以用于显示本申请中用户选择对象和视角的各种图形用户界面。
其中,触摸屏831可以覆盖在显示屏832之上,也可以将触摸屏831与显示屏832集成而实现用户设备102的输入和输出功能,集成后可以简称触摸显示屏。本申请中显示单元830可以显示自由视角应用程序以及选择对象和视角的操作步骤。
音频电路840、扬声器841、麦克风842可提供用户与用户设备102之间的音频接口。音频电路840可将接收到的音频数据转换后的电信号,传输到扬声器841,由扬声器841转换为声音信号输出。用户设备102还可配置音量按钮,用于调节声音信号的音量。另一方面,麦克风842将收集的声音信号转换为电信号,由音频电路840接收后转换为音频数据,再将音频数据输出至RF电路810以发送给比如另一终端,或者将音频数据输出至存储器820以便进一步处理。本申请中麦克风842可以获取用户的选择对象和视角的语音指令。
处理器850是用户设备102的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器820内的软件程序,以及调用存储在存储器820内的数据,执行用户设备102的各种功能和处理数据。在一些实施例中,处理器850可包括一个或多个处理单元;处理器850还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器850中。本申请中处理器850可以运行操作系统、应用程序、用户界面显示及触控响应,以及本申请实施例的自由视点视频传输方法。另外,处理器850与显示单元830耦接。
用户设备102还包括给各个部件供电的电源860(比如电池)。电源可以通过电源管理系统与处理器850逻辑相连,从而通过电源管理系统实现管理充电、放电以及功耗等功能。用户设备102还可配置有电源按钮,用于终端的开机和关机,以及锁屏等功能。
在网络设备101与用户设备102交互场景中,图9示例性示出了本发明实施例提供的一种自由视点视频传输方法示意流程图,如图9所示,方法包括:
步骤S901,用户设备102向网络设备101发送携带对象标识以及视角信息的视频请求消息。
具体实施时,用户设备102可以根据用户触发选择某个对象某个视角操作,向网络设备101发送携带该对象表示以及该视角对应的视角信息的视频请求消息。例如,用户进行XX赛事直播,观看视角为30°的选择操作,触发向网络设备101发送携带XX赛事直播标识,以及视角为30°对应视角信息的视频请求消息。
网络设备101可以根据任一用户设备102发送的视频请求消息,并相应该视频该请求消息向该用户设备102发送用户所请求的视频。其中,用户所请求的视频是基于视频请求消息中的对象标识以及视角信息确定的。
步骤S902,网络设备101确定与视角信息匹配的目标视角。
具体实施时,网络设备101中存储有对象标识对应的目标对象的多个视角的视频,需要说明的是,网络设备101存储有目标对象的多个视角的视频,可以包括网络设备101预先存储的原生视角的视频,也可以包括虚拟视角的视频。
一种可能的实施方式中,网络设备101存储的目标对象的多个视角的视频时,还可以生成目标对象的视角与视频对应关系的列表。可以通过确定视频请求消息中携带的视角信息对应的视角,是否在目标对象的视角与视频对应关系的列表,来确定目标对象的多个视角中是否包括视频请求消息携带的视角信息对应的视角。
一种可能的实施方式中,若多个视角中包括视角信息对应的视角,网络设备101则将视角信息对应的视角作为目标视角。
具体实施时,目标视角用于确定向用户设备102发送的目标视频。确定目标对象的多个视角中包括视频请求消息中的视角信息对应的视角,可将视频请求消息中的视角信息对应的视角确定为目标视角,将网络设备101存储的目标对象的目标视角对应的视频,确定为目标视频。
一种可能的实施方式中,若多个视角中未包括视角信息对应的视角,网络设备101则从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
具体实施时,可以通过确定视频请求消息中携带的视角信息对应的视角,不在目标对象的视角与视频对应关系的列表,来确定目标视频的多个视角中未包括视频请求消息中携带的视角信息对应的视角。通过差值计算,确定目标对象多个视角与视频请求消息中视频信息对应角度的角度差值,以及角度差值是否再预设范围内。从与视频请求消息中视频信息对应角度的角度差值在预设范围内的视角中,选择一个视角作为目标视角,或者选择多个视角作为目标视角。
一种可能的实施方式中,若多个视角中未包括视角信息对应的视角,网络设备101则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角。
具体实施时,可以通过确定视频请求消息中携带的视角信息对应的视角,不在目标对象的视角与视频对应关系的列表,来确定目标视频的多个视角中未包括视频请求消息中携带的视角信息对应的视角。通过差值计算,确定视频请求消息中的视频信息对应的角度与目标对象多个视角的角度差值,并将角度差值最小的视角作为目标视角,若角度差值最小的视角有两个,在两者中任选一个视角作为目标视角。例如,视频请求消息中的视频信息对应的角度为25°,目标对象的多个视角分别为5°、10°、13°、20°,通过差值计算,分别计算多个视角与25°的角度差值,其中角度差值最小的视角为20°,将20°作为目标视角。再例如,视频请求消息中的视频信息对应的角度为25°,目标对象的多个视角分别为5°、10°、19°、31°,通过差值计算,分别计算多个视角与25°的角度差值,其中角度差值最小的视角为19°和31°,从将视角为19°和31°两个视角中,选择一个视角作为目标视角。
具体实施时,网络设备101存储生成的虚拟视角视频,其中,生成的虚拟视角视频与用户设备102发送的视频请求消息中携带的视角信息具有对应关系。
步骤S903,网络设备101判断视频信息匹配的目标视角是否为一个,若是,下一步执行步骤S904,否则,下一步执行步骤S905。
步骤S904,网络设备101将目标视角对应的视频确定为目标视频。
具体实施时,确定出的目标视角为一个视角时,将网络设备101中存储的目标视角对应的视频,确定为需要向用户设备102发送的目标视频。
步骤S905,网络设备101基于目标视角对应的视频,生成目标视频。
具体实施时,确定出的目标视角为多个视角时,网络设备101可以根据目标视角对应的视频,通过拼接技术,生成目标对象的虚拟视角视频,生成的虚拟视角视频为视频请求消息中携带的视频信息对应的视角的视频。
一种可能的实施方式中,在生成目标视频之后,网络设备101将视角信息对应的视角加入目标对象的多个视角中。
具体实施时,网络设备101预先存储的目标对象的多个视角的视频时,还可以生成目标对象的视角与视频对应关系的列表。还可以在目标对象的视角与视频对应关系的列表中,添加视频请求消息中携带的视角信息与该虚拟视角视频的对应关系。
步骤S906,网络设备101向用户设备102发送目标视频。
具体实施时,网络设备101向用户设备102发送基于该用户设备102的视频请求消息确定出的目标视频。用户设备102接收目标视频。
步骤S907,展示目标视频。
图10示例性示出了本发明实施例提供的一种自由视点视频传输方法示意流程图,如图10所示,方法包括:
步骤S1001,接收用户设备102发送的包括对象标识以及视角信息的视频请求消息。
步骤S1002,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角。
具体实施时,在实际应用场景中,从对象标识对应的目标对象的多个视角中,确定与视角信息匹配的目标视角时,若多个视角中包括视角信息对应的视角,则将视角信息对应的视角作为目标视角。
若多个视角中未包括视角信息对应的视角,则将视角信息对应的角度与多个视角中角度差值最小的一个视角作为目标视角。还可以在多个视角中未包括视角信息对应的视角时,从多个视角中选择与视角信息对应的角度的差值在预设范围的至少一个视角作为目标视角。
步骤S1003,根据目标视角对应的视频,确定视角信息对应的目标视频。
具体实施时,在实际应用场景中,根据目标视角对应的视频,确定视角信息对应的目标视频,若目标视角为一个,则将目标视角对应的视频确定为目标视频。若目标视角为多个,则基于目标视角对应的视频,生成目标视频,其中生成的目标视频与视频请求消息中的视角信息具有对应关系。在生成目标视频之后,将视角信息对应的视角加入目标对象的多个视角中。
步骤S1004,向用户设备102发送目标视频。
具体实施时,网络设备101可以通过无线通信方式或者有限通信方式向用户设备102发送目标视频。
图11示例性示出了本发明实施例提供的一种自由视点视频传输方法示意流程图,方法包括:
步骤S1网络设备101,向网络设备101发送携带对象标识以及视角信息的视频请求消息。
具体实施时,用户设备102可以根据用户触发选择某个对象某个视角操作,向网络设备101发送携带该对象表示以及该视角对应的视角信息的视频请求消息。例如,用户进行XX赛事直播,观看视角为30°的选择操作,触发向网络设备101发送携带XX赛事直播表示,以及视角为30°对应视角信息的视频请求消息。
步骤S1102,接收目标视频。
步骤S1103,展示目标视频,其中,目标视频是网络设备101根据对象标识对应的目标对象的多个视角中,与视角信息匹配的目标视角对应的视频生成的。
基于同一发明构思,本申请一些实施例还提供了一种视频传输系统,包括本申请一些实施例提供的上述网络设备和用户设备。该视频传输系统解决问题的原理与前述网络设备和用户设备相似,因此该视频传输系统的实施可以参见前述网络设备和用户设备的实施,重复之处在此不再赘述。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (6)
1.一种自由视点视频传输方法,其特征在于,所述方法包括:
接收用户设备发送的包括对象标识以及视角信息的视频请求消息;
从所述对象标识对应的目标对象的多个视角中,确定与所述视角信息匹配的目标视角;其中,若所述多个视角中未包括所述视角信息对应的视角,则从所述多个视角中选择与所述视角信息对应的角度的差值在预设范围的至少一个视角作为所述目标视角;
根据所述目标视角对应的视频,确定所述视角信息对应的目标视频;
向所述用户设备发送所述目标视频;
其中,根据所述目标视角对应的视频,确定所述视角信息对应的目标视频,包括:
若所述目标视角为一个,则将所述目标视角对应的视频确定为所述目标视频;若所述目标视角为多个,则基于所述目标视角对应的视频,通过拼接技术生成所述目标视频;
所述方法还包括:
在所述生成所述目标视频之后,将所述视角信息对应的视角加入所述目标对象的多个视角中。
2.根据权利要求1所述的方法,其特征在于,所述从所述对象标识对应的目标对象的多个视角中,确定与所述视角信息匹配的目标视角,包括:
若所述多个视角中包括所述视角信息对应的视角,则将所述视角信息对应的视角作为所述目标视角。
3.一种自由视点视频传输方法,其特征在于,所述方法包括:
向网络设备发送携带对象标识以及视角信息的视频请求消息;
展示接收到的目标视频,其中,所述目标视频是所述网络设备根据所述对象标识对应的目标对象的多个视角中,与所述视角信息匹配的目标视角对应的视频生成的;其中,若所述多个视角中未包括所述视角信息对应的视角,则所述网络设备从所述多个视角中选择与所述视角信息对应的角度的差值在预设范围的至少一个视角作为所述目标视角;
其中,若所述目标视角为一个,则所述目标视频为所述目标视角对应的视频;若所述目标视角为多个,则所述目标视频为基于所述目标视角对应的视频通过拼接技术生成的视频;
其中,所述目标对象的多个视角中,包括所述网络设备在基于多个目标视角对应的视频生成目标视频之后新加入的视角,所述新加入的视角为所述多个目标视角对应的视角信息。
4.一种网络设备,其特征在于,所述网络设备包括通信单元、存储器和处理器;
所述存储器用于存储计算机程序或指令;
所述处理器用于执行存储器中的计算机程序或指令实现下列过程:
通过所述通信单元接收用户设备发送的包括对象标识以及视角信息的视频请求消息,从所述对象标识对应的目标对象的多个视角中,确定与所述视角信息匹配的目标视角,并根据所述目标视角对应的视频,确定所述视角信息对应的目标视频;并通过所述通信单元向用户设备发送所述目标视频;其中,若所述多个视角中未包括所述视角信息对应的视角,则从所述多个视角中选择与所述视角信息对应的角度的差值在预设范围的至少一个视角作为所述目标视角;
其中,根据所述目标视角对应的视频,确定所述视角信息对应的目标视频,包括:
若所述目标视角为一个,则将所述目标视角对应的视频确定为所述目标视频;若所述目标视角为多个,则基于所述目标视角对应的视频,通过拼接技术生成所述目标视频;
所述处理器还用于执行存储器中的计算机程序或指令实现下列过程:
在所述生成所述目标视频之后,将所述视角信息对应的视角加入所述目标对象的多个视角中。
5.根据权利要求4所述的设备,其特征在于,所述处理器,具体用于:
若所述多个视角中包括所述视角信息对应的视角,则将所述视角信息对应的视角作为所述目标视角。
6.一种用户设备,其特征在于,所述用户设备包括通信单元和显示器;
通信单元,用于向网络设备发送携带对象标识以及视角信息的视频请求消息,以及接收目标视频;
显示器,用于显示通过所述通信单元接收的所述目标视频;
其中,所述目标视频是所述网络设备根据所述对象标识对应的目标对象的多个视角中,与所述视角信息匹配的目标视角对应的视频生成的;其中,若所述多个视角中未包括所述视角信息对应的视角,则所述网络设备从所述多个视角中选择与所述视角信息对应的角度的差值在预设范围的至少一个视角作为所述目标视角;
其中,若所述目标视角为一个,则所述目标视频为所述目标视角对应的视频;若所述目标视角为多个,则所述目标视频为基于所述目标视角对应的视频通过拼接技术生成的视频;
其中,所述目标对象的多个视角中,包括所述网络设备在基于多个目标视角对应的视频生成目标视频之后新加入的视角,所述新加入的视角为所述多个目标视角对应的视角信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010333599.6A CN113473156B (zh) | 2020-04-24 | 2020-04-24 | 一种自由视点视频传输方法以及相关设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010333599.6A CN113473156B (zh) | 2020-04-24 | 2020-04-24 | 一种自由视点视频传输方法以及相关设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113473156A CN113473156A (zh) | 2021-10-01 |
| CN113473156B true CN113473156B (zh) | 2023-02-03 |
Family
ID=77865834
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010333599.6A Active CN113473156B (zh) | 2020-04-24 | 2020-04-24 | 一种自由视点视频传输方法以及相关设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113473156B (zh) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106937180A (zh) * | 2015-12-31 | 2017-07-07 | 幸福在线(北京)网络技术有限公司 | 一种虚拟现实视频的播放方法及装置 |
| CN110012279A (zh) * | 2018-01-05 | 2019-07-12 | 上海交通大学 | 基于3d点云数据的分视角压缩和传输方法及系统 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3696216B2 (ja) * | 2003-03-05 | 2005-09-14 | 株式会社スクウェア・エニックス | 3次元ビデオゲーム装置、3次元ビデオゲームにおける仮想カメラの制御方法、並びにプログラム及び記録媒体 |
| CN101472190B (zh) * | 2007-12-28 | 2013-01-23 | 华为终端有限公司 | 多视角摄像及图像处理装置、系统 |
| CN104602129B (zh) * | 2015-01-27 | 2018-03-06 | 三星电子(中国)研发中心 | 互动式多视角视频的播放方法及系统 |
-
2020
- 2020-04-24 CN CN202010333599.6A patent/CN113473156B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106937180A (zh) * | 2015-12-31 | 2017-07-07 | 幸福在线(北京)网络技术有限公司 | 一种虚拟现实视频的播放方法及装置 |
| CN110012279A (zh) * | 2018-01-05 | 2019-07-12 | 上海交通大学 | 基于3d点云数据的分视角压缩和传输方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113473156A (zh) | 2021-10-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107371044B (zh) | 电子设备互动方法、电子设备、用户终端及服务器 | |
| CN107454416B (zh) | 视频流发送方法和装置 | |
| CN108966008B (zh) | 直播视频回放方法及装置 | |
| EP4262214A1 (en) | Screen projection method and apparatus, and electronic device and storage medium | |
| CN105430424A (zh) | 一种视频直播的方法、装置和系统 | |
| CN113573092B (zh) | 直播数据处理方法、装置、电子设备及存储介质 | |
| CN110740346B (zh) | 视频数据处理方法、装置、服务器、终端和存储介质 | |
| CA3102425C (en) | Video processing method, device, terminal and storage medium | |
| US20250209762A1 (en) | Video generation method, readable medium, and electronic device | |
| CN114779936B (zh) | 信息显示方法、装置、电子设备及存储介质 | |
| CN113473157B (zh) | 一种自由视点视角信息推荐方法以及相关设备 | |
| CN108900921A (zh) | 连麦直播方法、装置及存储介质 | |
| CN118042204A (zh) | 虚拟资源处理方法、装置、电子设备及存储介质 | |
| CN108616719B (zh) | 监控视频展示的方法、装置及系统 | |
| CN117061807A (zh) | 页面显示方法、装置、电子设备及存储介质 | |
| CN103902688A (zh) | 一种文件操作的同步方法及装置 | |
| EP3125493A1 (en) | Terminal, communication method, and carrier means | |
| CN113473156B (zh) | 一种自由视点视频传输方法以及相关设备 | |
| US12061662B2 (en) | Methods, apparatuses and systems for displaying alarm file | |
| CN112351221A (zh) | 图像特效处理方法、装置、电子设备和计算机可读存储介质 | |
| JP7245350B2 (ja) | アンカー共有方法及び装置、システム、電子機器並びに記憶媒体 | |
| CN110769275B (zh) | 直播数据流的处理方法、装置及系统 | |
| CN114025116A (zh) | 视频生成方法、装置、可读介质和电子设备 | |
| CN119676204A (zh) | 消息发送方法、装置、设备及存储介质 | |
| CN110769311A (zh) | 直播数据流的处理方法、装置及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |