KR100972792B1 - 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법 - Google Patents

스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법 Download PDF

Info

Publication number
KR100972792B1
KR100972792B1 KR1020080108893A KR20080108893A KR100972792B1 KR 100972792 B1 KR100972792 B1 KR 100972792B1 KR 1020080108893 A KR1020080108893 A KR 1020080108893A KR 20080108893 A KR20080108893 A KR 20080108893A KR 100972792 B1 KR100972792 B1 KR 100972792B1
Authority
KR
South Korea
Prior art keywords
image
stereoscopic
synchronizing
synchronization
time reference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020080108893A
Other languages
English (en)
Other versions
KR20100049873A (ko
Inventor
윤국진
이봉호
이현
이광순
허남호
김진웅
이수인
김성훈
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020080108893A priority Critical patent/KR100972792B1/ko
Priority to CN200980153631.4A priority patent/CN102273214B/zh
Priority to JP2011535498A priority patent/JP2012507968A/ja
Priority to US13/127,670 priority patent/US8917314B2/en
Priority to EP09824929.5A priority patent/EP2353299B1/en
Priority to PCT/KR2009/004044 priority patent/WO2010053246A2/en
Publication of KR20100049873A publication Critical patent/KR20100049873A/ko
Application granted granted Critical
Publication of KR100972792B1 publication Critical patent/KR100972792B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

본 발명은 스테레오스코픽 영상을 동기화하여 제공하는 기술에 관한 것으로서, 종래 디지털 방송과의 호환성을 유지하면서 디지털 방송의 한정된 주파수 대역폭 내에서 고화질의 스테레오스코픽 디지털 방송 서비스를 제공하고자 한다. 이를 위하여 본 발명의 스테레오스코픽 영상 제공 장치는 제1 영상을 저장하는 저장부, 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 수신부, 제1 영상과 제2 영상을 동기화하는 동기화 제어부, 및 동기화된 두 영상을 출력하는 출력부를 포함한다.
스테레오스코픽, 3차원, 동기화, 디지털 방송

Description

스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법{SYNCHRONIZER AND SYNCHRONIZING METHOD FOR STEREOSCOPIC IMAGE, APPARATUS AND METHOD FOR PROVIDING STEREOSCOPIC IMAGE}
본 발명은 영상을 동기화하여 제공하는 기술에 관한 것으로서, 특히 스테레오스코픽 영상을 동기화하여 제공하는 장치 및 방법에 관한 것이다.
본 발명은 지식경제부의 IT원천기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2008-F-011-01, 과제명: 차세대DTV핵심기술개발(표준화연계)].
스테레오스코픽 콘텐츠를 제공하는 기술에 대한 표준화가 진행되면서 디지털 TV(Television), 휴대폰, 디지털카메라, DVD(Digital Versatile Disk), PMP(Portable Multimedia Player) 등과 같은 다양한 디지털 영상기기를 중심으로 스테레오스코픽 콘텐츠 관련 기술이 빠르게 발전하고 있다. 스테레오스코픽 콘텐츠는 입체감과 현실감이 뛰어나면서도 자연스러운 영상을 제공한다. 스테레오스코픽 콘텐츠의 획득, 생성, 및 디스플레이 기술이 발전하면서 스테레오스코픽 콘텐츠를 이용한 응용 서비스 및 관련 기기에 대한 기술도 함께 발전하고 있다.
종래 스테레오스코픽 영상의 구성 방법으로서 사이드 바이 사이드(Side-by-Side) 방식이 있다. Side-by-Side 방식의 스테레오스코픽 영상의 구성 방법은 스테레오스코픽 콘텐츠를 구성하는 좌우영상을 각각 절반으로 축소하여 한 프레임 내에 포함시켜 서비스하는 방법이다. 예를 들어, 좌영상의 홀수 번째 수직라인만 모아서 좌영상을 절반으로 축소하고, 우영상의 짝수 번째 수직라인만 모아서 우영상을 절반으로 축소하여 축소된 두 영상을 한 프레임에 담는 것이다. 이 방법은 한 프레임에 좌영상과 우영상이 모두 포함되기 때문에 좌우 영상 간의 동기화를 쉽게 할 수 있는 장점이 있다. 하지만, 이 방법은 기본 영상을 축소하기 때문에 최초 영상보다 해상도가 감소하고, 종래의 디지털 방송과의 화환성을 제공하지 못한다.
종래 스테레오스코픽 영상의 다른 구성 방법으로서 프레임 시퀀셜(Frame Sequential) 방법이 있다. 이 방법은 스테레오스코픽 콘텐츠를 구성하는 좌우영상을 교대로 부호화하여 서비스하는 방법으로서, 기본 영상과 동일하게 풀(full) 해상도를 갖는 스테레오스코픽 영상을 제공할 수 있다. 그러나 좌우영상 간의 동기화가 어려운 경우가 발생하고, 좌우영상 중 어느 한 영상이 깨지는 경우 다른 한 영상을 무시하고 서비스해야 하는 문제점이 있어서 종래 디지털 방송과 호환성이 떨어진다.
종래 디지털 방송과 호환성을 유지하면서 스테레오스코픽 콘텐츠를 제공하기 위해 서로 다른 코덱(예를 들어, MPEG-2(Moving Picture Expert Group-2)와 Advanced Video Coding (AVC))을 사용하여 좌우영상을 각각 부호화하는 방법이 있다. 또 다른 방법으로 좌우영상 간의 상호 연관관계를 통한 부호화기법을 이용하여 부호화하는 방법이 있다. 이 방법들은 종래 디지털 방송 시스템과 호환성을 유지하지만, 좌우영상을 별도로 부호화하고 복호화하기 위한 추가 코덱이 요구되어 시스템의 복잡도가 높다는 단점이 있다. 또한, 디지털 방송 대역폭의 한계로 인하여 HD급 이상의 고화질 디지털 방송 서비스에는 적용되기 힘들다.
따라서, 본 발명은 스테레오스코픽 영상을 효율적으로 동기화하여 제공하는 것을 일 목적으로 한다.
또한, 본 발명은 종래 디지털 방송과의 호환성을 유지하면서 디지털 방송의 한정된 주파수 대역폭 내에서 고화질의 스테레오스코픽 디지털 방송 서비스를 제공하는 것을 다른 목적으로 한다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 더욱 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허청구범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
전술한 바와 같은 목적을 달성하기 위해 제안된 본 발명은 스테레오스코픽 영상을 제공하는 방법에 있어서, 제1 영상을 저장하는 단계, 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 단계, 제1 영상과 제2 영상을 동기화하는 단계, 및 동기화된 두 영상을 출력하는 단계를 포함하는 것을 일 특징으로 한다.
또한, 본 발명은 스테레오스코픽 영상을 제공하는 장치에 있어서, 제1 영상을 저장하는 저장부, 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 수신부, 제1 영상과 제2 영상을 동기화하는 동기화 제어부, 및 동기화된 두 영상을 출력하는 출력부를 포함하는 것을 다른 특징으로 한다.
또한, 본 발명은 스테레오스코픽 영상을 동기화하는 방법에 있어서, 제1 영상을 저장하는 단계, 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 단계, 및 제1 영상과 제2 영상을 동기화하는 단계를 포함하는 것을 또 다른 특징으로 한다.
또한, 본 발명은 스테레오스코픽 영상을 동기화하는 장치에 있어서, 제1 영상을 저장하는 저장부, 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 수신부, 제1 영상과 제2 영상을 동기화하는 동기화 제어부를 포함하는 것을 또 다른 특징으로 한다.
전술한 바와 같은 본 발명에 의하면 스테레오스코픽 영상을 효율적으로 동기화하여 제공할 수 있다. 특히 종래 디지털 방송과의 호환성을 유지하면서 디지털 방송의 한정된 주파수 대역폭 내에서 고화질의 스테레오스코픽 디지털 방송 서비스를 제공할 수 있다.
전술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되며, 이에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다. 스테레오스코픽 영상을 제공하기 위해서는 좌영상과 우영상의 두 영상이 필요하다. 이하의 설명에서 제1 영상과 제2 영상은 각각 좌영상 또는 우영상 중 어느 하나를 의미한다.
도 1은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 제공 장치(100)의 구성도이다. 스테레오스코픽 영상 제공 장치(100)는 3차원 입체방송 서비스를 위한 단말 또는 셋탑으로 구현될 수 있다. 도 1에 도시된 바와 같이 스테레오스코픽 영상 제공 장치(100)는 저장부(102), 수신부(104), 동기화 제어부(106), 및 출력부(108)를 포함한다.
우선, 저장부(102)는 제1 영상을 저장하고, 수신부(104)는 제1 영상과 대응 되는 제2 영상을 수신한다. 제2 영상은 제1 영상과 연관되어 스테레오스코픽 영상을 형성하는 영상으로서, 제1 영상이 우영상인 경우 제2 영상은 좌영상이다. 또한, 제1 영상과 제2 영상은 각각 독립하여 재생될 경우 2차원 영상으로 디스플레이될 수도 있다. 제1 영상은 수신부(104)가 외부로부터 수신한 영상이거나 방송신호를 통해 미리 수신한 영상일 수 있다. 동기화 제어부(106)는 미리 저장되어 있는 제1 영상과 수신부(104)에 의해 수신된 제2 영상을 동기화하고, 출력부(108)는 동기화된 영상을 스테레오스코픽 영상으로 구성하여 출력한다.
스테레오스코픽 영상 제공 장치(100)는 스테레오스코픽 영상을 구성하는 두 영상 중 어느 하나를 미리 저장하고, 다른 한 영상을 별도로 수신하기 때문에 영상 수신에 사용되는 전송 대역폭을 효율적으로 사용한다. 예를 들어, 제1 영상과 제2 영상 중 적어도 하나가 디지털 방송 프로그램인 경우, 저장부(102)는 디지털 방송 프로그램이 방송되는 시간 이전에 제1 영상을 저장한다. 이때 제1 영상은 수신부(104)에 의해 수신되거나, 방송 채널, 인터넷, 위성통신 등을 통해 외부 장치에 의해 수신되어 별도의 메모리 장치에 저장된 후 스테레오스코픽 영상 제공 장치(100)에 입력될 수 있다. 스테레오스코픽 영상을 제공하는 사업자는 시청자에게 방송 프로그램 목록을 미리 제공하고 시청자로 하여금 시청하고자 하는 스테레오스코픽 방송을 선택하여 제1 영상을 미리 수신할 수 있도록 서비스를 제공할 수 있다. 수신부(104)는 디지털 방송 프로그램이 방송되는 시간에 제2 영상을 수신하고, 동기화 제어부(106)와 출력부(108)가 제1 영상과 제2 영상을 각각 동기화하여 출력한다.
이렇게 함으로써, 스테레오스코픽 영상 제공 장치(100)는 종래 디지털 방송 시스템과의 호환성을 유지하면서 고화질의 스테레오스코픽 디지털 방송 콘텐츠를 시청자에게 실시간으로 제공할 수 있다. 이 경우, 스테레오스코픽 영상 제공 장치(100)는 종래 HD급 이상의 스테레오스코픽 디지털 방송을 제공할 때 발생하는 전송 대역폭의 한계 문제에 부딪히지 않고, 스테레오스코픽 영상을 풀 해상도로 제공할 수 있다.
도 2는 도 1에 도시된 동기화 제어부(106)의 상세 구성도이다. 도 2에 도시된 바와 같이 동기화 제어부(106)는 프로그램 식별정보 추출부(202), 영상 제어부(204), 및 영상 연관부(206)를 포함할 수 있고, 시간 기준값 추출부(208)와 동기화부(210)를 구비한다.
프로그램 식별정보 추출부(202)는 제1 영상으로부터 프로그램 식별정보를 추출한다. 프로그램 식별정보는 제1 영상에 부여된 제1 영상의 고유한 인덱스이다. 영상 제어부(204)는 제2 영상으로부터 스테레오스코픽 영상을 형성할지 여부를 확인한다. 영상 제어부(204)가 제2 영상으로부터 스테레오스코픽 영상을 형성하는 것으로 확인한 경우, 영상 연관부(206)는 프로그램 식별정보 추출부(202)에 의해 추출된 프로그램 식별정보를 이용하여 제1 영상과 제2 영상을 연관한다. 제2 영상은 독립하여 2차원 영상으로 디스플레이될 수 있기 때문에, 영상 제어부(204)는 제2 영상에 포함된 스테레오스코픽 영상 형성 여부에 대한 정보를 확인하여 영상의 출력 방법을 결정한다. 영상 제어부(204)에서 스테레오스코픽 영상을 형성하는 것으로 확인된 경우, 제2 영상에 대응되는 제1 영상을 찾아 이들을 동기화하여야 한다. 제1 영상은 스테레오스코픽 영상 제공 장치(100)에 미리 저장되어 있기 때문에 스테레오스코픽 영상 제공 장치(100)는 여러 가지 방송 프로그램에 대한 좌영상 또는 우영상 중 어느 하나를 저장하고 있을 수 있다. 이 중에 제2 영상과 대응되는 제1 영상은 하나뿐이므로 영상 연관부(206)는 제1 영상에서 추출된 프로그램 식별정보를 이용하여 제2 영상과 대응되는 제1 영상을 찾을 수 있다.
시간 기준값 추출부(208)는 제1 영상과 제2 영상의 시간 기준값을 각각 추출한다. 동기화부(210)는 시간 기준값 추출부(208)에 의해 추출된 시간 기준값들을 이용하여 제1 영상과 제2 영상을 동기화한다. 이때, 동기화부(210)는 영상 연관부(206)에 의해 제1 영상과 제2 영상의 연관 정보를 이용하여 대응되는 두 영상을 확인할 수 있다. 동기화부(210)는 제1 영상과 제2 영상으로부터 추출된 시간 기준값 중 어느 하나를 다른 하나와 일치하도록 수정하여 두 영상의 동기화를 할 수 있다. 제1 영상이 수신되어 저장되는 시점과 제2 영상이 수신되는 시점이 다르기 때문에 제1 영상과 제2 영상의 시간 기준값이 다를 수 있기 때문이다. 동기화부(210)는 추출된 시간 기준값을 이용하여 제1 영상 또는 제2 영상의 타임 스탬프를 수정하는 방법으로 두 영상을 동기화할 수 있다. 또한 추가적으로 동기화부(210)는 추출된 시간 기준값에 따라 제2 영상을 구성하는 패킷 또는 프레임을 카운팅하고, 제1 영상을 구성하는 패킷 또는 프레임의 카운트 번호를 제2 영상을 구성하는 패킷의 카운트 번호와 일치하도록 수정할 수 있다.
도 3은 본 발명의 일 실시예에 의한 디지털 방송 서비스 시스템(300)의 구성도이고, 도 4는 본 발명의 일 실시예에 의한 3차원 방송 프로그램의 구성도이다. 디지털 방송 서비스 시스템(300)은 스테레오스코픽 콘텐츠로 구성된 방송 프로그램을 시청자에게 제공한다. 좌영상과 우영상은 각각 독립적으로 2차원 영상으로 재생될 수 있고, 다른 하나와 함께 스테레오스코픽 영상으로 재생될 수 있다. 또한 좌영상과 우영상은 각각 독립되거나 종속된 형태의 스트림으로 구성될 수 있다. 여기서 독립의 의미는 종래의 방송과 호환성을 유지하기 위하여 2차원 영상으로 재생될 수 있는 스트림을 의미하고, 종속의 의미는 독립 형태의 스트림을 토대로 재생될 수 있는 스트림을 의미한다. 따라서, 이하의 설명에서 방송 프로그램이 방송되기 이전에 미리 전송되어 저장되는 제1 영상을 3차원 부가 영상이라고 하고, 방송 프로그램이 방송되는 시간에 전송되는 제2 영상을 메인 영상이라고 한다.
우선, 3차원 비디오(302)와 오디오(304)로 구성된 스테레오스코픽 콘텐츠를 3D 콘텐츠 서버(306)가 방송국(308)으로 전달한다. 방송국(308)은 3차원 비디오를 메인 영상과 3차원 부가 영상으로 나누어 전송한다. 네트워크 서버(310)는 3차원 부가 영상을 미리 수신하여 메인 영상이 방송되기 이전에 시청자의 컴퓨터(312) 또는 3DTV 수신기(316)로 송신한다. 이때 3차원 부가 영상은 인터넷을 통해 송신될 수 있고, 시청자는 컴퓨터(312)에 의해 수신된 3차원 부가 영상을 메모리 장치(314)를 통해 3DTV 수신기(316)로 옮겨 저장한다. 3DTV 수신기(316)가 3차원 부가 영상을 수신할 수 있는 능력이 있는 경우, 컴퓨터(312)와 메모리 장치(314)는 불필요하고 3DTV 수신기(316)가 3차원 부가 영상을 직접 수신하여 저장할 수 있다. 방송국(308)으로부터 메인 영상이 방송되면, 3DTV 수신기(316)는 이를 수신하여 이를 이미 저장되어 있는 3차원 부가 영상과 동기화하여 3차원 방송(320)으로 출력한 다. 종래의 DTV 수신기(318)를 사용하는 또 다른 시청자는 DTV 수신기(318)를 통해 메인 영상으로만 구성된 2차원 방송(322)을 시청할 수 있다.
이렇게 방송되는 3차원 방송 프로그램은 도 4에 도시된 바와 같이 서비스될 수 있다. 구간(402)에서 2차원 방송의 서비스 타입으로 제공되는 방송 프로그램을 제공하다가 일정한 구간(404) 동안 3차원 방송의 서비스 타입으로 방송 프로그램을 제공한다. 3차원 방송 프로그램의 제공이 끝난 이후 구간(406)에 다시 2차원 방송 프로그램을 제공한다. 2차원 방송은 비디오와 오디오 스트림으로 구성되고, 3차원 방송은 메인 영상, 3차원 부가 영상, 및 오디오 스트림으로 구성된다. 3DTV 수신기가 3차원 부가 영상을 저장할 수 있는 저장공간에 따라 3차원 방송 프로그램이 제공될 수 있는 구간(404)이 달라질 수 있다. 이렇게 3차원으로 제공되는 방송 프로그램의 예시로서 광고, 장면 하이라이트, 스포츠 중계 등을 들 수 있다. 광고와 장면 하이라이트는 비교적 짧은 시간 동안 재생되고 3차원 방송 프로그램으로 제공될 경우 방송의 효과가 크다. 또한, 스포츠 중계는 3차원으로 제공될 경우 방송의 현장감과 입체감이 크고, 다양한 관련 정보가 3차원 화면에 함께 표시될 수 있기 때문에 효과적인 방송이 될 수 있다.
이 실시예에서 3차원 부가 영상은 종래의 상용 비디오 코덱을 이용하여 부호화되고, MPEG-2 규격을 이용하여 다중화된 스트림으로서 MPEG-2 Transport Stream (TS)으로 저장된다. 또한, 3차원 부가 영상은 MPEG-2 TS가 포함된 다른 형태의 저장 포맷으로 저장될 수도 있으며, 부호화되어 부호화 스트림으로서 별도의 저장 파일 포맷 또는 전송 프로토콜에 저장될 수 있다. TS는 MPEG-2 규격의 프로그램 제어 정보인 Program Specific Information (PSI)를 포함할 수 있고, 프로그램 제어정보 없이 미디어 스트림(예를 들어, 3차원 부가 영상 자체의 스트림)만 포함할 수도 있다. TS에 PSI가 포함되더라도 3DTV 수신기(316)는 실시간으로 방송되는 메인 영상 스트림과의 동기화를 위해, 메인 영상의 PSI만을 이용하고 3차원 부가 영상의 PSI를 무시할 수 있다. 3차원 부가 영상의 저장 포맷이 메인 영상의 전송 스트림과 유사한 형태로 저장되면 다른 저장 포맷을 사용하는 것보다 3DTV 수신기(316)의 복잡도가 낮게 구현될 수 있다.
또한, 3차원 부가 영상이 별도의 저장 파일 포맷으로 저장되는 경우, 실시간으로 방송되는 메인 영상 스트림과의 동기화를 위해 저장 파일 포맷의 타임 스탬프를 메인 영상 스트림의 타임 스탬프와 일치시키도록 3DTV 수신기(316)를 구현할 수 있다. 이 경우 3DTV 수신기(316)가 3차원 부가영상을 TS로 저장할 때 발생하는 시스템의 오버헤드(overhead)를 줄일 수 있는 장점이 있다.
도 5는 본 발명의 일 실시예에 따라 스테레오스코픽 영상을 제공하는 방법의 흐름도이다. 우선, 제1 영상이 저장(502)된 후, 제1 영상과 대응되는 제2 영상이 수신(504)된다. 제2 영상은 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있다. 다음으로, 수신된 제2 영상을 미리 저장되어 있는 제1 영상과 동기화하는 단계(506)가 수행된다. 두 영상이 동기화되면, 두 영상은 스테레오스코픽 영상으로서 출력(508)된다. 앞서 설명한 바와 같이, 제1 영상과 제2 영상은 각각 독립하여 2차원 영상으로 디스플레이될 수 있으며, 제2 영상만 별도로 2차원 영상으로 디스플레이될 수 있다. 또한, 제1 영상과 제2 영상 중 적어도 하나가 디지털 방송 프로그램 인 경우 제1 영상은 디지털 방송 프로그램이 방송되기 이전에 저장되고, 제2 영상은 디지털 방송 프로그램이 방송되는 시간에 수신될 수 있다. 예를 들어, 제2 영상이 디지털 방송 프로그램인 경우 제1 영상은 디지털 방송 프로그램에 종속되어 제2 영상과 함께 스테레오스코픽 영상을 구성하는 3차원 부가 영상이 될 수 있다. 제2 영상은 디지털 방송 프로그램을 구성하는 일반 2차원 영상으로서 메인 영상이고, 제1 영상과 함께 스테레오스코픽 영상으로 디스플레이되거나 제2 영상 독립적으로 2차원 영상으로 디스플레이될 수 있다.
도 6은 도 5에 도시된 동기화 단계(506)의 상세 흐름도이다. 제1 영상과 제2 영상을 동기화하는 단계(506)는 우선 제1 영상으로부터 프로그램 식별정보를 추출하는 단계(602)와 제2 영상으로부터 스테레오스코픽 영상을 형성할지 여부를 확인하는 단계(604)를 포함한다. 단계(604)에서 스테레오스코픽 영상을 형성하는 것으로 확인된 경우, 제1 영상과 제2 영상을 연관하는 단계(606)가 수행된다. 제1 영상과 제2 영상을 연관하는 단계(606)는 단계(602)에서 추출된 프로그램 식별정보를 이용하여 제1 영상을 검색함으로써 수행될 수 있다. 제1 영상과 제2 영상이 연관(606)되면 제1 영상과 제2 영상으로부터 시간 기준값이 추출(608)된다. 추출된 시간 기준값을 이용하여 제1 영상과 제2 영상의 동기화(610)가 수행된다.
동기화 단계(610)에서 제1 영상과 제2 영상으로부터 추출된 시간 기준값 중 어느 하나가 다른 하나와 일치하도록 수정되거나, 추출된 시간 기준값을 이용하여 제1 영상 또는 제2 영상의 타임 스탬프가 수정될 수 있다. 또한, 추가적으로 동기화 단계(610)에서 시간 기준값에 따라 제2 영상을 구성하는 패킷 또는 프레임이 카 운팅되고, 제1 영상을 구성하는 패킷 또는 프레임의 카운트 번호가 제2 영상을 구성하는 패킷 또는 프레임의 카운트 번호와 일치되도록 수정될 수 있다. 이때, 시간 기준값은 Program Clock Reference (PCR)일 수 있고, 타임 스탬프는 Decoding Time Stamp (DTS) 또는 Presentation Time Stamp (PTS) 중 어느 하나일 수 있다.
도 7은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 제공 장치(700)의 구성도이다. 도 7에 도시된 바와 같이 스테레오스코픽 영상 제공 장치(700)는 역다중화기(704)와 복호화기(706)를 포함한다. 역다중화기(704)는 PSI 분석모듈(712), TS 분석 모듈(714), PES 분석 모듈(716), Re_timestamping 모듈(718), 및 Re_counting 모듈(720)을 포함하며, 복호화기(706)는 복호화 모듈(722)과 스테레오스코픽 영상 생성 모듈(724)을 포함한다. 이하에서 메인 영상은 앞서 설명한 스테레오스코픽 영상 제공 장치(700)로 수신되는 제2 영상이고, 3차원 부가 영상은 스테레오스코픽 영상 제공 장치(700)에 미리 저장되는 제1 영상이다.
우선, 3차원 부가 영상 스트림(702)이 역다중화기(704)로 입력되면, PSI 분석 모듈(712)은 PSI를 추출한다. TS 분석 모듈(714)은 TS의 헤더에 포함되어 있는 시간 기준값인 PCR과 프로그램 식별정보(Program ID: PID)를 추출한다. PES 분석 모듈(716)은 Packetized Elementary Stream (PES) 헤더에 포함된 패킷 카운터 또는 PES Private data를 분석한다. 역다중화기(704)는 분석된 패킷 카운터 또는 PES Private data를 이용하여 3차원 부가 영상의 패킷 또는 프레임을 카운팅할 수 있다. Re_timestamping 모듈(718)은 추출된 PCR, DTS, PTS 등, 즉 시간 기준값 또는 타임 스탬프에 따라 3차원 부가 영상 스트림의 타임 스탬프를 수정한다.
또한, 3차원 부가 영상 스트림(702)이 TS가 아닌 별도의 저장 파일 포맷으로 저장되는 경우, Re_timestamping 모듈(718)은 저장된 파일 포맷의 타임 스탬프를 추출된 시간 기준값에 따라 수정한다. Re_counting 모듈(720)은 PCR에 따라 메인 영상과 부가 영상 스트림의 카운트 번호가 일치되도록 수정한다. Re_timestamping 모듈(718)은 TS 분석 모듈(714)에 포함될 수 있고, Re_counting 모듈(720)은 PES 분석 모듈(716)에 포함될 수 있다.
복호화기(706)는 복호화 모듈(722)을 통해 동일한 타임 스탬프를 갖는 메인 영상과 3차원 부가 영상 스트림만을 복호화하고, 스테레오스코픽 영상 생성 모듈(724)을 통해 이들을 스테레오스코픽 영상으로 출력한다. 종래의 2차원 방송을 재생하는 경우에는 스테레오스코픽 영상 생성 모듈(724)을 사용하지 않는다.
도 8은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 스트림의 구성도이다. 도 8과 함께 메인 영상과 3차원 부가 영상을 동기화하는 방법을 설명한다.
스테레오스코픽 영상 제공 장치는 일반적으로 디지털 방송에서 AV 동기화를 위해 사용되는 PCR을 이용하여 메인 영상과 3차원 부가 영상을 동기화한다. PCR은 디코딩 및 재생 시간을 맞추기 위한 시간 기준값으로서 MPEG-2 TS의 헤더(806)를 통해 전송된다. 스테레오스코픽 콘텐츠를 재생하기 위해서는 메인 영상과 3차원 부가 영상의 동기화가 필수적이다. 하지만, 3차원 부가 영상은 메인 영상보다 미리 전송되어 저장되기 때문에 두 영상은 서로 다른 시간값을 갖게 되므로, 이를 동일한 시간 기준값 또는 타임 스탬프로 재조정한다.
스테레오스코픽 영상 제공 장치는 메인 영상 스트림(802)에서 3차원 방송이 시작되는 시점의 PCR, 즉 초기 PCR 값을 이용하여 3차원 부가 영상 스트림(804)과의 동기화를 한다. 즉 3차원 부가 영상 스트림(804)의 타임 스탬프를 메인 영상 스트림(802)의 PCR 값을 기준으로 수정(Re-timestamping)하기 위한 것이다. 타임 스탬프는 각 패킷의 DTS 또는 PTS가 될 수 있다. 예를 들어, 3차원 부가 영상 스트림(804)의 시작 TS 패킷의 PCR 값이 1000이고, 메인 영상 스트림(802)에서 3차원 방송이 시작되는 시점의 PCR 값이 2000인 경우를 설명한다. 이 경우, 두 PCR 값의 차이인 1000만큼 3차원 부가 영상 스트림(804)의 시작 TS 패킷의 PCR 값을 2000으로 수정한다. 또한, 수정된 PCR 값을 토대로 이후에 연속되는 패킷의 DTS와 PTS 값을 수정한다. 이렇게 타임 스탬프를 수정하면 PTS를 통해 두 영상 스트림(802, 804)의 동기화가 이루어지며 스테레오스코픽 영상으로 재생될 수 있다. 3차원 방송 서비스 구간(816) 내에 시청자가 TV를 켜서 서비스를 제공받기 시작하는 경우가 있을 수 있기 때문에, 메인 영상 스트림(802)은 3차원 방송 서비스 구간(816) 내에도 항상 3차원 방송이 시작되는 시점 및 이에 해당하는 PCR 값을 포함할 필요가 있다. 이렇게 구성될 경우, 스테레오스코픽 영상 제공 장치는 3차원 방송 서비스 구간(816) 중에도 메인 영상 스트림(802)의 3차원 방송 시작 초기 시점 및 해당 PCR 값을 알 수 있으므로, 3차원 부가 영상 스트림(804)과의 동기화를 수행할 수 있다.
또한, 추가적으로 더욱 정확한 동기화를 위하여 PES 헤더 내에 포함되는 program_packet_sequence_counter 필드 또는 PES Private data 필드가 사용될 수 있다. 이는 연속적인 PES 패킷의 카운터 역할을 수행하는 것으로서, 3차원 방송이 시작되는 시점에 PES 헤더의 program_packet_sequence_counter_flag는 1이 되고 메 인 영상 스트림(802)의 PES 패킷에 대한 카운팅이 program_packet_sequence_counter를 통해 수행된다. 3차원 부가 영상 스트림(804)을 구성하는 PES 패킷의 카운트 번호가 메인 영상 스트림(802)에서 3차원 방송이 시작되는 시점의 처음 PES 패킷 카운트 번호와 동일하게 수정된다. 예를 들어, 메인 영상 스트림(802)의 3차원 방송이 시작되는 시점의 PES 패킷 카운트 번호가 100인 경우, 3차원 부가 영상 스트림(804)의 처음 PES 패킷 카운트 번호가 100으로 수정된다. 또한, PES Private data 필드를 이용하여 패킷 또는 프레임마다 번호를 할당할 수 있다. 이 방법을 통해 3차원 부가 영상 스트림(804)을 구성하는 PES 패킷 또는 프레임의 번호가 메인 영상 스트림(802)에서 3차원 방송이 시작되는 시점의 처음 PES 패킷 또는 프레임 번호와 동일하게 수정될 수 있다.
Program Map Table (PMT)(814)는 이러한 동기화를 수행하기 위해 필요한 정보들을 포함할 수 있다. 동기화를 위해 3차원 방송 시작 부분의 PCR 값인 initial_PCR(808), 3차원 방송 시작 부분의 패킷 카운트 번호인 initial_packet_sequence_counter(810), 프로그램 식별정보인 SubPID(812)가 사용될 수 있다. 이에 대한 더욱 상세한 설명은 도 9와 함께 이하에서 설명한다.
도 9는 본 발명의 일 실시예에 따라 방송 프로그램 정보를 나타내는 PMT(900)의 구성도이다. PMT(900)는 MPEG-2 시스템 상에서 디지털 방송 프로그램에 대한 기본적인 정보를 표현한다. PMT(900) 내에 포함되는 디스크립터(descriptor)로서 2차원/3차원 방송 여부, 메인 영상과 3차원 부가 영상과의 연관 정보, 및 초기 PCR을 포함하는 3D_service_descriptor(902)와 3D_dependency_descriptor(904) 를 정의한다. 3D_service_descriptor(902)는 방송 프로그램의 2차원 방송 구간과 3차원 방송 구간에 대한 정보를 포함한다. program_info_length 다음에는 전체 방송 프로그램에 대해 부가적으로 요구되는 디스크립터가 추가될 수 있으므로, 3D_service_descriptor(902)는 program_info_length 다음에 배치된다.
도 9에 도시된 바와 같이 N1 loop는 크게 메인 영상(906)과 오디오(908)에 대한 정보를 담는 비트스트림으로 나뉜다. 3D_dependency_descriptor(904)는 메인 영상과 3차원 부가 영상의 연관성 정보를 포함한다. ES_info_length 다음에는 방송 프로그램을 구성하는 메인 영상에 연관된 부가 정보가 추가될 수 있으므로, 3D_dependency_descriptor(904)는 ES_info_length 다음에 배치된다. 3D_service_descriptor(902)와 3D_dependency_descriptor(904)는 PMT(900) 내부에 포함되는 것으로 한정되지 않고, 다른 방송 서비스에 적용되는 다양한 테이블에 독립된 디스크립터로서 포함될 수 있다. 또한, 3D_service_descriptor(902)와 3D_dependency_descriptor(904)의 명칭과 PMT(900) 내에서의 위치는 실시예에 따라 변경될 수 있으며, 이들 각각에 포함되어 기술된 필드는 다른 디스크립터에 포함되거나 독립된 디스크립터로서 구현될 수 있다.
표 1은 3D_service_descriptor의 일 예를 나타내는 것으로서, 3D_service_descriptor는 2차원/3차원 방송 여부 및 초기 PCR 정보를 포함한다.
Syntax No. of Bits
3D_service_descriptor() {
descriptor_tag 8
descriptor_length 8
3DService_flag 1
if (3Dservice_flag) {
initial_PCR 42
3D_auxiliary_dataType 3
reserved 2
}
reserved 7
}
표 1에서 3DService_flag는 2차원 또는 3차원 방송 여부를 구분하기 위한 것으로서 값이 '0'인 경우 2차원 방송을 나타내고 '1'인 경우 3차원 방송을 나타내는 것으로 정의될 수 있다. initial_PCR은 3차원 방송이 시작되는 시점의 시간 기준값인 초기 PCR 값을 나타낸다.
표 2는 3D_service_descriptor의 다른 일 예를 나타낸다.
Syntax No. of Bits
3D_service_descriptor() {
descriptor_tag 8
descriptor_length 8
3DService_flag 1
if (3Dservice_flag) {
initial_PCR 42
initial_packet_sequence_counter 7
3D_auxiliary_dataType 3
reserved 3
}
reserved 7
}
initial_packet_sequence_coiunter는 3차원 방송이 시작되는 시점에서 PES 패킷의 카운트 번호를 나타내거나 PES Private data 필드에 할당된 프레임의 카운트 번호를 나타낸다.
3D_auxiliary_dataType은 스테레오스코픽 영상 제공 장치에 저장된 3차원 부가 영상 스트림의 영상 구성 타입을 나타낸다. 동기화된 좌영상과 우영상을 스테레오스코픽 영상으로 디스플레이하는 방법에는 여러 가지가 있다. 좌우영상을 겹쳐서 디스플레이하는 편광방식, 좌우영상의 프레임을 교대로 반복하여 재생하는 프레임 시퀀셜(Frame sequential) 방식, 좌우영상의 필드 영상을 교대로 반복하여 재생하는 필드 시퀀셜(Field sequential) 방식, 좌영상의 홀수라인과 우영상의 짝수라인을 라인 단위로 인터리빙하여 재생하는 방식, 좌영상의 홀수열과 우영상의 짝수열을 픽셀 단위로 인터리빙하여 재생하는 방식 등이 주로 사용된다. 3차원 부가 영상은 스테레오스코픽 콘텐츠 재생시에만 이용될 수 있기 때문에, 이 경우 영상에 대한 크기 정보가 필요하다. 왜냐하면, 편광방식이나 프레임 시퀀셜 방식은 메인영상과 동일한 사이즈의 영상이 필요하지만, 나머지 방식은 메인영상과 대비하여 수평 또는 수직 방향으로 반절 사이즈의 영상이 필요하기 때문이다.
표 3은 3D_auxiliary_dataType을 나타낸다. 3D_auxiliary_dataType은 3차원 부가 영상의 크기정보를 포함하고, 깊이 영상 또는 변이 영상에 대한 메타데이터를 포함한다. 깊이 영상 또는 변이 영상에 대한 메타데이터는 좌영상과 우영상을 스테레오스코픽 영상으로 디스플레이할 때 사용된다.
Value Type
000 Reserved
001 메인영상 대비 동일 사이즈의 영상
010 메인영상 대비 가로 반절 사이즈의 영상
011 메인영상 대비 세로 반절 사이즈의 영상
100 메인영상 대비 가로/세로 반절 사이즈의 영상
101 깊이 영상 (Depth map)
1110 변이 영상 (Disparity map)
101~111 Reserved
표 4는 3D_dependency_descriptor(904)의 구조를 나타낸다.
Syntax No. of Bits
3D_dependency_descriptor() {
descriptor_tag 8
descriptor_length 8
SubPID 13
3D_auxiliaryData_streamtype 8
reserved 3
}
3D_dependency_descriptor(904)는 2차원/3차원 방송 여부가 3차원 방송인 경우에 사용되고, 메인 영상과 3차원 부가 영상과의 연관 정보를 포함한다. SubPID는 스테레오스코픽 영상을 재생하기 위하여 메인 영상 스트림과 연관된 3차원 부가 영상 스트림의 PID를 나타낸다. 또한, SubPID는 메인 영상 스트림과 연관된 3차원 부가 영상 스트림의 특정 인덱스를 나타낼 수 있다. 3D_auxiliaryData_streamtype은 스테레오스코픽 영상 제공 장치에 저장된 3차원 부가 영상의 스트림 타입(예를 들어, MPEG-2 stream 또는 AVC stream 등)을 나타낸다.
본 발명은 전술한 실시예에 한정되지 않고, 다양한 실시예로 치환, 변형될 수 있다. 예를 들어, 고화질 스테레오스코픽 서비스 외 멀티채널 오디오 서비스의 경우는 본 발명을 통하여 쉽게 구현될 수 있다. 일 실시예로서 20.1채널 서비스를 제공하는 경우, 스테레오스코픽 영상 제공 장치는 15채널을 미리 수신하여 저장하고 5.1채널을 메인 방송이 방송될 때 수신하도록 구현될 수 있다. 이 경우, 스테레오스코픽 영상 제공 장치는 이 둘을 통합하여 20.1채널 서비스를 사용자에게 제공할 수 있다.
본 명세서에서 기재한 모듈(module)이란 용어는 특정한 기능이나 동작을 처리하는 장치를 나타내는 하나의 단위를 말하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
전술한 장치 및 시스템은 하드웨어, 소프트웨어 또는 이들의 조합으로 구현될 수 있다. 하드웨어 구현에 있어서, 스테레오스코픽 영상의 동기화를 위하여 사용된 모듈은 하나 이상의 주문형 집적회로(ASIC), 디지털 신호 프로세서(DSP), 디지털 신호 처리 장치(DSPD), 프로그램 가능 논리 장치(PLD), 필드 프로그램 가능 게이트 어레이(FPGA), 프로세서, 제어기, 마이크로-제어기, 마이크로프로세서, 여기에 기술한 기능들을 수행하도록 설계된 다른 전자 유닛 또는 이들의 조합으로 구현될 수 있다. 소프트웨어는 여기에 기술된 기능들을 수행하는 모듈을 통해 구현될 수 있다. 소프트웨어 코드는 메모리 유닛들에 저장되고 프로세서에 의해 실행될 수 있다. 메모리 유닛은 프로세서 내부 또는 외부에서 구현될 수 있으며, 이 경우에 메모리는 공지된 다양한 수단을 통해 프로세서와 연결될 수 있다.
한편, 전술한 바와 같은 본 발명의 방법은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다.　또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체(정보저장매체)에 저장되고, 컴퓨터에 의하여 판독되고 실행됨으로써 본 발명의 방법을 구현한다. 그리고 상기 기록매체는 컴퓨터가 판독할 수 있는 모든 형태의 기록매체(CD, DVD와 같은 유형적 매체뿐만 아니라 반송파와 같은 무형적 매체)를 포함한다.
전술한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로, 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
도 1은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 제공 장치(100)의 구성도이다.
도 2는 도 1에 도시된 동기화 제어부(106)의 상세 구성도이다.
도 3은 본 발명의 일 실시예에 의한 디지털 방송 서비스 시스템(300)의 구성도이다.
도 4는 본 발명의 일 실시예에 의한 3차원 방송 프로그램의 구성도이다.
도 5는 본 발명의 일 실시예에 따라 스테레오스코픽 영상을 제공하는 방법의 흐름도이다.
도 6은 도 5에 도시된 동기화 단계(506)의 상세 흐름도이다.
도 7은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 제공 장치(700)의 구성도이다.
도 8은 본 발명의 일 실시예에 의한 스테레오스코픽 영상 스트림의 구성도이다.
도 9는 본 발명의 일 실시예에 따라 방송 프로그램 정보를 나타내는 Program Map Table(900)의 구성도이다.

Claims (20)

  1. 삭제
  2. 스테레오스코픽 영상을 제공하는 방법에 있어서,
    제1 영상을 저장하는 단계;
    상기 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 단계;
    상기 제1 영상과 상기 제2 영상을 동기화하는 단계; 및
    상기 동기화된 두 영상을 출력하는 단계를 포함하되,
    상기 제1 영상과 상기 제2 영상 중 적어도 하나는 디지털 방송 프로그램이고,
    상기 제1 영상 저장 단계에서 상기 제1 영상은 상기 디지털 방송 프로그램이 방송되는 시간 이전에 저장되며,
    상기 제2 영상 수신 단계에서 상기 제2 영상은 상기 디지털 방송 프로그램이 방송되는 시간에 수신되는
    스테레오스코픽 영상 제공 방법.
  3. 제 2 항에 있어서,
    상기 제1 영상과 상기 제2 영상은 각각 독립하여 2차원 영상으로 디스플레이 될 수 있는 스테레오스코픽 영상 제공 방법.
  4. 제 2 항에 있어서,
    상기 동기화 단계는
    상기 제1 영상과 상기 제2 영상의 시간 기준값을 각각 추출하는 단계 및
    상기 추출된 시간 기준값을 이용하여 상기 제1 영상과 제2 영상을 동기화하는 단계를
    포함하는 스테레오스코픽 영상 제공 방법.
  5. 제 4 항에 있어서,
    상기 동기화 단계는
    상기 제1 영상으로부터 프로그램 식별정보를 추출하는 단계;
    상기 제2 영상으로부터 스테레오스코픽 영상을 형성할 지 여부를 확인하는 단계; 및
    상기 확인 단계에서 스테레오스코픽 영상을 형성하는 것으로 확인된 경우 상 기 추출된 프로그램 식별정보에 따라 상기 제1 영상과 상기 제2 영상을 연관하는 단계를
    더 포함하는 스테레오스코픽 영상 제공 방법.
  6. 제 4 항에 있어서,
    상기 시간 기준값을 이용한 동기화 단계는 상기 추출된 시간 기준값 중 어느 하나를 다른 하나와 일치하도록 수정하는 스테레오스코픽 영상 제공 방법.
  7. 제 4 항에 있어서,
    상기 시간 기준값을 이용한 동기화 단계는 상기 추출된 시간 기준값에 따라 상기 제1 영상 또는 상기 제2 영상 중 적어도 하나의 타임 스탬프(time stamp)를 수정하는 스테레오스코픽 영상 제공 방법.
  8. 제 4 항에 있어서,
    상기 시간 기준값을 이용한 동기화 단계는
    상기 추출된 시간 기준값에 따라 상기 제2 영상을 구성하는 패킷을 카운팅하고, 상기 제1 영상을 구성하는 패킷의 카운트 번호를 상기 제2 영상을 구성하는 패 킷의 카운트 번호와 일치하도록 수정하는 스테레오스코픽 영상 제공 방법.
  9. 삭제
  10. 스테레오스코픽 영상을 제공하는 장치에 있어서,
    제1 영상을 저장하는 저장부;
    상기 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 수신부;
    상기 제1 영상과 상기 제2 영상을 동기화하는 동기화 제어부; 및
    상기 동기화된 두 영상을 출력하는 출력부를 포함하되,
    상기 제1 영상과 상기 제2 영상 중 적어도 하나는 디지털 방송 프로그램이고,
    상기 저장부는 상기 제1 영상을 상기 디지털 방송 프로그램이 방송되는 시간 이전에 저장하며,
    상기 수신부는 상기 제2 영상을 상기 디지털 방송 프로그램이 방송되는 시간에 수신하는
    스테레오스코픽 영상 제공 장치.
  11. 제 10 항에 있어서,
    상기 제1 영상과 상기 제2 영상은 각각 독립하여 2차원 영상으로 디스플레이 될 수 있는 스테레오스코픽 영상 제공 장치.
  12. 제 10 항에 있어서,
    상기 동기화 제어부는
    상기 제1 영상과 상기 제2 영상의 시간 기준값을 각각 추출하는 시간 기준값 추출부 및
    상기 추출된 시간 기준값을 이용하여 상기 제1 영상과 제2 영상을 동기화하는 동기화부를
    포함하는 스테레오스코픽 영상 제공 장치.
  13. 제 12 항에 있어서,
    상기 동기화 제어부는
    상기 제1 영상으로부터 프로그램 식별정보를 추출하는 프로그램 식별정보 추출부;
    상기 제2 영상으로부터 스테레오스코픽 영상을 형성할지 여부를 확인하는 영 상 제어부; 및
    상기 영상 제어부에서 스테레오스코픽 영상을 형성하는 것으로 확인된 경우 상기 추출된 프로그램 식별정보에 따라 상기 제1 영상과 상기 제2 영상을 연관하는 영상 연관부를
    더 포함하는 스테레오스코픽 영상 제공 장치.
  14. 제 12 항에 있어서,
    상기 동기화부는 상기 추출된 시간 기준값 중 어느 하나를 다른 하나와 일치하도록 수정하는 스테레오스코픽 영상 제공 장치.
  15. 제 12 항에 있어서,
    상기 동기화부는 상기 추출된 시간 기준값에 따라 상기 제1 영상 또는 상기 제2 영상 중 적어도 하나의 타임 스탬프(time stamp)를 수정하는 스테레오스코픽 영상 제공 장치.
  16. 제 12 항에 있어서,
    상기 동기화부는
    상기 추출된 시간 기준값에 따라 상기 제2 영상을 구성하는 패킷을 카운팅하고, 상기 제1 영상을 구성하는 패킷의 카운트 번호를 상기 제2 영상을 구성하는 패킷의 카운트 번호와 일치하도록 수정하는 스테레오스코픽 영상 제공 장치.
  17. 삭제
  18. 스테레오스코픽 영상을 동기화하는 방법에 있어서,
    제1 영상을 저장하는 단계;
    상기 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 단계; 및
    상기 제1 영상과 상기 제2 영상을 동기화하는 단계를 포함하되,
    상기 제1 영상과 상기 제2 영상 중 적어도 하나는 디지털 방송 프로그램이고,
    상기 제1 영상 저장 단계에서 상기 제1 영상은 상기 디지털 방송 프로그램이 방송되는 시간 이전에 저장되며,
    상기 제2 영상 수신 단계에서 상기 제2 영상은 상기 디지털 방송 프로그램이 방송되는 시간에 수신되는
    동기화 방법.
  19. 삭제
  20. 스테레오스코픽 영상을 동기화하는 장치에 있어서,
    제1 영상을 저장하는 저장부;
    상기 제1 영상과 연관되어 스테레오스코픽 영상을 형성할 수 있는 제2 영상을 수신하는 수신부;
    상기 제1 영상과 상기 제2 영상을 동기화하는 동기화 제어부를 포함하되,
    상기 제1 영상과 상기 제2 영상 중 적어도 하나는 디지털 방송 프로그램이고,
    상기 저장부는 상기 제1 영상을 상기 디지털 방송 프로그램이 방송되는 시간 이전에 저장하며,
    상기 수신부는 상기 제2 영상을 상기 디지털 방송 프로그램이 방송되는 시간에 수신하는
    동기화 장치.
KR1020080108893A 2008-11-04 2008-11-04 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법 Expired - Fee Related KR100972792B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020080108893A KR100972792B1 (ko) 2008-11-04 2008-11-04 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
CN200980153631.4A CN102273214B (zh) 2008-11-04 2009-07-21 基于同步立体图像来提供立体图像的设备和方法
JP2011535498A JP2012507968A (ja) 2008-11-04 2009-07-21 ステレオスコピック画像を同期化する装置及び方法と、これを利用したステレオスコピック画像提供装置及び方法
US13/127,670 US8917314B2 (en) 2008-11-04 2009-07-21 Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same
EP09824929.5A EP2353299B1 (en) 2008-11-04 2009-07-21 Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same
PCT/KR2009/004044 WO2010053246A2 (en) 2008-11-04 2009-07-21 Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080108893A KR100972792B1 (ko) 2008-11-04 2008-11-04 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100049873A KR20100049873A (ko) 2010-05-13
KR100972792B1 true KR100972792B1 (ko) 2010-07-29

Family

ID=42153360

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080108893A Expired - Fee Related KR100972792B1 (ko) 2008-11-04 2008-11-04 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법

Country Status (6)

Country Link
US (1) US8917314B2 (ko)
EP (1) EP2353299B1 (ko)
JP (1) JP2012507968A (ko)
KR (1) KR100972792B1 (ko)
CN (1) CN102273214B (ko)
WO (1) WO2010053246A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101203483B1 (ko) * 2011-04-27 2012-11-21 주식회사 에스비에스 3차원 입체방송의 전송방법 및 그 수신기

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101347744B1 (ko) * 2009-08-19 2014-01-03 서울시립대학교 산학협력단 영상 처리 장치 및 방법
KR101694821B1 (ko) * 2010-01-28 2017-01-11 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
US9426441B2 (en) 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
KR101830881B1 (ko) 2010-06-09 2018-04-05 삼성전자주식회사 프래그먼트 기반의 멀티미디어 스트리밍 서비스 제공 방법과 그 장치, 그리고 프래그먼트 기반의 멀티미디어 스트리밍 서비스 수신 방법과 그 장치
FR2963528B1 (fr) * 2010-07-29 2012-08-24 Television Francaise 1 Telediffusion d'une video stereoscopique
WO2012030176A2 (ko) * 2010-09-01 2012-03-08 엘지전자 주식회사 3d (3-dimentional) 방송 서비스를 위한 방송 신호 처리 방법 및 장치
KR20120023268A (ko) * 2010-09-01 2012-03-13 삼성전자주식회사 디스플레이 장치 및 그 영상 생성 방법
JP2013545344A (ja) * 2010-10-13 2013-12-19 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュート ステレオスコピック映像情報の送信方法及び装置
CN103190152B (zh) * 2010-10-26 2016-04-27 韩国放送公社 用于三维广播的分级广播系统及方法
KR101910192B1 (ko) * 2010-11-12 2018-10-22 한국전자통신연구원 3ｄｔｖ 서비스에서의 영상 압축 규격 결정 방법 및 장치
JP5412404B2 (ja) * 2010-11-15 2014-02-12 シャープ株式会社 情報統合装置、情報表示装置、情報記録装置
EP2648407A4 (en) * 2010-12-02 2014-07-30 Korea Electronics Telecomm METHOD AND DEVICE FOR TRANSMITTING STEREOSCOPIC VIDEO CONTENT
KR101831775B1 (ko) * 2010-12-07 2018-02-26 삼성전자주식회사 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
US9491437B2 (en) 2010-12-07 2016-11-08 Samsung Electronics Co., Ltd. Transmitter for transmitting data for constituting content, receiver for receiving and processing data, and method therefor
CN103190153B (zh) * 2010-12-13 2015-11-25 韩国电子通信研究院 用于立体感视频服务的信号传送方法和使用该方法的设备
BR112013017234A2 (pt) 2011-01-04 2016-10-25 Samsung Electronics Co Ltd dispositivo de exibição 3d, e método de exibição 3d
KR20120084252A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
KR101869103B1 (ko) 2011-01-26 2018-06-19 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템
JP2012160813A (ja) * 2011-01-31 2012-08-23 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US20140002602A1 (en) * 2011-03-10 2014-01-02 Electronics And Telecommunications Research Institute Apparatus and method of synchronizing reference picture and additional picture of real-time broadcasting program
WO2012145191A1 (en) 2011-04-15 2012-10-26 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
JP2012244411A (ja) * 2011-05-19 2012-12-10 Sony Corp 画像データ送信装置、画像データ送信方法および画像データ受信装置
TW201322767A (zh) * 2011-07-21 2013-06-01 松下電器產業股份有限公司 發送裝置、接收再生裝置、發送方法及接收再生方法
WO2013019042A1 (ko) 2011-07-29 2013-02-07 한국전자통신연구원 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법
ITTO20110723A1 (it) * 2011-08-03 2013-02-04 Csp A Innovazione Nelle Ict Scarl Metodi ed apparecchi per trasmettere e per ricevere contenuti multimediali
US9900577B2 (en) 2011-08-10 2018-02-20 Electronics And Telecommunications Research Institute Apparatus and method for providing content for synchronizing left/right streams in fixed/mobile convergence 3DTV, and apparatus and method for playing content
WO2013025035A2 (ko) * 2011-08-12 2013-02-21 삼성전자 주식회사 송신 장치, 수신 장치 및 그 송수신 방법
US9516086B2 (en) 2011-08-12 2016-12-06 Samsung Electronics Co., Ltd. Transmitting device, receiving device, and transceiving method thereof
JP6184408B2 (ja) * 2011-08-12 2017-08-23 サムスン エレクトロニクス カンパニー リミテッド 受信装置及びその受信方法
KR20130065250A (ko) * 2011-12-09 2013-06-19 삼성전자주식회사 디스플레이 장치 및 그를 이용한 디스플레이 방법
JP5915158B2 (ja) * 2011-12-22 2016-05-11 ソニー株式会社 タイムコード表示装置及びタイムコード表示方法
WO2013154397A1 (en) * 2012-04-13 2013-10-17 Samsung Electronics Co., Ltd. Transmitting system and receiving apparatus for providing hybrid service, and service providing method thereof
KR102016674B1 (ko) * 2012-04-13 2019-08-30 한국전자통신연구원 하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법
US20130276046A1 (en) * 2012-04-13 2013-10-17 Electronics And Telecommunications Research Institute Receiving apparatus for receiving a plurality of signals through different paths and method for processing signals thereof
CN102665109A (zh) * 2012-04-19 2012-09-12 中兴通讯股份有限公司 一种多媒体视频数据的发送、接收方法及对应装置
WO2013162256A1 (ko) * 2012-04-23 2013-10-31 엘지전자 주식회사 3ｄ 서비스를 위한 신호 처리 장치 및 방법
KR20130128266A (ko) * 2012-05-16 2013-11-26 삼성전자주식회사 컨텐츠 수신 장치, 디스플레이 장치 및 그 방법
KR101699367B1 (ko) * 2012-05-16 2017-02-14 한국전자통신연구원 3ｄｔｖ 다중화 방법 및 그 장치
CN102780897A (zh) * 2012-05-31 2012-11-14 新奥特（北京）视频技术有限公司 一种单文件视频素材支持3d技术的方法
CN102780896A (zh) * 2012-05-31 2012-11-14 新奥特（北京）视频技术有限公司 一种流媒体素材支持3d技术的方法
CN103517062B (zh) * 2012-06-15 2016-05-25 晨星软件研发(深圳)有限公司 影像的同步方法及其装置
JP2014027448A (ja) * 2012-07-26 2014-02-06 Sony Corp 情報処理装置、情報処理方法、及びプログラム
US9860515B2 (en) * 2012-12-11 2018-01-02 Electronics And Telecommunications Research Institute Apparatus and method for 3D content broadcasting with boundary information
US20150109413A1 (en) * 2013-10-21 2015-04-23 Electronics And Telecommunications Research Institute Video reception apparatus to provide hybrid service based on transport stream system target decoder model
CN104935914B (zh) * 2014-03-19 2017-03-22 宏达国际电子股份有限公司 电子装置及其摄影方法
US9838756B2 (en) * 2014-05-20 2017-12-05 Electronics And Telecommunications Research Institute Method and apparatus for providing three-dimensional territorial broadcasting based on non real time service
KR102204830B1 (ko) * 2014-05-20 2021-01-19 한국전자통신연구원 비-실시간 서비스 기반 지상파 3차원 방송 제공 방법 및 장치
US10154225B2 (en) 2016-11-18 2018-12-11 Electronics & Telecommunications Research Institute Frame grabber, image processing system including the same, and image processing method using the frame grabber
JP6891913B2 (ja) * 2019-03-25 2021-06-18 カシオ計算機株式会社 電子表示装置及び表示制御方法
US20200314411A1 (en) * 2019-03-29 2020-10-01 Alibaba Group Holding Limited Synchronizing an illumination sequence of illumination sources with image capture in rolling shutter mode
SE545345C2 (en) * 2021-06-30 2023-07-11 Tobii Ab Method and system for alignment of data

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10336700A (ja) 1997-05-30 1998-12-18 Sanyo Electric Co Ltd ディジタル放送システム、送信機、および受信機
KR100747550B1 (ko) 2005-12-09 2007-08-08 한국전자통신연구원 Ｄｍｂ 기반의 3차원 입체영상 서비스 제공 방법과, ｄｍｂ기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그방법
KR20080030360A (ko) * 2006-09-29 2008-04-04 한국전자통신연구원 디지털 방송기반의 3차원 정지영상 서비스 방법 및 장치
KR20080053175A (ko) * 2006-12-08 2008-06-12 한국전자통신연구원 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4562463A (en) * 1981-05-15 1985-12-31 Stereographics Corp. Stereoscopic television system with field storage for sequential display of right and left images
US5953054A (en) * 1996-05-31 1999-09-14 Geo-3D Inc. Method and system for producing stereoscopic 3-dimensional images
JPH10174064A (ja) * 1996-12-06 1998-06-26 Sanyo Electric Co Ltd ディジタル放送システム
JP4723715B2 (ja) 1999-10-15 2011-07-13 パナソニック株式会社 マルチチャンネル表示用データ作成装置、及びマルチチャンネル表示用データ作成方法
US7236531B1 (en) 1999-10-15 2007-06-26 Matsushita Electric Industrial Co., Ltd. Display apparatus displaying certain data without a program clock reference
US6724825B1 (en) * 2000-09-22 2004-04-20 General Instrument Corporation Regeneration of program clock reference data for MPEG transport streams
JP4612171B2 (ja) * 2000-10-27 2011-01-12 株式会社東芝 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
JPWO2003092304A1 (ja) * 2002-04-25 2005-09-08 シャープ株式会社 画像データ生成装置、画像データ再生装置、および画像データ記録媒体
JP2004040455A (ja) * 2002-07-03 2004-02-05 Nippon Television Network Corp 伝送再生方法、伝送方法、及びそのシステム
US7298741B2 (en) * 2003-02-27 2007-11-20 Sharp Laboratories Of America, Inc. Robust MPEG-2 multiplexing system and method using an adjustable time stamp
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
US7650036B2 (en) * 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding
JP4689231B2 (ja) 2004-10-25 2011-05-25 池上通信機株式会社 トランスポートストリーム切換装置
JP2007158442A (ja) * 2005-11-30 2007-06-21 Toshiba Corp 放送記録装置及び放送記録方法
JP5047607B2 (ja) * 2006-12-26 2012-10-10 パナソニック株式会社 ストリーム記録装置、ストリーム記録方法、記録システム、および記録再生システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10336700A (ja) 1997-05-30 1998-12-18 Sanyo Electric Co Ltd ディジタル放送システム、送信機、および受信機
KR100747550B1 (ko) 2005-12-09 2007-08-08 한국전자통신연구원 Ｄｍｂ 기반의 3차원 입체영상 서비스 제공 방법과, ｄｍｂ기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그방법
KR20080030360A (ko) * 2006-09-29 2008-04-04 한국전자통신연구원 디지털 방송기반의 3차원 정지영상 서비스 방법 및 장치
KR20080053175A (ko) * 2006-12-08 2008-06-12 한국전자통신연구원 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101203483B1 (ko) * 2011-04-27 2012-11-21 주식회사 에스비에스 3차원 입체방송의 전송방법 및 그 수신기

Also Published As

Publication number Publication date
US20110254920A1 (en) 2011-10-20
CN102273214B (zh) 2014-03-12
CN102273214A (zh) 2011-12-07
WO2010053246A3 (en) 2011-03-31
EP2353299B1 (en) 2018-09-12
WO2010053246A2 (en) 2010-05-14
EP2353299A2 (en) 2011-08-10
KR20100049873A (ko) 2010-05-13
JP2012507968A (ja) 2012-03-29
US8917314B2 (en) 2014-12-23
EP2353299A4 (en) 2013-03-06

Similar Documents

Publication Publication Date Title
KR100972792B1 (ko) 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
KR101831775B1 (ko) 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
KR101639358B1 (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법
KR101372376B1 (ko) 디지털 방송 시스템의 스테레오스코픽 비디오 수신 방법
KR101500440B1 (ko) 영상처리장치 및 영상처리방법
US20110181693A1 (en) Method and apparatus for generating data stream for providing 3-dimensional multimedia service, and method and apparatus for receiving the data stream
US9628780B2 (en) Device and method for receiving digital broadcast signal
US9516086B2 (en) Transmitting device, receiving device, and transceiving method thereof
CN103891275B (zh) 数字广播信号处理方法及设备
MX2012008818A (es) Metodo y aparato para transmitir flujo de difusion digital usando informacion de enlace acerca de flujo de video multivistas y metodo y aparato para su recepcion.
US9270972B2 (en) Method for 3DTV multiplexing and apparatus thereof
US20130209063A1 (en) Digital receiver and content processing method in digital receiver
KR20150004318A (ko) 3ｄ 서비스를 위한 신호 처리 장치 및 방법
US20140147088A1 (en) Transmission device, receiving/playing device, transmission method, and receiving/playing method
US20140333836A1 (en) Apparatus and method for adding synchronization information to an auxiliary data space in a video signal and synchronizing a video
KR101808672B1 (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

AMND Amendment
P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E601 Decision to refuse application
PE0601 Decision on rejection of patent

St.27 status event code: N-2-6-B10-B15-exm-PE0601

AMND Amendment
E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

J201 Request for trial against refusal decision
P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PJ0201 Trial against decision of rejection

St.27 status event code: A-3-3-V10-V11-apl-PJ0201

PB0901 Examination by re-examination before a trial

St.27 status event code: A-6-3-E10-E12-rex-PB0901

B701 Decision to grant
PB0701 Decision of registration after re-examination before a trial

St.27 status event code: A-3-4-F10-F13-rex-PB0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

FPAY Annual fee payment

Payment date: 20130624

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

FPAY Annual fee payment

Payment date: 20140630

Year of fee payment: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

FPAY Annual fee payment

Payment date: 20150629

Year of fee payment: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

FPAY Annual fee payment

Payment date: 20170627

Year of fee payment: 8

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

FPAY Annual fee payment

Payment date: 20180627

Year of fee payment: 9

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 9

FPAY Annual fee payment

Payment date: 20190625

Year of fee payment: 10

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 10

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 11

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 12

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 13

PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20230723

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20230723