KR20070100357A

KR20070100357A - 기록매체, 재생장치, 프로그램, 기록방법, 재생방법

Info

Publication number: KR20070100357A
Application number: KR1020077018631A
Authority: KR
Inventors: 와타루 이케다; 도모유키 오카다
Original assignee: 마츠시타 덴끼 산교 가부시키가이샤
Priority date: 2004-06-02
Filing date: 2005-06-02
Publication date: 2007-10-10
Anticipated expiration: 2025-06-02
Also published as: JPWO2005120061A1; CN101114504B; KR100884150B1; KR20070100358A; KR100884149B1; CN1965576B; EP1858015A3; DE602005017824D1; EP1858015A2; US20080089662A1; US8326116B2; EP1761055A1; CN100596184C; EP1858015B1; CN101114504A; EP1761055A4; JP4027408B2; CN1965576A; EP1858014A2; WO2005120061A1

Abstract

BD-ROM에는 비디오 스트림과 엔트리 맵이 대응되어 기록되어 있다. 슬라이드 쇼를 구성하는 비디오 스트림은 복수의 IDR 픽쳐로 이루어지고, 이에 대응하는 엔트리 맵(EP_map)은 비디오 스트림에서의 각 IDR 픽쳐의 엔트리 시각(PTS_EP_start)을 엔트리 위치와 대응시켜서 나타낸다. application_type은 비디오 스트림을 구성하는 개개의 픽쳐 데이터에 대한 엔트리 정보가 EP_map에 존재하고 있고, 개개의 픽쳐 데이터는 단독으로 디코드 된다는 취지를 나타낸다.

슬라이드 쇼, IDR 픽쳐, 엔트리 맵, 엔트리 시각, 엔트리 위치, 디코드

Description

기록매체, 재생장치, 프로그램, 기록방법, 재생방법{RECORDING MEDIUM, REPRODUCTION DEVICE, PROGRAM, RECORDING METHOD, AND REPRODUCTION METHOD}

본 발명은 랜덤 액세스(random access)기술의 기술분야에 속하는 발명이다.

랜덤 액세스 기술이란, 디지털 스트림이 갖는 시간 축 상의 임의의 일시점을 디지털 스트림 상의 기록위치로 변환하여, 그 기록위치로부터의 재생을 개시하는 기술이며, BD-ROM이나 DVD-Video와 같은 기록매체에 기록되어 있는 디지털 스트림을 재생함에 있어서 없어서는 안 되는 기반기술이다.

디지털 스트림은 MPEG2-Video, MPEG4-AVC 등의 가변길이 부호화방식에 의해 부호화되어 있고, 프레임당 정보량에 차이가 있다. 이런 이유에서, 랜덤 액세스를 실행할 때, 상술한 변환을 행함에 있어서는 엔트리 맵(entry map)의 참조가 필요하게 된다. 여기에서 엔트리 맵이란, 시간 축 상의 복수의 엔트리 시각(entry time)을 디지털 스트림에서의 복수의 엔트리 위치(entry point)에 대응시켜서 나타내는 정보이며, 엔트리 맵에서의 복수의 엔트리 시각이 1초라는 시간 정밀도를 갖는 경우, 1초라고 하는 시간 정밀도로 랜덤 액세스를 고효율로 행할 수 있다.

비디오 스트림에 대한 랜덤 액세스에서는 GOP의 선두에 존재하는 I픽 쳐(Intra picture)를 탐색할 필요가 있다. I픽쳐의 탐색을 지원하는 데이터 구조에 대해서는 하기 특허문헌에 기재된 선행기술이 있다.

특허문헌 1 : 일본국 특개2000-228656호 공보

시간 축을 갖는 애플리케이션에는 영화 외에, 슬라이드 쇼(slide show)가 있다. 슬라이드 쇼란 복수의 정지화상으로 이루어지고, 각 정지화상이 미리 정해진 시간 축을 따라서 재생되는 애플리케이션을 말한다. 슬라이드 쇼도 재생을 위한 시간 축을 가지므로 시간 축 상의 복수의 엔트리 시각을 엔트리 위치에 대응하여 나타내 둠에 따라 시간 축 상의 임의의 시점으로부터 스트림 상의 기록위치를 이끌어낼 수 있고, 이러한 기록위치로부터의 재생을 실행할 수 있다.

그런데 슬라이드 쇼는 정지화상으로 구성되어 있기 때문에, 영화보다도 고 정밀도의 랜덤 액세스가 요구된다. 고정밀도의 랜덤 액세스란 1매 앞, 10매 앞과 같이 "1매의 픽쳐"를 액세스 단위로 한 랜덤 액세스이다. 비디오 스트림의 엔트리 맵은 1초 간격이라고 하는 바와 같이, 1초 정도의 시간 정밀도를 가지며, 이 1초라고 하는 시간간격에는 20∼30매의 픽쳐가 포함될 수 있다. 그 때문에, 상술한 엔트리 맵을 이용하여 픽쳐 정밀도에서의 랜덤 액세스를 실현하고자 하면, 엔트리 맵의 참조만으로는 부족하고, 스트림에 대한 해석이 필요하게 된다.

여기에서의 "스트림의 해석"이란, 엔트리 맵에 기재되어 있는 엔트리 위치에서 픽쳐의 헤더를 추출하고, 이 헤더에서 픽쳐의 사이즈를 판독하여, 그 사이즈에 의거하여 다음 픽쳐의 기록위치를 특정하는 처리를 몇 회라도 반복하여, 원하는 픽쳐의 기록위치까지 이른다고 하는 것이다. 이러한 해석은 스트림에 대한 높은 빈도의 액세스를 동반하는 것이므로, 엔트리 위치로부터 3매 앞, 5매 앞의 픽쳐를 판독하는 것만으로도 상당한 시간이 걸린다. 픽쳐 정밀도의 랜덤 액세스에 상당한 시간이 걸리므로, 사용자 조작에 즉응하여 전후의 픽쳐를 표시하거나, 10매 전후의 픽쳐를 표시하도록 하는 기능을 슬라이드 쇼에 추가하려고 해도 제작자 측이 기대하는 만큼의 사용상의 편리함이 따르지 않는다는 문제점이 있다.

본 발명의 목적은 슬라이드 쇼에서의 랜덤 액세스를 고속으로 실현할 수 있는 기록매체를 제공하는 것이다.

상기 목적을 달성하기 위해서 본 발명에 관한 기록매체는, 비디오 스트림(video stream)과 스트림 관리정보(stream management information)가 기록된 기록매체로, 상기 비디오 스트림은 복수의 픽쳐 데이터(picture data)를 포함하고, 상기 스트림 관리정보는 엔트리 맵(entry map)과 애플리케이션 타입 중 하나를 나타내는 플래그(flag)를 포함하며, 상기 엔트리 맵은 각 픽쳐 데이터의 엔트리 어드레스를 픽쳐 데이터별 재생시각에 대응시켜서 나타내고, 상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하며, 상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되는 기록매체를 제공한다.

시간 축 슬라이드쇼를 나타내는 값이 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정된다. 따라서, 비디오 스트림을 해석하지 않고, 가령 다음 픽쳐, 3매 앞의 픽쳐에 액세스하는 것과 같이, 픽쳐 단위로 수행되는 랜덤 액세스를 구현할 수 있다.

여기서, 스트림 관리정보는 플래그를 더 포함하고, 이 플래그는 상기 비디오 스트림을 구성하는 모든 픽쳐 데이터의 엔트리 어드레스가 엔트리 맵에 포함되어 있는 것을 보증한다.

슬라이드 쇼에 대한 엔트리 맵의 데이터구조가 외관상 동화상에 대한 엔트리 맵의 데이터구조와 동일하더라도, 재생장치는 동화상의 재생과 동일한 재생제어를 실행하면서, 플래그가 상술한 취지를 나타내고 있는 경우에만 픽쳐 정밀도의 랜덤 액세스를 실행하면 된다. 재생장치는 동화상 재생과의 호환성을 유지하는 형태로 픽쳐 정밀도의 랜덤 액세스를 실현할 수 있다. 이에 따라 동화상재생과 슬라이드 쇼 재생의 양 기능을 겸비한 재생장치의 보급을 촉진할 수 있다.

(제 1 실시 예)

이하, 본 발명에 관한 기록매체의 실시 예에 대해서 설명한다. 먼저, 처음으 로 본 발명에 관한 기록매체의 실시행위 중 사용행위에 대한 형태를 설명한다. 도 1은 본 발명에 관한 기록매체의 사용행위에 대한 형태를 나타내는 도면이다. 도 1에서, 본 발명에 관한 기록매체는 BD-ROM(100)이다. 이 BD-ROM(100)은 재생장치(200), 리모컨(300), 텔레비전(400)에 의해 형성되는 홈시어터 시스템에 영화작품을 공급하는 용도에 제공된다.

이상이 본 발명에 관한 기록매체의 사용형태에 대한 설명이다. 이어서 본 발명에 관한 기록매체의 실시행위 중 생산행위에 대한 형태를 설명한다. 본 발명에 관한 기록매체는 BD-ROM의 응용 층에 대한 개량에 의해 실시할 수 있다. 도 2는 BD-ROM의 내부 구성을 나타내는 도면이다.

도 2의 제 4단째에 BD-ROM을 나타내고, 제 3단째에 BD-ROM상의 트랙을 나타낸다. 도 2의 트랙은 BD-ROM의 내주로부터 외주에 걸쳐서 나선형상으로 형성되어 있는 트랙을 횡 방향으로 연장하여 묘사하고 있다. 이 트랙은 리드인 영역과, 볼륨영역과, 리드 아웃 영역으로 이루어진다. 도 2의 볼륨영역은 물리 층, 파일시스템 층, 응용 층이라고 하는 레이어 모델(layer model)을 갖는다. 디렉터리구조를 이용하여 BD-ROM의 응용 층 포맷(애플리케이션 포맷)을 표현하면 도면 중의 제 1단째와 같이 된다. 이 제 1단째에서, BD-ROM에는 루트 디렉터리 아래에 BDMV 디렉터리가 있다.

BDMV 디렉터리의 아래에는 PLAYLIST 디렉터리, CLIPINF 디렉터리, STREAM 디렉터리라고 불리는 3개의 서브디렉터리가 존재한다.

STREAM 디렉터리는 이른바 디지털 스트림 본체가 되는 파일 군을 저장하고 있는 디렉터리이며, 확장자 m2ts가 부여된 파일(00001.m2ts, 00002.m2ts, 00003.m2ts)가 존재한다.

PLAYLIST 디렉터리는 확장자 mpls가 부여된 파일(00001.mpls, 00002.mpls, 00003.mpls)이 존재한다.

CLIPINF 디렉터리에는 확장자 clpi가 부여된 파일(00001.clpi, 00002.clpi, 00003.clpi)이 존재한다.

이어서 확장자.m2ts가 부여된 파일에 대해서 설명한다. 도 3은 확장자.m2ts가 부여된 파일이 어떻게 구성되어 있는가를 모식적으로 나타내는 도면이다. 확장자.m2ts가 부여된 파일 (00001.m2ts, 00002.m2ts, 00003.m2ts…)은 AV Clip을 저장하고 있다. AV Clip은(제 4단째) 복수의 비디오 프레임(픽쳐 pj1, 2, 3)으로 이루어지는 비디오 스트림, 복수의 오디오 프레임으로 이루지는 오디오 스트림을 (제 1단째) PES 패킷 열로 변환하고(제 2단째), 또 TS 패킷으로 변환하여(제 3단째), 이들을 다중화함으로써 구성된다.

또, AV Clip에는 자막 계의 프레젠테이션 그래픽스 스트림(presentation graphics stream, PG 스트림)이나 대화 계의 인터렉티브 그래픽스 스트림(interactive graphics stream, IG스트림)이 다중화되는 경우도 있다. 또, 텍스트 코드(text code)에 의해 표현된 자막 데이터(텍스트 자막 스트림)가 AV Clip으로 기록되는 경우도 있다.

이어서, MPEG2-TS 형식의 디지털 스트림인 AV Clip이 BD-ROM에 어떻게 기록 되는가를 설명한다. 도 4는 AV Clip을 구성하는 TS 패킷이 어떤 과정을 거쳐서 BD-ROM에 기록되는가를 나타내는 도면이다. 도 4의 제 1단째에 AV Clip을 구성하는 TS 패킷을 나타낸다.

AV Clip을 구성하는 TS 패킷은, 제 2단째에 도시한 바와 같이, TS_extra_header(도면 중의 「EX」)가 부가된다.

제 3단째, 제 4단째는 BD-ROM의 물리 단위와 TS 패킷과의 대응관계를 나타낸다.

제 4단째에 나타낸 바와 같이 BD-ROM 상에는 복수 섹터가 형성되어 있다. extra_header부(付) TS 패킷(이하, EX부 TS 패킷이라고 약칭한다)은 32개마다 그룹화되어 3개의 섹터에 기록된다. 32개의 EX부 TS 패킷으로 이루어지는 그룹은 6144 바이트(=32×192)이며, 이것은 3개의 섹터 사이즈 6144 바이트(=2048×3)와 일치한다. 3개의 섹터에 저장된 32개의 EX부 TS 패킷을 "얼라인드 유닛(Aligned Unit)"이라고 하며, BD-ROM에 기록시에는 얼라인드 유닛 단위로 암호화가 이루어진다.

제 5단째에서 섹터는 32개 단위로 에러정정부호가 부가되어 ECC 블록을 구성한다. 재생장치는 얼라인드 유닛 단위로 BD-ROM을 액세스하는 한은 32개의 완결된 EX부 TS 패킷을 얻을 수 있다. 이상이 BD-ROM에 대한 AV Clip의 기록 프로세스이다.

<비디오 스트림>

비디오 스트림의 내부 구성에 대해서 설명한다. 도 5는 비디오 스트림의 내부 구성을 나타내는 도면이다. 비디오 스트림에는 영화에 의해 이용되는 것과, 슬 라이드 쇼에 의해 이용되는 2가지의 타입이 있다. 본 실시 예에서 이들 영화 및 슬라이드 쇼에서 이용되는 비디오 스트림은 모두 MPEG4-AVC로 부호화되어 있는 점에서 공통된다. 즉, 부호화방식이라는 점에서 공통하는 것으로 한다.

도 5 (a)는 영화에 이용되는 비디오 스트림의 내부 구성을 나타내는 도면이다. 도 5 (a)에서의 비디오 스트림은 부호화 순서로 배치된 복수의 픽쳐로 이루어진다.

도면 중의 I, P, B는 각각 I픽쳐, B픽쳐, P픽쳐를 의미한다. I픽쳐에는 IDR픽쳐와, Non-IDR I픽쳐 2종류가 있다. Non-IDR I픽쳐, P픽쳐, B픽쳐는 다른 픽쳐와의 프레임 상관성에 의거하여 압축 부호화되어 있다. B픽쳐는 Bidirectionally predictive(B) 형식의 슬라이스 데이터(slice data)로 이루어지는 픽쳐를 말하고, P픽쳐는 Predictive(P) 형식의 슬라이스 데이터로 이루어지는 픽쳐를 말한다. B픽쳐에는 reference B픽쳐와 non-reference B픽쳐가 있다.

도 5 (a)에서는 Non-IDR I픽쳐를 "I"로 기술하고 있고, IDR 픽쳐를 "IDR"로 기술하고 있다. 이후, 상기 표기를 이용한다. 이상이 영화에 이용되는 비디오 스트림이다.

이어서, IDR픽쳐 및 Non-IDR I픽쳐의 내부 구성에 대해서 설명한다. 도 6 (a)는 IDR 픽쳐의 내부 구성을 나타내는 도면이다. 도 6 (a)에 도시한 바와 같이, IDR픽쳐는 복수의 Intra형식의 슬라이스 데이터로 이루어진다. 도 6 (b)는 Non-IDR I픽쳐의 내부 구성을 도시한다. IDR픽쳐가 Intra형식의 슬라이스 데이터만으로 구성되어 있는 것에 대하여, Non-IDR I픽쳐는 Intra형식의 슬라이스 데이터, P형식의 슬라이스 데이터, B형식의 슬라이스 데이터로 구성되어 있다. 도 6 (c)는 Non-IDR I픽쳐에서의 의존관계를 나타낸다. Non-IDR I 픽쳐는 B, P슬라이스 데이터로 구성될 수 있으므로 다른 픽쳐와의 의존관계를 가질 수 있다.

<BD-ROM에 기록>

이어서, IDR픽쳐, Non-IDR I픽쳐가 어떻게 하여 TS 패킷으로 변환되어 BD-ROM에 기록되는가에 대해서 설명한다. 도 7은 IDR 픽쳐, Non-IDR I 픽쳐가 TS 패킷으로 변환되는 과정을 나타내는 도면이다. 도면 중의 제 1단째는 IDR 픽쳐, Non-IDR I 픽쳐를 나타낸다. 제 2단째는 MPEG4-AVC로 규정된 액세스 유닛(Access Unit)을 나타낸다. IDR 픽쳐, Non-IDR I 픽쳐를 구성하는 복수의 슬라이스 데이터는 순서대로 배치되고, AUD(Access Unit Delimiter), SPS(Sequence Parameter Set), PPS(Picture Parameter Set), SEI(Supplemental Enhanced info)가 부가됨으로써 액세스 유닛으로 변환되게 된다.

AUD, SPS, PPS, SEI, 액세스 유닛 각각은 MPEG4-AVC에 규정된 정보이고, ITU-T Recommendation H.264 등 다양한 문헌에 기재되어 있으므로 상세한 내용에 대해서는 이들 문헌을 참조하길 바란다. 여기에서 중요한 것은, AUD, SPS, PPS, SEI가 재생장치에 공급되는 것이 랜덤 액세스의 필수조건으로 된다고 하는 점이다.

제 3단째는 NAL 유닛을 나타낸다. 제 2단째에서의 AUD, SPS, PPS, SEI에 대해서 헤더를 부가함으로써 AUD, SPS, PPS, SEI, 슬라이스 데이터는 각각 NAL 유닛으로 변환되게 된다. NAL 유닛은 MPEG4-AVC의 네트워크 추상 레이어(Network Abstraction Layer)에서 규정된 단위이며, ITU-T Recommendation H.264 등의 다양 한 문헌에 기재되어 있으므로 상세한 내용에 대해서는 이들 문헌을 참조하길 바란다. 여기에서 중요한 것은 AUD, SPS, PPS, SEI 슬라이스 데이터는 각각 독립한 NAL 유닛으로 변환되어 있으므로, AUD, SPS, PPS, SEI, 슬라이스 데이터의 각각은 네트워크 추상 레이어에서 각각 독립하여 취급된다고 하는 점이다.

하나의 픽쳐를 변환함으로써 얻어지는 복수의 NAL 유닛은 제 4단째에 나타낸 바와 같이 PES 패킷으로 변환된다. 그리고 TS 패킷으로 변환되어 BD-ROM 상에 기록된다.

하나의 GOP를 재생하기 위해서는, 그 GOP의 선두에 위치하는 IDR 픽쳐, Non-IDR I 픽쳐를 구성하는 NAL 유닛 중, 액세스 유닛 딜리미터를 포함하는 것을 디코더에 투입해야만 한다. 즉, 액세스 유닛 딜리미터(access unit delimiter)를 포함하는 NAL 유닛이 IDR 픽쳐, Non-IDR I 픽쳐를 디코드하기 위한 하나의 지표가 된다. 이 액세스 유닛 딜리미터를 포함하는 NAL 유닛을 본 실시 예에서는 점(Point)으로 취급한다. 그리고 재생장치는 비디오 스트림을 재생함에 있어서, 액세스 유닛 딜리미터를 포함하는 NAL 유닛을 Non-IDR I 픽쳐, IDR 픽쳐를 재생하기 위한 엔트리 위치로 해석한다. 따라서, AV Clip에 랜덤 액세스를 실행하기 위해서는 IDR 픽쳐, Non-IDR I 픽쳐의 액세스 유닛 딜리미터가 어디에 존재하는가를 파악하는 것이 매우 중요하다. 이상이 영화에 이용되는 MPEG4-AVC형식의 비디오 스트림의 구성이다.

<슬라이드 쇼>

이어서, 슬라이드 쇼에 이용되는 비디오 스트림에 대해서 설명한다. 도 5 (b)는 슬라이드 쇼에 이용되는 비디오 스트림의 내부 구성을 나타내는 도면이다. 도 5 (b)에 도시한 바와 같이, 슬라이드 쇼에 이용되는 비디오 스트림은 복수의 정지화상 데이터로 구성된다. 이들 정지화상 데이터는 어느 것이나 IDR 픽쳐이다. 즉, 슬라이드 쇼에서는 어떤 픽쳐도 독립적으로 디코드 되도록, IDR 픽쳐로 디코드 되어 있는 것이다.

본 실시 예에서의 슬라이드 쇼는 비디오 스트림과 오디오 스트림이 다중화되어 있고, 비디오 스트림에서의 개개의 정지화상이 비디오 스트림의 재생의 진행에 따라서 재생되는 타입의 슬라이드 쇼(Time based Slide Show)이다.

BD-ROM에 기록될 수 있는 슬라이드 쇼에는, 오디오 스트림이 다중화되어 있지 않으며, 오디오 스트림의 재생과는 관계없이 정지화상의 재생이 진행하는 슬라이드 쇼(Browsable Slide Show)가 따로 존재한다.

이들 중, 영화 및 Time based Slide Show는 모두 시간 축을 갖고 있으므로 이들로 대상을 좁혀서 설명을 진행한다.

슬라이드 쇼를 구성하는 비디오 스트림의 내부 구성에 대해서 설명한다.

도 8은 슬라이드 쇼에서의 IDR 픽쳐가 BD-ROM에 어떻게 기록되는가를 나타내는 도면이다. BD-ROM에 대한 기록은 도 7과 동일하다. 즉, 슬라이드 쇼를 구성하는 IDR 픽쳐는 복수의 슬라이스 데이터로 이루어지므로, 각 슬라이스 데이터를 동화상의 IDR 픽쳐와 마찬가지로 NAL 유닛으로 변환하여 BD-ROM에 기록하는 것이다. 도 8에 도시한 기록이 도 7과 다른 점은, 픽쳐를 구성하는 슬라이스 데이터의 말미에 "엔드 오브 스트림 코드(End of Stream code)"가 있는 점이다. 이 엔드 오브 스트림 코드는 디코더 동작의 동결(Display Frozen)을 재생장치에 명령하는 종단 코드이며, 슬라이스 데이터와 마찬가지로 하나의 NAL 유닛으로 변환되어 BD-ROM에 기록된다.

도 8에 도시한 IDR 픽쳐가 순차로 디코더에 공급됨으로써, 도 9에 도시한 바와 같이, 슬라이드 쇼의 재생이 진행한다. 도 9는 슬라이드 쇼의 재생진행을 나타내는 도면이다. 도 9의 제 4단째는 TS 패킷 열을 나타내고, 제 3단째는 이 제 4단째의 TS패킷을 변환함으로써 얻어진 PES 패킷 열을 나타낸다. 제 2단째는 슬라이드 쇼의 시간 축을 나타내고, 제 1단째는 슬라이드 쇼를 구성하는 개개의 IDR 픽쳐를 나타낸다. 이 제 1단째의 IDR 픽쳐는 제 3단째의 PES 패킷에서의 PTS에 지시된 시점에 표시된다. 또, 제 3단째의 PES 패킷에는 도 8에 도시한 엔드 오브 스트림 코드가 있으므로, 재생장치는 PES 패킷의 PTS에 지시된 시점에서 IDR 픽쳐를 표시한 후, 디코더 동작을 동결한 상태(Display Frozen)가 된다. 이 디코더 동작의 동결상태는 다음의 IDR 픽쳐의 표시가 이루어질 때까지 계속하게 된다. PES 패킷의 PTS에 지시된 시점에서의 표시와 엔드 오브 스트림 코드에 의한 디코더 동작 동결을 반복함으로써, 슬라이드 쇼를 구성하는 개개의 IDR 픽쳐는 순차로 재생되어 간다. 이상이 슬라이드 쇼의 재생의 진행이다.

<Clip정보>

이어서, 확장자 .clpi가 부여된 파일에 대해서 설명한다. 확장자.clpi가 부여된 파일(00001.clpi, 00002.clpi, 00003.clpi, …)은 Clip정보를 저장하고 있다. Clip정보는 개개의 AV Clip에 대한 관리정보이다. 도 10은 Clip정보의 내부 구성을 나타내는 도면이다. 도 10의 좌측에 도시한 바와 같이 Clip정보는,

ⅰ) AV Clip파일의 속성정보를 저장한 『ClipInfo()』,

ⅱ) ATC Sequence, STC Sequence에 관한 정보를 저장한 『Sequence Info()』,

ⅲ) Program Sequence에 관한 정보를 저장한 『Program Info()』,

ⅳ)『Characteristic Point Info(CPI())』로 이루어진다.

도면 중의 인출선 cu1은 i번째의 Program Sequence(Program Sequence(i))의 구성을 클로즈업하고 있다. 본 인출 선에 도시한 바와 같이, Program Sequence(i)에 대한 Program Info는 Stream_PID와 Stream_Coding_info의 쌍을 Ns(i)개 배열하여 이루어진다(도면 중의 스트림_PID〔i〕(0), Stream_Coding_Info(i, 0)∼Stream_PID〔i〕(Ns(i)―1), Stream_Coding_Info(i, Ns(i)―1).

Stream_PID는 AV Clip을 구성하는 개개의 엘레멘터리 스트림에 대한 패킷 식별자를 나타내고, Stream_Coding_Info는 AV Clip을 구성하는 개개의 엘레멘터리 스트림에 대한 부호화방식을 나타낸다.

도 11 (a)는 비디오 스트림에 대한 Stream_Coding_Info를 나타내고, 도 11 (b)는 오디오 스트림에 대한 Stream_Coding_Info를 나타낸다. 비디오 스트림의 Stream_Coding_Info는, 도 11(a)에 도시한 바와 같이, 비디오 스트림의 부호화방식이 MPEG4-AVC 또는 MPEG2-Video 중 어느 것인가를 나타내는 『Stream_Coding_type』과, 비디오 스트림의 표시방식이 480i, 576i, 480p, 1080i, 720p, 1080p 중의 어느 것인가를 나타내는 『Video_format』, 비디오 스트림의 프레임 레이트가 23.976Hz, 29.97Hz, 59.94Hz 중의 어느 것인가를 나타내는 『frame_rate』, 비디오 스트림에서의 픽쳐의 애스펙트 비가 4:3, 16:9 중 어느 것인가를 나타내는 『aspect_ratio』를 포함한다.

도 11 (b)는 오디오 스트림에 대한 Stream_Coding_Info를 나타낸다. 도 11 (b)에 도시한 바와 같이, 오디오 스트림에 대한 Stream_Coding_Info는 오디오 스트림의 부호화방식이 LPCM, Dolby-AC3, Dts 중 어느 것인가를 나타내는 『Stream_Coding_Type』, 오디오 스트림의 출력형식이 스테레오, 모노럴, 멀티 중의 어느 것인가를 나타내는 『audio_Presentation_type』, 오디오 스트림의 샘플링 주파수를 나타내는 『Sampling_Frequency』, 오디오 스트림에 대응하는 언어를 나타내는 『audio_language_code』로 이루어진다.

이 Stream_Coding_Info를 참조함으로써 AV Clip에서의 복수의 엘레멘터리 스트림 중 어느 것이 MPEG4-AVC형식인가를 알 수 있다.

<CPI(EP_map)>

도 10으로 되돌아가서 CPI를 설명한다. 도면 중의 인출선 cu2는 CPI의 구성을 클로즈업하고 있다. 인출선 cu2로 나타낸 바와 같이, CPI는 EP_map으로 이루어진다. EP_map은 Ne개의 EP-map_for_one_stream_PID(EP_map_for_one_stream_PID(0)∼EP_map_for_one_stream_PID(Ne―1))로 이루어진다. 이들 EP_map_for_one_stream_PID는 AV Clip에 속하는 개개의 엘레멘터리 스트림에 대한 EP_map이다. EP_map은 하나의 엘레멘터리 스트림 상에서 액세스 유닛 딜리미터가 존재하는 엔트리 위치의 패킷번호(SPN_EP_start)를 엔트리 시각(PTS_EP_start)과 대응시켜서 나타내는 정보이다. 도면 중의 인출선 cu3은 EP_map_for_one_stream_PID의 내부 구성을 클로즈업하고 있다.

이에 의하면, EP_map_for_one_stream_PID는 Nc개의 EP_High(EP_High(0)∼EP_High(Nc-1))과 Nf개의 EP_Low(EP_Low(0)∼EP_Low(Nf-1))로 이루어지는 것을 알 수 있다. 여기서, EP_High는 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)의 SPN_EP_start 및 PTS_EP_start의 상위비트를 나타내는 역할을 가지며, EP_Low는 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)의 SPN_EP_start 및 PTS_EP_start의 하위비트를 나타내는 역할을 갖는다.

도면 중의 인출선 cu4는 EP_High의 내부 구성을 클로즈업하고 있다. 이 인출 선으로 나타낸 바와 같이, EP_High(i)는 EP_Low에 대한 참조 치인 『ref_to_EP_Low_id〔i〕』와, 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)의 PTS의 상위비트를 나타내는 『PTS_EP_High〔i〕』와, 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)의 SPN의 상위비트를 나타내는 『SPN_EP_High〔i〕』로 이루어진다. 여기서, i는 임의의 EP_High를 식별하기 위한 식별자이다.

도면 중의 인출선 cu5는 EP_Low의 구성을 클로즈업하고 있다. 인출선 cu5로 나타낸 바와 같이, EP_Low는 대응하는 액세스 유닛이 IDR 픽쳐인가 여부를 나타내는 『is_angle_change_point(EP_Low_id)』와, 대응하는 액세스 유닛의 사이즈를 나타내는 『I_end_position_offset(EP_Low_id)』와, 대응하는 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)의 PTS의 하위비트를 나타내는 『PTS_EP_Low(EP_Low_id)』와, 대응하는 액세스 유닛(Non-IDR I픽쳐, IDR 픽쳐)의 SPN의 하위비트를 나타내는 『 SPN_EP_Low(EP_Low_id)』로 이루어진다. 여기서, EP_Low_id는 임의의 EP_Low를 식별하기 위한 식별자이다.

이들 EP_map의 데이터 구조는 기본적으로는 상술한 특허문헌 등에 기재된 것이며, 본 명세서에서는 더 이상 상세하게 언급하지 않는다.

이어서, Clip정보에서의 Clip info에 대해서 설명한다. 도 12는 Clip정보에 서의 Clip info의 내용 구성을 나타내는 도면이다. 도면 중의 인출 선은 Clip info()의 구성을 클로즈업하고 있다. 이 인출 선으로 나타낸 바와 같이, Clip info()는 디지털 스트림의 유형을 나타내는 "clip_stream_type", 본 AV Clip을 이용하는 애플리케이션의 유형을 나타내는 "application_type", AV Clip의 기록 레이트를 나타내는 "TS_recording_rate", AV Clip을 구성하는 TS 패킷 수를 나타내는 "number_of_source_packet"으로 구성되어 있는 것을 알 수 있다. 이 중, clip_stream_type은 본 Clip정보에 대응하는 AV Clip이 Movie Application, TS for Timebased Slide Show, TS for MainPath of the Browsable Slide Show, TS for SubPath of the Browsable Slide Show 중 어느 것인가를 나타낸다. 구체적으로는,

a) clip_stream_type = 1인 경우, AV Clip의 유형은 Movie Application인 것을 나타낸다.

b) Clip_stream_type = 2인 경우, AV Clip의 유형은 TS for Time based Slide Show인 것을 나타낸다.

c) clip_stream_type = 3인 경우, AV Clip의 유형은 TS for MainPath of the Browsable Slide Show인 것을 나타낸다. 여기에서 "MainPath"는 Browsable Slide Show를 구성하는 비디오 스트림-오디오 스트림의 쌍 중 비디오 스트림인 것을 의미한다.

d) clip_stream_type = 4인 경우, AV Clip의 유형은 TS for SubPath of the Browsable Slide Show임을 나타낸다. 여기에서 "SubPath"는 Browsable Slide Show를 구성하는 비디오 스트림-오디오 스트림의 쌍 중 오디오 스트림인 것을 의미한다.

도 12에서의 화살표 ct3, ct4는 이 application_type의 부차적인 의미 내용을 나타낸다. 부차적인 의미 내용이란, application_type이 각각의 값으로 설정된 때, EP_map의 데이터구조가 어떤 것이 되는가를 의미한다.

도면 중의 화살표 ct4는 application_type이 1, 4인 경우, EP_map이 어떤 데이터구조가 되는가를 나타낸다. 구체적으로 말하면, application_type이 1, 4인 경우, EP-map은 이웃하는 2개의 PTS_EP_start의 값의 간격이 1초 미만이 되면 된다는 것을 의미한다.

도면 중의 화살표 ct3은 application_type이 2, 3인 경우에 EP_map이 어떤 데이터구조가 되는가를 나타낸다. 구체적으로 말하면, application_type이 2, 3인 경우, AV Clip의 모든 픽쳐를 가리키도록 PTS_EP_start의 값이 설정된다는 것을 의미한다. 즉, AV Clip의 모든 픽쳐가 EP_map에 의해 지시되고 있는 것을 보증한다.

application_type에 이러한 부차적인 의미를 가지도록 하는 기술적 의의에 대해서 설명한다.

여기서, 슬라이드 쇼를 작성함에 있어서, 모든 픽쳐 데이터를 IDR 픽쳐로 설 정한다고 하는 것은 하나의 생각에 불과하다. 다른 픽쳐와의 상관성을 이용하여 압축된 P 픽쳐나 2매 이상의 전후의 픽쳐와의 상관성을 이용하여 압축된 B픽쳐를 이용함으로써 비디오 스트림을 구성해도 된다. 따라서 편집자에 따라서는 P픽쳐나 B픽쳐를 이용하여 슬라이드 쇼를 구성하려고 할지도 모른다.

그러나 P픽쳐나 B픽쳐는 참조하고 있는 픽쳐가 없으면 디코드할 수 없다. 그 때문에, 사용자 조작에 의해 슬라이드 쇼를 구성하는 임의의 픽쳐를 재생하려고 하면, 가까이에 있는 참조 픽쳐를 디코드한 후가 아니면 원하는 픽쳐를 디코드할 수 없게 된다.

원하는 픽쳐를 재생할 때마다 그 픽쳐가 참조하고 있는 모든 픽쳐를 디코드하여야 하므로, P픽쳐와 B픽쳐로 슬라이드 쇼를 구성하려고 하면, 조작성이 나쁜 슬라이드 쇼를 제작하게 될지도 모른다.

슬라이드 쇼는, 동화상과 같이, 어떤 정해진 순서로 개개의 픽쳐 데이터가 재생된다고는 할 수 없다. 사용자 조작에 따라, 임의의 픽쳐 데이터를 재생한다고 하는 처리가 필요해 진다. 따라서, 본 실시 예에서는 어디에서부터라도 재생할 수 있음을 보증하기 위해서, 슬라이드 쇼를 구성하는 비디오 스트림은 단독으로 디코드 가능한 인트라 부호화된(intra-coded) IDR 픽쳐로 구성하고 있다. 즉, P픽쳐 및 B픽쳐로 슬라이드 쇼를 구성한다고 하는 생각을 배척하고, 슬라이드 쇼를 구성하는 모든 픽쳐를 IDR 픽쳐로 인코드하고 있다.

이에 따라, 슬라이드 쇼에서는 모든 픽쳐의 엔트리 위치 및 엔트리 시각을 EP_map에 나타내 둔다. 이렇게 함으로써, 사용자가 어느 픽쳐 데이터를 디코드하려 고 해도 그 픽쳐 데이터를 디코더에 공급하는 것만으로 임의의 정지화상을 재생에 제공할 수 있다.

비디오 스트림이 슬라이드 쇼에 이용되는 것인가 여부는 Clip_Info에서의 application_type에 제시되어 있으므로 이 application_type이 "슬라이드 쇼를 나타내고 있는가 여부"는 "비디오 스트림을 구성하는 각 픽쳐 데이터의 위치 및 재생개시시각이 EP_map에 의해 제시되어 있는가의 여부"라고 하는 부차적인 의미를 가지게 된다.

Clip_info의 application_type이 이러한 의미를 가지므로, 재생장치는 지금부터 재생하고자 하는 AV Clip의 Clip_info를 참조함으로써, 비디오 스트림을 구성하는 각 픽쳐가 IDR 픽쳐이고 다른 어떤 픽쳐도 참조하지 않은 점, 그리고, 어느 픽쳐도 EP_map에서 지시되어 있는 것을 재생장치가 알 수 있다.

따라서 재생장치는, 슬라이드 쇼를 재생함에 있어서, 이 application_type을 참조함으로써, 전후의 픽쳐를 디코드하지 않고도 원하는 픽쳐를 디코드할 수 있다.

이상이 application_type 및 EP_map의 기술적 의의이다.

이하, 구체 예를 통해서 영화와 슬라이드 쇼의 EP_map 설정의 차이에 대해서 설명한다. 도 13은 영화의 비디오 스트림(application_type = 1 또는 4)에 대한 EP_map설정을 나타내는 도면이다. 제 1단째는 표시 순으로 배치된 복수의 픽쳐를 나타내고, 제 2단째는 그 픽쳐에서의 시간 축을 나타낸다. 제 4단째는 BD-ROM상의 TS 패킷 열을 나타내고, 제 3단째는 EP_map의 설정을 나타낸다.

제 2단째의 시간 축에서, 시점 t1∼t7에 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)이 존재하는 것으로 한다. 그리고 이들 t1∼t7 중, t1∼t3의 시간간격, t3∼t5의 시간간격, t5∼t7의 시간간격이 1초 정도라고 하면, 영화에 이용되는 비디오 스트림에서의 EP_map은 t1∼t7 중, t1, t3, t5를 엔트리 시각(PTS_EP_start)으로 설정하고, 이에 대응시켜서 기록위치(SPN_EP_start)를 나타내도록 설정된다. 또, Entry Point#1∼Entry Point#4 중, Entry Point#1, Entry Point#3은 IDR 픽쳐에 대응하므로, is_angle_change_point는 "1"로 설정된다. 그 이외의 Entry Point#2, Entry Point#4에서의 is_angle_change_point는 "0"으로 설정된다.

도 14는 도 13에서의 Entry Point#1∼Entry Point#5의 PTS_EP_start, SPN_EP_start를 EP_Low, EP_High의 쌍으로 표현한 것이다. 도 14의 좌측에 EP_Low를 나타내고, 우측에 EP_High를 나타낸다.

도 14의 좌측의 EP_Low(0)∼(Nf―1) 중, EP_Low(i)∼(i＋1)의 PTS_EP_Low는 t1, t3, t5, t7의 하위비트를 나타낸다. EP_Low(0)∼(Nf－1) 중, EP_Low(i)∼(i＋1)의 SPN_EP_High는 n1, n3, n5, n7의 하위비트를 나타낸다.

도 14의 우측은 EP_map에서의 EP_High(0)∼(Nc－1)을 나타낸다. 여기에서 t1, t3, t5, 7은 공통의 상위 비트를 가지고 있고, 또, n1, n3, n5, n7도 공통의 상위 비트를 가지고 있는 것으로 하면, 이 공통의 상위 비트가 PTS_EP_High, SPN_EP_High로 기술된다. 그리고 EP_High에 대응하는 ref_to_EP_LOW_id는 t1, t3, t5, t7, n1, n3, n5, n7에 해당하는 EP_Low 중 선두의 것(EP_Low(i))을 나타내도록 설정해 둔다. 이와 같이 함으로써, PTS_EP_start, SPN_EP_start의 공통의 상위비트는 EP_High에 의해 표현되게 된다.

그리고 EP_Low(i)∼(i＋3)에서의 is_angle_change_point(i)∼(i＋3) 중 (i),(i＋2)는 대응하는 액세스 유닛이 IDR 픽쳐이므로, is_angle_change_point는 "1"로 설정되어 있다. (i＋1),(i＋3)은 대응하는 액세스 유닛이 Non-IDR I픽쳐이므로, is_angle_change_point는 "0"으로 설정되어 있다.

영화와 같은 동화상 애플리케이션인 경우는 한번 재생을 개시하면 그 이후의 픽쳐를 연속적으로 디코드하므로, EP_map은 모든 액세스 유닛을 지정해 둘 필요는 없으며, 최저한 재생을 개시하고 싶은 점에만 EP_map의 엔트리가 설정되어 있으면 된다. 이와 같이 영화에 이용되는 비디오 스트림에서는 이웃하는 PTS_EP start의 값이 1초 미만이 되도록 설정되면 되므로, t2, t4, t6에 존재하는 픽쳐와 같이 이웃하는 액세스 유닛과의 시간간격이 0.5초 정도가 되는 액세스 유닛에 대해서는 그 재생시점이 PTS_EP_start에 의해 지시되고 있지 않은 것도 나타난다. 도 15는 도 13의 비디오 스트림에 대한 랜덤 액세스가 어떻게 이루어지는가를 나타내는 도면이다.

여기서, 도면 중의 In_time(=t6)에서부터 랜덤 액세스를 실행하는 경우를 생각한다. 도 15에서는 t6 그 자체는 PTS_EP_start에 의해 지시되어 있지 않고 t5가 PTS_EP_start에 지시되어 있다. 그리고 이 t5에 대응하는 Entry_Point는 is_angle_change_point＝1로 설정되며, IDR 픽쳐임을 나타내므로, 이 t5의 재생시점에 위치하는 IDR 픽쳐의 경유가 필요해지게 된다. 왜냐하면, IDR 픽쳐로부터 랜덤 액세스하는 액세스 처까지의 픽쳐를 BD-ROM에서 판독하면 랜덤 액세스의 액세스 처의 디코드에 필요한 모든 참조 픽쳐를 디코더 내에 준비할 수 있기 때문이다.

도면 중 제 4단째의 ke1은 이 t5에의 경유를 상징적으로 나타내고 있다. 그러나 랜덤 액세스의 액세스는 다이렉트로 액세스할 수 없으므로, 이 경유가 랜덤 액세스의 오버헤드(overhead)가 된다.

이어서, application_type이 슬라이드 쇼(application_type＝2 or 3)인 경우의 EP_map 설정에 대해서 설명한다. 시간 축 상의 복수의 시점(t1∼t7)에서 재생이 이루어지도록 PTS가 설정된 IDR 픽쳐가 슬라이드 쇼 내에 존재하는 것으로 한다. 이 경우, 이 슬라이드 쇼에 대한 EP_map 설정은 도 16과 같이 된다. 도 16은 슬라이드 쇼에 대해 설정된 EP_map의 내부 구성을 나타내는 도면이다.

슬라이드 쇼에서는 모든 픽쳐를 지시하도록 EP_map을 설정하므로, EP_map에서의 개개의 Entry_Point #1∼#7은 슬라이드 쇼에서의 개개의 IDR 픽쳐의 재생시점 t1, t2, t3, t4, t5, t6, t7을 엔트리 시각(PTS_EP_start)으로서 특정하며, 엔트리 위치(SPN_EP_start)와 대응하고 있음을 알 수 있다.

이렇게 하여, 각 IDR 픽쳐의 재생시점이 엔트리 시각으로서 EP_map에 의해 지정되므로, t1∼t7 중의 어느 것을 랜덤 액세스의 액세스 처로 선택하는 경우에도 선행하는 IDR 픽쳐를 경유한다고 하는 우회의 오버헤드가 발생하는 일은 없다. 도 17은 시간 축 상의 하나의 시점으로의 랜덤 액세스를 도 16과 동일한 표기로 나타낸 도면이다. 도 17에서의 제 1단째∼제 4단째는 도 16과 동일하다. 제 2단째에서의 시점 t2, t4, t6 중 t6을 액세스 처로 하여 랜덤 액세스를 실행하려고 하면, 시점 t6 그 자체가 PTS_EP_start에 지시되어 있으므로, 선행의 IDR 픽쳐를 경유하지 않고, 시점 t6에 해당하는 기록위치(SPN＝N6)를 액세스할 수 있다.

오버헤드의 발생이 없도록 모든 픽쳐가 IDR 픽쳐로 인코드 되고, 어떤 픽쳐의 재생시점도 PTS_EP_start에 의해 지시되어 있으므로, 슬라이드 쇼에서의 시간정보를 이용한 랜덤 액세스를 고속으로 실행할 수 있다.

상술한 바와 같은 EP_map 설정에 수반하여, CLIP.INFO에서의 Application_Type을 2 또는 3으로 설정해 두면, 슬라이드 쇼를 구성하는 모든 픽쳐에 대해서 EP_map상에 엔트리가 존재하는 것을 식별할 수 있으므로, EP_map의 엔트리를 참조함으로써 판독하는 데이터의 범위가 판명되어, 전후의 스트림을 여분으로 해석할 필요가 없어진다.

이상이 본 실시 예에 관한 Clip정보에 대한 설명이다. 또, 확장자 "mpls"가 부여된 파일에 대해서는 본 실시 예에서는 설명을 생략하며, 제 2 실시 예에서 설명하는 것으로 한다.

이상으로 본 발명에 관한 기록매체에 대한 설명을 종료한다. 이어서, 본 발명에 관한 재생장치에 대해서 설명한다.

<재생장치의 내부 구성>

도 18은 본 발명에 관한 재생장치의 내부 구성을 나타내는 도면이다. 본 발명에 관한 재생장치는 도 18에 도시한 내부 구성에 따라 공업적으로 생산된다. 본 발명에 관한 재생장치는 주로 시스템 LSI와 드라이브장치라고 하는 2개의 파트로 이루어지고, 이들 파트를 장치의 캐비닛 및 기판에 실장 함으로써 공업적으로 생산할 수 있다. 시스템 LSI는 재생장치의 기능을 담당하는 여러 처리부를 집적한 집적회로이다. 이와 같이 생산되는 재생장치는 BD 드라이브(1), 어라이벌 타임 클록 카 운터(2), 소스 디패킷타이저(3), PID 필터(4), 트랜스 포트 버퍼(5), 멀티플렉스드 버퍼(6), 코디드 픽쳐 버퍼(7), 비디오 디코더(8), 디코디드 픽쳐 버퍼(10), 비디오 플레인(11), 트랜스 포트 버퍼(12), 코디드 데이터 버퍼(13), 스트림 그래픽스 프로세서(14), 오브젝트 버퍼(15), 콤포지션 버퍼(16), 콤포지션 컨트롤러(17), 프레젠테이션 그래픽스 플레인(18), CLUT부(19), 트랜스 포트 버퍼(20), 코디드 데이터 버퍼(21), 스트림 그래픽스 프로세서(22), 오브젝트 버퍼(23), 콤포지션 버퍼(24), 콤포지션 컨트롤러(25), 인터랙티브 그래픽스 플레인(26), CLUT부(27), 합성부(28), 합성부(29), 스위치(30), 네트워크 디바이스(31), 로컬 스토리지(32), 어라이벌 타임 클록 카운터(33), 소스 디패킷타이저(34), PID 필터(35), 스위치(36), 트랜스 포트 버퍼(37), 엘리멘터리 버퍼(38), 오디오 디코더(39), 트랜스 포트 버퍼(40), 버퍼(41), 텍스트 자막 디코더(42), 시나리오 메모리(43), 제어부(44), PSR 세트(46)로 구성된다. 도 18에서의 내부 구성은 MPEG의 T-STD 모델을 베이스로 한 디코더 모델이며, 다운 컨버트를 상정한 디코더 모델로 되어 있다. 도 18에서 일 점 쇄선으로 둘러싸인 부위는 시스템 LSI로서, 원칩(one-chip)화되어 있는 부위를 나타낸다.

BD-ROM 드라이브(1)는 BD-ROM의 로딩/이젝트를 행하고, BD-ROM에 대한 액세스를 실행하여, 32개의 섹터로 이루어지는 얼라인드 유닛을 BD-ROM으로부터 판독한다.

어라이벌 타임 클록 카운터(2)는 27MHz의 수정발진기(27MHz X-tal)에 의해 어라이벌 타임 클록을 생성한다. 어라이벌 타임 클록은 TS 패킷에 부여된 ATS의 기 준이 되는 시간 축을 규정하는 클록 신호이다.

소스 디 패킷타이저(3)는 BD-ROM으로부터 32개의 섹터로 이루어지는 얼라인드 유닛이 판독되면, 얼라인드 유닛을 구성하는 각각의 TS 패킷으로부터 TP_extra_header를 제거하고, TS 패킷만을 PID 필터(4)에 출력한다. 소스 디패킷타이저(3)에 의한 PID 필터(4)로의 출력은 어라이벌 타임 클록 카운터(2)가 측정한 시각이 TP_extra_header에 제시되는 ATS가 된 타이밍에 이루어진다. PID 필터(4)로의 출력은 ATS에 따라서 이루어지므로, 설령 BD-ROM으로부터의 판독에 1배속, 2배속이라는 속도 차가 있어도, PID 필터(4)로의 TS 패킷의 출력은 어라이벌 타임 클록 카운터(2)가 측정하는 현재시간에 따라서 이루어지게 된다.

PID 필터(4)는 TS 패킷에 부가되어 있는 PID를 참조함으로써, TS 패킷이 비디오 스트림, PG 스트림, IG 스트림 중 어디에 귀속하는가를 판정하여, 트랜스 포트 버퍼 5, 트랜스 포트 버퍼 12, 트랜스 포트 버퍼 20, 트랜스 포트 버퍼 37 중 어느 하나로 출력한다.

트랜스 포트 버퍼(TB)(5)는 비디오 스트림에 귀속하는 TS 패킷이 PID 필터(4)로부터 출력된 때에 일단 축적되는 버퍼이다.

멀티플렉스드 버퍼(MB)(6)는 트랜스 포트 버퍼(5)로부터 엘리멘터리 버퍼(7)에 비디오 스트림을 출력함에 있어서, 일단 PES 패킷을 축적해 두기 위한 버퍼이다.

코디드 픽쳐 버퍼(CPB)(7)는 부호화상태에 있는 픽쳐(Non-IDR I 픽쳐, IDR 픽쳐, B픽쳐, P픽쳐)가 저장되는 버퍼이다.

비디오 디코더(8)는 비디오 엘레멘터리 스트림의 개개의 프레임 화상을 소정의 복호시각(DTS)마다 디코드함으로써 복수 프레임 화상을 얻어서 디코디드 픽쳐 버퍼(10)에 기록한다.

디코디드 픽쳐 버퍼(10)는 복호 된 픽쳐가 기록되는 버퍼이다.

비디오 플레인(11)은 비 압축형식의 픽쳐를 저장해 두기 위한 플레인이다. 플레인은 재생장치에서 1 화면 분의 화소 데이터를 저장해 두기 위한 메모리영역이다. 비디오 플레인(11)에서의 해상도는 1920×1080이며, 이 비디오 플레인(11)에 저장된 픽쳐 데이터는 16비트의 YUV값으로 표현된 화소 데이터에 의해 구성된다.

트랜스 포트 버퍼(TB)(12)는 PG 스트림에 귀속하는 TS 패킷이 PID 필터(4)로부터 출력된 때에 일단 축적되는 버퍼이다.

코디드 데이터 버퍼(CDB)(13)는 PG 스트림을 구성하는 PES 패킷이 저장되는 버퍼이다.

스트림 그래픽스 프로세서(SGP)(14)는 그래픽스 데이터를 저장한 PES 패킷(ODS)을 디코드하여, 디코드에 의해 얻어진 인덱스 컬러로 이루어지는 비 압축상태의 비트맵을 그래픽스 오브젝트로서 오브젝트 버퍼(15)에 기록한다.

오브젝트 버퍼(15)는 스트림 그래픽스 프로세서(14)의 디코드에 의해 얻어진 그래픽스 오브젝트가 배치된다.

콤포지션 버퍼(16)는 그래픽스 데이터 묘사를 위한 제어정보(PCS)가 배치되는 메모리이다.

그래픽스 컨트롤러(17)는 콤포지션 버퍼(16)에 배치된 PCS를 해독하여 해독 결과에 따른 제어를 한다.

프레젠테이션 그래픽스 플레인(18)은 1 화면 분의 영역을 갖는 메모리이며, 1 화면 분의 비 압축 그래픽스를 저장할 수 있다. 본 플레인에서의 해상도는 1920×1080이며, 프레젠테이션 그래픽스 플레인(18) 중의 비 압축 그래픽스의 각 화소는 8비트의 인덱스 컬러로 표현된다. CLUT(Color Lookup Table)를 이용하여 이러한 인덱스 컬러를 변환함으로써 프레젠테이션 그래픽스 플레인(18)에 저장된 비 압축 그래픽스는 표시에 제공된다.

CLUT부(19)는 프레젠테이션 그래픽스 플레인(18)에 저장된 비 압축 그래픽스에서의 인덱스 컬러를 Y, Cr, Cb값으로 변환한다.

트랜스 포트 버퍼(TB)(20)는 IG 스트림에 귀속하는 TS 패킷이 일단 축적되는 버퍼이다.

코디드 데이터 버퍼(CDB)(21)는 IG 스트림을 구성하는 PES 패킷이 저장되는 버퍼이다.

스트림 그래픽스 프로세서(SGP)(22)는 그래픽스 데이터를 저장한 PES 패킷을 디코드하여, 디코드에 의해 얻어진 인덱스 컬러로 이루어지는 비 압축 상태의 비트맵을 그래픽스 오브젝트로 오브젝트 버퍼(23)에 기록한다.

오브젝트 버퍼(23)는 스트림 그래픽스 프로세서(22)의 디코드에 의해 얻어진 그래픽스 오브젝트가 배치된다.

콤포지션 버퍼(24)는 그래픽스 데이터 묘사를 위한 제어정보가 배치되는 메모리이다.

그래픽스 컨트롤러(25)는 콤포지션 버퍼(24)에 배치된 제어정보를 해독하여, 해독결과에 따라서 제어를 한다.

인터랙티브 그래픽스 플레인(26)은 스트림 그래픽스 프로세서(SGP)(22)에 의한 디코드에서 얻어진 비 압축 그래픽스가 기록된다. 본 플레인에서의 해상도는 1920×1080이며, 인터랙티브 그래픽스 플레인(26) 중의 비 압축 그래픽스의 각 화소는 8비트의 인덱스 컬러로 표현된다. CLUT(Color Lookup Table)를 이용하여 이러한 인덱스 컬러를 변환함으로써 인터랙티브 그래픽스 플레인(26)에 저장된 비 압축 그래픽스는 표시에 제공된다.

CLUT부(27)는 인터랙티브 그래픽스 플레인(26)에 저장된 비 압축 그래픽스에서의 인덱스 컬러를 Y, Cr, Cb 값으로 변환한다.

합성부(28)는 비디오 플레인(11)에 저장된 비 압축 상태의 프레임 화상과, 프레젠테이션 그래픽스 플레인(18)에 저장된 비 압축상태의 그래픽스 오브젝트를 합성시킨다. 이와 같은 합성에 의해 동화상 상에 자막이 겹쳐진 합성화상을 얻을 수 있다.

합성부(29)는 인터랙티브 그래픽스 플레인(26)에 저장된 비 압축 상태의 그래픽스 오브젝트와 합성부(28)의 출력인 합성화상(비 압축상태의 픽쳐 데이터와, 프레젠테이션 그래픽스 플레인(18)의 비 압축 그래픽스 오브젝트를 합성한 것)을 합성한다.

스위치(30)는 BD-ROM에서 판독된 TS 패킷, 로컬 스토리지(32)에서 판독된 TS 패킷 중의 어느 한쪽을 선택적으로 트랜스 포트 버퍼(20)에 공급한다.

네트워크 디바이스(31)는 재생장치에서의 통신기능을 실현하는 것이고, URL에 해당하는 web사이트와의 TCP 커넥션, FTP 커넥션 등을 확립한다.

로컬 스토리지(32)는 여러 기록매체 및 통신매체로부터 공급된 콘텐츠를 저장해 두기 위한 하드디스크이다. 네트워크 디바이스(31)에 의해 확립된 커넥션을 통해서 web 사이트로부터 다운로드 된 콘텐츠 등도 이 로컬 스토리지(32)에 저장된다.

소스 디 패킷타이저(34)는 로컬 스토리지(32)에서 판독된 AV Clip의 TS 패킷에서 TP_extra_header를 제거하고 TS 패킷만을 PID필터 (35)에 출력한다. 소스 디패킷타이저(34)에 의한 PID 필터(35)로의 출력은 어라이벌 타임 클록 카운터(33)가 측정하는 시각이 TP_extra_header에 나타내진 ATS가 된 타이밍에 이루어진다.

PID 필터(35)는 로컬 스토리지(32)에서 판독된 TS 패킷을 IG 스트림 데이터 측, 오디오 디코더 측, 텍스트 자막 디코더 측 중의 어느 하나로 전환한다.

스위치(36)는 BD-ROM에서 판독된 TS 패킷, 로컬 스토리지(32)에서 판독된 TS 패킷 중 어느 한쪽을 오디오 디코더(39) 측에 허가 요구한다.

트랜스 포트 버퍼(TB)(37)는 오디오 스트림에 귀속하는 TS 패킷을 축적한다.

엘리멘터리 버퍼(EB)(38)는 오디오 스트림을 구성하는 PES 패킷이 저장되는 버퍼이다.

오디오 디코더(39)는 엘리멘터리 버퍼(38)로부터 출력된 PES 패킷을 복호 하여 비 압축 형식의 오디오 데이터를 출력한다.

트랜스 포트 버퍼(TB)(40)는 텍스트 자막 스트림에 귀속하는 TS 패킷을 축적 한다.

엘리멘터리 버퍼(EB)(41)는 텍스트 자막 스트림을 구성하는 PES 패킷이 저장되는 버퍼이다.

텍스트 자막 디코더(42)는 버퍼(41)에 판독된 PES 패킷을 디코드하여 표시에 제공한다. 이 디코드는 로컬 스토리지(32)로부터 별도로 판독되는 폰트를 이용하여 텍스트 자막 스트림 중의 텍스트 문자열을 비트맵으로 전개함으로써 이루어진다. 디코드에 의해 얻어진 텍스트 자막은 프레젠테이션 그래픽스 플레인(18)에 기록된다.

시나리오 메모리(43)는 현재의 Clip 정보를 저장해 두기 위한 메모리이다. 현재 Clip 정보는 BD-ROM에 기록되어 있는 복수 Clip 정보 중 현재 처리대상으로 되어 있는 것을 말한다.

제어부(44)는 명령 ROM과 CPU로 이루어지며, 명령 ROM에 저장되어 있는 소프트웨어를 실행하여 재생장치 전체의 제어를 실행한다. 이 제어의 내용은 사용자 조작에 따라서 발생하는 사용자 이벤트 및 PSR세트(46)에서의 각 PSR의 설정치에 따라서 동적으로 변화한다.

PSR 세트(46)는 재생장치에 내장되는 불휘발성의 레지스터이며, 64개의 Player Status Register(PSR(1)∼(64))와, 4096개의 General Purpose Register(GPR)로 이루어진다. 64개의 Player Status Register(PSR)는 각각 현재의 재생시점 등, 재생장치에서의 제반 상태를 나타낸다. 64개의 PSR(PSR(1)∼(64)) 중 PSR(8)은 0∼OxFFFFFFFF의 값으로 설정됨으로써 45KHz의 시간 정밀도를 이용하여 현재의 재생시점(현재 PTM)을 나타낸다.

이상이 재생장치의 내부 구성이다.

이어서, 제어부(44)의 처리절차에 대해서 설명한다.

제어부(44)는 MPEG4-AVC 형식의 비디오 스트림의 재생시에 랜덤 액세스를 실행하도록 BD 드라이브(1), 비디오 디코더(8)를 제어한다.

한편, 랜덤 액세스에는 타임 서치가 있다. 타임 서치는, "몇 시 몇 분 몇 초"에 재생하라고 하는 시간정보를 사용자로부터 접수하고, 지시된 재생 개시시점에 해당하는 위치에서부터 비디오 스트림을 재생하는 기술이다. 이때, 제어부(44)는 시간정보를 BD-ROM 상의 액세스 유닛 어드레스(I픽쳐 어드레스라고도 한다)로 변환하는 변환처리를 행하여 액세스 유닛의 어드레스를 구하고 나서, 그 어드레스 이후의 TS 패킷을 BD-ROM에서 판독하여, 그 TS 패킷을 순차로 디코더에 투입한다.

이들 제어의 근간에 있는 것은 시간정보로부터 액세스 유닛 어드레스를 이끌어내는 처리이다. 도 19는 영화에 이용되는 비디오 스트림에서 시간정보를 액세스 유닛 어드레스로 변환하는 순서를 나타내는 플로차트이다. 본 플로차트에서, 랜덤 액세스의 액세스 처를 나타내는 시간정보를 In_time으로 표기한다. 도 19의 스텝 S1에서는 In_time을 PTS_EP_start로 하고, 스텝 S2에서는 PTS_EP_start에 가장 가까운 EP_High_id, EP_Low_id의 쌍을 구한다. 여기에서 EP_High_id는 In_time 이전의 시점을 나타내는 EP_High이며, In_time에 가장 가까운 것을 특정하는 식별자이다. 한편, EP_Low_id는, EP High〔EP_High_id〕이후, In_time 이전의 시점을 나타내는 EP_Low이며, In_time에 가장 가까운 것을 특정하는 식별자이다.

EP_High_id를 구하기 위해, 제어부(44)는 복수 EP_High의 PTS_EP_High에 제시되는 시간 폭을 더해간다. 여기서, PTS_EP_High에 제시되는 시간 폭은 PTS_EP_High를 상위 비트로 하는 시간의 단위이다. 그리고 몇 개째의 EP_High_id에서 시간 폭의 총합∑가 In_time을 넘는지를 판정한다. 여기서, k개째의 EP_High_id에서 시간 폭의 총합∑가 In_time을 초과한 경우, 이 k에서 1을 뺀 수치(k－1)를 EP_High_id라고 한다.

EP_Low_id를 구하기 위해, 제어부(44)는 PTS_EP_High(EP_High_id)까지의 총합∑에 복수 EP_Low의 PTS_EP_Low에 제시되는 시간 폭을 더해간다. 그리고 몇 개째의 EP_Low_id에서 시간 폭의 총합이 In_time을 초과하는가를 판정한다. 여기에서 h개째의 EP_Low_id에서 시간 폭의 총합이 In_time을 초과한 경우, 이 h에서 1을 뺀 수치(h-1)를 EP_Low_id로 한다.

이와 같이 하여 구해진 EP_High_id 및 EP_Low_id의 쌍에 의해 In_time에 가장 가까운 Entry Point가 특정되게 된다.

이렇게 하여 EP_Low_id를 구하면, 스텝 S 3∼스텝 S 5로 이루어지는 루프처리로 이행한다. EP_Low_id를 변수 j에 대입한 후에(스텝 S 3), 스텝 S 4∼스텝 S 5로 이루어지는 루프처리를 실행하는 것이다. 이 루프처리는 스텝 S 5가 Yes로 판정되기까지 변수 j의 디크리먼트(스텝 S 4)를 반복하는 것이다. 이 스텝 S 5는 변수 j에 의해 특정되는 Entry Point의 is_angle_change_point(PTS_EP_Low〔j〕. is_angle_change_ point)가 1인지 여부를 판정하는 것이며, 변수 j에 의해 특정되는 Entry Point의 is_angle_change_point가 연속하여 "0"을 나타내고 있는 한, 이 루프처리는 반복하여 실행된다.

변수 j에 의해 특정되는 Entry Point의 is_angle_change_point가 "1"이 되면 이 루프처리는 종료하게 된다. 스텝 S 5가 Yes가 되면, 변수 j를 EP_Low_id에 대입하여(스텝 S 6), 이 EP_Low_id에 가장 가까운 ref_to_EP_Low_id〔i〕를 갖는 EP_High〔i〕를 구한다(스텝 S 7). 이렇게 하여 EP_Low_id와 i가 구해지면, SPN_EP_Low〔EP_Low_id〕와, SPN_EP_High〔i〕로부터 SPN_EP_Start를 구하여(스텝 S 8), 이 SPN_EP_Start를 액세스 유닛 어드레스로 변환한다(스텝 S 9).

여기서, SPN은 TS 패킷의 시리얼 번호이므로, 이 SPN에 따라 TS 패킷을 판독하기 위해서는 SPN을 상대 섹터 수로 변환할 필요가 있다. 여기서, 도 4에 도시한 바와 같이, TS 패킷은 32개마다 하나의 얼라인드 유닛으로 변환되어 3개의 섹터에 기록되므로, SPN을 32로 나눔으로써 몫을 얻고, 그 몫을 액세스 유닛이 존재하는 얼라인드 유닛의 번호로 해석한다. 이렇게 얻어진 얼라인드 유닛 번호에 3을 곱함으로써 SPN에 가장 가까운 얼라인드 유닛의 섹터 어드레스를 구할 수 있다. 이렇게 하여 얻어진 섹터 어드레스는 하나의 AV Clip 파일의 선두로부터의 상대 섹터 수이므로, 이 상대 섹터 수를 파일 포인터로 설정하여 AV Clip을 판독함으로써, 액세스 유닛을 비디오 디코더(8)에 판독할 수 있다.

도 20은 슬라이드 쇼에 이용되는 비디오 스트림에서 시간정보를 액세스 유닛어드레스로 변환하는 순서를 나타내는 플로차트이다.

슬라이드 쇼에서는 비디오 스트림에서의 모든 픽쳐가 IDR 픽쳐이고, 그 재생시점이 PTS_EP_start에 지정되어 있으므로, 도 19의 스텝 S 3∼스텝 S 7의 처리를 행하지 않고 In_time을 IDR 픽쳐의 어드레스로 변환할 수 있다. 구체적으로 말하면, S 1에서는 In_time을 PTS_EP_start로 하고, 스텝 S 2에서는 PTS_EP_start에 가장 가까운 EP_High_id, EP_Low_id의 쌍을 구하여, SPN_EP_Low〔EP_Low_id〕와 SPN_EP_High〔EP_High_id〕로부터 SPN_EP_Start를 구함으로써(스텝 S 8), 액세스 유닛 어드레스를 얻으면 된다(스텝 S 9). 즉, 액세스 유닛 어드레스를 얻기 위한 변환 순서가 대폭 간략화되게 된다.

여기서, 슬라이드 쇼 재생의 경우에도 도 19에서의 스텝 S 1의 절차를 실행한다. 즉, EP_High_id를 구하기 위해 제어부(44)는 복수 EP_High의 PTS_EP_High에 제시되는 시간 폭을 더해간다. 그리고 몇 개째의 EP_High_id에서 시간 폭의 총합 ∑가 In_time을 초과하는가를 판정한다. 여기에서 k개째의 EP_High_id에서 시간 폭의 총합 ∑가 In_time을 초과한 경우, 이 k에서 1을 뺀 수치 (k－1)을 EP_High_id로 한다.

또, EP_Low_id를 구하기 위해 제어부(44)는 PTS_EP_High(EP_High_id)까지의 총합 ∑에 복수 EP_Low의 PTS_EP_Low로 나타내진 시간 폭을 더해 간다. 그리고 몇 개째의 EP_Low_id에서 시간 폭의 총합이 In_time을 초과하는가를 판정한다. 여기서, h개째의 EP_Low_id에서 시간 폭의 총합이 In_time을 초과한 경우, 이 h에서 1을 뺀 수치(h－1)를 EP_Low_id로 한다.

이와 같이 하여 구해진 EP_High_id 및 EP_Low_id의 쌍에 의해 In_time에 합치하는 Entry Point 또는 가장 가까운 Entry Point가 특정되게 된다.

이상의 절차에 따라, In_time에 합치하는 PTS_EP_start가 존재하는 경우, EP_map에서의 PTS_EP_start 중 In_time에 합치하는 것에 대응하는 SPN_EP_start로부터의 픽쳐 데이터의 판독과 재생을 실행할 수 있다.

EP_map에서의 PTS_EP_start 중 당해 시점에 합치하는 것이 존재하지 않는 경우, In_time에 가장 가까운 PTS_EP_start에 대응하는 SPN_EP_start로부터의 픽쳐 데이터의 판독과 재생을 실행하게 된다.

이상과 같이 본 실시 예에 의하면, 사용자의 조작에 의해 전후의 영상을 표시하지 않고, 스킵 조작 등에 의한 순서에 관계없이 정지화상을 표시할 필요가 있는 슬라이드 쇼에서 모든 정지화상을 IDR 픽쳐로 구성하여 EP_map에 의해 지정해 둠으로써, 스트림 해석이 필요해 지도록 하고 있다.

또, 각 액세스 유닛(Non-IDR I 픽쳐, IDR 픽쳐)을 EP_map에서의 Entry_Point로 지정하고 있고, 필요한 액세스 유닛의 데이터만을 직접 액세스하여 데이터를 판독하여 디코더에 공급할 수 있으므로, 액세스 효율이 좋고, 표시까지의 시간도 짧게 할 수 있다.

또, 상기 비디오 스트림을 구성하는 모든 픽쳐 데이터의 엔트리 어드레스가 EP_map에 포함되어 있는 것을 보증하는 플래그를 EP_map 또는 관련된 내비게이션 정보 내의 1개소에 기록하고 있어도 좋다.

(제 2 실시 예)

제 2 실시 예는 슬라이드 쇼에서의 시간 축 상에 챕터를 설정하는 개량에 관한 것이다. 이하, 챕터 정의를 위한 정보에 대해서 설명한다.

이 챕터 정의를 위한 정보는 PlayList 정보이며, 확장자 "mpls"가 부여된 파 일 내에 존재한다. 이하, PlayList정보에 대해서 설명한다.

확장자 "mpls"가 부여된 파일(00001.mpls, 00002.mpls, 00003.mpls…)은 PlayList정보를 저장한 파일이다. PlayList정보는 AV Clip을 참조하여 PlayList라고 불리는 재생경로를 정의하는 정보이다. 도 21은 PlayList정보의 구성을 나타내는 도면이며, 도 21의 좌측에 도시한 바와 같이, PlayList 정보는 복수의 PlayItem정보로 이루어진다. PlayItem은 하나 이상의 AV Clip 시간 축 상에서 In_Time, Out_Time을 지정함으로써 정의되는 재생구간이다. PlayItem정보를 복수 배치함으로써 복수의 재생구간으로 이루어지는 PlayList(PL)가 정의된다. 도면 중의 점선 hs1은 PlayItem 정보의 내부 구성을 클로즈업하고 있다. 도 21에 도시한 바와 같이, PlayItem정보는 대응하는 Clip정보를 나타내는 『Clip_information_file_name』과, 대응하는 AV Clip의 부호화방식을 나타내는 『Clip_codec_indentifier』와, AV Clip의 재생을 개시해야할 시각을 나타내는 『In_time』과, AV Clip의 재생을 종료해야할 시각을 나타내는 『Out_time』과, 『Still_mode』와, 『Still_time』으로 이루어진다. 도 22는 AV Clip과 PlayList 정보와의 관계를 나타내는 도면이다. 제 1단째는 AV Clip이 갖는 시간 축을 나타내고, 제 2단째는 PlayList가 갖는 시간 축(PL 시간 축이라고 한다)을 나타낸다. PlayList 정보는 PlayItem #1, #2, #3이라고 하는 3가지의 PlayItem정보를 포함하고 있고, 이들 PlayItem #1, #2, #3의 In_time, Out_time에 의해 3가지의 재생구간이 정의되게 된다. 이들 재생구간을 배열시키면 AV Clip 시간 축과는 다른 시간 축이 정의되게 된다. 이것이 제 2단째에 도시한 PL 시간 축이다. 이와 같이, PlayItem 정보의 정의에 의해 AV Clip과는 다른 시간 축의 정의가 가능해 진다.

이 PlayList 정보를 구성하는 정보요소에서 특징적인 것은 Still_mode 및 Still_time이다.

『Still_mode』는 In_time에서 Out_time까지의 픽쳐를 재생함에 있어서 최후의 픽쳐 데이터를 정지 표시를 하는가 여부를 나타낸다. "00"으로 설정된 경우에는 Still_mode는 정지표시를 계속하지 않는다는 취지를 나타내고, "01"로 설정된 경우-에는 Still_mode는 정지표시를 유한시간 계속한다는 취지를 나타낸다. "01"로 설정된 경우의 정지표시의 시간 길이는 Still_time에 설정된다. "02"로 설정된 경우, Still_mode는 정지표시를 무한시간 계속한다는 취지를 나타낸다. 정지표시를 무한시간 계속하는 경우의 표시의 해제는 사용자로부터의 명시적인 조작에 의한다.

『Still_time』은 Still_mode가 01로 설정된 경우, 정지표시를 계속하도록 하는 시간길이를 초 단위로 나타낸다.

이상이 본 실시 예에 관한 PlayItem정보에 대한 설명이다. 이어서, PLMark 정보에 대해서 설명한다.

도 23은 제 2 실시 예에 관한 PlayList정보의 복수의 PLMark정보의 내부 구성을 나타내는 도면이다. 도 23에서의 PLmark정보(PLmark())는 PL시간 축 중 임의의 구간을 챕터 점(chapter point)으로 지정하는 정보이다. 도 23의 인출선 pm1로 나타낸 바와 같이, PLmark정보는 『ref_to_PlayItem_Id』와 『mark_time_stamp』를 포함한다. 도 24는 PLmark 정보에 의한 챕터 정의를 나타내는 도면이다. 도 24에 서, 제 1단째는 AV Clip시간 축을 나타내고, 제 2단째는 PL시간 축을 나타낸다. 도면 중의 화살표 pk1, pk2는 PLmark정보에서의 PlayItem 지정(ref_to_PlayItem_Id)과 하나의 시점의 지정(mark_time_stamp)을 나타낸다. 이들의 지정에 의해 PL 시간 축에는 3개의 챕터(chapter #1, #2, #3)가 정의되게 된다. 이상이 PLmark에 대한 설명이다.

도 25는 PlayList정보에 의한 슬라이드 쇼의 지정을 나타내는 도면이다. 도 25의 제 2단째는 PlayItem정보를 나타낸다. 이 제 2단째는 6개의 PlayItem정보#1∼#6으로 이루어진다. 도면 중의 화살표 yt1, 2, 3, 4, 5, 6은 PlayItem정보에서의 In_time, Out_time에 의한 지정을 상징적으로 나타내고, 화살표 st1, 2, 3, 4, 5, 6은 Still_Time에 의한 지정을 상징적으로 나타낸다. 이 화살표로도 알 수 있는 바와 같이, PlayItem 정보는 비디오 스트림에서의 개개의 픽쳐 데이터를 지정하도록 설정되어 있다. 또, Still_Time은 후속하는 픽쳐 데이터를 표시하기까지의 간격을 나타내도록 설정되어 있다. 이와 같이 슬라이드 쇼를 구성하는 개개의 픽쳐 데이터는 각각 6개의 PlayItem정보에 의해 재생개시 점 및 재생종료 점으로서 지정되어 있는 것이다.

도 25의 제 1단째는 PLMark 정보를 나타낸다. 이 제 1단째에는 6개의 PLMark 정보 #1∼#6이 존재한다. 화살표 kt1, 2, 3, 4, 5, 6은 PLMark정보의 ref_to_PlayItem_Id에 의한 지정을 나타낸다. 이 화살표로부터도 알 수 있는 바와 같이, PLMark 정보의 ref_to_PlayItem_Id는 PlayItem 정보의 각각을 지정하고 있음을 알 수 있다.

이어서 PlayItem 정보에 의한 재생에 대해서 설명한다. 슬라이드 쇼에서의 개개의 픽쳐 데이터가 PlayItem 정보 및 PLMark정보에 의해 지정되어 있으므로, 제어부(44)는 PlayItem 정보의 In_time, Out_time을 EP_map을 이용하여 AV Clip에서의 SPN으로 변환하고, 그리고 그 SPN에 존재하는 픽쳐 데이터를 디코더에 투입한다. 이렇게 함으로써 PlayItem 정보의 In_time, Out_time에 지정되어 있는 픽쳐 데이터가 표시되게 된다. 그 후, Still_Time에 제시되어 있는 기간만큼 표시의 정지를 계속한다. 이상과 같은 처리를 모든 PlayItem 정보에 대해서 반복함으로써 본 실시 예에 관한 제어부(44)는 슬라이드 쇼를 재생한다.

슬라이드 쇼를 구성하는 개개의 픽쳐 데이터는 PlayItem 정보 및 PLMark 정보를 이용하여 지정되어 있으므로, 챕터 스킵이나 챕터 서치라고 하는 기능에 의해 전후의 픽쳐 데이터를 재생시켜 갈 수가 있다.

챕터 서치기능은, PLMark 정보에 기술되어 있는 ref_to_PlayItem_Id에 대응하는 PlayItem정보를 복수의 PlayItem 정보 중에서 특정하고, 특정한 PlayItem정보가 정의되어 있는 AV Clip에서 PLMark 정보에 기술된 mark_time_stamp에 제시되는 위치로부터의 랜덤 액세스를 행하는 것이며, 이때, 제어부(44)는 복수의 Entry Point 중, PLMark 정보에 기술된 mark_time_stamp에 가장 가까운 PTS_EP_start를 갖는 Entry Point를 특정하고, 특정한 Entry Point의 SPN_EP_start에 대응하는 액세스 유닛 어드레스에서부터의 재생을 실행하도록 한다.

챕터 스킵은, 현재의 재생위치에 해당하는 챕터의 직전 또는 직후의 챕터를 규정하는 PLMark 정보를 특정하여, 그 PLMark 정보에 대한 챕터 서치를 실행하는 것이다. 상술한 바와 같이, PLMark 정보의 mark_time_stamp에 의해 지정되는 픽쳐는 IDR 픽쳐에 인코드 되어 있고, is_angle_change_point"＝1"로 설정된 Entry Point의 PTS_EP_start는 이 IDR 픽쳐의 재생시각을 나타내고 있으므로, Entry Point의 SPN_EP_start에 제시된 위치 이후의 픽쳐를 판독함으로써 IDR 픽쳐를 비디오 디코더(8)에 공급할 수 있다.

이하, 플로차트를 참조하면서 챕터 서치 및 챕터 스킵의 처리절차에 대해서 설명한다. 도 26은 챕터 서치의 처리절차를 도시한 플로차트이다.

본 플로차트에서, 먼저 챕터 메뉴에서의 챕터선택을 기다려서(스텝 S 124), 챕터선택이 이루어지면 선택된 챕터에 해당하는 PLMark정보를 현재PlayListMark로 한다(스텝 S 125). 스텝 S 126에서는 현재 PlayListMark의 ref_to_PlayItem_id에 기술되어 있는 PI를 PlayItem#x에 설정하고, 스텝 S 127에서는 PlayItem#x의 Clip_information_file_name에서 지정되는 Clip정보를 판독한다. 스텝 S 128에서는 현재 Clip정보의 EP_map을 이용하여 현재 PlayListMark의 mark_time_stamp를 액세스 유닛 어드레스 u로 변환한다. 여기서, PLMark 정보의 mark_time_stamp로 지시되어 있는 픽쳐는 is_angle_change_point"＝1"로 설정된 Entry Point에 의해 지시되어 있다. 그 때문에 액세스 유닛 어드레스 u는 IDR 픽쳐의 어드레스를 지시하게 된다.

한편, 스텝 S 129에서는 PlayItem#x의 Out_time을 현재 Clip정보의 EP_map을 이용하여 액세스 유닛 어드레스 v로 변환한다. 스텝 S 130은 현재 PlayListMark의 mark_time_stamp에서부터 PlayItem#x의 Out_time까지의 출력을 디코더에 명령한다. 이상이 챕터 서치의 처리절차이다. 이어서 챕터 스킵의 처리절차에 대해서 설명한다. 도 27은 챕터 스킵의 처리절차를 도시한 플로차트이다.

스텝 S 131은 리모컨에 대한 SkipNext키, SkipBack키에 대한 조작 대기를 행한다. 만약 조작이 이루어지면 스텝 S 132를 실행한다. 스텝 S 132는 눌러진 키가 SkipNext 키인가 SkipBack 키인가의 판정이며, SkipBack 키면 스텝 S 133에서 방향 플래그를 －1로 설정하고, SkipNext 키면 스텝 S 134에서 방향 플래그를 ＋1로 설정한다.

스텝 S 135는 현재 PI 및 현재 PTM을 변환하여 현재 PLMark를 특정하는 스텝이며, 스텝 S 136은 현재 PLmark의 번호에 방향플래그의 값을 더한 번호를 현재 PlayListMark의 번호로서 설정한다. 여기서, SkipNext 키면 방향 플래그는 ＋1로 설정되어 있으므로, 현재 PlayListMark는 인크리먼트 되게 된다. SkipBack 키면 방향 플래그는 －1로 설정되어 있으므로, 현재 PlayListMark는 디크리먼트 되게 된다. 이와 같이 하여 PLMark 정보를 설정하면, 도 25과 마찬가지로, 스텝 S 126∼스텝 S 130의 처리절차를 실행함으로써 TS 패킷 판독을 행한다.

이상이 PLMark 정보에 의거한 재생을 행할 때의 재생장치의 처리절차이다.

여기서, 도 25에 도시한 비디오 스트림에 대해서 PLMark를 설정하는 경우의 설정 예에 대해서 설명한다. 슬라이드 쇼에서 재생될 수 있는 각 정지화상이 제 1단째에서의 6개의 PLMark#1∼#6에 의해 지정되어 있으므로, 도 25의 시점 t1, t2, t3, t4, t5, t6의 정지화상이 챕터 서치 및 챕터 스킵의 대상이 될 수 있다.

또, 제 4단째의 시간 축에서의 각각의 시점 t1, t2, t3, t4, t5, t6은 모두 제 5단째의 EP_map에서 PTS_EP_start로서 지정되므로, 챕터 서치 및 챕터 스킵에서는 "앞의 IDR 픽쳐를 경유"하는 우회를 행하지 않고, 원하는 챕터로의 랜덤 액세스를 실행할 수 있다. 챕터 서치 및 챕터 스킵을 실행함에 있어서, 선행하는 IDR 픽쳐의 경유를 행하지 않고 원하는 정지화상을 판독할 수 있으므로, 슬라이드 쇼에서도 챕터 서치 및 챕터 스킵을 고효율로 실행할 수 있다.

이상과 같이 본 실시 예에 의하면, 챕터 서치 및 챕터 스킵을 실행함에 있어서, 선행의 IDR 픽쳐의 경유를 행하지 않고 원하는 정지화상을 판독할 수 있으므로, 슬라이드 쇼라도 챕터 서치 및 챕터 스킵을 고효율로 실행할 수 있다.

(제 3 실시 예)

본 실시 예는 제 1 실시 예, 제 2 실시 예의 응용이며, 대화적인 제어를 슬라이드 쇼에 도입하는 것이다. 이러한 대화제어를 도입하기 위해서, AV Clip은 도 3에 도시한 비디오 스트림 및 오디오 스트림 이외에, IG 스트림을 다중화한 구성으로 되어 있다. 도 28은 제 3 실시 예에 관한 AV Clip의 구성을 나타내는 도면이며, 도 3에 도시한 바와 같이 AV Clip은(중간 단), 복수의 비디오 프레임(픽쳐 pj1, 2, 3)으로 이루어지는 비디오 스트림, 복수의 오디오 프레임으로 이루어지는 오디오 스트림을(상 1단째), PES 패킷 열로 변환하고(상 2단째), 또 TS 패킷으로 변환하며(상 3단째), 마찬가지로 대화 계의 인터렉티브 그래픽스 스트림(하 2단째의 IG 스트림)을 TS 패킷으로 변환하여(하 3단째), 이들을 다중화함으로써 구성되어 있음을 알 수 있다. 도 29는 IG 스트림의 내부 구성을 나타내는 도면이다.

인터렉티스 그래픽스 스트림은 ICS(Interactive Composition Segment), PDS(Palette Definition Segment), ODS(Object Definition Segment), END(END of Display Set Segment)라고 불리는 기능 세그먼트로 이루어진다.

ODS(Object Definition Segment)는 버튼을 묘사함에 있어서의 도안의 그래픽스를 정의하는 그래픽스 데이터이다.

PDS(Palette Definition Segment)는 그래픽스 데이터의 묘사에 있어서의 발색을 규정하는 기능 세그먼트이다.

ICS(Interactive Composition Segment)는 사용자 조작에 따라서 버튼의 상태를 변화시키는 대화제어를 규정하는 기능 세그먼트이다.

도 29(b)는 ICS의 내부 구성을 나타내는 도면이다. ICS는 복수의 버튼정보로 이루어진다. 버튼정보는 대화제어화면에서의 개개의 버튼에 대응하는 것이다. 구체적으로 말하면, 대응하는 버튼에 포커스(focus)가 존재하는 상태에서 이동 키가 눌러진 경우, 어느 버튼에 포커스 이동을 시키는가를 나타내는 『neighbor_info』와, 대응하는 버튼의 노멀 상태(normal state), 셀렉티드 상태(selected state)라고 하는 각 상태를 어떤 ODS로 표시하는가를 나타내는 『state_info』와, 대응버튼의 확정시에 재생장치에 실행시켜야할 『내비게이션 커맨드』로 이루어진다.

이상 설명한 IG 스트림의 데이터 구조는 이하의 공지문헌에 기재되어 있는 내용을 요약한 것이다. 보다 상세한 기술내용에 대해서는 이하의 공지문헌을 참조하기 바란다.

국제공개공보 WO 2004/077826호 공보

이하, ICS의 구체 예에 대해서 설명한다.

여기서, ICS는, state_info, neighbor_info, 내비게이션 커맨드는 도 30에 도시한 바와 같이 설정되어 있는 것으로 한다. 도 30은 슬라이드 쇼에서의 대화제어를 규정하는 ICS의 일 예를 나타내는 도면이다.

1. state_info

Button_info(0)의 state_info는 Button_info(0)에 대응하는 버튼("top" 버튼)이 노멀 상태인 경우에는 "top"이 부가된 삼각도형을 묘사하도록 규정되어 있다. 또, "top" 버튼에 포커스가 존재하는 경우(셀렉티드 상태인 경우)에는 "top"이 부가된 삼각도형을 강조상태로 묘사하도록 규정되어 있다. 이러한 규정에 의해 "top" 버튼은 선두의 정지화상으로의 스킵을 의도하는 "top" 버튼으로 취급되게 된다.

Button_info(1)의 state_info는 Button_info(1)에 대응하는 버튼("＋1" 버튼)이 노멀 상태인 경우에는 "＋1"이 부가된 삼각도형을 묘사하도록 규정되어 있다. 또, "＋1" 버튼이 셀렉티드 상태인 경우에는 "＋1"이 부가된 삼각도형을 강조상태로 묘사하도록 규정되어 있다. 이러한 규정에 의해 "＋1" 버튼은 하나 뒤의 정지화상으로의 스킵을 의도하는 "＋1" 버튼으로 취급되게 된다.

Button_info(2)의 state_info는 Button_info(2)에 대응하는 버튼("－1" 버튼)이 노멀상태인 경우에는 "－1"이 부가된 삼각도형을 묘사하도록 규정되어 있다. 또, "－1" 버튼이 셀렉티드 상태인 경우에는 "－1"이 부가된 삼각도형을 강조상태로 묘사하도록 규정되어 있다. 이러한 규정에 의해 "－1" 버튼은 하나 앞의 정지화상으로의 스킵을 의도하는 "－1" 버튼으로 취급되게 된다.

Button_info(3)의 state_info는 Button_info(3)에 대응하는 버튼("＋10" 버튼)이 노멀상태인 경우에는 "＋10"이 부가된 삼각형을 묘사하도록 규정되어 있다. 또 "＋10" 버튼이 셀렉티드 상태인 경우에는 "＋10"을 강조상태로 묘사하도록 규정되어 있다. 이러한 규정에 의해 "＋10" 버튼은 10매 후의 정지화상으로의 스킵을 의도하는 "＋10" 버튼으로 취급되게 된다.

Button_info(4)의 state_info는 Button_info(4)에 대응하는 버튼("－10" 버튼)이 노멀상태인 경우에는 "－10"이 부가된 삼각형을 묘사하도록 규정되어 있다. 또, "－10" 버튼이 셀렉티드 상태인 경우에는 "－10"을 강조상태로 묘사하도록 규정되어 있다. 이러한 규정에 의해 "－10" 버튼은 10매 전의 정지화상으로의 스킵을 의도하는 "－10" 버튼으로 취급되게 된다.

여기서, 도 31 (a)에 도시한 바와 같이, "top" 버튼∼"－10" 버튼의 state_info에 의해 지정되는 그래픽스는 IG 스트림에서 ODS 내에 존재하는 것으로 한다. state_info가 이와 같은 내용으로 설정되어 있고, 그리고, ICS에서의 PTS가, 도 31(b)에 도시한 바와 같이, 시간 축에서 x매째의 픽쳐가 표시되는 시점 tx를 가리키는 것으로 한다. 그러면, 비디오 스트림의 재생시점이 시점 tx에 도달하면 도 31 (c)와 같은 메뉴가 x매째의 정지화상과 합성되어 표시되게 된다.

2. ICS에서의 neighbor_info

도 30에서, 각 오브젝트 B의 neighbor_info를 참조하면, Button_info(0)의 neighbor_info는 좌측 키가 눌러진 때에 "2"의 번호를 갖는 "－1" 버튼으로 포커스를 이동하고, 우측 키가 눌러진 때에 "1"의 번호를 갖는 "＋1" 버튼으로 포커스를 이동하도록 규정되고, 또,

Button_info(1)의 neighbor_info는, 상측 키가 눌러진 때에 "0"의 번호를 갖는 "top" 버튼으로 포커스를 이동하도록 규정되고, 좌측 키가 눌러진 때에 "2"의 번호를 갖는 "－1" 버튼으로 포커스를 이동하며, 우측 키가 눌러진 때에 3의 번호를 갖는 "＋10" 버튼으로 포커스를 이동하도록 규정되어 있다.

Button_info(2)의 neighbor_info는, 좌측 키가 눌러진 때에 4의 번호를 갖는 "－10" 버튼으로 포커스를 이동하고, 우측 키가 눌러진 때에 "1"의 번호를 갖는 "＋1"버튼으로 포커스를 이동하도록 규정되며, 상측 키가 눌러진 때에 "0"의 번호를 갖는 "top" 버튼으로 포커스를 이동하도록 규정되고,

Button_info(3)의 neighbor_info는, 좌측 키가 눌러진 때에 "1"의 번호를 갖는 "＋1" 버튼으로 포커스를 이동하도록 규정되어 있다.

Button_info(4)의 neighbor_info는, 우측 키가 눌러진 때에 "2"의 번호를 갖는 "－1" 버튼으로 포커스를 이동하도록 규정되어 있다.

이상의 neighbor_info의 규정에 의해 도 32에 도시한 바와 같은 상태천이를 실현할 수 있다. 도 32는 슬라이드 쇼에 의해 표시되는 메뉴에서의 상태천이를 나타내는 도면이다.

즉, "＋1" 버튼에 포커스 이동이 존재하는 상태에서 좌측 키가 눌러진 경우, "－1" 버튼으로 포커스를 이동시킬 수 있다(hhl).

"＋1" 버튼에 포커스 이동이 존재하는 상태에서 우측 키가 눌러진 경우, "＋10"버튼으로 포커스를 이동시킬 수 있다(hh2). 또, "＋10" 버튼에 포커스 이동이 존재하는 경우에 좌측 키가 눌러진 경우, "＋1" 버튼으로 포커스 이동을 되돌릴 수 있다(hh4). "＋1" 버튼에 포커스 이동이 존재하는 상태에서 상측 키가 눌러진 경우, "top" 버튼으로 포커스를 이동시킬 수 있다(hh3).

상술한 바와 같이, "top" 버튼, "＋1" 버튼, "－1" 버튼, "＋10" 버튼, "－10"버튼은 선두 1매 후, 1매 전, 10매 후, 10매 전으로의 스킵을 의도하는 것이다. 또, 이들 버튼을 표시할 때에, 사용자에 의한 상하좌우 키의 누름에 따라서 버튼 상의 포커스 이동을 하므로 "＋1" 버튼∼"－10" 버튼 중 임의의 것을 사용자는 선택대상으로 할 수 있다.

3. ICS에서의 내비게이션 커맨드

Button_info(0)의 내비게이션 커맨드는 "top" 버튼에 대해서 확정조작이 이루어진 경우에 Jmp PLMark(1)을 실행하도록 규정되어 있다.

Button_info(1)의 내비게이션 커맨드는 "＋1" 버튼에 대해서 확정조작이 이루어진 경우에 Jmp PLMark(x＋1)을 실행하도록 규정되어 있다.

Button_info(2)의 내비게이션 커맨드는 "－1" 버튼에 대해서 확정조작이 이루어진 경우에 Jmp PLMark(x－1)을 실행하도록 규정되어 있다.

Button_info(3)의 내비게이션 커맨드는 "＋10" 버튼에 대해서 확정조작이 이루어진 경우에 Jmp PLMark(x＋10)을 실행하도록 규정되어 있다.

이들 내비게이션 커맨드는 PLMark를 분기 처로 지정하는 것이다. PLMark에 대한 괄호 내의 수치는 분기 처가 되는 픽쳐를 특정한다. 즉, PLMark(1)는 1매째의 픽쳐를 가리키는 PLMark이고, PLMark(x＋1)은 x＋1매째의 픽쳐를 가리키는 PLMark 이다. PLMark(x－1)은 x－1 매째의 픽쳐를 가리키는 PLMark이다. PLMark(x＋10)은 x＋10매째의 픽쳐를 가리키는 PLMark이다. PLMark(x－10)은 x－10매째의 픽쳐를 가리키는 PLMark이다.

각 버튼정보에서의 내비게이션 커맨드는 이들의 PLMark(1), (x＋1), (x－1), (x＋10), (x－10)을 분기 처로 지정하는 것이므로, 각 버튼의 확정시에 x매째의 정지화상으로부터 1매째의 정지화상, x＋1매째의 정지화상, x－1매째의 정지화상, x＋10매째의 정지화상, x－10매째의 정지화상으로의 랜덤 액세스가 이루어지게 된다.

도 30과 같은 포커스 이동에 의해 사용자는 임의의 버튼에 포커스 이동을 시킬 수 있으므로, 어떤 버튼에 포커스 이동이 있는 상태에서 사용자가 확정조작을 행한 경우, 그 확정조작이 이루어진 버튼에 대응하는 내비게이션 커맨드를 재생장치에 실행시켜서 도 32에 도시한 바와 같은 분기를 실행시킬 수 있다. 도 33은 슬라이드 쇼의 내비게이션 커맨드에 의한 분기를 나타내는 도면이다. 도 33의 제 1단째는 슬라이드 쇼를 구성하는 복수의 픽쳐와 이들 픽쳐로의 분기를 나타낸다. 제 2단째는 슬라이드 쇼의 시간 축이고, 제 3단째는 제 2단째의 픽쳐 열에 대해 설정된 엔트리 맵을 나타내며, 제 4단째는 BD-ROM 상의 TS 패킷 열을 나타낸다.

도 33의 제 1단째의 화살표는 도 30에 도시한 각 내비게이션 커맨드(JmpPLMark(1), JmpPLMark(x＋1), JmpPLMark(x－1), JmpPLMark(x＋10), JmpPLMark(x－10))에 의한 분기를 상징적으로 나타낸다. 이 분기에 의해 선두의 정지화상, 1매 후의 정지화상, 1매 전의 정지화상, 10매 후의 정지화상, 10매 전의 정지화상이 재생되게 된다. 이들 분기는 도 30에 도시한 내비게이션 커맨드에 의거한 것이므로, 이러한 분기에 의해 사용자는 자신의 조작에 의해 임의의 정지화상을 재생시킬 수 있다.

여기서, 선두의 정지화상, 1매 후의 정지화상, 1매 전의 정지화상, 10매 후의 정지화상, 10매 전의 정지화상의 각각의 재생시점이 EP_map에서 PTS_EP_start로서 지정되어 있다고 하면, 스트림에 대한 해석을 수반하지 않고 원하는 액세스 위치로의 랜덤 액세스를 실행할 수 있다. 내비게이션 커맨드에 의한 대화적인 재생에서, 가까운 엔트리 위치의 경유를 행하지 않고 원하는 정지화상을 판독할 수 있으므로, 대화적인 재생을 고효율로 실행할 수 있다.

(비고)

이상의 설명은 본 발명의 모든 실시행위의 형태를 나타내는 것은 아니다. 하기(A) (B) (C) (D) …의 변경을 한 실시행위의 형태에 의해서도 본 발명의 실시는 가능해 진다. 본원의 청구항에 기재된 각 발명은 이상에 기재한 복수의 실시 예 및 그들의 실시형태를 확장한 기재 내지 일반화한 기재로 하고 있다. 확장 내지 일반화의 정도는 본 발명의 기술분야의 출원 당시의 기술수준의 특성에 따른다.

(A) 모든 실시 예에서는 본 발명에 관한 기록매체를 BD-ROM으로 실시하였으나, 본 발명의 기록매체는 기록되는 EP_map에 특징이 있으며, 이 특징은 BD-ROM의 물리적 성질에 의존하는 것은 아니다. EP_map을 기록할 수 있는 기록매체라면 어떤 기록매체라도 좋다. 예를 들어, DVD-ROM, DVD-RAM, DVD-RW, DVD-R, DVD＋RW, DVD＋R, CD-R, CD-RW 등의 광디스크, PD, MO 등의 광자기 디스크라도 좋다.

또, 콤팩트 플래시(등록상표) 카드, 스마트 미디어, 메모리스틱, 멀티미디어 카드, PCM-CIA 카드 등의 반도체 메모리카드라도 좋다. 플렉시블 디스크, SuperDisk, Zip, Clik! 등의 자기기록 디스크(i), ORB, Jaz, SparQ, SyJet, EZFley, 마이크로 드라이브 등의 이동 가능한 하드디스크 드라이브(ⅱ) 라도 좋다. 또, 기기내장형의 하드디스크라도 좋다.

(B) 모든 실시 예에서의 재생장치는 BD-ROM에 기록된 AV Clip을 디코드한 후에 TV에 출력하였으나, 재생장치를 BD-ROM 드라이브만으로 하고, 이 이외의 구성요소를 TV가 구비하도록 해도 된다. 이 경우, 재생장치와 TV를 IEEE 1394로 접속된 홈네트워크에 내장할 수 있다. 또, 실시 예에서의 재생장치는 텔레비전과 접속하여 이용되는 타입이었지만, 디스플레이와 일체형으로 된 재생장치라도 좋다. 또, 각 실시 예의 재생장치에서 처리의 본질적 부분을 이루는 시스템 LSI(집적회로)만을 실시해도 된다.

(C) 각 플로차트에 나타낸 프로그램에 의한 정보처리는 하드웨어 자원을 이용하여 구체적으로 실현되고 있으므로, 상기 플로차트에 처리순서를 제시한 프로그램은 단일체로 발명으로서 성립한다. 모든 실시 예는 재생장치에 내장된 상태로 본 발명에 관한 프로그램의 실시행위에 대한 실시 예를 설명하였으나, 재생장치로부터 분리하여 각 실시 예에 제시한 프로그램 단일체를 실시해도 된다. 프로그램 단일체의 실시행위에는 이들 프로그램을 생산하는 행위(1)나, 유상·무상에 의해 프로그램을 양도하는 행위(2), 대여하는 행위(3), 수입하는 행위(4), 양방향의 전자통신회선을 통해서 공중에 제공하는 행위(5), 점포 전시, 카탈로그 권유, 팸플릿 배포 에 의해 프로그램의 양도나 대여를 일반 사용자에게 권유하는 행위(6)가 있다.

(D) 각 실시 예에서의 디지털 스트림은 BD-ROM 규격의 AV Clip이었으나, DVD-Video 규격, DVD-Video Recording 규격의 VOB(Video Object)라도 좋다. VOB는 비디오 스트림, 오디오 스트림을 다중화함으로써 얻어진 ISO/IEC13818-1 규격 준거의 프로그램 스트림이다. 또 AV Clip에서의 비디오 스트림은 MPEG4나 WMV방식이라도 좋다. 또, 오디오 스트림은 Linear-PCM 방식, Dolby-AC3 방식, MP3 방식, MPEG-AAC 방식, dts방식이라도 좋다.

(E) 제 1 실시 예에서의 슬라이드 쇼는 TS for Time based Slide Show임을 전제로 하여 설명하였으나, TS for MainPath of the Browsable Slide Show에 이용되는 AV Clip이나, SubPath of the Browsable Slide Show에 이용되는 AV Clip이라도 좋다. 즉, TS for MainPath of the Browsable Slide Show에 이용되는 AV Clip에 대응하는 Clip 정보에서 각 픽쳐의 재생시점 및 기록위치를 나타내도록 EP_map을 설정해 두어도 된다.

(F) 각 실시 예에서는 MPEG4-AVC(H.264나 JVT라고도 한다)를 기본으로 하여 설명하였으나, MPEG2 비디오 스트림이라도 좋으며, 또, 그 밖의 형식의 화상 형식(VC-1)인 경우라도 단독으로 디코드할 수 있는 화상이면 용이하게 응용할 수 있다.

본 발명에 관한 기록매체 및 재생장치는 홈시어터 시스템에서의 이용과 같이 개인적인 용도로 이용될 수 있다. 그러나 본 발명은 상기 실시 예에 내부 구성이 개시되어 있고, 이 내부 구성에 따라 양산하는 것이 명백하므로, 본 발명에 관한 기록매체 및 재생장치는 공업제품의 생산분야에서 생산하고, 또, 사용할 수 있다. 이로부터, 본 발명에 관한 기록매체 및 재생장치는 산업상의 이용가능성을 갖는다.

도 1은 본 발명에 관한 기록매체의 사용행위에 대한 형태를 나타내는 도면이다.

도 2는 BD-ROM의 내부 구성을 나타내는 도면이다.

도 3은 확장자 .m2ts가 부여된 파일이 어떻게 구성되어 있는가를 모식적으로 나타내는 도면이다.

도 4는 AV Clip을 구성하는 TS패킷이 어떤 과정을 거쳐서 BD-ROM에 기록되는가를 나타내는 도면이다.

도 5(a)는 영화에 이용되는 비디오 스트림의 내부 구성을 나타내는 도면이다.

도 5(b)는 슬라이드 쇼에 이용되는 비디오 스트림의 내부 구성을 나타내는 도면이다.

도 6 (a)는 IDR픽쳐의 내부 구성을 나타내는 도면이다.

도 6 (b)는 Non-IDR I픽쳐의 내부 구성을 나타내는 도면이다.

도 6 (c)는 Non-IDR I픽쳐에서의 의존관계를 나타내는 도면이다.

도 7은 IDR픽쳐, Non-IDR I픽쳐가 TS패킷으로 변환되는 과정을 나타내는 도면이다.

도 8은 슬라이드 쇼에서의 IDR픽쳐가 BD-ROM에 어떻게 기록되는가를 나타내는 도면이다.

도 9는 슬라이드 쇼의 재생진행을 나타내는 도면이다.

도 10은 Clip정보의 내부 구성을 나타내는 도면이다.

도 11 (a)는 비디오 스트림에 대한 Stream_Coding_Info를 도시한다.

도 11 (b)는 오디오 스트림에 대한 Stream_Coding_Info를 도시한다.

도 12는 Clip정보에서의 Clip info의 내부 구성을 나타내는 도면이다.

도 13은 영화의 비디오 스트림에 대한 EP_map 설정을 나타내는 도면이다.

도 14는 도 13에서의 Entry Point#1∼Entry Point#5의 PTS_EP_start, SPN_EP_start를 EP_Low, EP_High의 쌍으로 표현한 것이다.

도 15는 도 13의 비디오 스트림에 대한 랜덤 액세스가 어떻게 이루어지는가를 나타내는 도면이다.

도 16은 슬라이드 쇼에 대해서 설정된 EP_map의 내부 구성을 나타내는 도면이다.

도 17은 시간 축 상의 일 시점에 대한 랜덤 액세스를 도 16과 동일한 표기로 나타내는 도면이다.

도 18은 본 발명에 관한 재생장치의 내부 구성을 나타내는 도면이다.

도 19는 영화에 이용되는 비디오 스트림에서 시간정보를 I픽쳐 어드레스로 변환하는 절차를 도시한 플로차트이다.

도 20은 슬라이드 쇼에 이용되는 비디오 스트림에서 시간정보를 I픽쳐 어드레스로 변환하는 순서를 도시한 플로차트이다.

도 21은 PlayList정보의 구성을 나타내는 도면이다.

도 22는 AV Clip과 PlayList 정보와의 관계를 나타내는 도면이다.

도 23은 제 2 실시 예에 관한 PlayList정보의 복수의 PLMark정보의 내부 구성을 나타내는 도면이다.

도 24는 PLmark정보에 의한 챕터정의를 나타내는 도면이다.

도 25는 슬라이드 쇼에서 이용되는 비디오 스트림에 대한 PLMark 설정의 구체 예를 나타내는 도면이다.

도 26은 챕터 서치의 처리절차를 나타내는 플로차트이다.

도 27은 챕터 스킵의 처리절차를 나타내는 플로차트이다.

도 28은 제 3 실시 예에 관한 AV Clip의 구성을 나타내는 도면이다.

도 29(a)는 IG 스트림의 내부 구성을 나타내는 도면이다.

도 29(b)는 ICS의 내부 구성을 나타내는 도면이다.

도 30은 슬라이드 쇼에서의 대화제어를 규정하는 ICS의 일 예를 나타내는 도면이다.

도 31(a)∼(c)는 비디오 스트림의 재생시점이 시점 tx에 도달한 때 표시되는 메뉴를 나타내는 도면이다.

도 32는 슬라이드 쇼로 표시되는 메뉴에서의 상태천이를 나타내는 도면이다.

도 33은 슬라이드 쇼의 내비게이션 커맨드에 의한 분기를 나타내는 도면이다.

(부호의 설명)

1 BD드라이브

2 어라이벌 타임 클록 카운터(Arrival time Clock Counter)

3 소스 디 패킷타이저(Source de-packetetizer)

4 PID 필터(4) 5 트랜스 포트 버퍼

6 멀티플렉스드 버퍼(Multiplexed Buffer)

7 코디드 픽쳐 버퍼(Coded Picture Buffer)

8 비디오 디코더 10 디코디드 픽쳐 버퍼

11 비디오 플레인(video plane) 12 트랜스 포트 버퍼

13 코디드 데이터 버퍼(Coded Data Buffer)

14 스트림 그래픽스 프로세서(Stream Graphics Processor)

15 오브젝트 버퍼(Object Buffer)

16 콤포지션 버퍼(Composition Buffer)

17 콤포지션 컨트롤러(Composition Controller)

18 프레젠테이션 그래픽스 플레인(Presentation Graphics plane)

19 CLUT부

20 트랜스 포트 버퍼 21 코디드 데이터 버퍼

22 스트림 그래픽스 프로세서 23 오브젝트 버퍼

24 콤포지션 버퍼 25 콤포지션 컨트롤러

26 인터랙티브 그래픽스 플레인(interactive Graphics plane)

27 CLUT부

28 합성부 29 합성부

30 스위치 31 네트워크 디바이스

32 로컬 스토리지(Local Storage) 33 어라이벌 타임 클록 카운터

34 소스 디패킷타이저(Source De-Packetizer)

35 PID 필터 36 스위치

37 트랜스 포트 버퍼

38 엘리멘터리 버퍼(Elementary Buffer)

39 오디오 디코더 40 트랜스 포트 버퍼

41 버퍼 42 텍스트 자막 디코더

43 시나리오 메모리 44 제어부

46 PSR세트 100 BD-ROM

200 재생장치 300 리모컨

400 텔레비전

Claims

비디오 스트림(video stream)과 스트림 관리정보(stream management information)가 기록된 기록매체로,

상기 비디오 스트림은 복수의 픽쳐 데이터(picture data)를 포함하고,

상기 스트림 관리정보는 엔트리 맵(entry map)과 애플리케이션 타입 중 하나를 나타내는 플래그(flag)를 포함하며,

상기 엔트리 맵은 각 픽쳐 데이터의 엔트리 어드레스를 픽쳐 데이터별 재생시각에 대응시켜서 나타내고,

상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하며,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되는 것을 특징으로 하는 기록매체.
기록매체로부터 스트림 관리정보를 판독하고, 상기 스트림 관리정보에 기초하여 상기 기록매체에 기록된 비디오 스트림을 재생하는 재생장치로,

상기 스트림 관리정보는 엔트리 맵과 애플리케이션 타입 중 하나를 나타내는 플래그를 포함하고,

상기 엔트리 맵은, 상기 비디오 스트림에 포함된, 각 픽쳐 데이터의 엔트리 어드레스를 픽쳐 데이터별 재생개시시각에 대응시켜서 나타내며,

상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하고,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되며,

상기 재생장치는,

상기 기록매체로부터 상기 픽쳐 데이터를 판독하는 판독부와,

상기 각 픽쳐 데이터를 디코딩하여 상기 픽쳐 데이터를 재생하는 재생부와,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 상기 엔트리 맵을 참조하여 재생개시시각의 지정에 기초하여 상기 재생을 개시하거나 상기 재생의 개시위치를 변경하도록 상기 판독부와 상기 재생부를 제어하는 제어부를 포함하는 것을 특징으로 하는 재생장치.
볼륨 데이터(volumn data)를 생성하여, 상기 볼륨 데이터를 기록매체에 기록하는 기록방법으로,

상기 볼륨 데이터는 비디오 스트림과 스트림 관리정보를 포함하고,

상기 비디오 스트림은 복수의 픽쳐 데이터를 포함하며,

상기 스트림 관리정보는 엔트리 맵과 애플리케이션 타입 중 하나를 나타내는 플래그를 포함하고,

상기 엔트리 맵은 재생개시시간에 대응하여 각 픽쳐 데이터의 엔트리 어드레 스를 나타내며,

상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하고,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되는 것을 특징으로 하는 기록방법.
기록매체로부터 스트림 관리정보를 판독하고, 상기 스트림 관리정보에 기초하여 상기 기록매체에 기록된 비디오 스트림을 재생하는 재생방법으로,

상기 스트림 관리정보는 엔트리 맵과 애플리케이션 타입 중 하나를 나타내는 플래그를 포함하고,

상기 엔트리 맵은, 상기 비디오 스트림에 포함된, 각 픽쳐 데이터의 엔트리 어드레스를 픽쳐 데이터별 재생개시시각에 대응시켜서 나타내며,

상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하고,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되며,

상기 재생방법은,

상기 기록매체로부터 상기 픽쳐 데이터를 판독하는 판독단계와,

상기 각 픽쳐 데이터를 디코딩하여 상기 픽쳐 데이터를 재생하는 재생단계 와,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 상기 엔트리 맵을 참조하여 재생개시시각의 지정에 기초하여 상기 재생을 개시하거나 상기 재생의 개시위치를 변경하도록 상기 판독단계와 상기 재생단계를 제어하는 제어단계를 포함하는 것을 특징으로 하는 재생방법.
기록매체로부터 스트림 관리정보를 판독하고, 상기 스트림 관리정보에 기초하여 상기 기록매체에 기록된 비디오 스트림을 재생하기 위한 처리를 컴퓨터가 수행하도록 하는 프로그램으로,

상기 스트림 관리정보는 엔트리 맵과 애플리케이션 타입 중 하나를 나타내는 플래그를 포함하고,

상기 엔트리 맵은, 상기 비디오 스트림에 포함된, 각 픽쳐 데이터의 엔트리 어드레스를 픽쳐 데이터별 재생개시시각에 대응시켜서 나타내며,

상기 애플리케이션 타입은 영화 및 시간 축(time-based) 슬라이드쇼를 포함하고,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 모든 픽쳐 데이터는 각각 상기 엔트리 맵에 포함된 엔트리에 의해 지정되며,

상기 처리는,

상기 기록매체로부터 상기 픽쳐 데이터를 판독하는 판독단계와,

상기 각 픽쳐 데이터를 디코딩하여 상기 픽쳐 데이터를 재생하는 재생단계 와,

상기 시간 축 슬라이드쇼를 나타내는 값이 상기 플래그에 설정되어 있는 경우, 상기 엔트리 맵을 참조하여 재생개시시각의 지정에 기초하여 상기 재생을 개시하거나 상기 재생의 개시위치를 변경하도록 상기 판독단계와 상기 재생단계를 제어하는 제어단계를 포함하는 것을 특징으로 하는 프로그램.