KR20120138693A

KR20120138693A - 방송 시스템에서 컨텐트를 구성하는 방법 및 장치

Info

Publication number: KR20120138693A
Application number: KR1020120063554A
Authority: KR
Inventors: 유성열; 박경모; 황승오; 송재연
Original assignee: 삼성전자주식회사
Priority date: 2011-06-14
Filing date: 2012-06-14
Publication date: 2012-12-26
Also published as: WO2012173402A2; US20120324521A1; WO2012173402A3; EP2723085A2; EP2723085A4

Abstract

본 발명은 방송 시스템의 컨텐트 구성 방법 및 장치에 관한 것이다. 본 발명에 따르면 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하며, 상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.

Description

방송 시스템에서 컨텐트를 구성하는 방법 및 장치{METHOD AND APPARATUS FOR COMPOSING CONTENT IN A BROADCAST SYSTEM}

본 발명은 방송 시스템에서의 컨텐트 구성 방법 및 장치에 관한 것으로, 특히 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트의 패키지를 구성하는 방법 및 장치에 관한 것이다.

종래 방송 네트워크에서는 멀티미디어 컨텐트의 전송을 위해서 MPEG-2 TS(Moving Picture Experts Group-2 Transport Stream)를 사용하는 것이 일반적이었다. MPEG-2 TS는 오류가 있는 전송 환경에서 복수의 방송 프로그램(부호화된 다수의 비디오 비트 열)이 다중화된 비트 열을 전송하기 위한 대표적인 전송 기술로 사용되고 있다. 일 예로 MPEG-2 TS는 멀티미디어 시대의 디지털 TV 방송 등에서의 사용이 적합하다.

도 1은 종래 MPEG-2 TS를 지원하기 위한 계층 구조를 도시한 것이다.

도 1을 참조하면, MPEG-2 TS를 지원하기 위한 계층은 미디어코딩 계층 (MEDIA CODING LAYER)(110), 동기 계층 (SYNC LAYER)(120), 전송 계층 (DELIVERY LAYER)(130), 네트워크 계층 (NETWORK LAYER)(140), 데이터 링크 계층 (DATA LINK LAYER)(150) 및 물리 계층 (PHYSICAL LAYER)(160)으로 구성된다.

상기 미디어 코딩 계층 (MEDIA CODING LAYER)(110)와 상기 동기 계층 (SYNC LAYER)(120)은 미디어 데이터를 기록 또는 송신의 기본 단위로 사용하기에 용이한 포맷으로 구성한다. 그리고 상기 전송 계층 (DELIVERY LAYER)(130), 상기 네트워크 계층 (NETWORK LAYER)(140), 상기 데이터 링크 계층 (DATA LINK LAYER)(150) 및 물리 계층 (PHYSICAL LAYER)(160)은 상기 동기 계층 (SYNC LAYER)(120)에 의해 구성된 포맷의 데이터 블록을 별도의 기록 매체에 기록하거나 전송을 위한 멀티미디어 프레임을 구성한다. 상기 구성된 멀티미디어 프레임은 소정의 네트워크를 통해 가입자 단말 등으로 전송한다.

이를 위해 상기 동기 계층(SYNC LAYER)(120)은 분할 블록 (FRAGMENT BLOCK)(122)과 접근 유닛 (ACCESS UNIT)(124)에 의해 구성되며, 상기 전송 계층 (DELIVERY LAYER)(130)은 MPEG-2 TS/MP4 (132), RTP/HTTP (134) 및 UDP/TCP (136)에 의해 구성된다.

하지만 상기 MPEG-2 TS는 멀티미디어 서비스를 지원함에 있어 몇 가지의 한계점을 가진다. 즉 상기MPEG-2 TS는 단 방향 통신, 고정된 프레임 크기로 인한 전송의비효율성, 오디오/비디오에 특화되어 있는 전송 프로토콜 및 인터넷 프로토콜 (IP: Internet Protocol)을 사용하여 전송할 시에 불필요한 오버헤드 발생 등이 한계점이라 할 수 있다.

따라서 MPEG에서는 MPEG 기술을 기반으로 멀티미디어 서비스를 지원하기 위한 멀티미디어 전송 기술 중 하나로 MMT (MPEG MEDIA Transport) 표준을 새로이 제안하였다. 특히 상기 MMT 표준은MPEG-2TS의 한계점을 극복하기 위해 MPEG에 의해 제안되었다.

예컨대 상기 MMT 표준은 이종 네트워크를 통해 복합 컨텐트를 효율적으로 전송하기 위해 적용될 수 있다. 여기서 상기 복합 컨텐트는 비디오(Video)/오디오(Audio)/어플리케이션(Application) 등에 의한 멀티미디어 요소를 가지는 컨텐트의 집합을 의미한다. 그리고 상기 이종 네트워크는 방송 네트워크와 통신 네트워크 등이 혼재하는 네트워크를 의미한다.

뿐만 아니라 상기 MMT 표준은 멀티미디어 서비스를 위한 전송 네트워크에서의 기본 기술이 되고 있는 IP에 보다 친화적인 전송 기술을 정의하는 것을 목적으로 하고 있다.

따라서 상기 MMT 표준은 대표적으로 IP를 기반으로 변화하는 멀티미디어 서비스 환경에서 효율적인 MPEG 전송 기술을 제공하기 위한 것으로서, 지속적인 연구와 함께 표준화가 진행되고 있다.

도 2는 MMT 시스템에서 멀티-서비스/컨텐트에 따른 멀티미디어 프레임을 이종 네트워크를 통해 전송하기 위한 계층 구조를 도시한 것이다.

도 2를 참조하면, 멀티미디어 프레임을 구성하고, 이를 전송하기 위한 MMT 시스템은 미디어코딩 계층 (MEDIA CODING LAYER)(210), 캡슐화 계층(ENCAPSULATION LAYER, 이하 'Layer E'라 칭함)(220), 전송 계층(DELIVERY LAYER, 이하 'Layer D'라 칭함)(230, 290), 네트워크 계층 (NETWORK LAYER)(240), 데이터 링크 계층 (DATA LINK LAYER)(250), 물리 계층 (PHYSICAL LAYER)(260) 및 제어 계층 (CONTROL LAYER, 이하 'Layer C'라 칭함)(270, 280)을 포함한다.

상기 계층들은 세 개의 기술 영역 (area)인 Layer E(220), Layer D(230, 290), Layer C(270, 280)를 포함하며, 상기 Layer E(220)는 복합 컨텐트의 생성을 담당하고, 상기Layer D(230, 290)는 이종 네트워크를 통한 상기 생성 컨텐트의 효율적인 전송을 담당하며, 상기Layer C(270, 280)는 상기 복합 컨텐트의 소비 관리 및 전송 관리를 위한 전반적인 제어를 담당한다.

상기 Layer E(220)는 MMT E.3 (222), MMT E.2 (224) 및 MMT E.1 (226)으로 구성된다. 상기 MMT E.3 (222)는 미디어코딩 계층(210)으로부터 제공되는 코딩된 멀티미디어 데이터를 입력으로 하여 MMT 서비스를 위한 가장 기본 단위인 프래그먼트(fragment)을 생성한다. 상기 MMT E.2 (224)는 상기MMT E.3 (222)에 의해 생성된 프래그먼트를 사용하여 MMT 서비스를 위한 애셋(Asset)을 생성한다. 상기 MMT E.1 (226)은 상기MMT E.2 (224)에 의해 제공되는 애셋들을 결합하여 패키지를 생성 및 저장과 전송을 위한 포맷을 생성한다.

상기 Layer D는 MMT D.1(232), MMT D.2 (234) 및 MMT D.3 (290)으로 구성된다. 상기 MMT D.1 (232)은 RTP 혹은 HTTP와 유사한 역할을 수행하는 어플리케이션 프로토콜 (AP: Application Protocol)을 담당하고, 상기 MMT D.2 (234)는 UDP 혹은 TCP와 유사한 역할을 수행하는 네트워크 계층 프로토콜을 담당하며, 상기MMT D.3 (290)는 상기 Layer E(220)을 구성하는 각 계층과 상기 Layer D(230)을 구성하는 각 계층 상호 간의 최적화를 위한 동작을 수행한다.

상기 Layer C는 MMT C.1(270)과 MMT C.2(280)로 구성된다. 상기MMT C.1(270)은 복합 컨텐트의 생성 및 소비와 관련된 정보를 제공하고, 상기 MMT C.2(280)는 복합 컨텐트의 전송에 관련된 정보를 제공한다.

도 3은 방송 시스템에서의 일반적인 데이터 전송 계층도를 도시한 것이다.

도 3을 참조하면, 송신측의 Layer E는 최상위 계층인 E3 계층에서 비디오, 오디오 등의 컨텐트 구성요소들이 AVC(Advenced Video Codec), SVC(Scalable Video Codec) 등의 코덱 인코더에 의해NAL(network abstraction layer) 유닛, 프래그먼트(Fragment) 등으로 부호화되고, 이를 애셋(Asset) 단위로 저장하여 하위계층인 E2 계층으로 전달한다. 비디오 스트림, 오디오 스트림 등이 애셋의 대표적인 예이다. 종래 기술에서 E3 계층에서 E2 계층으로 전달되는 애셋은 코덱별로 그 정의와 구성이 정해져 있으므로 본 발명에서는 E3 계층에 대해 종래 기술을 사용한다.

E2 계층은 복수 개의 애셋을 구조화하고 이를 ES(Elementary Stream)단위로 저장하여 차하위 계층인E1 계층으로 전달한다. E1 계층은 비디오, 오디오 등의 컨텐트 구성요소 간의 관계와 구성을 지시하고 이를 ES와 함께 캡슐화(encapsulate)하여 패키지 형태로 D1 계층으로 전달한다.

D1 계층은 전송에 알맞은 형태로 패키지를 분할하여 하위계층으로 전달하고, 다시 하위계층은 차하위 계층으로 패킷을 전달한다.

한편, 시청각(visual-audio) 화면으로 구성되는 프리젠테이션은 패키지에 의해 제공되는 서비스이다. 패키지는 애셋들을 결합하고, 시공간에서 애셋들의 위치에 대한 구성 정보(composition information)를 제공하고, 패키지가 제공하는 것을 전달하기 위한 전송 특성(Transport Characteristic)을 제공한다.

본 발명이 해결하고자 하는 과제는 방송 시스템에서 컨텐트의 패키지를 효과적으로 구성하는 방법 및 장치를 제공하는 것이다.

본 발명의 실시예에 따르면, 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 방법에 있어서, 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하는 과정과, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 과정을 포함하며, 상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.

또한 본 발명의 실시예에 따르면, 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 장치에 있어서, 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 캡슐화 계층을 포함하며, 상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.

이하에서 개시되는 발명 중 대표적인 것에 의해 얻어지는 효과를 간단히 설명하면 다음과 같다.

본 발명에 따르면 애셋들을 패키지로 구성할 때, 상기 패키지에 포함되는 애셋들에 대한 정보를 상기 패키지에 삽입함으로써 수신기에서 상기 패키지를 수신했을 때 상기 정보를 파싱해서 해당 패키지가 무엇이며 어떻게 디코딩 되었으며, 어떻게 프리젠테이션 할 것인지를 알 수 있다.

도 1은 종래 MPEG-2 TS를 지원하기 위한 계층 구조를 도시한 도면
도 2는 MMT 표준을 기반으로 하는 방송 시스템에 의한 MMT 서비스를 개념적으로 도시한 도면
도 3은 방송 시스템의 일반적인 데이터 전송 계층도
도 4는 패키지에 포함되는 설정정보의 구성을 도시한 도면
도 5는 본 발명의 실시예에 따른 방송 서비스 시나리오를 도시한 도면

이하 첨부된 도면을 참조하여 본 발명의 실시예에 대한 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

본 발명에서는 복수 개의 애셋을 결합하여 패키지를 구성하는 방법을 제안한다.

복수개의 애셋은 복수개의 패키지로 결합되고, 패키지는 애셋을 가지고 멀티미디어 서비스를 제공한다. 패키지는 내부에 포함된 애셋 뿐만 아니라 다른 패키지에 포함된 애셋을 소비하기 위한 방법을 제공한다. 다양한서비스 제공자로부터의 복수의 패키지는 매시업(mashed up) 서비스를 제공하기 위해 협력할 수 있다.

컨텐트 제공자는 관련된 애셋들과 설정 정보(Configuration information)를 결합하여 패키지를 구성할 수 있다.

수신기는 패키지를 로딩하고 설정 정보를 파싱해서 해당 패키지가 무엇이며 어떻게 디코딩되며, 어디로제공할 것인지를 알 수 있다.

E1 계층은 패키지 내에 애셋을 멀티플렉싱하기 위한 정보를 제공한다. 애셋은 물리적으로 멀티플렉싱 되지는 않지만 상기 정보가 가상 멀티플렉싱을 제공한다. D 계층은 상기 정보를 찾아보고(look up) 서로 다른 애셋들의 부분들을 패킷들로 멀티플렉싱하여 이를 전송한다.

또한 E1 계층은 애셋의 프래그멘테이션을 조각들로 제공한다. 복수의 애셋의 조각들은 패키지의 점진적인 다운로드를 고려함으로써 소비 순서에 따라 배열될 수 있다.

서비스 제공자는 동시에 많은 양의 패키지를 방송하고 전송한다. E1 계층은패키지 식별 정보로서 아이디(ID)를 제공한다. 예를 들어 서비스제공자 ID, 컨텐트 ID, 장르, 컨텐트의 에피소드 번호 등의 조합을 통해 패키지를 식별할 수 있다. 또한 패키지 식별 정보에는 서비스 제목, 배우 이름, 시놉시스와 같이 소비자가 판독할 수 있는 매타데이터 정보도 포함될 수 있다.

E1 계층은 패키지 내에 포함되는 구성 정보(Composition Information)를 가지고 시공간에서 애셋을 위치시키는 방법을 제공한다. 애셋의 프리젠테이션 위치는 챕터 썸네일의 선택 등과 같은 이벤트에 의해 바뀔 수 있고, 선택된 애셋은 이벤트를 트리거링 함으로써 다양한 방법(예를 들면 풀 스크린)으로 표시될 수 있다.

패키지 내에 포함되는 애셋들은 상호간에 복수의 서로 다른 관계를 가질 수 있다. 이러한 관계는 크게 결합 관계(combinable relationship), 상호 배타적 관계(mutually exclusive relationship), 종속 관계(dependency relationship), 적응 관계(adaptive relationship)로 구분될 수 있다.

결합 관계로서 선택 관계에 있는 몇몇 애셋들은 서로 다른 컨텍스트와 미디어 타입을 가진다. 예를 들어, 비디오, 오디오, 자막은 선택 관계에 있다. 따라서 사용자는 복수의 선택을 할 수 있고, 이것들을 동시에 소비할 수 있다.

상호 배타적 관계로서 스위치 관계에 있는 몇몇 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가진다. 예를 들어 영어 오디오와 불어 오디오 에셋들은 스위치 관계에 있다. 사용자는 이들 중 하나를 선택할수 있으며 동시에 두 가지를 선택할 수는 없다.

종속 관계로서 선택 관계에 있는 몇몇 애셋들은 페어(pair)와 프라이머리(primary) 선택과 같은 부가적인 관계를 가질 수 있다. 예를 들어, 야구 경기는 타자 뷰와 투수 뷰와 같은 복수의 뷰를 가질 수 있다. 타자 뷰는 타자 오디오를 가지며, 투수 뷰는 투수 오디오를 가진다. 만약 이들 4개의 애셋이 하나의 야구 경기 패키지에 속한다면, 끊김 없는 뷰 변경을 제공하기 위해 타자 뷰와 타자 오디오, 투수 뷰와 투수 오디오의 페어 관계가 분명하게 기술되어야 한다. 다른 예로서 비디오, 오디오, 자막의3개의 에셋을 가지는 패키지의 경우, 비디오가 없는 자막은의미가 없으므로 비디오와 오디오 애셋은 자막 애셋보다 중요도가 높아야 한다.

적응 관계에 있는 몇몇 애셋은 같은 컨텍스트와 같은 미디어 타입을 가진다. 예를 들어 고품질의 비디오와 중간 품질의 오디오는 적응 관계에 있다. 수신기는 동일한 컨텍스트를 네트워크 밴드폭이나 디바이스 능력에 따라 적응적으로 표시하기 위해 적응 관계에 있는 애셋들 중 하나를 선택한다.

애셋들의 그룹은 복수의 관계에 있다. 하나의 관계 그룹은 다른 관계 그룹보다 더 중요할 수 있다. 그룹에 대한 디스크립션은 기계 또는 사람이 판독 가능하다.

한편, E1 계층에서는 전송 특성(transport characteristic: TC)을 제공한다. 전송 특성은 각 애셋에 대해 고려되는 기준을 제공한다. 동일한 전송 특성을 가지는 하나 또는 그 이상의 애셋은 같은 전달 경로를 통해 전달될 수 있다. 예를 들어 약간의 손실이 허용되는"Lossy"라는 전송 특성을 가지는 비디오와 오디오는 RTP(Real-time Transfer Protocol)를 통해 전달되고, 손실이 허용되지 않는"Lossless"라는 전송 특성을 가지는 위젯과 애플리케이션은 HTTP(Hyper Text Transfer Protocol)를 통해 전달된다.

애셋 또는 전체 패키지가 보호될 경우에는 재전송, 자동 재전송요구(ARQ), AL-FEC(Application Layer-Forward Error Correction)등의 에러 강인성(error resilience)를 위한 시그널링 매커니즘이 제공된다. 또한 애셋 또는 전체 패키지가 보호될 경우에는 권한 관리 또는 컨텐트 보호 등의 소비를 위한 서비스 특성을 위한 시그널링 매커니즘이 제공된다. 또한 기술 종속 데이터(scheme dependent data)와 라이선스를 저장하기 위한 추가적인 정보를 위한 무료 공간이 패키지 내에 미리 확보될 수 있다.

이상에서 설명한 E1 계층의 동작에 따라 패키지의 설정 정보(configuration information)가 생성되고 애셋과 함께 패키지로 결합된다.

패키지는 설정 정보를 활용하기 위한 기능과 동작(operation)을 가진다. 설정 정보는 애셋의 리스트와 구성 정보, 그리고 전송 특성으로 구성된다. 디스크립션 정보는 패키지와 애셋을 기술한다. 구성 정보는 애셋의 소비를 돕는다. 전송 특성 정보는 애셋의 전달을 위한 힌트를 제공한다.

도 4는 본 발명의 실시예에 따른 설정 정보의 구성을 도시한 도면이다.

도 4를 참조하면, 설정 정보는 데이터 정보의 순서와 주소, 패키지 식별 정보, 애셋 리스트 정보, 구성 정보 및 전송 특성을 포함한다.

패키지 내의 데이터는 소비 순서나 우선순위와 같은 순서에 따라 배열될 수 있다. 따라서 패키지는 패키지 내에서의 데이터의 물리적인 위치에 대한 정보인 데이터 정보의 순서와 주소를 제공한다.

패키지 식별 정보는 서비스제공자 ID, 컨텐트 ID, 장르, 패키지의 에피소드 번호와 같이 기계로 판독 가능한 정보를 포함한다. 패키지식별 정보는 하나의 패키지를 다른 패키지와 구별한다. 또한 패키지 식별 정보는 서비스의 제목, 배우 이름, 시놉시스 등과 같이 사람이 판독 가능한 정보도 포함한다. 이러한 정보는 사용자가 패키지를 소비하기 위해 선택하도록 돕는다.

애셋 리스트 정보는 하나의 패키지에 포함되는 애셋들의 리스트를 제공한다. 패키지 페이로드 내에 있는 데이터는 애셋이며, 이것이 애셋 리스트 내에 열거되어야 한다.

구성 정보는 애셋간의 관계를 시그널링 함으로써 어떻게 애셋이 소비되는지를 명시한다. 애셋의 구성을 설명하는 관계의 3가지 주요한 종류는 시간 관계, 공간 관계, 애셋간의 관계이다.

시간 관계는 애셋 시각표(timeline)와 패키지 시각표간의 관계이다. 애셋의러닝타임 전체 또는 일부분은 패키지 시각표의 몇몇 타임 포인트나 구간(duration)에 위치할 수 있다.

공간 관계는 애셋과 패키지의 프리젠테이션 영역간의 관계이다. 애셋의 프리젠테이션 위치는 챕터 섬네일 선택 등과 같은 이벤트에 의해 변경될 수 있으며, 선택된 에셋은 이벤트의 트리거링에 의해 풀 스크린과 같은 다른 방법으로 프리젠테이션 될 수 있다.

복수의 애셋 간에는 복수의관계가 있다. 복수의 애셋으로부터 하나 또는 복수 개의 애셋을 선택하기 위해서는 애셋 간의 관계를 설명하는 추가적인 정보가 요구된다. 세 가지 관계는 결합, 상호 배타적, 종속 관계이다. 관계가 없는 하나의 에셋을 선택하는 것은 사용자의 결정 또는 클라이언트 실행에 의해 단독적으로 이루어진다.

결합 관계는 복수의 선택 가능한 것으로부터 하나 이상을 선택하도록 하는 관계이다. 결합관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어타입을 가질 수 있다.

상호 배타적 관계는 복수의 선택 가능한 것으로부터 오직 하나만을 선택하도록 하는 관계이다. 상호 배타적 관계에 있는 애셋들은 일반적으로 서로 다른 컨텍스트와 동일한 미디어 타입을 가진다.

종속 관계는 하나의 애셋을 선택하는 것이 추가적인 애셋을 요구하는 관계를 말한다. 애셋은 상호 배타적 관계가 아닌 다른 애셋과 종속 관계를 가질 수 있다.

적응 관계는 동일한 컨텍스트와 동일한 미디어 타입을 가지는 복수의 애셋들 또는 M 유닛들간의 관계이다. 적응 관계에 있는 하나의 애셋에서 다른 애셋으로의 스위칭은 동일 컨텍스트를 지각적으로 지속한다.

권한 관리 정보는 애셋이 요구하는 권한 관리가 고려되는지 여부를 명시한다. 특정 권환 관리 알고리즘과 이와 관련된 정보의 시그널링은 구성 정보 내에 애셋 속성으로서 기술된다.

전송 특성 정보는 애셋을 전달하기 위한 힌트를 제공한다. 하나의 애셋은 하나 또는 그 이상의 전송 특성 정보 셋을 가질 수 있다. 패키지는 내부 리소스인 애셋을 위한 전달 경로를 가지지 않는다. 패키지 내에 있는 애셋은 각 서비스제공자를 위한 전달 경로를 결정하도록 돕는 전송 특성 정보를 가진다. 예를 들어 방송사 또는 댁내 서버는 동일한 패키지를 사용할 수 있다. 동일한 패키지 내에서 동일한 애셋을 제공하기 위한 전달 경로는 방송사에 의한 방송 RF 채널, 댁내 서버에 의한 RTP 주소와 같이 서로 다를 수 있다.

에러 강인성 정보는 전송 특성 정보 중 하나이다. 애셋을 위한 전송 특성 정보는 "lossless"와 "lossy"일 수 있다. 재전송, ARQ, AL-FEC와 같은 무손실(lossless) 전달을 위한 추가적인 기술은 전송 특성 정보에 명시될 수 있다. 그러나 무손실 전달을 위한 특정 알고리즘의 사용은 패키지에 의해 기술되지 않고 서비스 제공자가 C 계층 패킷을 통해 특정 알고리즘을 시그널링하도록 선택할 수 있다.

도 5는 본 발명의 실시예에 따른 방송 서비스 시나리오를 도시한 것이다.

도 5를 참조하면, 서비스/컨텐트 제공자는 E3 계층에서 비디오, 오디오, 사운드효과, 위젯을 생성하여 인코딩하고 E2 계층에서 애셋으로 만든다. E1 계층에서는 애셋을 위한 구성 정보와 전송 특성이 함께 패키지로 만들어진다. 패키지를 위한 서비스 디스커버리 정보는 패키지의 끝 부분 또는 중간 부분에 삽입될 수 있고, 이후 업데이트된 서비스디스커버리 정보는 클라이언트 장치로 방송되거나 푸쉬될 수 있다.

서비스 디스커버리 정보는 패키지를 발견하기 위한 충분한 정보를 가질 것이고, 매니페스트(manifest), 구성 정보, 전송 특성에 의해 애셋을 전달하기 위한 경로를 전달한다.

패키지는 조각들로 나눠져서 C 계층과 D 계층을 통해 전송된다. Manifest, 구성정보, 전송 특성과 같은 정보는 C 계층에의해 전송되고, 애셋과 같은 데이터는 D 계층에 의해 전송된다. 상기 정보와 데이터를 수신한 클라이언트는 E1 계층에서 패키지를 복원한다.

애셋은 전송 특성을 따르는 전송 경로를 통해 전달되기 때문에, 서로 다른 경로로부터의 애셋은 서로 다른 딜레이를 가지고 서로 다른 시간에 도착한다. 예를 들어, 비디오와 오디오 애셋은 방송 네트워크를 통해 전달되고, 위젯은 무손실 연결을 요구하기 때문에HTTP를 통해 전달된다. 만약 혼잡이 발생하면, 위젯은 비디오와 오디오 애셋을 위한 버퍼가 다 찰 때까지 이용할 수 없다. 비디오/오디오의 재생을 중지할지 위젯의 다운로드/실행을 무시할지를 선택하는 것은 쉽지 않다. 따라서 클라이언트의 재생장치가 재생을 중지하든지, 딜레이된 애셋 없이 플레이 하든지, 딜레이 된 에셋이 이용 가능할 때 플레이 하든지하도록 하기 위한 BMP(Buffer Management Policy)가 요구된다.

패키지는 애셋, manifest, 구성 정보, 전송 특성, DRM(Digital Rights Management) 기술의 시그널링과 DRM 종속 정보로 구성된다. Manifest는 애셋의 구조적 디스크립션과 패키지 내에서의 물리적 할당을 포함하는 애셋의 리스트이다.

다음으로, 패키지를 구성하는 방법에 대해 설명한다.

먼저, MPEG-2 TS/Simple Aggregation 포맷 기반에 대해 설명한다. 패키지 요소들은 타입으로 분류되고 패이로드에 캡슐화된다. Manifest는 다중 시간에 존재하므로 애셋은 어느 시간에 추가될 수 있기 때문에 패키지요소들은 동적인 설정을 가질 수 있다. 예를 들어, 모든 방송된 패키지들은 대통령투표에 관한 레터 박스 타입의 뉴스를 가질 수 있다. 그러나 처음부터 끝까지 패키지를 보지 않고 요구되는 애셋을 찾는 것은 어렵다.

다음, ISOBMFF/ MPEG-21 파일 포맷에 대해 설명한다. 'moov'는 오직 한 시점에 허락되어서 패키지 구조는 고정적이고 동적으로 변할 수 없다. DID와 'meta' 내의 'iloc'도 한 시점에만 허락되므로 애셋 구조의 업데이트가 허락되지 않는다. 무비 프래그먼트는 실시간으로 생성된 컨텐트를 추가하기 위해 사용될 수 있으나 모든 'trek' ID는 'mvex'내에 있는 'trex'에서 미리 정의되므로 새로운 트랙을 추가하는 것은 허락되지 않는다.

ZIP은 간편한 포맷으로 manifest 플레이스 홀더(placeholder)와 파일 시스템구조를 설명하기 위한 방법을 가지므로 애셋이 파일링 되면 그 요소를 ZIP 파일로 넣는 것은 간단하다. 구성 정보, 전송 특성, BMP는 등록된 파일을 쉽게 핸들링하기 위해 지정된 이름을 가질 수 있다. 그러나 실시간으로 생성된 컨텐트는 ZIP을 가지기 적합하지 않다. 실시간 방송을 위한 복수의 ZIP은 전송 계층에서 오버해드를 일으킬 수 있는 애셋과 패키지를 핸들링하는 파일 이름과 버전을 요구한다.

MMT 패키지의 요구조건들은 다음과 같다.

첫째, 실시간으로 생성된 컨텐트를 제공해야 한다.

둘째, 애셋을 추가하고 애셋의 구조적 디스크립션을 업데이트해야 한다.

셋째, 패키지 내에서의 애셋의 위치를 제공해야 한다.

넷째, 패키지와 패키지의 연속에 대한 식별 정보를 제공해야 한다.

이러한 요구조건들을 고려할 때, 다음과 같은 패키지 포맷을 제안할 수 있다.

또 다른 패키지 포맷으로 다음과 같은 포맷을 제안할 수 있다.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.

Claims

인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 방법에 있어서,
상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하는 과정과,
상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 과정을 포함하며,
상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함함을 특징으로 하는 컨텐트 구성 방법.
제1항에 있어서,
상기 복수 개의 애셋들간의 관계는 결합 관계, 상호 배타적 관계, 종속 관계, 적응 관계 중 적어도 하나의 관계임을 특징으로 하는 컨텐트 구성 방법.
제1항에 있어서,
상기 구성 정보는, 시공간에서 상기 애셋들을 위치시키기 위한 시간 관계 및 공간 관계를 더 포함함을 특징으로 하는 컨텐트 구성 방법.
제2항에 있어서,
상기 결합 관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
제2항에 있어서,
상기 상호 배타적 관계에 있는 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
제2항에 있어서,
상기 종속 관계에 있는 애셋들은 쌍을 이루어 선택되거나 서로 다른 우선순위를 가짐을 특징으로 하는 컨텐트 구성 방법.
제2항에 있어서,
상기 적응 관계에 있는 애셋들은 동일한 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 장치에 있어서,
상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 캡슐화 계층을 포함하며,
상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함함을 특징으로 하는 컨텐트 구성 장치.
제8항에 있어서,
상기 복수 개의 애셋들간의 관계는 결합 관계, 상호 배타적 관계, 종속 관계, 적응 관계 중 적어도 하나의 관계임을 특징으로 하는 컨텐트 구성 장치.
제8항에 있어서,
상기 구성 정보는, 시공간에서 상기 애셋들을 위치시키기 위한 시간 관계 및 공간 관계를 더 포함함을 특징으로 하는 컨텐트 구성 장치.
제9항에 있어서,
상기 결합 관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.
제9항에 있어서,
상기 상호 배타적 관계에 있는 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.
제9항에 있어서,
상기 종속 관계에 있는 애셋들은 쌍을 이루어 선택되거나 서로 다른 우선순위를 가짐을 특징으로 하는 컨텐트 구성 장치.
제9항에 있어서,
상기 적응 관계에 있는 애셋들은 동일한 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.