KR100878369B1 - 소형 스크린에 표시되도록 서브 픽처 데이터를 적응적으로변경하는 시스템 및 방법 - Google Patents

Abstract

연계된 비디오 데이터와 시간적으로 대응하는 서브 픽처 데이터를 소규모 표시 화면(12)을 가진 유저 기기(10)에 표시되도록 상기 서브 픽처 데이터를 적응적으로 변경하는 컴퓨터 시스템(40) 및 방법이 제공되며, 상기 방법은 소스로부터 서브 픽처 데이터(1)를 독출하는 단계(S1); 소정의 가독성 한계 보다 크거나 적은 가독성을 가진 상기 독출된 서브 픽처 데이터(1)로부터 서브 픽처 데이터 부분(2)을 결정하는 단계(S2); 상기 서브 픽처 데이터 부분(2)을 적어도 2개의 서브 픽처 데이터 소부분(3)으로 분할하는 단계(S3); 및 상기 서브 픽처 데이터 소부분(3) 각각이 상기 소정의 가독성 한계 이상이거나 이하인 가독성 값을 가지도록 상기 서브 픽처 데이터 소부분(3)를 리사이징하는 단계(S5)를 포함한다.

서브 픽처 데이터, PDA, 화면의 크기, 해상도, 가독성

Description

소형 스크린에 표시되도록 서브 픽처 데이터를 적응적으로 변경하는 시스템 및 방법 {SYSTEM AND METHOD OF ADAPTING SUBPICTURE DATA FOR BEING DISPLAYED ON MINI-SCREENS}

본 발명은 연계된 비디오 데이터에 시간적으로 대응하는 서브 픽처 데이터가 PDA의 화면과 같은 저해상도 화면에 표시되도록 서브 픽처 데이터를 적응적으로 변경하는 시스템 및 방법에 관한 것이다.

최근, 개인용 휴대 정보 단말기 (personal digital assistant; PDA)가 더욱 활발히 이용되고 있다. PDA는 소형의 오거나이저(organizer)를 포함하고, 어떤 것은 키패드가 전혀 없는 것도 있다. PDA는 펜과 같은 스타일러스로 그 화면을 터치함으로써 그 제어가 이루어질 수도 있다.

다양한 운영체제가 PDA에 이용되고 있으나, 주로 팜사의 팜 OS와 마이크로소프트사의 포켓 PC (PPC)의 두 개의 운영체제가 주로 이용되고 있고, 이들의 운영체제는 제3의 제조사에 라이센스로 제공되고 있다. 또 다른 PDA 운영체제로서 유럽에서 무선 기기용으로 활발히 이용되고 있는 것이 심비안 (Symbian)이다. 가장 최신의 OS는 Pocket PC 2003 이다. Pocket PC 2003에는, 포켓 인터넷 익스플로러 (Pocket Internet Explorer), 새로운 윈도우 미디어 플레이어, 네트워크 액세스, MSN 메신저, 적외선 통신 (Infrared Communication), 기기연결 관리자 (Connection Manager), 향상된 포켓 아웃룩, 업데이트된 포켓 워드, 포켓 엑셀 들이 포함되어 있어, 외형상 마치 윈도우 XP 데스크탑과 유사해 보인다.

PDA는 공통적으로, 포켓 계산기, 전화 (electronic telephone), 주소록 등록관리자(address register)과 같은 다수의 기능과 노트북, PC, 및 휴대폰의 기능을 통합한 것이다.

PDA의 또 다른 이용 형태는, DVD 등에서 영화와 같은 엔터테인먼트 정보를 표시하는 것이며, 이는 특히 핸드헬드 PC에서 활발히 이용된다. DVD 비디오 데이터는 PDA 화면에 표시된다. PDA 화면은 노트북 컴퓨터에 이용되는 LCD 형태일 수도 있고 수천의 칼라를 표시할 수 있는 다른 평판 표시 장치일 수도 있다. PDA 화면의 해상도는 수평 및 수직 방향으로 배열된 화소의 개수에 의해 정해진다 (예를 들면, 640x240). 해상도가 증가되면 더욱 선명한 화상을 얻을 수 있다. PDA의 해상도가 화면의 소형화에 의해 제한되게 되는 것은 명백하다. 팜 PDA 기기의 화면은, 최대 해상도 320x240에서 그 대각선 길이가 대략 4인치 정도이다.

MPEG-2 포맷으로 DVD에 저장된 영화를 표시하기 위해, DVD 비디오 데이터를 다수의 소용량 데이터 파일로 분할 및 변환한다. 이 변환은 예로서 네로 디지털 (Nero Digital)에 의해 수행될 수 있으며, 이 "네로 디지털"은 독일의 어헤드 소프트웨어(Ahead Software)사의 차세대 MPEG-4 호환 압축 기술이다. 네로 디지털은 MPEG-4 비디오 및 MPEG-4 고효율 ACC와 호환되며, 홈 엔터테인먼트용의 고음질 서라운드 사운드와 고화질 영상이 제공될 수 있다. 멀티미디어가, 공간의 단지 20% 인 DVD 품질을 가지고 인코딩될 수 있다. 가장 인기 있는 단순하고 향상된 MPEG-4 비주얼 프로파일이 지원된다.

이러한 방식으로, DVD 영화가 PDA와 같은 휴대용 기기로 보내진다. 하지만, 미래에는 DVD가 네트워크 연결 또는 USB 연결 등을 이용하여 이들 기기에서 재생될 것으로 기대된다.

통상적으로, DVD 비디오 데이터는 서브 타이틀 (subtile)을 포함한다. 이 서브 타이틀은 배우가 말하는 대사를 표시하는 정보 등을 의미하며, 이는 난청자 또는 그 언어를 이해하지 못하는 사람에게 특히 유용하다.

하지만, PDA 화면의 기하학적 크기와 해상도는 그 서브 타이틀이 본래 작성될 때 대상으로 했던 기기의 화면의 크기와 해상도보다 작다. 따라서, 서브 타이틀과 그 아래의 비디오 화상이 동일한 비율로 리사이징 (resize)된다면, PDA 화면에 표시된 서브 타이틀은 읽기가 어렵게 된다. 비디오 화상보다 서브 픽처를 덜 리사이징하면, 서브 픽처는 화면의 좌우측을 넘어가게 되거나 화면상에 너무 크게 보여, 비디오 화상의 큰 부분을 가리게 된다.

그래서, 본 발명은, 서브 픽처가 충분히 인식되며, 즉, 충분한 해상도를 가지고, 소규모 화면상에 표시될 수 있도록 서브 픽처 데이터, 특히, 서브 타이틀 데이터를 적응적으로 변경하는 시스템 및 방법을 제공하는 것을 목적으로 한다.

본 발명의 상기의 목적은, 연계된 비디오 데이터와 시간적으로 대응하는 서브 픽처 데이터를 소규모 표시 화면을 가진 유저 기기에 표시되도록 상기 서브 픽처 데이터를 적응적으로 변경하는 방법으로서, 소스로부터 서브 픽처 데이터를 독출하는 단계; 독출된 상기 서브 픽처 데이터로부터 소정의 가독성 한계보다 큰/적은 가독성을 가진 서브 픽처 데이터 부분을 결정하는 단계; 상기 서브 픽처 데이터 부분을 적어도 2개의 서브 픽처 데이터 소부분으로 분할하는 단계; 및 상기 서브 픽처 데이터 소부분 각각이 상기 소정의 가독성 한계 보다 큰/같거나 또는 작은 가독성 값을 가지도록 상기 서브 픽처 데이터 소부분을 리사이징하는 단계를 포함하는 방법에 의해 성취된다.

종래의 데이터 파일, 특히 DVD 비디오 데이터 파일에 상기의 방법을 적용하면, 통상적으로 하나 이상의 문자 라인으로 표시되는 서브 픽처 데이터가 대응하는 다수의 1라인 서브 픽처들로 변환된다. 따라서, 그 기하학적 크기가 통상의 1라인에 적응하도록 변경될 수 있고, 증가될 수도 있다. 서브 픽처의 정보의 (기하학적인) 표시 크기가 커지며, 다시말 하면, 그 해상도가 향상되게 된다. 그 결과, 이들 정보는 쉽게 인식될 수 있게 된다.

바람직하게는, 상기 가독성 값은 본래의 서브 픽처 데이터가 표시될 때 중첩하는 면적과 비디오 데이터가 표시될 때 차지하는 총 면적의 비에 의해 결정된다.

바람직하게는, 상기 가독성 값은, 상기 서브 픽처 데이터가 표시될 때 표시되는 문자 라인의 수를 판정함으로써 얻어진다.

이는, 상기의 데이터가 리사이징된 후에 시청자가 더 쉽게 인식할 수 있도록 적응적으로 변경될 서브 픽터 데이터의 표현을 용이하게 정의하는 방법이다.

본 발명의 바람직한 실시예에 따르면, 상기 서브 픽처 데이터 부분을 결정하는 단계는: 적어도 2개의 문자 라인으로 표시될 서브 픽처 데이터를 결정하는 단계; 및 상기 문자 라인의 수를 결정하는 단계를 포함한다.

본래 2개 이상의 문자 라인에 포함되어 있는 정보가 1라인 문자의 라인 열(chain)로 변환될 수 있게 함으로써, 본래의 다수 라인의 각각이 대응하는 리사이징된 1라인으로 변환되어, 그 가독성이 향상된다. 본래의 2개 이상의 라인으로 되어 있는 컨텐츠는, 그 표시 크기가 결국 더 작게 되어 버릴 수도 있어 1라인으로 "변환될 (pressed)" 필요가 없이, 계속적으로 표시된 적절한 개수의 1라인들에 분배될 수 있다.

또한, 바람직하게는, 서브 픽처 데이터 부분의 각 파트는 상기 서브 픽처 데이터 부분의 1라인의 문자 라인을 표현한다.

따라서, 예를 들면 본래의 3라인 중의 2라인이 동일한 서브 픽처 데이터 소부분으로 분할되었지만 여전히 인식될 수 없는 것을 방지할 수 있다. 이는, 예를 들어 본래의 3라인 서브 타이틀의 라인에 대해 1라인 서브 타이틀이 생성되고, 그 결과 계속적으로 표시되는 3개의 1라인들로 된다는 것을 의미한다.

바람직한 다른 실시예에 따르면, 서브 픽처 데이터 부분을 결정하는 단계는 그 표시기간을 결정하는 단계를 포함한다.

이로써, 본래의 서브 타이틀 데이터 부분이 표시될 때의 (본래의)경과 시간을 얻을 수 있게 된다. 이 시간은 서브 픽처 데이터 소부분의 대응하는 표시 기간을 계산하는 데에 이용될 수 있다.

상기 표시기간은 상기 연계된 비디오 데이터와 시간적으로 관련된 개시 시각 및 종료 시각을 포함하는 것이 이점이 있다.

상기 개시 시각은, 대응하는 서브 픽처 데이터 부분을 분할할 때 얻어지는 서브 픽처 데이터 소부분의 일 그룹에 속하는 제1 서브 픽처 데이터 소부분을 표시하는 시작 시점을 결정한다. 상기 종료 시각은, 상기 서브 픽처 데이터 소부분의 일 그룹을 표시할 때 서브 픽처 데이터 부분의 마지막 소부분의 표시가 완료되는 가능성 있는 마지막 시점을 결정한다.

또 다른 바람직한 실시예에 따르면, 상기 개시 시각 및 상기 종료 시각은, 상기 연계된 비디오 데이터와의 시간적 대응이 유지되도록 상기 서브 픽처 데이터 소부분에 할당된다.

이러한 시간적 대응이 유지되면, 적절할 표시를 위한 새로운 시간적 대응을 설정할 필요 없이, 상기 서브 픽처 데이터 소부분들이 최초의 서브 픽처 데이터 부분을 대체할 수 있게 된다.

또 다른 바람직한 실시예에 따르면, 상기 방법은, 서브 픽처 데이터 부분에 대해 시간적으로 앞에 또는 후에 추가적인 서브 픽처 데이터 부분이 더 존재하는 지를 판단하는 단계를 더 포함한다.

특정의 서브 픽처 데이터 부분 앞에 및/또는 후에 이러한 추가적인 서브 픽처 데이터 부분이 존재하지 아니하면, 상기 대응하는 특정의 서브 픽처 데이터 부분으로부터 생성된 서브 픽처 데이터 소부분 각각의 표시기간은, 추가적인 서브 픽처 데이터 부분이 존재하지 않게 되는 방향으로 쉬프트된다. 따라서, 상기 서브 픽처 데이터 소부분의 각각의 표시기간은 연장될 수 있다. 이로써, 그 가독성이 더욱 향상될 수 있다.

그 결과, 서브 픽처 데이터 부분 모두에 대한 총 표시기간은 본래의 서브 픽처 데이터 부분의 표시기간보다 길게 된다.

바람직하게는, 상기 소스는 영화 데이터 파일, 특히, DVD 비디오 데이터 파일이고, 이 파일은 상기 유저 기기의 메모리에 저장된다. 또한, 상기 서브 픽처 데이터 소부분은 대응하는 본래의 서브 픽처 데이터 부분을 대체할 수 있다.

따라서, 상기 서브 픽처 데이터는, 디코더 모듈과 같은 재생 기기의 특성을 변경할 할 필요 없이, 종래의 방식으로 표현될 수 있다. 대응하는 비디오 데이터와의 시간적 연관은 유지될 수 있고, 원한다면, 이점을 가지도록 변경되거나, 특히 연장될 수도 있다.

또 다른 바람직한 실시예에 따르면, 문자 라인의 수를 결정하는 단계는 패턴 인식을 적용하는 단계를 포함한다.

패턴 인식은 서브 픽처 부분에 포함된 문자 라인의 수를 결정하는 바람직한 방법 중의 하나이다. 패턴 인식은 수동적 상호작용에 의존하지 아니하고, 따라서, 서브 픽처 데이터 소부분을 생성하는 것을 가속화할 수 있다.

상술한 특징들 및 후술하는 특징들은 여기에서 설명된 조합으로 이용될 수 있을 뿐만 아니라 다른 조합으로 또는 독립적으로, 본 발명의 범위를 벋어나지 아니하고도 이용될 수 있다는 것은 이해되어야 한다.

본 발명의 실시예는 다음과 같이 첨부된 도면에 도시되어 있으며 이를 참조하여 더욱 상세히 설명될 것이다.

도 1은 종래의 PDA의 개략적 사시도이다.

도 2는 다수의 서브 타이틀과 그의 서브 세트들을 나타낸다.

도 3은 본 발명의 제1 실시예에 따른 방법의 흐름도이다.

도 4는 본 발명의 제2 실시예에 따른 방법의 흐름도이다.

도 5는 본 발명에 따른 시스템을 나타낸다.

본 명세서에서, 용어 "서브 픽처 데이터"는 서브 타이들, 핫 스팟 틴팅 (tinting), 오버레이 그래픽 등의 정보를 포함하는 포괄적인 용어로서 사용된다.

서브 픽처 데이터는 예로서 DVD 비디오 디스크 등에 메인 비디오와 별도로 저장되며 통상적으로 저 비트 심도 (4 칼라) 화상의 형식으로 저장된다. 여기서, '별도로'는 서브 픽처 데이터가 메인 비디오 정보와 분리되어 존재하는 것을 의미하며, 이로써 서브 타이틀이 시청자의 의도에 따라 표시되거나 표시되지 않을 수 있게 된다.

DVD의 사양 (일반적으로 MPEG-2)이 최대 32개의 별도의 서브 픽처 데이터 스트림을 지원하게 되면서, 하나의 서브 픽처 데이터 스트림의 대역폭은 3.36Mbps 까지로 제한된다. 이러한 대역폭 요구 사항을 만족시키고 또한 메인 비디오와 이들 서브 픽처 데이터 스트림을 결합하는 처리를 단순화시키기 위해, 서브 픽처는 런-랭스 (run-length) 인코딩된 비트맵으로서 구성되기도 한다. 이러한 서브 픽처 화 상 내의 화소의 각각에는 16 칼라의 고정 팔레트로부터의 값이 할당된다.

각각의 서브 픽처 화소는, 배경 (background), 전경 (foreground), 제1 강조 (emphasis-1), 및 제2 강조 (emphasis-2)의 4가지 화소 타입 중의 하나로 특정된다. 각각의 화소 타입은 다른 칼라와 투명도를 가진다. 또한, 각각의 서브 픽처 화소의 칼라와 투명도는 필드 별로 또는 프레임 별로 달라질 수 있다. 이러한 팔레트는 프로그램 체인 (program chain; PGC) 전이 (transition)마다 달라질 수 있다.

결국, 서브 픽처는, 데이터 스트림이 관리 가능한 비트레이트에 유지되면서도 다중 언어 확장 내지 여러 형식의 프로그램 확장 (program augmentation)을 가능케 하는 매우 효율적이며 유연한 방식으로 정의된다.

서브 픽처 데이터는 화면에 최종적으로 표시하는 방식에는 여러 가지가 있으며, 그 중의 하나가 하드웨어 믹싱이다.

하드웨어 믹싱에서는, 서브 픽처 텍스트 등을 취해서 이를 비디오 데이터 위해 배치한다. 서브 픽처 화소가 비디오 화소를 중접하거나 오버레이하면, 서브 픽처 화소는 비디오 화소를 대체하여, 그 아래의 비디오 화소를 완전히 오버라이트하게 된다.

또 다른 방식은, 하드웨어 알파 블렌딩이다. 하드웨어 알파 블렌딩에서는, 서브 픽처 화상 데이터를 그 아래에 있는 비디오 데이터로, 알파 채널에 의해 지정된 변화하는 투명도 레벨을 이용하여 블렌딩한다. 알파 채널은, 얼마나 많은 서브 픽처 데이터가 몇 퍼센트로 배경 비디오 데이터와 블렌딩되는 지를 결정하는 마스 크를 포함한다.

도 1은 종래의 PDA 내지 포켓 PC 10을 예시적으로 나타내고 있다.

PDA(10)는 LCD와 같은 표시부, 즉, 화면(12), 하우징(14), 메뉴 선택부(16), 및 메모리 슬롯(18)을 포함하고 있다. 메모리 슬롯(18)은 도 1에 도시되지 않은 이동형 메모리 장치를 수용한다. 비디오 데이터는 이 이동형 메모리 장치에 저장될 수 있다.

PDA(10)은 또한 내장 메모리를 포함하며, 이에는 특히 오디오 파일 (MP3, wave 파일 등), 비디오 파일 (MPEG-2, MPEG-4 등)과 같은 엔터테인먼트 데이터가 저장된다.

도 1를 참조하면, PDA(10)의 화면(12)에 2라인 서브 타이틀 텍스트(20)를 포함하는 영화 장면이 표시되어 있다. 하지만, 본 발명은 소규모 화면의 PDA에만 적용되는 것이 아니라, 소규모의 화면을 가진 어떤 한 기기 (예를 들면, 스마트 폰)에도 적용되며, 서브 픽처 데이터가 최적화되는 해상도보다 더 낮은 해상도를 가진 모든 기기에 일반적으로 적용된다.

도 2에는, 서브 픽처 내지 서브 타이틀 데이터의 총 집합체 1가 도시되어 있다.

집합체 1은, 소규모 화면에 적응적으로 변경될 고해상도를 가진 서브 픽처 데이터와, 이미 그 소규모 화면에 만족할 만한 해상도를 가지고 있어서 적응적으로 변경될 필요가 없는 서브 픽처 데이터를 포함한다. 적응적으로 변경될 서브 픽처 데이터는 도면 부호 2로 지시되어 있고, 서브 픽처 데이터의 총 집합체 1의 부분 집합으로 도시되어 있다.

적응적으로 변경될 서브 픽처 데이터는, 후술하는 본 발명에 따른 방법의 단계 중의 하나에서 결정된다. 이하, 적응적으로 변경될 서브 픽처 데이터는 "서브 픽처 데이터 부분"이라 칭한다. 서브 픽처 데이터 부분(2)의 주변부는, 소규모 화면에서 만족스런 가독성을 주기에 충분한 해상도를 이미 가지고 있기 때문에 적응적으로 변경할 필요가 없는 데이터를 나타낸다. 재생 기기가 그 최적화를 할 필요가 없다는 것을 인식하고 있는 것이 바람직하다.

한편, 서브 픽처 데이터 부분(2)(도시하지 아니하였지만 다수의 서브 픽처 데이터 부분(2)를 포함할 수도 있음)은 서브 픽처 데이터 부분의 일부들 (fragment) 내지 소부분들 (parts) (3)로 분할된다.

이하, 도 2를 참조하여 이들 관계를, DVD에 저장될 수 있는 영화에서 보여질 수 있는 예시적인 서브 타이틀에 기초하여 더 상세히 설명될 것이다.

#1: "바트! 혹시, 리사를 괴롭히려고"

"한 것이지?"

"아닙니다!! 리사가 저를 괴롭히려고 했어요!!"

#2: "잘 가. 안녕, 내 사랑스런 아가야!"

#3: "우리의 이러한 굉장한 쇼에 네가 와줘서 너무 기뻐."

첫번째의 예는, 에니메이션 만화 시리즈 "심슨 가족"의 주인공들이 실제로 대화하고 있는 정보를 포함하는 3라인의 텍스트로 이루어져 있다. 이러한 텍스트는 시청자가 들을 수 있으며 동시에 화면에서 시각적으로 표시된다. 첫번째 예는, 소규모 화면을 만족시키는 해상도로 표시되도록, 이하에서 더욱 상세히 설명될 본 발명에 따라 적응적으로 변경될 가능성이 있는 서브 픽처 데이터 부분의 후보이다.

첫번째 예는, 도 2에서의 서브 픽처 데이터 부분(2)를 나타내며, 이는 예로서 12초의 표시 기간을 가질 수도 있다. 이 서브 픽처 데이터 부분(2)는 3개의 서브 픽처 데이터 소부분(3)으로 분할될 수 있다. 첫번째의 소부분은, 첫째 라인, "바트! 혹시, 리사를 괴롭히려고" 로 나타내어지고, 두번째의 소부분은, 두번째 라인, "한 것이지?" 로 나타내어지고, 세번째의 소부분은, 세번째 라인, "아닙니다!! 리사가 저를 괴롭히려고 했어요!!" 로 나타내어진다.

이하에서 더욱 상세히 설명되는 바와 같이, 이들 3개의 서브 픽처 데이터 소부분(3)은, 모두 동일한 표시기간 (각각 4초)가 할당되거나, 각각의 소부분의 길이에 따라 서로 다른 표시기간 (5초, 2초, 5초)이 할당될 수도 있다.

두번째 예는, 서브 타이들이 충분한 가독성을 가지고 있다고 판단되기 때문에 적응적으로 변경될 필요가 없는 1라인의 텍스트의 서브 타이틀을 나타내고 있다.

세번째 예도 1라인 서브 타이틀이다. 하지만, 세 번째 예는 두번째 예보다 그 텍스트 길이가 길다. 세번째 예를 소규모 화면에 표시하게 되면, 시청자가 이를 읽는 것이 어려울 수도 있다. 따라서, 1라인 서브 타이틀이더라도 3개의 소부분(3)으로 분할될 수도 있다. 세번째 예 #3의 경우에, 제1 소부분(3)을 "우리의 이러한 굉장한 쇼에" 로 나타내고, 제2 소부분(3)을 나머지 부분 (즉, "네가 와줘서 너무 기뻐.")으로 나타내내고, 이들 2개의 소부분(3)이 각각 원래의 서브 픽처 데이터 부분 (즉, "우리의 이러한 굉장한 쇼에 네가 와줘서 기뻐.")의 표시 기간의 절반의 표시 기간을 가진 1라인 서브 타이틀로 적응적으로 변경된다. 물론 그 밖의 다른 임의의 표시기간을 가지게 하는 분할이 이루어질 수도 있다.

재생 중에는 서브 타이틀의 해상도가 변경되지 않는 것이 바람직하며, 이 해상도는 가용한 공간에 항상 적응적으로 변경되는 것이 바람직하다.

도 3은 본 발명의 제1 실시예에 따른 방법을 나타낸다.

제1 단계(S1)에서는, 서브 픽처 데이터가 데이터 소스, 예를 들면, DVD 영화 디스크로부터 독출 내지 수신되어, 필요한 경우, 적응적으로 변경될 기초적 서브 픽처 데이터로서 제공된다.

단계 (S2)에서는, 단계(S1)에서 독출된 서브 픽처 데이터에 서브 픽처 데이터 부분이 존재하는 지를 판단한다. 상술한 바와 같이, 서브 픽처 데이터 부분은, 그 가독성이 나쁜 독출된 서브 픽처 데이터에 속하는 데이터이다. 상기의 독출된 서브 픽처 데이터로부터 가독성이 나쁜 서브 픽처 데이터가 선택되며, 이하에서 이를 서브 픽처 데이터 부분이라 한다. 하지만, 일반적으로, 독출된 서브 픽처 데이터가 모두, 가독성이 나쁜 것으로 분류되지는 않는다.

따라서, 가독성 값은 독출된 서브 픽처 데이터 각각에 대해서 판단된다. 가독성 값은, 서브 픽처 데이터가 저장되는 파일 포맷 등, 그 서브 픽처 데이터의 종류에 따라 매우 다양한 방식으로 정의될 수 있다.

서브 픽처 데이터가 예로서 비트맵으로 저장되어 있다면, 가독성 값은 그 서브 픽처 데이터가 연계된 비디오 데이터에 매핑되는 경우에 그 서브 픽처 데이터가 실제로 시각적으로 중첩하는 백분율(visual overlap percentage)을 검출함으로써 판단될 수도 있다. 예를 들어, 초기에 서브 타이틀이 매우 작은 폰트 크기로 표시되면, 실제로 시각적으로 중첩하는 백분율 및 그에 따른 해상도는 더 낮게 된다. 이러한 경우는, 예로서 1라인 서브 타이틀만이 대응 비트맵에 의해 표시되는 때에도 일어날 수 있다. 이 경우에, 소정의 가독성 한계, 즉, 소정의 해상도 이하로 유지될 확률이 상당히 높다. 가독성 값이 가독성 한계보다 낮은 경우에는, 서브 픽처 데이터 부분은 이와 같은 방식으로 검출될 수 있다.

대안으로서, 가독성 값은 표시될 서브 타이틀의 라인 수에 기초할 수도 있다 (상술할 제1 예 #1을 참고). 서브 타이틀의 라인 수가 많으면, 즉, 1개 이상의 라인이면, 각각의 라인은 읽기가 어려울 수 있으며, 특히 포켓 PC의 LCD 화면처럼 매우 소규모인 화면에 표시되는 경우에는 그 라인들이 읽기 어렵게 될 수도 있다. 이러한 경우에, 가독성 한계는 표시 변경할 필요 없이 표시될 수 있는 서브 타이틀의 최대 라인 수로 정의될 수 있다. 하지만, 일반적으로, 2라인의 서브 타이틀이 소규모 화면상에서 동시에 표시되면, 이미 이를 인식하기 어렵게 된다.

단계 (S3)에서는, 서브 픽처 데이터 부분이 적어도 2개의 서브 픽처 데이터 부분으로 분할된다. 이어서, 이들 서브 픽처 데이터 부분은 리사이징된다. 서브 픽처 데이터 부분으로 분할하는 단계에 의해, 일시에 표시될 서브 픽처 데이터의 량은 감소하게 된다. 이로써, 각각의 서브 픽처 데이터 부분은 시청자가 쉽게 인식할 수 있는 (기하학적) 크기 (즉, 해상도)로 리사이징되게 된다.

물론, 이는 표시 타이밍의 적응적 변경을 야기시킨다. 표시 타이밍의 적응 적 변경은 후술될 것이다.

대안으로서, 이렇게 생성된 서브 픽처 데이터 소부분들은 반복적 재생 동작 (도3에 도시되지 아니함)을 위해 저장될 수도 있다.

도 4는 본 발명의 제2 실시예에 따른 방법을 개략적으로 나타낸다.

제1 단계 (S31)에서는, MPEG-2와 같은 비디오 데이터에 포함되고 시간적으로 대응하는 서브 픽처 데이터가 PC와 같은 데이터 처리 장치의 메모리로 독출된다.

서브 픽처 데이터가 DVD 비디오 디스크로 제공되면, 그 서브 픽처 데이터는 통상적으로 MPEG-2 파일 포맷으로 저장된다. 도 1의 PDA(10)와 같은 재생 기기는 "VIDEO TS"로 명명된 디렉토리로서 DVD 비디오 데이터를 인식한다. MPEG-2 표준에 따르면, 이 디렉토리는 표시와 관련된 모든 파일을 포함하고 있다.

디렉토리 VIDEO TS은 다음과 같은 3가지의 확장자, ".IOF", ".BUP", 및 ."VOB" 중의 하나를 가진 파일을 포함하고 있다. 확장자 ".IOF" 는 인덱스 파일임을 나타낸다. 확장자 .BUP 는 대응하는 백업 파일임을 나타낸다. 실제의 오디오 데이터 및/또는 비디오 데이터는 확장자 VOB (Video Object)를 가진 파일에 포함되어 있다.

VOB 파일은 오디오 데이터, 비디오 데이터, 및/또는 서브 타이틀 데이터를 멀티플레싱하여 포함하고 있다. 이 VOB 파일을 재생하기 위해, 재생 기기는 우선 이들 데이터를 디멀티플렉싱해야 한다. VOB 파일은 또한 점프 명령과 타이밍 정보를 포함하는 네비게이션 팩 (NV_PCK)과 하나 이상의 GOP (Group of Pictures)를 포함하고, 이는 비디오 팩 (V_PCK), 오디오 팩 (A_PCK), 및 서브 타이틀 팩 (SP_PCK), 즉, 실제의 비디오/오디오 및/또는 서브 타이틀 데이터를 포함한다.

모든 정보는 특히 서브 픽처 데이터, 즉, 서브 타이틀 데이터가 분석되도록 하게 하는 단계 (S31)에서 독출된다. 서브 타이틀 데이터는 비트맵 포맷 .bmp으로 저장될 수도 있다. 재생 중에 서브 타이틀 비트맵은 실제의 비디오 데이터에 의해 오버레이된다. 하지만, 서브 타이틀 데이터가 비트맵 포맷 .bmp으로 저장되어 있지 아니하더라도, 본 발명에 따른 방법은 여전히 수행될 수 있다. 다른 서브 타이틀 포맷은, 그 서브 타이틀 데이터가 분석되는 방법에 거의 영향을 미치지 아니한다.

제2 단계 (S32)에서, 어느 서브 픽처 데이터가 다중 라인의 서브 픽처 데이터를 표현하는 지를 판단, 즉, 패턴 인식된다. 다중 라인 서브 픽처 데이터는 예를 들면 2개 이상의 라인으로 표시될 서브 타이틀을 표현한다. 도 1에 예시적으로 도시된 바와 같이, 서브 타이틀 (20)은 2라인으로 표시되어 있다. 하지만, PDA(10)의 표시부(12)가 매우 소규모이기 때문에, 예를 들면, 대각선의 길이가 단지 4인치 정도이기 때문에, 문자의 크기는 실제로 매우 작게 된다. 따라서, 이 서브 타이틀 텍스트 (20)은 읽기가 어렵다.

그래서, 단계 (S32)에서는, 2개 이상의 라인에 표시되는 서브 타이틀 데이터가 추가적 처리가 필요한 것으로 확인된다.

제3 단계 (S33)에서, 대응하는 비디오 데이터의 타임 스탬프, 즉, 개시 시각과 종료 시각이 결정될 수 있다. 이 비디오 데이터는 단계 (S32)에서 결정된 다중 라인 서브 픽처 데이터와 연계된다.

대안으로서, 다중 라인 서브 픽처 데이터의 (서브 타이틀) 라인 수만이 결정될 수도 있다. 이 라인 수는 생성될 1라인 서브 타이틀 각각에 대한 표시 기간을 계산하는 데에 이용될 수 있다.

물론, 라인 수와 타임 스탬프가 함께, 단계 (S33)에서 결정될 수도 있다.

추가적인 단계 (S34)에서, 시간적 중지 내지 중단이 존재하는지 여부가 판단될 수 있다. 이것은, 단계 (S32)에서 결정된 실제의 서브 타이들에 대해 시간적으로 앞 및/또는 후에 표시될 서브 타이틀이 더 있는 지를 판단하는 것을 의미한다. 어떤 경우에는, 다수의 다중 라인 서브 타이틀들이 하나 걸러 하나씩 표시되기도 한다. 이러한 경우에, 서브 타이틀의 타임 스탬프에 있어서 시간적 중지는 존재하지 않게 된다. 따라서, 각각의 서브 타이틀을 표시하는 데에 가용한 시간은 고정되게 된다.

시간적 중지가 존재하지 아니하는 것으로 판단되면, 즉, 시간적으로 앞에 및/또는 후에 오는 추가적인 서브 픽처 데이터 부분이 있다고 판단되면, 실제의 서브 픽처 데이터 부분의 표시기간은, 각각의 서브 타이틀에 대한 가용한 시간을 얻기 위해 단계 (S33)에서 결정될 수 있는 문자 라인의 수에 의해 즉시 분할될 수 있다.

예를 들면, 일시에 표시될 서브 타이틀의 개수가 3이고 3라인 서브 타이틀에 대한 표시 기간이 18초이면, 각각의 1라인 서브 타이틀에 대한 가용한 표시 기간은 6초가 된다.

이 가용한 시간은 다른 방식으로 분할될 수도 있다 (예를 들면, 3s+4s+11s 또는 3s+lsP+4s+1sP+9s, 여기서 1sp 는 1초의 중지를 의미하며, 예로서 5초의 중지 일 수도 있다). 이러한 결정은, 각각의 서브 티이틀 라인의 각각의 길이, 즉, 시멘틱 (semantic) 컨텐츠에 의존하여 수행될 수도 있다.

한편, 단계 (S34)에서 시간적 중지가 존재하는 것으로 판단되면, 즉, 단계(S32)에서 결정된 다중 라인 서브 픽처 데이터에 대해 시간적으로 앞에 및/또는 후에 오는 추가적인 서브 픽처 데이터 부분이 있다고 판단되면, 최적화된 표시기간이 단계 (S36)에서 계산될 수 있다.

최적화된 표시기간이란, 예로서 그것이 확장가능 하다는 것을 의미한다. 예를 들면, 영화내의 3라인 서브 타이틀의 페이즈(phase) 후에, 아무런 정보도 표시되지 않는 서브 타이틀의 중지가 있을 수 있다. 최초의 다중 라인 서브 타이틀 대신에 생성될 하나 또는 모든 1라인 서브 타이틀의 표시기간의 길이가, 이 서브 타이틀의 중지의 길이에 의존하여 변할 수 있다.

다시, 상기의 표시 기간은, 각각의 1라인 서브 타이틀의 시멘틱 정보에 의존하여 각각 적응적으로 변경될 수도 있다.

단계 (S37)에서, 복수의 1라인 서브 픽처 데이터가 이전의 단계들에서 얻어진 정보를 이용하여 생성된다. 각각의 1라인 서브 픽처 데이터의 기하학적 표시 크기, 즉, 문자의 크기는 대응하는 (본래의) 1라인 서브 타이틀의 크기에 따라 적응적으로 변경될 수 있다.

본 발명에 따른 방법은 다중 라인 서브 픽처 데이터를 포함하는 데이터에 적용된 후에 1라인 서브 픽처 데이터가 표시되기 때문에, 원한다면, 상기의 크기는 증가될 수도 있다. 본래의 1라인 서브 픽처 데이터의 크기도, 서브 타이틀의 가독 성을 향상시키기 위해서라면 증가 될 수도 있다.

1라인 서브 픽처 데이터가 생성된 후에, 이 데이터는 본래의 데이터를 독출해 온 데이터 소스에 또는 다른 메모리에 저장될 수 있다.

도 5는 본 발명에 따른 시스템(4)을 나타내는 블록도이다.

도 5의 시스템(40)은 PC 등으로 구현될 수 있다. 이 시스템은, DVD(43) 또는 다른 적절한 저장 매체로부터 독출해 온 서브 픽처 데이터를 저장하는 메모리 (42)를 포함한다. 이 시스템은 또한, 서브 픽처 데이터를 독출하기 위한 수단(44), 서브 픽처 부분을 판단하기 위한 수단(46), 및 분할 및 리사이징을 수행하기 위한 수단(48)을 더 포함한다. 수단들 (44, 46, 및 48)은 예로서 마이크로프로세서 또는 CPU (50)에 의해 구현될 수 있다.

서브 픽처 데이터는 텍스트 라인을 표시할 수도 있고 메뉴, 네비게이션 아이콘 등을 표현하는 문자 라인을 표시할 수도 있다는 것은 이해되어야 한다.

본 발명에 따른 방법은 소프트웨어 및/또는 하드웨어로 구현될 수 있다. 따라서, 컴퓨터 시스템 또는 데이터 처리 시스템이 제공되어 본 발명에 따른 방법을 수행하도록 적응적으로 변경될 수 있다. 본 발명은 또한, 소프트웨어 툴로서 구현될 수 있고, 더 나아가 DVD 재생 기기 내에 구현될 수도 있다. 컴퓨터 판독가능 매체는 CD-ROM, DVD, 플로피 디스크, 하드 디스크와 같은 것들 중의 어느 하나일 수도 있다.

가독성 값을 정의하는데 이용된 상술한 예는, 단지 예시적인 것이고, 그 정의를 한정하는 의도는 아니다. 또한, 가독성 값은, 비디오 화소에 대한 서브 타이 틀 화소의 실제적인 중첩 량에 무관하게, 그 표시된 서브 타이틀 라인이 차지하는 영역 (바(bar)의 개념)에 의해 정의될 수도 있다.

또한, 모든 서브 픽처 데이터는 소규모 화면상의 서브 픽처 데이터의 표준화된 해상도를 얻기 위해 적응적으로 변경될 수도 있다는 것은 분명하다.

대안으로서, 서브 픽처 데이터 소부분 (3)들은 화면을 통해 진행하는 연속적인 텍스트를 (바람직하게는, 수평 바로) 형성하도록 다시 조합될 수도 있다.

이상과 같이 본 발명은 바람직한 실시예에 기초하여 개시되지만, 그 형태와 구성에 다양한 변경이 다음의 청구의 범위에 의해 정해지는 본 발명의 범위를 벗어나지 아니하고도 가능하다는 것은 당해 기술 분야의 전문가라면 이해할 것이다.

Claims (25)

1. 연계된 비디오 데이터와 시간적으로 대응하는 서브 픽처 데이터를 표시하기에 적합한 해상도를 가진 표시화면보다 적은 해상도의 표시화면(12)을 가진 유저 기기(10)에 표시되도록 상기 서브 픽처 데이터를 적응시키는 방법으로서,

   소스로부터 서브 픽처 데이터(1)를 독출하는 단계(S1);

   상기 독출된 서브 픽처 데이터(1)로부터 소정의 가독성 한계보다 크거나 작은 가독성 값을 가진 서브 픽처 데이터 부분(2)을 결정하는 단계(S2);

   상기 서브 픽처 데이터 부분(2)을 적어도 2개의 서브 픽처 데이터 소부분(3)으로 분할하는 단계(S3); 및

   상기 서브 픽처 데이터 소부분(3) 각각이 상기 소정의 가독성 한계 이상이 거나 또는 상기 소정의 가독성 한계 이하인 가독성 값을 가지도록 상기 서브 픽처 데이터 소부분(3)를 리사이징하는 단계(S4);를 포함하고,

   상기 서브 픽처 데이터 부분(2)을 결정하는 단계(S2)는 상기 서브 픽처 데이터 부분을 위한 데이터부분 표시기간을 계산하고, 그리고 적어도 두 개의 서브 픽처 데이터 소부분의 연속 표시를 위하여 상기 데이터부분 표시기간을 사용하여 적어도 두 개의 상기 서브 픽처 데이터 소부분을 위한 소부분 표시기간을 계산하는 단계를 포함하는 것인 서브 픽처 데이터 적응 방법.
2. 제1항에 있어서,

   상기 가독성 값은 본래의 서브 픽처 데이터가 표시될 때 중첩하는 면적과 비디오 데이터가 표시될 때 차지하는 총 면적의 비에 의해 얻어지는 것이 특징인 서브 픽처 데이터 적응 방법.
3. 제1항에 있어서,

   상기 가독성 값은, 상기 서브 픽처 데이터가 표시될 때 표시되는 문자 라인의 수를 판정함으로써 얻어지는 것이 특징인 서브 픽처 데이터 적응 방법.
4. 제3항에 있어서,

   상기 서브 픽처 데이터 부분 (2)을 결정하는 단계(S2)는:

   적어도 2개의 문자 라인으로 표시될 서브 픽처 데이터를 결정하는 단계(S32); 및

   상기 문자 라인의 수를 결정하는 단계(S33)를 포함하는 것이 특징인 서브 픽처 데이터 적응 방법.
5. 제4항에 있어서,

   상기 서브 픽처 데이터 부분(2)의 문자 라인 각각에 대하여, 소정의 표시 크기를 가진 하나의 서브 픽처 데이터 소부분(3)이 생성되는 것이 특징인 서브 픽처 데이터 적응 방법.
6. 제1항에 있어서,

   상기 적어도 두 개의 서브 픽처 데이터 소부분(3)을 다른 메모리 또는 상기 소스에 저장하는 단계를 추가로 포함하는 것이 특징인 서브 픽처 데이터 적응 방법.
7. 제6항에 있어서,

   상기 표시기간은, 상기 연계된 비디오 데이터 각각에 시간적으로 대응되어 있는 개시 시각 및 종료 시각을 포함하는 것이 특징인 서브 픽처 데이터 적응 방법.
8. 제7항에 있어서,

   상기 개시 시각 및 상기 종료 시각은, 상기 서브 픽처 데이터 부분(2)과 상기 연계된 비디오 데이터 사이의 시간적 대응관계가 유지되도록 상기 서브 픽처 데이터 소부분(3)에 할당되는 것이 특징인 서브 픽처 데이터 적응 방법.
9. 제6항에 있어서, 상기 서브 픽처 데이터 부분(2)에 대해 시간적으로 앞에 또는 후에 추가적인 서브 데이터 부분(2)이 더 존재하는 지를 판단하는 단계(S34)를 더 포함하는 방법.
10. 제9항에 있어서,

    상기 추가적인 서브 픽처 데이터 부분이 더 존재하지 아니하면, 상기 서브 픽처 데이터 소부분의 각각의 상기 개시 시각 및 상기 종료 시각은 최적화되는 (S36) 것이 특징인 서브 픽처 데이터 적응 방법.
11. 제10항에 있어서,

    상기 서브 픽처 데이터 소부분(3)의 전체의 표시 기간은 대응하는 상기 서브 픽처 데이터 부분(2)의 표시 기간보다 길게 되어 있는 것이 특징인 서브 픽처 데이터 적응 방법.
12. 제1항에 있어서,

    상기 소스는 영화 데이터 파일, 특히, DVD 비디오 데이터 파일인 것이 특징인 서브 픽처 데이터 적응 방법.
13. 제12항에 있어서,

    상기 영화 데이터 파일은 상기 유저 기기(10)의 메모리에 저장되어 있는 것이 특징인 서브 픽처 데이터 적응 방법.
14. 제1항에 있어서,

    상기 서브 픽처 데이터 소부분(3)은 대응하는 상기 서브 픽처 데이터 부분(2)을 대체하도록 되어 있는 것이 특징인 서브 픽처 데이터 적응 방법.
15. 제4항에 있어서, 상기 문자 라인의 수를 결정하는 단계(S33)은 패턴 인식을 적용하는 단계를 포함하는 것이 특징인 서브 픽처 데이터 적응 방법.
16. 제1항에 있어서,

    상기 서브 픽처 데이터(1)는 서브 타이틀 데이터인 것이 특징인 서브 픽처 데이터 적응 방법.
17. 제1항에 있어서,

    상기 리사이징하는 단계는, 상기 서브 픽처 데이터에 대한 원하는 해상도가 서브 픽처 데이터에 대해 모두 동일하게 되도록 수행되는 것이 특징인 서브 픽처 데이터 적응 방법.
18. 제1항에 있어서,

    상기 리사이징 하는 단계는, 상기 서브 픽처 데이터에 대해 원하는 다른 해상도가 서브픽터 데이터에 대해 얻어지도록 수행되는 것이 특징인 서브 픽처 데이터 적응 방법.
19. 제1항에 있어서,

    상기 서브 픽처 데이터 소부분(3)들은 스크린을 통하여 진행하면서 표시되는 연속적인 띠(밴드)를 형성되도록 조합되는 것이 특징인 서브 픽처 데이터 적응 방법.
20. 데이터 처리 시스템(40)으로서,

    소스로부터 서브 픽처 데이터(1)를 독출하기 위한 수단(44);

    상기 독출된 서브 픽처 데이터(1)로부터 소정의 가독성 한계보다 적거나 큰 가독성 값을 가진 서브 픽처 데이터 부분(2)을 결정하기 위한 수단(46); 및

    상기 서브 픽처 데이터 부분(2)을 적어도 2개의 서브 픽처 데이터 소부분(3)으로 분할하고, 상기 서브 픽처 데이터 소부분(3) 각각이 상기 소정의 가독성 한계이상이거나 또는 이하인 가독성 값을 가지도록 상기 서브 픽처 데이터 소부분(3)을 리사이징 하기 위한 수단(48);을 포함하고,

    상기 서브 픽처 데이터 부분(2)을 결정하기 위한 수단(46)은, 상기 서브 픽처 데이터 부분을 위한 데이터부분 표시기간을 계산하고, 그리고 적어도 두 개의 서브 픽처 데이터 소부분의 연속 표시를 위하여, 상기 데이터부분 표시기간을 사용하여, 적어도 두 개의 상기 서브 픽처 데이터 소부분을 위한 소부분 표시기간을 계산하도록 적응된 것인 데이터 처리 시스템.
21. 컴퓨터에 제1항 내지 제19항 중의 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
22. 삭제
23. 삭제
24. 삭제
25. 삭제

Images