KR101619153B1 - 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법 - Google Patents

스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법 Download PDF

Info

Publication number
KR101619153B1
KR101619153B1 KR1020150009169A KR20150009169A KR101619153B1 KR 101619153 B1 KR101619153 B1 KR 101619153B1 KR 1020150009169 A KR1020150009169 A KR 1020150009169A KR 20150009169 A KR20150009169 A KR 20150009169A KR 101619153 B1 KR101619153 B1 KR 101619153B1
Authority
KR
South Korea
Prior art keywords
content
digital image
sound
contents
subtitle
Prior art date
Application number
KR1020150009169A
Other languages
English (en)
Inventor
이창희
최학주
Original Assignee
(주)씨에이씨엔터테인먼트
주식회사 엑세스아이씨티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)씨에이씨엔터테인먼트, 주식회사 엑세스아이씨티 filed Critical (주)씨에이씨엔터테인먼트
Priority to KR1020150009169A priority Critical patent/KR101619153B1/ko
Application granted granted Critical
Publication of KR101619153B1 publication Critical patent/KR101619153B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템은 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스에서 현재 방영되어 재생될 디지털 영상 콘텐츠의 영상 및 사운드 신호 중 사운드 신호의 재생 시간과 동기화되어 있는 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보가 데이터베이스로 저장되어 있으며, 어플리케이션 실행을 통해 네트워크로 접속한 사용자 스마트 기기에 화면 해설 또는 자막 제공이 가능한 상기 디지털 영상 콘텐츠 리스트를 전송하고, 상기 사용자 스마트 기기로부터 전송되는 디지털 영상 콘텐츠 리스트 선택 정보를 확인하여 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠 및 상기 사운드 DNA 정보를 상기 사용자 스마트 기기로 전송하는 NOC 플랫폼 서버, 그리고, 어플리케이션 실행을 통해 상기 NOC 플랫폼 서버로부터 화면 해설 또는 자막 제공이 가능한 상기 디지털 영상 콘텐츠 리스트를 전송받고, 리스트 중 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠및 상기 사운드 DNA 정보를 전송 받아 저장하며, 선택된 화면 해설 또는 자막 재생 요청 정보에 따라 마이크부로 입력되는 방영되어 재생 중인 상기 디지털 영상 콘텐츠의 현재 사운드 신호를 저장된 상기 사운드 DNA 정보와 비교 분석하여 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생하는 사용자 스마트 기기를 포함한다.

Description

스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법{THE DIGITAL VIDEO CONTENT EASY SEEING OR HEARING SYSTEM AND METHOD FOR VISUALLY OR HEARING IMPAIRED PERSON USING SMART DEVICES}
본 발명은 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 관리 방법에 관한 것으로서, 보다 상세하게는 영화관이 아닌 가정 등에서 TV 등의 디스플레이를 통해 방영되는 지상파 방송, 유선 방송, IPTV 방송 또는 유료 영화 콘텐츠나 영화 DVD 등을 이용하여 방영되는 디지털 영상 콘텐츠의 시청이 용이하지 않은 시각 또는 청각 장애인이 스마트 기기를 이용하여 상영 중인 디지털 영화 콘텐츠의 음성신호를 분석하여, 현재의 재생시간을 추출한 후 보조 콘텐츠인 음성 화면해설 또는 텍스트 자막 콘텐츠의 재생을 동기화 함으로써 상영중인 영화 콘텐츠와 함께 편리하게 시청할 수 있도록 하는 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 관한 것이다.
현재 국내 영화관에서 상영하는 디지털 영상 콘텐츠의 경우 정부 차원의 장애인 영화 관람 환경 조성의 일환으로 장애인차별금지법 및 영비법 개정을 통한 장애인의 영화 관람 환경이 마련되었고, 한국 영화 상영은 일정 비율로 시청각 장애인을 위한 수화ㆍ자막ㆍ화면 해설 상영 의무화 및 수화ㆍ자막ㆍ화면 해설을 통한 시청각 장애인과 비장애인의 차별 및 장벽이 없도록 배리어 프리(Barrier-Free) 상영관 의무화 및 제반 운영지원을 하고 있다. 그러나 이러한 시책에도 불구하고 시청각 장애인의 경우 실제 영화관에 가서 일반인들과 같이 영화를 관람하기에는 현실적으로 곤란한 문제점이 있다.
최근에는 지상파 방송 등에서 시청각 장애인을 위한 공익적 차원에서 방영되는 디지털 영상 콘텐츠에 대해 화면 해설이나 자막 방송을 제한적으로 실시하고 있다. 그러나 이러한 화면 해설이나 자막 방송을 위해서는 방영될 디지털 영상 콘텐츠에 화면 해설이나 자막을 디지털 워터 마킹으로 믹싱 삽입 등의 방법을 통해 제작하여야 하는데 이 경우 원본 손상(변형)에 따른 저작권 문제와 고비용(한국 영화 디지털 영상 콘텐츠의 경우 편당 1,500여만원, 외화 디지털 영상 콘텐츠의 경우 편당 2,000 여만원 정도 제작 비용 발생)의 문제로 인해 이를 상업적 수준의 유료 서비스를 통한 비즈니스 모델로 시도하기에는 수익성이 확보되지 않아 실질적으로 시청각 장애인에게 다양한 디지털 영상 콘텐츠의 시청 접근성을 허용하지 못하고 있는 실정이다.
한편, 하기 선행기술문헌의 특허문헌 제10-1052850호에 개시된 특허 발명인 “상용 디브이디 콘텐츠를 이용한 자막제공 서비스 시스템”은 상용 디브이디 콘텐츠의 자막 정보를 자막제공서버(120)로부터 사용자 단말기(100)로 네트워크(11)을 통해 다운받아 디브이디 콘텐츠의 영상/음성신호 재생시간과 동기화하여 디브이디 콘텐츠의 영상/음성신호와 동기화된 자막을 재생함으로써 어학 학습을 할 수 있는 기술이 제안되었다.
그러나 상기 종래 특허 발명은 사용자 단말기(130)가 현재 범용적으로 사용되는 휴대전화 기능이 기본적으로 내장되어 있으며 크기가 작아 상시 휴대 및 사용이 빈번이 이루어지는 스마트폰이나 태블릿 PC 또는 패블릿 PC 등의 스마트 기기가 아닌 개인용 컴퓨터, 노트북, PDA 단말기 등의 휴대용 개인용 기기를 기반으로 하는 것으로 시각 또는 청각 장애인이 상시 휴대 및 사용하기에 불편한 문제점이 있었다. 뿐만 아니라, 영화관 스크린에 비해 상대적으로 매우 작은 CRT 모니터나 LCD 모니터 등으로 디스플레이부(210)가 구성되어 있으며, 디지털 영상 콘텐츠가 디브이디 콘텐츠로 한정이 되어 있을 뿐만 아니라 비록 영상/음성신호의 재생과 자막의 재생이 공간적으로 분리되어 있으나 사용자 단말기(130)에 구비된 하나의 디스플레이부(210)에 의해 재생이 되므로 청각 장애인이 상기 특허 발명에 제안된 시스템을 이용하여 디지털 영상 콘텐츠를 시청하기에 불편하고, 시각 장애인의 경우에는 디지털 영상 콘텐츠의 관람 자체가 불가능한 문제점이 있었다.
또한, 상기 종래 특허 발명은 디브이디 재생부(220)가 삽입된 디브이디로부터 영상과 음성 신호를 모두 추출하여 재생하는 동시에 저장된 자막정보를 영상 및 음성 신호와 동기화하여 디스플레이부를 통해 재생하므로 방영 중인 디지털 영상 콘텐츠의 경우 사용자 단말기(130)를 이용하여 영상과 음성 모두를 추출하기가 어려우므로 상기 특허 발명에 제안된 시스템을 이용하여 시각 또는 청각 장애인이 가정등에서 TV 등을 통해 방영되는 디지털 영상 콘텐츠를 관람하기가 어려운 문제점이 있었다.
KR 10-1052850 B1
따라서 본 발명이 해결하고자 하는 과제는 상술한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 시각 또는 청각 장애인이 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스와는 별도로 본인이 소지한 휴대용 스마트 기기를 통해 시청하고자 하는 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 또는 자막 재생 서비스를 제공받아 손쉽게 관람할 수 있도록 하여 시각 또는 청각 장애인의 디지털 영상 콘텐츠의 시청 접근성을 보장하기 위한 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법을 제공하는 것이다.
상기 과제 해결을 위한 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템은 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스에서 현재 방영되어 재생될 디지털 영상 콘텐츠의 영상 및 사운드 신호 중 사운드 신호의 재생 시간과 동기화되어 있는 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보가 데이터베이스로 저장되어 있으며, 어플리케이션 실행을 통해 네트워크로 접속한 사용자 스마트 기기에 화면 해설 또는 자막 제공이 가능한 상기 디지털 영상 콘텐츠 리스트를 전송하고, 상기 사용자 스마트 기기로부터 전송되는 디지털 영상 콘텐츠 리스트 선택 정보를 확인하여 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠 및 상기 사운드 DNA 정보를 상기 사용자 스마트 기기로 전송하는 NOC 플랫폼 서버, 그리고, 어플리케이션 실행을 통해 상기 NOC 플랫폼 서버로부터 화면 해설 또는 자막 제공이 가능한 상기 디지털 영상 콘텐츠 리스트를 전송받고, 리스트 중 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠및 상기 사운드 DNA 정보를 전송 받아 저장하며, 선택된 화면 해설 또는 자막 재생 요청 정보에 따라 마이크부로 입력되는 방영되어 재생 중인 상기 디지털 영상 콘텐츠의 현재 사운드 신호를 저장된 상기 사운드 DNA 정보와 비교 분석하여 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생하는 사용자 스마트 기기를 포함한다.
상기 사용자 스마트 기기는, 사용자의 조작 신호를 입력받아 제어 신호를 출력하는 입력부, 디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 선택된 자막 콘텐츠가 재생되는 디스플레이부, 디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 선택된 화면 해설 콘텐츠가 재생되는 사운드 출력부, 재생중인 상기 디지털 영상 콘텐츠의 사운드 신호를 입력받는 마이크부, 무선 네트워크 망을 통하여 상기 NOC 플랫폼 서버와 데이터 통신을 수행하는 통신부, 사용자의 조작에 의해 수동으로 또는 기지정된 디지털 영상 콘텐츠에 따라 자동으로 상기 NOC 플랫폼 서버에 접속하여 선택된 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 전송 받아 저장하며, 상기 마이크를 통해 방영되어 재생 중인 디지털 영상 콘텐츠의 현재 사운드 신호를 입력 받아 이를 사운드 DNA 정보와 비교 분석하고 상기 사운드 출력부 또는 상기 디스플레이부를 통해 재생 중인 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는 어플리케이션 프로그램이 저장된 메모리부, 그리고, 상기 입력부, 상기 디스플레이부, 상기 사운드 출력부, 상기 마이크부, 상기 통신부 및 상기 메모리부를 제어하여 상기 어플리케이션 프로그램 실행을 통해 상기 사운드 출력부 또는 디스플레이부를 통해 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는 제어부를 포함할 수 있다.
상기 사운드 DNA 정보는 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되어 재생될 디지털 영상 콘텐츠의 재생 전구간에 걸쳐 추출되어 등록된 사운드 신호의 데이터베이스로써, 음향 주파수 아날로그 신호를 디지털 정보로 변환환 비트 코드 및 상기 비트 코드에 대응하는 상기 디지털 영상 콘텐츠의 재생 시간에 대한 디지털 정보인 타임 코드를 포함한다.
상기 어플리케이션 프로그램은 상기 마이크부를 통해 입력되는 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스에 의해 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 상기 사운드 DNA 정보 속 비트 코드를 찾고 이 비트 코드에 대응하는 상기 사운드 DNA 정보 속 타임 코드를 추출하여 상기 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 일치되는 타임 코드를 검색함으로써 상기 사운드 출력부 또는 상기 디스플레이부를 통해 상기 디지털 영상 콘텐츠와 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시킬 수 있다.
한편, 상기 과제 해결을 위한 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털영상 콘텐츠 간편 시청 방법은 사용자 스마트 기기를 이용한 어플리케이션 프로그램 실행을 통해 NOC 플랫폼 서버에 접속하여 시각 또는 청각 장애인용 화면 해설 또는 자막 제공이 가능한 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠 리스트 정보를 확인하는 리스트 정보 확인 단계, 상기 디지털 영상 콘텐츠 리스트 정보를 바탕으로 시각 또는 청각 장애인이 시청하고자 하는 디지털 영상 콘텐츠를 선택하는 디지털 영상 콘텐츠 선택 단계, 상기 사용자 스마트 기기를 통해 선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위한 보조 콘텐츠인 화면 해설 콘텐츠 또는 자막 콘텐츠 및 사운드 DNA 정보를 상기 NOC 플랫폼 서버로부터 상기 사용자 스마트 기기로 다운로드 받아 저장하는 보조 콘텐츠 및 사운드 DNA 정보 다운로드 단계, 선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위해 상기 보조 콘텐츠인 화면 해설 콘텐츠 및 자막 제공 콘텐츠 중 하나의 보조 콘텐츠 서비스 이용 방법을 선택하는 보조 콘텐츠 서비스 이용 방법 선택 단계, 그리고, 선택된 디지털 영상 콘텐츠의 재생 시 발생하는 현재 사운드 신호를 상기 사용자 스마트 기기의 마이크부를 통해 입력받아 이를 저장된 사운드 DNA 정보와 비교 분석하고 선택된 보조 콘텐츠 서비스 이용 방법에 따라 상기 사용자 스마트 기기의 사운드 출력부 또는 디스플레이부를 통해 선택된 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시켜 화면 해설 서비스 또는 자막 제공 서비스를 제공하는 보조 콘텐츠 재생 단계를 포함한다.
상기 사운드 DNA 정보는 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠의 재생 전구간에 걸쳐 추출 등록된 사운드 신호의 데이터베이스로써, 음향 주파수 아날로그 신호를 디지털 정보로 변환환 비트 코드 및 상기 비트 코드에 대응하는 상기 디지털영상 콘텐츠의 재생 시간에 대한 디지털 정보인 타임 코드를 포함할 수 있다.
상기 보조 콘텐츠 재생 단계는, 상기 마이크부를 통해 입력되는 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 상기 사운드 DNA 정보 속 비트 코드를 검색하는 비트 코드 검색 단계, 일치된 비트 코드가 검색되면 검색된 비트 코드에 대응하는 상기 사운드 DNA 정보 속 타임 코드를 추출하는 단계, 추출된 타임 코드와 일치하는 상기 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 타임 코드를 검색함으로써 상기 화면 해설 콘텐츠 또는 자막 콘텐츠를 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 상기 디지털 영상 콘텐츠와 상호 동기화하는 단계, 그리고, 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 선택된 보조 콘텐츠 이용 방법에 따라 방영 중인 상기 디지털 영상 콘텐츠와 함께 시각 또는 청각 장애인의 시청을 위해 상기 사운드 출력부 또는 상기 디스플레이부를 통해 재생하는 화면 해설 콘텐츠 또는 자막 콘텐츠 재생 단계를 포함할 수 있다.
이상과 같이 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면, 시각 또는 청각 장애인이 가정 등에 구비되어 영상 및 사운드를 재생하는 TV 등의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스와는 별도로 본인이 소지한 휴대용 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램 실행을 통해 시청하고자 하는 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 또는 자막 재생 서비스를 제공받아 손쉽게 영화관이 아닌 가정 등에서도 관람할 수 있도록 하여 시청각 장애인의 디지털 영상 콘텐츠의 시청 접근성을 보장할 수 있는 유리한 효과가 있다.
뿐만 아니라, 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면 단일화된 NOC 플랫폼 서버 및 개인용 스마트 기기를 통해 전국 모든 가정 등에 구비된 TV 등의 디스플레이 장치를 통해 방영되는 디지털 영상 콘텐츠에 동기화된 화면 해설이나 자막 제공 서비스를 제공시킬 수 있으므로 정부의 장애인 차별 해소 정책에 상당 부응하고 시청각 장애인의 영상 시청 권리를 보장할 수 있을 뿐만 아니라, 화면 해설이나 자막 제공을 위한 시스템 구축이 용이하고 비용이 적게 들기 때문에 영상 미디어 분야에서 새로운 관련 산업의 성장이 가능한 상업적 수준의 유료 서비스가 가능한 새로운 비즈니스 모델이 제공될 수 있는 유리한 효과가 있다.
뿐만 아니라, 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면 영상 신호는 필요 없이 사운드 신호 정보만을 검색 추출하더라도 스마트 기기를 이용하여 가정 등에 구비된 TV 등의 디스플레이 장치를 통해 방영되는 영상과 음성 신호 모두를 추출하기 어려운 디지털 영상 콘텐츠에 동기화된 화면 해설이나 자막 제공 서비스를 제공할 수 있는 유리한 효과가 있다.
도 1은 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템의 개략적인 구성 블록도,
도 2는 본 발명의 한 실시예에 따른 사용자 스마트 기기의 구성 블록도,
도 3은 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법을 순차적으로 도시한 순서도,
도 4는 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템에 적용되는 디지털 영상 콘텐츠의 사운드 DNA 정보의 추출, 등록 및 검색 과정을 설명하는 개략도,
도 5 내지 도 7은 각각 도 4 중 사운드 DNA 정보를 추출 시작, 추출 중 및 추출 완료 과정을 순차적으로 도시한 프로그램 실행 화면들,
도 8 내지 도 13은 각각 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법에 따라 사용자 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램을 실행하여 시각 장애인이 방영중인 디지털 영상 콘텐츠에 동기화된 화면 해설 콘텐츠 재생 서비스를 제공받는 방법을 순차적으로 설명한 디스플레이 실행 화면들,
도 14 및 도 15는 각각 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법에 따라 사용자 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램을 실행하여 청각 장애인이 방영중인 디지털 영상 콘텐츠에 동기화된 자막 콘텐츠 재생 서비스를 제공받는 방법을 순차적으로 설명한 디스플레이 실행 화면들, 그리고,
도 16은 도 4 중 추출되어 데이터 베이스에 등록 저장된 사운드 DNA 정보의설명도이다.
실시예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예를 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예는 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다. 본 명세서에서 기술하는 실시예는 본 발명의 이상적인 구성 블록도 및 순서도, 개략도, 각종 실행 화면들 및 설명도를 참고하여 설명할 것이다.
이하, 첨부한 도면을 참고로 하여 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털영상 콘텐츠 간편 시청 시스템 및 그 방법에 관하여 설명한다.
먼저 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템에 관하여 도 1 및 도 2를 참조하여 상세히 설명한다.
도 1은 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템의 개략적인 구성 블록도이며, 도 2는 본 발명의 한 실시예에 따른 사용자 스마트 기기의 구성 블록도이다.
도 1에 도시된 바와 같이, 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템은 사용자 스마트 기기(100), 네트워크(110), NOC 플랫폼 서버(120) 및 보조 콘텐츠 제공자 단말기(130)를 포함할 수 있다.
네트워크(110)는 사용자 스마트 기기(100), NOC 플랫폼 서버(120), 보조 콘텐츠 제공자 단말기(130) 간의 데이터 통신 경로로 이용되며, 사용자 스마트 기기(100)와 NOC 플랫폼 서버(120) 간은 3G 통신, 4G(LTE) 통신, 또는 WIFI 통신 등의 무선 네트워크로 구성될 수 있으며, NOC 플랫폼 서버(120) 및 보조 콘텐츠 제공자 단말기(130) 간은 상기 무선 네트워크 외에 일반 유선 네트워크를 포함하여 구성될 수 있다.
NOC(network operating center) 플랫폼 서버(120)는 사용자 스마트 기기(100)에 다운로드된 어플리케이션(이하 ‘배리어 프리 어플리케이션’이라 한다) 실행을 통해 네트워크로 접속한 사용자 스마트 기기(100)에 화면 해설 또는 자막 제공이 가능한 디지털 영상 콘텐츠 리스트를 전송하고, 사용자 스마트 기기(100)로부터 전송되는 디지털 영상 콘텐츠 리스트 선택 정보를 확인하여 선택된 디지털 영상 콘텐츠의 보조 콘텐츠인 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 사용자 스마트 기기(100)로 전송한다.
즉, 본 발명에 따른 디지털 영상 콘텐츠 간편 시청 시스템은 사용자인 시각 또는 청각 장애인이 사용자 스마트 기기(100)에 다운로드된 배리어 프리 어플리케이션 프로그램을 실행하여 수동으로 NOC 플랫폼 서버(120)에 접속하여 선택된 특정 디지털 영상 콘텐츠의 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 다운로드 받아 사용자 스마트 기기(100)에 저장할 수 있다. 뿐만 아니라, 시각 또는 청각 장애인이 소지한 사용자 스마트 기기(100)가 NOC 플랫폼 서버(120)와 상호 무선 통신이 가능한 지역인 특정 디지털 영상 콘텐츠를 방영하는 영화관이 아닌 가정이나 가게 등의 기타 장소에 들어온 경우 사용자 스마트 기기(100)가 자동으로 다운로드된 배리어 프리 어플리케이션을 실행하여 사용자 스마트 기기(100)에 자동으로 영화관이 아닌 가정 등에 구비되어 영상 및 사운드를 재생하는 TV, 모니터, 투사기 등의 디스플레이를 갖는 디지털 영상 콘텐츠 재생 디바이스(50)를 통해 현재 방영되고 있는 특정 디지털 영상 콘텐츠의 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 다운로드 받아 사용자 스마트 기기(100)에 저장 할 수도 있다.
여기서 화면 해설 콘텐츠는 성우의 육성을 통한 나레이션 및 편집을 통해 제작된 MP3 파일, M4A 파일 등 모바일 단말기에서 인식 가능한 사운드 파일일 수 있으며, 자막 콘텐츠의 경우 한글 텍스트 형식의 SMI 파일 등일수 있다. 이러한 기능을 수행하기 위하여 본 발명에 따른 NOC 플랫폼 서버(120)에는 영상 콘텐츠 재생 디바이스(50)인 TV나 모니터, 투사기 등의 디스플레이의 사운드 장치에 의해 현재 방영되어 재생되는 디지털 영상 콘텐츠의 영상 및 사운드 신호 중 사운드 신호의 재생 시간에 동기화되어 있는 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보가 자막 및 화면 해설 콘텐츠 데이터베이스(122)에 저장되어 있다. 자막 및 화면 해설 콘텐츠 데이터베이스(122)에 저장되는 화면 해설 콘텐츠, 자막 콘텐츠 정보는 보조 콘텐츠 제공자 단말기(130)로부터 전송되어 구조화되어 저장되며, 해당되는 디지털 영상 콘텐츠의 사운드 신호와 이에 따른 재생 시간을 기준으로 동기화되어 있는 정보이며, 사운드 DNA 정보는 해당 디지털 영상 콘텐츠의 재생 전구간에 걸쳐 추출 등록된 사운드 신호의 데이터베이스로써, 재생 중인 사운드 신호인 음향 주파수 아날로그 신호를 디지털 정보로 변환환 비트 코드(bit code) 및 이 비트 코드에 대응하는 특정 디지털 영상 콘텐츠의 재생 시간에 대한 디지털 정보인 타임 코드(time code)를 포함하고 있다.
보조 콘텐츠 제공자 단말기(130)는 NOC 플랫폼 서버(120)에 보조 콘텐츠인 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 제공하여 저장시키는 제공자가 사용하는 단말기로서, 범용적으로 이용되는 개인용 컴퓨터, 노트북, 피디에이나 스마트 기기 등의 정보통신기기로 구성될 수 있다.
보조 콘텐츠인 화면 해설 콘텐츠 및 자막 콘텐츠와 사운드 DNA 정보의 제공자는 보조 콘텐츠 제공자 단말기(130)를 이용하여 본 발명에서 이용하는 화면 해설 콘텐츠 및 자막 콘텐츠와 사운드 DNA 정보를 생성하여 NOC 플랫폼 서버(120)로 전송한다. 이때, 보조 콘텐츠 제공자 단말기(130)에는 도 4 내지 도 7에 도시한 바와 같이 사운드 DNA 정보를 추출하여 등록할 수 있는 프로그램이 저장되어 있다. 여기서 도 4는 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템에 적용되는 디지털 영상 콘텐츠의 사운드 DNA 정보의 추출, 등록 및 검색 과정을 설명하는 개략도, 도 5 내지 도 7은 각각 도 4 중 사운드 DNA 정보를 추출 시작, 추출 중 및 추출 완료 과정을 순차적으로 도시한 프로그램 실행 화면들이다.
화면 해설 콘텐츠 및 자막 콘텐츠와 사운드 DNA 정보 제공자는 보조 콘텐츠 제공자 단말기(130)를 이용하여 도 4에 도시한 자동 콘텐츠 인식(ACR, Automated Content Recognition) 핑거프린프(PrinteFrinter) 기술을 이용하여 만들어진 사운드 DNA 정보 추출 프로그램을 이용하여 도 5 내지 도 7에 도시된 바와 같이 특정 디지털 영상 콘텐츠에 대해 화면 해설 콘텐츠 또는 자막 콘텐츠의 재생 시간을 동기화 하기 위해 필요한 사운드 DNA 정보를 추출해 내고 이를 NOC 플랫폼 서버(120)의 메모리부(220)에 등록 저장한다. 도 16은 도 4 중 추출되어 데이터 베이스에 등록 저장된 사운드 DNA 정보의 설명도로써, 사운드 DNA 데이터 정보가 비트 코드화 되어 저장되어 있음을 보여 준다. 물론 도면에는 도시되지 않았으나 비트 코드에 대응되는 타임 코드 또한 함께 저장되어 있음은 물론이다.
사운드 DNA 정보와 함께 등록되는 화면 해설 콘텐츠 및 자막 콘텐츠에는 디지털 영상 콘텐츠의 재생 시간과 동기화될 수 있도록 추출된 사운드 DNA 정보를 바탕으로 동일한 타임 코드 정보가 내장되어 있다.
도 4에 도시한 디지털 영상 콘텐츠의 사운드 DNA 정보의 추출, 등록 및 검색을 위한 자동 콘텐츠 인식(ACR, Automated Content Recognition) 핑거프린프(PrinteFrinter) 기술은 본 특허 출원일 이전에 이미 공지된 기술인바 자세한 설명은 생략하기로 한다.
한편, 사용자 스마트 기기(100)는 애플 앱스토어 또는 구글 플레이 등의 어플리케이션 다운로드 사이트에 등록된 배리어 프리 어플리케이션을 다운로드 받고 실행을 통해 네트워크(110)를 통해 접속된 NOC 플랫폼 서버(120)로부터 자막 및 화면 해설 콘텐츠 데이터베이스(122)에 등록된 화면 해설 또는 자막 제공이 가능한 디지털 영상 콘텐츠 리스트를 전송 받는다. 또한 사용자 스마트 기기(100)는 디지털 영상 콘텐츠 리스트 중 선택된 디지털 영상 콘텐츠의 화면 해설 콘텐츠, 자막 콘텐츠및 사운드 DNA 정보를 NOC 플랫폼 서버(120)로부터 전송 받아 이를 메모리부(220)에 저장한다. 사용자 스마트 기기(100)는 시각 또는 청각 장애인의 수동 조작 또는 자동으로 선택된 화면 해설 또는 자막 재생 요청 정보에 따라 마이크부(216)로 입력되는 재생 중인 디지털 영상 콘텐츠의 현재 사운드 신호를 사용자 스마트 기기(100)의 메모리부(220)에 저장된 사운드 DNA 정보와 비교 분석하여 영상 콘텐츠 재생 디바이스(50)와는 별도로 마련된 휴대가 간편한 사용자 스마트 기기(100)의 사운드 출력부(212) 또는 디스플레이부(210)를 통해 재생 중인 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생한다.
여기서 사용자 스마트 기기(100)는 휴대가 용이한 밝은색 화면이 현시되는 터치 패널이 장착된 LCD 또는 OLED 타입의 디스플레이부(210)를 갖는 스마트폰, 태블릿 PC, 패블릿 PC 등을 사용할 수도 있으나 밝은색 화면 현시로 인해 타인에게 방해가 되지 않도록 구글 글라스, 올림푸스사 MEG, 엡손사 MOVERIO 등의 스마트 글라스가 디스플레이부(210)로 채용된 웨어러블 기기 등인 것이 바람직하다.
이하에서 도 2를 참조하여 본 발명에 따른 사용자 스마트 기기의 구성과 기능에 대해 따로 상세하게 설명한다. 도 2는 본 발명의 한 실시예에 따른 사용자 스마트 기기의 구성 블록도이다.
도 2에 도시된 바와 같이, 본 발명의 한 실시예에 따른 사용자 스마트 기기(100)는 제어부(200), 디스플레이부(210), 사운드 출력부(212), 입력부(214), 마이크부(216), 통신부(218) 및 메모리부(220)를 포함할 수 있다.
입력부(214)는 사용자의 조작 신호를 입력 받아 제어 신호를 출력하게 된다. 이러한 입력부(214)는 사용자 스마트 기기(100)가 LCD 또는 OLED 타입의 디스플레이부(210)를 갖는 스마트폰, 태블릿 PC, 패블릿 PC 등인 경우에는 범용적으로 널리 사용되는 디스플레이부(210)에 적층 형성된 터치 패널일 수 있으며, 상술한 스마트 글라스가 디스플레이부(210)로 채용된 웨어러블 기기인 경우에는 스마트 글라스와 인접부에 별도로 마련된 입력 수단일 수 있으며, 이외 공통으로 각 디스플레이부(210)와 연동되는 로지스틱, 핑거툴 등의 기존 개발된 별도의 입력 수단이나 현재 개발 중 또는 차후 개발될 입력 수단을 모두 포함할 수 있다.
디스플레이부(210)는 디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 디지털 영상 콘텐츠와 동기화된 선택된 자막 콘텐츠가 재생된다. 또한 디스플레이부(210)는 디지털 영상 콘텐츠와 동기화된 선택된 화면 해설 콘텐츠의 재생과 관련된 시각적 정보를 추가로 현시할 수 도 있다. 이러한 디스플레이부(210)의 종류는 상술한 바와 같다.
사운드 출력부(212)는 디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 디지털 영상 콘텐츠와 동기화된 선택된 화면 해설 콘텐츠가 재생되어 출력된다. 사운드 출력부(212)는 범용적으로 사용자 스마트 기기(100)에 채용된 스피커 또는 일반적인 유선 이어폰이거나 이와 무선으로 연동되는 블루투스 이어폰 등일 수 있다.
마이크부(216)는 스마트 기기(100)에 내장되어 있으며, 현재 방영 중인 디지털 영상 콘텐츠의 재생 사운드 신호를 입력받는다.
통신부(218)는 무선 네트워크(110)를 통하여 NOC 플랫폼 서버(120)에 접속하여 NOC 플랫폼 서버(120)와 데이터 통신을 수행하게 된다. 본 발명에 따른 사용자 스마트 기기(100)는 무선 네트워크 카드로 구성되는 것이 바람직하다.
메모리부(220)는 사용자의 조작에 의해 수동으로 또는 기지정된 디지털 영상 콘텐츠에 따라 자동으로 NOC 플랫폼 서버(120)로부터 선택된 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 전송 받아 저장하며, 마이크부(216)를 통해 재생 중인 디지털 영상 콘텐츠의 현재 사운드 신호를 입력 받아 이를 저장된 사운드 DNA 정보와 비교 분석하고 디스플레이부(210) 또는 사운드 출력부(212)를 통해 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는 배리어 프리 어플리케이션 프로그램(224)이 저장되어 있다.
어플리케이션 프로그램(224)은 입력부(214) 및 제어부(200)를 통해 입력되는 조작 신호에 따라 실행을 하기 위한 어플리케이션 실행 프로그램(224), 비트 코드를 추출하고 이를 검색하여 비교 분석하기 위한 비트 코드 추출 및 검색 프로그램(224b), 타임코드를 추출하고 이를 검색하여 비교 분석하기 위한 타임 코드 추출 및 검색 프로그램(224c) 등을 포함할 수 있다.
어플리케이션 프로그램(224)은 사용자의 수동 조작 또는 자동으로 어플리케이션 실행 프로그램(224a)이 실행되게 되면 마이크부(216)를 통해 입력되는 영화관이 아닌 가정이나 가게 등의 기타 장소에서 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 상기 사운드 DNA 정보 속 비트 코드를 비트 코드 추출 및 검색 프로그램(224b)을 이용하여 찾고 이 비트 코드에 대응하는 메모리부(220)에 저장된 사운드 DNA 정보 속 타임 코드를 타임 코드 추출 및 검색 프로그램(224c)을 이용하여 추출하여 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 일치되는 타임 코드를 밀리세컨드(millisecond) 단위로 검색함으로써 사운드 출력부(212) 또는 디스플레이부(210)를 통해 디지털 영상 콘텐츠와 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시킨다.
제어부(200)는 디스플레이부(210), 사운드 출력부(212), 입력부(214), 마이크부(216), 통신부(218) 및 메모리부(220)를 제어하여 배리어 프리 어플리케이션 프로그램(224)을 실행하여 사운드 출력부(212) 또는 디스플레이부(210)를 통해 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시킨다.
이하에서는 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법에 관하여 도 3, 도 8 내지 도 15을 참조하여 상세히 설명한다.
도 3은 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털영상 콘텐츠 간편 시청 방법을 순차적으로 도시한 순서도, 도 8 내지 도 13는 각각 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법에 따라 사용자 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램을 실행하여 시각 장애인이 방영중인 디지털 영상 콘텐츠에 동기화된 화면 해설 콘텐츠 재생 서비스를 제공받는 방법을 순차적으로 설명한 디스플레이 실행 화면들, 그리고, 도 14 및 도 15은 각각 본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법에 따라 사용자 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램을 실행하여 청각 장애인이 방영중인 디지털 영상 콘텐츠에 동기화된 자막 콘텐츠 재생 서비스를 제공받는 방법을 순차적으로 설명한 디스플레이 실행 화면들이다.
본 발명의 한 실시예에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법은 먼저, 사용자 스마트 기기(100)에 배리어 프리 어플리케이션 프로그램(224)이 설치되어 있는지를 확인하여(S100), 미설치된 경우 배리어 프리 어플리케이션(224)을 설치(S110)하고, 기설치된 경우 배리어 프리 어플리케이션 프로그램(224)을 실행한다(S120).
어플리케이션 프로그램(224) 실행을 통해 시각 또는 청각 장애인은 무선 네트워크(110) 망을 통해 NOC 플랫폼 서버(120)에 접속하여 시각 또는 청각 장애인용 화면 해설 또는 자막 제공이 가능한 영화관이 아닌 가정이나 가게 등의 기타 장소에서 방영되는 디지털 영상 콘텐츠 리스트 정보를 도 8와 같이 확인한다(S130)
그런 다음, 디지털 영상 콘텐츠 리스트 정보를 바탕으로 시각 또는 청각 장애인이 시청하고자 하는 디지털 영상 콘텐츠를 입력부(214)를 이용하여 선택한다(S140).
그런 다음, 선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위한 보조 콘텐츠인 화면 해설 콘텐츠 또는 자막 콘텐츠 및 사운드 DNA 정보를 NOC 플랫폼 서버(120)의 자막 및 화면 해설 콘텐츠 데이터 베이스(122)로부터 사용자 스마트 기기(100)로 무선 네크워크(110) 망을 통해 도 9와 같이 다운로드 받아 메모리부(220)에 저장한다(S150).
이 후, 영화관이 아닌 가정이나 가게 등의 기타 장소에서 방영되는 선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위해 도 10과 같이 현시된 보조 콘텐츠인 화면 해설 콘텐츠 및 자막 제공 콘텐츠 중 하나의 보조 콘텐츠 서비스 이용 방법을 선택한다(S160).
그런 다음, 선택된 디지털 영상 콘텐츠의 재생 시 발생하는 현재 사운드 신호를 사용자 스마트 기기(100)의 마이크부(216)를 통해 입력받아 이를 저장된 사운드 DNA 정보와 비교 분석하고 선택된 보조 콘텐츠 서비스 이용 방법에 따라 화면 해설 콘텐츠 서비스를 선택한 경우 도 11 내지 도 13와 같이 사용자 스마트 기기(100)의 사운드 출력부(212)를 통해 동기화된 화면 해설 콘텐츠를 재생시키고 재생과 관련된 시각적 정보를 디스플레이부(210)를 통해 현시하여 화면 해설 서비스를 제공받거나, 자막 콘텐츠 서비스를 선택한 경우 도 14 및 도 15과 같이 사용자 스마트 기기(100)의 디스플레이부(210)를 통해 동기화된 자막 콘텐츠를 재생시켜 자막 서비스를 제공받는 보조 콘텐츠 재생 단계(S170)를 거친다.
상기 보조 콘텐츠 재생 단계(S170)를 좀 더 상세히 살펴보면, 먼저 상기 마이크부(216)를 통해 입력되는 영화관이 아닌 가정이나 가게 등의 기타 장소에서 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 메모리부(220)에 저장된 사운드 DNA 정보 속 비트 코드를 검색한다(S172).
검색 결과, 일치된 비트 코드가 검색되면 검색된 비트 코드에 대응하는 타임 코드를 사운드 DNA 정보로부터 추출한다(S174).
그런 다음, 추출된 타임 코드와 일치하는 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 타임 코드를 밀리세컨드(millisecond) 단위로 검색함으로써 화면 해설 콘텐츠 또는 자막 콘텐츠를 영화관이 아닌 가정이나 가게 등의 기타 장소에서 방영 중인 디지털 영상 콘텐츠와 상호 동기화한다(S176)
그런 다음, 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 선택된 보조 콘텐츠 이용 방법에 따라 방영 중인 디지털 영상 콘텐츠와 함께 시각 또는 청각 장애인의 시청을 위해 사운드 출력부(212) 또는 디스플레이부(210)를 통해 재생하게 된다(S178).
이상과 같이 본 발명에 따른 스마트 기기(100)를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면, 시각 또는 청각 장애인이 영화관이 아닌 가정이나 가게 등의 기타 장소에 구비되어 영상 및 사운드를 재생하는 디지털 영상 콘텐츠 재생 디바이스와는 별도로 본인이 소지한 휴대용 스마트 기기에 다운로드된 배리어 프리 어플리케이션 프로그램(224) 실행을 통해 현재 방영 중인 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 또는 자막 재생 서비스를 제공받아 손쉽게 시청할 수 있도록 하여 시청각 장애인의 디지털 영상 콘텐츠의 시청 접근성을 보장할 수 있는 유리한 효과가 있다.
뿐만 아니라, 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면 단일화된 NOC 플랫폼 서버(120) 및 전국민이 거의 소지하고 있는 개인용 스마트 기기(100)를 통해 전국 모든 가정 등에 구비된 TV 등의 디스플레이 장치를 통해 방영되는 디지털 영상 콘텐츠에 동기화된 화면 해설이나 자막 제공 서비스를 제공시킬 수 있으므로 정부의 장애인 차별 해소 정책에 상당 부응하고 시청각 장애인의 영상 시청 권리를 보장할 수 있을 뿐만 아니라, 화면 해설이나 자막 제공을 위한 시스템 구축이 용이하고 비용이 적게 들기 때문에 영상 미디어 분야에서 새로운 관련 산업의 성장이 가능한 상업적 수준의 유료 서비스가 가능한 새로운 비즈니스 모델이 제공될 수 있는 유리한 효과가 있다.
뿐만 아니라, 본 발명에 따른 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법에 의하면 영상 신호는 필요 없이 사운드 신호 정보만을 검색 추출하더라도 스마트 기기를 이용하여 가정 등에 구비된 TV 등의 디스플레이 장치를 통해 방영되는 영상과 음성 신호 모두를 추출하기 어려운 디지털 영상 콘텐츠에 동기화된 화면 해설이나 자막 제공 서비스를 제공할 수 있는 유리한 효과가 있다.
이상에서 본 발명의 바람직한 실시예에 대하여 상세히 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태의 공정 또한 본 발명의 권리범위에 속하는 것이다.
50 : 영상 콘텐츠 재생 디바이스
100 : 사용자 스마트 기기 110 : 네트워크
120 : NOC 플랫폼 서버
122 : 자막 및 화면 해설 콘텐츠 데이터 베이스
130 : 보조 콘텐츠 제공자 단말기200 : 제어부
210: 디스플레이부 212 : 사운드 출력부
214 : 입력부 216 : 마이크부
218 : 통신부 220 : 메모리부
224 : 어프리케이션 프로그램

Claims (7)

  1. 영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스에서 현재 방영되어 재생될 디지털 영상 콘텐츠의 영상 및 사운드 신호 중 사운드 신호의 재생 시간과 동기화되어 있는 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보가 데이터베이스로 저장되어 있으며, 어플리케이션 실행을 통해 네트워크로 접속한 사용자 스마트 기기에 화면 해설 또는 자막 제공이 가능한 디지털 영상 콘텐츠 리스트를 전송하고, 상기 사용자 스마트 기기로부터 전송되는 디지털 영상 콘텐츠 리스트 선택 정보를 확인하여 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠 및 상기 사운드 DNA 정보를 상기 사용자 스마트 기기로 전송하는 NOC 플랫폼 서버, 그리고,
    어플리케이션 실행을 통해 상기 NOC 플랫폼 서버로부터 화면 해설 또는 자막 제공이 가능한 상기 디지털 영상 콘텐츠 리스트를 전송받고, 리스트 중 선택된 상기 디지털 영상 콘텐츠의 상기 화면 해설 콘텐츠, 상기 자막 콘텐츠및 상기 사운드 DNA 정보를 전송 받아 저장하며, 선택된 화면 해설 또는 자막 재생 요청 정보에 따라 마이크부로 입력되는 방영되어 재생 중인 상기 디지털 영상 콘텐츠의 현재 사운드 신호를 저장된 상기 사운드 DNA 정보와 비교 분석하여 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생하는 사용자 스마트 기기
    를 포함하며,
    상기 사용자 스마트 기기는,
    사용자의 조작 신호를 입력받아 제어 신호를 출력하는 입력부,
    디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 선택된 자막 콘텐츠가 재생되는 디스플레이부,
    디지털 영상 콘텐츠의 리스트 정보, 화면 해설 콘텐츠 또는 자막 콘텐츠 선택 정보 및 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 선택된 화면 해설 콘텐츠가 재생되는 사운드 출력부,
    재생중인 상기 디지털 영상 콘텐츠의 사운드 신호를 입력받는 마이크부,
    무선 네트워크 망을 통하여 상기 NOC 플랫폼 서버와 데이터 통신을 수행하는 통신부,
    사용자의 조작에 의해 수동으로 또는 기지정된 디지털 영상 콘텐츠에 따라 자동으로 상기 NOC 플랫폼 서버에 접속하여 선택된 화면 해설 콘텐츠, 자막 콘텐츠 및 사운드 DNA 정보를 전송 받아 저장하며, 상기 마이크를 통해 방영되어 재생 중인 디지털 영상 콘텐츠의 현재 사운드 신호를 입력 받아 이를 사운드 DNA 정보와 비교 분석하고 상기 사운드 출력부 또는 상기 디스플레이부를 통해 재생 중인 상기 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는 어플리케이션 프로그램이 저장된 메모리부, 그리고,
    상기 입력부, 상기 디스플레이부, 상기 사운드 출력부, 상기 마이크부, 상기 통신부 및 상기 메모리부를 제어하여 상기 어플리케이션 프로그램 실행을 통해 상기 사운드 출력부 또는 디스플레이부를 통해 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는 제어부
    를 포함하며,
    상기 사운드 DNA 정보는
    영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되어 재생될 디지털 영상 콘텐츠의 재생 전구간에 걸쳐 추출되어 등록된 사운드 신호의 데이터베이스로써,
    음향 주파수 아날로그 신호를 디지털 정보로 변환환 비트 코드 및 상기 비트 코드에 대응하는 상기 디지털 영상 콘텐츠의 재생 시간에 대한 디지털 정보인 타임 코드
    를 포함하며,
    상기 어플리케이션 프로그램은
    상기 입력부 및 상기 제어부를 통해 입력되는 조작 신호에 따라 실행을 하기 위한 어플리케이션 실행 프로그램, 상기 비트 코드를 추출하고 이를 검색하여 비교 분석하기 위한 비트 코드 추출 및 검색 프로그램, 그리고, 상기 타임 코드를 추출하고 이를 검색하여 비교 분석하기 위한 타임 코드 추출 및 검색 프로그램
    을 포함하며,
    상기 마이크부를 통해 입력되는 영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스에 의해 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 상기 사운드 DNA 정보 속 비트 코드를 상기 비트 코드 추출 및 검색 프로그램을 이용하여 찾고 이 비트 코드에 대응하는 상기 사운드 DNA 정보 속 타임 코드를 상기 타임 코드 추출 및 검색 프로그램을 이용하여 추출하여 상기 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 일치되는 타임 코드를 밀리세컨트 단위로 검색함으로써 상기 사운드 출력부 또는 상기 디스플레이부를 통해 상기 디지털 영상 콘텐츠와 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시키는
    스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 사용자 스마트 기기를 이용한 어플리케이션 프로그램 실행을 통해 NOC 플랫폼 서버에 접속하여 시각 또는 청각 장애인용 화면 해설 또는 자막 제공이 가능한 영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠 리스트 정보를 확인하는 리스트 정보 확인 단계,
    상기 디지털 영상 콘텐츠 리스트 정보를 바탕으로 시각 또는 청각 장애인이 시청하고자 하는 디지털 영상 콘텐츠를 선택하는 디지털 영상 콘텐츠 선택 단계,
    상기 사용자 스마트 기기를 통해 선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위한 보조 콘텐츠인 화면 해설 콘텐츠 또는 자막 콘텐츠 및 사운드 DNA 정보를 상기 NOC 플랫폼 서버로부터 상기 사용자 스마트 기기로 다운로드 받아 저장하는 보조 콘텐츠 및 사운드 DNA 정보 다운로드 단계,
    선택된 디지털 영상 콘텐츠를 시각 또는 청각 장애인이 시청하기 위해 상기 보조 콘텐츠인 화면 해설 콘텐츠 및 자막 제공 콘텐츠 중 하나의 보조 콘텐츠 서비스 이용 방법을 선택하는 보조 콘텐츠 서비스 이용 방법 선택 단계, 그리고,
    선택된 디지털 영상 콘텐츠의 재생 시 발생하는 현재 사운드 신호를 상기 사용자 스마트 기기의 마이크부를 통해 입력받아 이를 저장된 사운드 DNA 정보와 비교 분석하고 선택된 보조 콘텐츠 서비스 이용 방법에 따라 상기 사용자 스마트 기기의 사운드 출력부 또는 디스플레이부를 통해 선택된 디지털 영상 콘텐츠의 재생 시간에 동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 재생시켜 화면 해설 서비스 또는 자막 제공 서비스를 제공하는 보조 콘텐츠 재생 단계
    를 포함하며,
    상기 사운드 DNA 정보는
    영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠의 재생 전구간에 걸쳐 추출 등록된 사운드 신호의 데이터베이스로써,
    음향 주파수 아날로그 신호를 디지털 정보로 변환환 비트 코드 및 상기 비트 코드에 대응하는 상기 디지털영상 콘텐츠의 재생 시간에 대한 디지털 정보인 타임 코드
    를 포함하며,
    상기 어플리케이션 프로그램은
    상기 사용자 스마트 기기의 입력부 및 제어부를 통해 입력되는 조작 신호에 따라 실행을 하기 위한 어플리케이션 실행 프로그램, 상기 비트 코드를 추출하고 이를 검색하여 비교 분석하기 위한 비트 코드 추출 및 검색 프로그램, 그리고, 상기 타임 코드를 추출하고 이를 검색하여 비교 분석하기 위한 타임 코드 추출 및 검색 프로그램
    을 포함하며,
    상기 보조 콘텐츠 재생 단계는,
    상기 마이크부를 통해 입력되는 영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 디지털 영상 콘텐츠의 현재 사운드 신호에 해당하는 비트 코드와 일치하는 상기 사운드 DNA 정보 속 비트 코드를 상기 비트 코드 추출 및 검색 프로그램을 이용하여 검색하는 비트 코드 검색 단계,
    일치된 비트 코드가 검색되면 검색된 비트 코드에 대응하는 상기 사운드 DNA 정보 속 타임 코드를 상기 타임 코드 추출 및 검색 프로그램을 이용하여 추출하는 단계,
    추출된 타임 코드와 일치하는 상기 화면 해설 콘텐츠 또는 자막 콘텐츠 내에 포함된 타임 코드를 상기 타임 코드 추출 및 검색 프로그램을 이용하여 밀리세컨드 단위로 검색함으로써 상기 화면 해설 콘텐츠 또는 자막 콘텐츠를 영화관이 아닌 가정 또는 가게에 구비되어 영상 및 사운드를 재생하는 TV, 모니터 또는 투사기의 디스플레이 장치인 디지털 영상 콘텐츠 재생 디바이스를 통해 방영되는 상기 디지털 영상 콘텐츠와 상호 동기화하는 단계, 그리고,
    동기화된 화면 해설 콘텐츠 또는 자막 콘텐츠를 선택된 보조 콘텐츠 이용 방법에 따라 방영 중인 상기 디지털 영상 콘텐츠와 함께 시각 또는 청각 장애인의 시청을 위해 상기 사운드 출력부 또는 상기 디스플레이부를 통해 재생하는 화면 해설 콘텐츠 또는 자막 콘텐츠 재생 단계
    를 포함하는
    스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 방법.
  6. 삭제
  7. 삭제
KR1020150009169A 2015-01-20 2015-01-20 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법 KR101619153B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150009169A KR101619153B1 (ko) 2015-01-20 2015-01-20 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150009169A KR101619153B1 (ko) 2015-01-20 2015-01-20 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법

Publications (1)

Publication Number Publication Date
KR101619153B1 true KR101619153B1 (ko) 2016-05-11

Family

ID=56026366

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150009169A KR101619153B1 (ko) 2015-01-20 2015-01-20 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR101619153B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115421395A (zh) * 2022-09-21 2022-12-02 南京创斐信息技术有限公司 一种家居智能化投影系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115421395A (zh) * 2022-09-21 2022-12-02 南京创斐信息技术有限公司 一种家居智能化投影系统

Similar Documents

Publication Publication Date Title
US9288531B2 (en) Methods and systems for compensating for disabilities when presenting a media asset
CN105898364A (zh) 一种视频播放处理方法、装置、终端及系统
KR20160132809A (ko) 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치
US8650591B2 (en) Video enabled digital devices for embedding user data in interactive applications
CN103460128A (zh) 借助智能电话和音频水印的多种语言同步电影配音
US11227620B2 (en) Information processing apparatus and information processing method
KR20200010455A (ko) 자동 음성 인식을 사용하여 생성되는 입력을 음성에 기초하여 정정하기 위한 방법 및 시스템
US20200366957A1 (en) Apparatus, systems and methods for accessing information based on an image presented on a display
US20240007722A1 (en) Systems and methods for generating supplemental content for a program content stream
JP6271194B2 (ja) 携帯デバイスへのセカンドスクリーン情報の提供方法
KR20130074922A (ko) 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 이를 구현하기 위한 시스템
CN106488305A (zh) 数字设备及其控制方法
KR20160117933A (ko) 검색을 수행하는 디스플레이 장치 및 이의 제어 방법
KR101198091B1 (ko) 학습 콘텐츠 서비스 제공 방법 및 시스템
KR20200008341A (ko) 화면을 제어하는 미디어 재생 장치, 방법 및 화면을 분석하는 서버
KR101609755B1 (ko) 스마트 기기를 이용한 시각 또는 청각 장애인의 영화관 상영 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법
KR101619153B1 (ko) 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법
KR101619150B1 (ko) 스마트 기기를 이용한 외국인의 타국어로 제작된 영화관 상영 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법
JP6212719B2 (ja) 映像受信装置、情報表示方法および映像受信システム
KR101619155B1 (ko) 스마트 기기를 이용한 외국인의 타국어로 제작된 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법
EP3955586A2 (en) Voice/manual activated and integrated audio/video multi-media, multi-interface system
KR20170063428A (ko) 프로그램 출력 장치, 프로그램 관리 서버, 보조 정보 관리 서버, 프로그램과 보조 정보의 출력 방법 및 기록 매체
JP2016144192A (ja) 盛り上がり通知システム
JP4654438B2 (ja) 教育用コンテンツ生成装置
KR101728346B1 (ko) 사용자 소통 및 진단을 위한 양방향 영상지원 시스템

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200310

Year of fee payment: 5