KR20210085171A - 디스플레이 장치 및 그 제어방법 - Google Patents

디스플레이 장치 및 그 제어방법 Download PDF

Info

Publication number
KR20210085171A
KR20210085171A KR1020190177937A KR20190177937A KR20210085171A KR 20210085171 A KR20210085171 A KR 20210085171A KR 1020190177937 A KR1020190177937 A KR 1020190177937A KR 20190177937 A KR20190177937 A KR 20190177937A KR 20210085171 A KR20210085171 A KR 20210085171A
Authority
KR
South Korea
Prior art keywords
image
user terminal
view image
signal
control unit
Prior art date
Application number
KR1020190177937A
Other languages
English (en)
Inventor
한선범
임대성
최범귀
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020190177937A priority Critical patent/KR20210085171A/ko
Priority to US17/136,814 priority patent/US11394948B2/en
Priority to PCT/KR2020/019423 priority patent/WO2021137626A1/en
Priority to EP20909864.9A priority patent/EP4007949A4/en
Publication of KR20210085171A publication Critical patent/KR20210085171A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0442—Handling or displaying different aspect ratios, or changing the aspect ratio
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 사용자의 선택에 기초하여 멀티뷰 화면의 일부?? 사용자 단말에 출력하므로서 다양한 시청 환경을 제공하고 사용자의 편의성을 증대시키는 디스플레이 장치 및 그 제어방법을 제공한다.
일 실시예에 따른 디스플레이 장치는, 디스플레이부; 사용자 단말과 통신하는 통신부; 및 복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성하고, 상기 멀티뷰 이미지가 상기 디스플레이에 표시되도록 제어하는 제어부;를 포함하고,

Description

디스플레이 장치 및 그 제어방법{DISPLAY APPARATUS AND CONTROL METHOD FOR THE SAME}
본 발명은 멀티뷰(Multi view)화면을 제공하는 디스플레이 장치 및 그 제어방법에 관련된 기술이다.
전자 기술의 발달에 힘입어, 다양한 유형의 전자 장치가 개발 및 보급되고 있다. 특히 TV의 경우 3D 컨텐츠나 보다 높은 해상도의 컨텐츠를 제공할 수 있게 되었으며, 이에 따라, 방송 기술에 있어서도 3D 컨텐츠, 멀티앵글 컨텐츠, Depth 영상을 포함하는 컨텐츠 등과 같이 다수의 영상을 포함하는 컨텐츠를 제공하고 있다.
최근의 디스플레이 장치는 UHD 급 화질의 컨텐츠를 제공하기도 한다. 또한, 디스플레이 화면의 대형화에 따라, 디스플레이 화면 전체를 분할하여 분할된 각 화면에 다양한 컨텐츠가 동시에 출력될 수 있다.
한편 이러한 화면은 디스플레이 장치 뿐만 아니라 영상 신호의 송수신을 통하여 다른 디바이스에서도 출력될 수 있다.
본 발명은 사용자의 선택에 기초하여 멀티뷰 화면의 일부?? 사용자 단말에 출력하므로서 다양한 시청 환경을 제공하고 사용자의 편의성을 증대시키는 디스플레이 장치 및 그 제어방법을 제공한다.
일 실시예에 따른 디스플레이 장치는, 디스플레이부; 사용자 단말과 통신하는 통신부; 및 복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성하고, 상기 멀티뷰 이미지가 상기 디스플레이에 표시되도록 제어하는 제어부;를 포함하고,
상기 제어부는, 상기 멀티뷰 이미지의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어하고, 상기 복수의 컨텐츠 중 적어도 하나의 컨텐츠가 선택되면, 선택된 컨텐츠에 대응되는 상기 멀티뷰 이미지 일부의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어할 수 있다.
상기 제어부는, 상기 소스 영상 신호의 화질 개선 프로세스를 수행하는 화질 제어부; 상기 적어도 일부의 멀티뷰 이미지의 해상도 및 크기를 결정하는 크기 제어부; 상기 멀티뷰 이미지의 프레임 레이트(Frame rate)를 변경하는 프레임 제어부; 및 상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 선택하는 화면 선택부;를 포함할 수 있다.
상기 화질 제어부는, 상기 소스 영상 신호의 분석에 기초한 상기 화질 개선 프로세스를 수행할 수 있다.
상기 제어부는, 상기 소스 영상 신호를 기초로 상시 멀티뷰 이미지 영상 신호를 형성하고, 상기 사용자의 명령에 기초하여 상기 멀티뷰 이미지 일부의 영상신호 또는 상시 멀티뷰 이미지 영상 신호를 상기 사용자 단말에 송신할 수 있다.
상기 제어부는, 상기 사용자 단말의 송신에 적합한 용량으로 인코딩을 수행하여 상기 멀티뷰 이미지 일부의 영상신호를 형성할 수 있다.
상기 사용자 단말은, 수신된 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말의 대응되는 신호로 디코딩을 수행하여 상기 사용자 단말에 출력할 수 있다.
상기 제어부는, 상기 사용자가 선택한 복수의 영역의 상기 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열한 이미지에 대응되는 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말에 송신할 수 있따.
상기 제어부는, 상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 변경할 수 있다.
상기 제어부는, 상기 사용자 단말에 출력되는 이미지를 포함하는 상기 멀티뷰 이미지를 형성할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 사용자 단말과 통신하고 복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성하고, 상기 멀티뷰 이미지가 디스플레이에 표시되도록 제어하고, 상기 멀티뷰 이미지의 영상신호가 상기 사용자 단말로 전송되도록 통신부를 제어하고,
상기 복수의 컨텐츠 중 적어도 하나의 컨텐츠가 선택되면,
선택된 컨텐츠에 대응되는 상기 멀티뷰 이미지 일부의 영상신호가 상기 사용자 단말로 전송되도록 통신부를 제어하는 것을 포함한다.
상기 화질 개선 프로세스를 수행하는 것은, 상기 적어도 일부의 멀티뷰 이미지의 해상도 및 크기를 결정하고, 상기 멀티뷰 이미지의 프레임 레이트(Frame rate)를 변경하는 것을 포함한다.
상기 화질 개선 프로세스를 수행하는 것은, 상기 소스 영상 신호의 분석에 기초한 상기 화질 개선 프로세스를 수행하는 것을 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 소스 영상 신호를 기초로 상시 멀티뷰 이미지 영상 신호를 형성하고, 상기 사용자의 명령에 기초하여 상기 멀티뷰 이미지 일부의 영상신호 또는 상시 멀티뷰 이미지 영상 신호를 상기 사용자 단말에 송신하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 사용자 단말의 송신에 적합한 용량으로 인코딩을 수행하여 상기 멀티뷰 이미지 일부의 영상신호를 형성하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 수신된 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말의 대응되는 신호로 디코딩을 수행하여 상기 사용자 단말에 출력하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 사용자가 선택한 복수의 영역의 상기 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열한 이미지에 대응되는 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말에 송신하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 변경하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 사용자 단말에 출력되는 이미지를 포함하는 상기 멀티뷰 이미지를 형성하는 것을 더 포함할 수 있다.
상기 통신부는, 상기 사용자 단말로부터 상기 사용자 단말에 대응되는 디스플레이 정보를 수신하고,
상기 제어부는, 상기 멀티뷰 이미지 일부의 영상신호를 상기 디스플레이 정보에 대응되도록 변환하여 상기 사용자 단말에 송신할 수 있다.
일 실시예에 따른 디스플레이 장치 제어방법은, 상기 사용자 단말로부터 상기 사용자 단말에 대응되는 디스플레이 정보를 수신하고,
상기 멀티뷰 이미지 일부의 영상신호를 상기 디스플레이 정보에 대응되도록 변환하여 상기 사용자 단말에 송신하는 것을 더 포함할 수 있다.
일 실시예에 따른 디스플레이 장치 및 그 제어방법은, 사용자의 선택에 기초하여 멀티뷰 화면의 일부?? 사용자 단말에 출력하므로서 다양한 시청 환경을 제공하고 사용자의 편의성을 증대시킬 수 있다.
도1은 일 실시예에 따른 사용자 단말과 디스플레이 장치의 관계를 나타낸 도면이다.
도2는 일 실시예에 따른 디스플레이 장치의 제어블럭도이다.
도3내지 5는 일 실시예에 따른 제어부의 세부 구성을 나타낸 도면이다.
도6은 다른 실시예에 따른 제어부의 구성을 나타낸 도면이다.
도7은 일 실시예에 따른 멀티뷰 이미지및
사용자가 멀티뷰 이미지의 일부를 선택하는 동작을 나타낸 도면이다.
도8 내지12은 일 실시예에 사용자 단말(500)의 출력 형태를 나타낸 도면이다.
도13는 일 실시예에 따른 순서도이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다.본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 '부, 모듈, 부재, 블록'이라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있으며, 실시예들에 따라 복수의 '부, 모듈, 부재, 블록'이 하나의 구성요소로 구현되거나, 하나의 '부, 모듈, 부재, 블록'이 복수의 구성요소들을 포함하는 것도 가능하다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
명세서 전체에서, 어떤 부재가 다른 부재 "상에" 위치하고 있다고 할 때, 이는 어떤 부재가 다른 부재에 접해 있는 경우뿐 아니라 두 부재 사이에 또 다른 부재가 존재하는 경우도 포함한다.
제1, 제 2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위해 사용되는 것으로, 구성요소가 전술된 용어들에 의해 제한되는 것은 아니다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
각 단계들에 있어 식별부호는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하 첨부된 도면들을 참고하여 본 발명의 작용 원리 및 실시예들에 대해 설명한다.
도1은 일 실시예에 따른 사용자 단말(500)과 디스플레이 장치의 관계를 나타낸 도면이고, 도2는 일 실시예에 따른 디스플레이 장치의 제어블럭도이다.
도1및 도2를 참고하면, 디스플레이 장치는 사용자 단말(500)과 통신할 수 있다.
구체적으로 사용자는 사용자 단말(500)을 통하여 명령을 입력하고 사용자 단말(500)은 이러한 사용자의 명령을 디스플레이 장치에 송신할 수 있다.
또한 디스플레이 장치는 디스플레이 장치 내에서 생성한 영상 신호를 사용자 단말(500)에 송신할 수 있다.
사용자 단말(500)은 수신한 영상 신호를 사용자 단말(500)에 마련된 표시부에 출력할 수 있다.
도2를 참고하면, 사용자로부터 사용자 입력을 입력 받는 사용자 입력부(180)와, 사용자 단말(500)과 통신하는 통신부(130)와, 디스플레이 장치(100)의 동작을 제어하고, 신호 수신부(120) 및/또는 통신부(130)에 의하여 수신된 비디오 신호 및/또는 오디오 신호를 처리하는 제어부(140)와, 제어부(140)에 의하여 처리된 영상을 표시하는 디스플레이부(150)와, 제어부(140)에 의하여 처리된 음향을 출력하는 음향 출력부(160)와, 디스플레이 장치(100)의 구성들에 전력을 공급하는 전력 공급부(170)를 포함한다.
안테나 모듈(110)은 정해진 주파수 대역의 특정 펄스 성분으로 구성된 신호를 송, 수신할 수 있는 레이더 칩(111)을 포함할 수 있다. 다만, 안테나 모듈은 디스플레이에 반드시 포함되는 구성은 아니며, 실시에 따라 디스플레이 장치는 안테나 모듈을 포함하지 않을 수 있다.
디스플레이 장치(100)은 안테나(112)를 통하여 영상 소스 장치(20 또는 30)의 변경에 관한 사용자 입력을 수신할 수 있다.
제어부(140)는 복수의 소스로부터 수신된 소스 영상 신호를 기초로 멀티뷰 이미지를 형성할 수 있다.
복수의 소스는 On Air, HDMI, IPTV, Cable TV 및 USB을 의미할 수 있다.
제어부는 복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성할 수 있다.
화질 개선 프로세스는 DE(Detail Enhacement), CE(Contrast Enhancement) 및 NR(Noise Reduction) 등을 포함할 수 있다. 이와 관련된 자세한 설명은 후술한다.
제어부는 멀티뷰 이미지가 디스플레이부에 표시되도록 제어할 수 있다.
제어부는 멀티뷰 이미지의 영상신호가 상기 사용자 단말로 전송되도록 통신부를 제어할 수 있다.
제어부는 복수의 컨텐츠 중 적어도 하나의 컨텐츠가 선택되면, 선택된 컨텐츠에 대응되는 멀티뷰 이미지 일부의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어할 수 있다.
선택된 컨텐츠는 멀티뷰 이미지의 일부에 대응될 수 있고, 제어부는 멀티뷰 이미지에 일부에 대응되는 컨텐츠 및 컨텐츠의 영상 신호를 사용자 단말에 송신할 수 있다.
멀티뷰(Multi view)이미지는 하나의 화면에 복수의 컨텐츠가 출력되는 이미지를 의미할 수 있다.
제어부는 사용자 명령에 의하여 선택된 멀티뷰 이미지의 일부에 대응되는 영상 신호를 사용자 단말(500)에 송신할 수 있다.
즉 사용자는 멀티뷰 이미지의 일부를 선택할 수 있고, 제어부는 선택된 부분을 크롭(crop)하여 영상 신호를 생성할 수 있다.
한편 제어부는 멀티뷰 이미지를 생성하는데 있어서 소스 영상 신호의 화질 개선을 수행할 수 있다.
한편 제어부는 소스 영상 신호의 화질 개선을 수행하는 화질 제어부(141), 적어도 일부의 멀티뷰 이미지의 해상도 및 크기를 결정하는 크기 제어부(142), 멀티뷰 이미지의 프레임 레이트(Frame rate)를 변경하는 프레임 제어부(143) 및 사용자 명령에 기초하여 멀티뷰 이미지의 일부를 선택하는 화면 선택부(144)를 포함할 수 있다.
또한 제어부는 영상 신호를 취합하는 믹서(145) 및 신호의 인코딩을 수행하는 인코더(147)를 포함할 수 있다.
화질 제어부는 화질 개선 프로세스를 수행할 수 있다.
소스 영상의 분석에 기초한 화질 개선은 DE(Detail enhancement), CE(Contrast Entrancement), NR(Noise Reduction)을 포함할 수 있다.
허나 이에 제한되지 않으며, 앞에어 언급한 화질개선 외에 다른 화질 개선도 포함될 수 있다.
또한 화질 제어부는, 소스 영상 신호의 화질 개선을 수행할 수 있다.
한편, 프레임 레이트가 향상되면 시간당 출력되는 이미지의 수가 많아져 화질을 향상 시킬 수 있다.
제어부는 소스 영상 신호를 기초로 멀티뷰 이미지 영상 신호를 형성하고 사용자의 명령에 기초하여 멀티뷰 이미지의 일부의 영상 신호 또는 상시 멀티뷰 이미지 영상 신호를 상기 사용자 단말(500)에 송신할 수 있다.
제어부는 화질 개선이 된 멀티뷰 이미지 이외에 멀티뷰 이미지 자체에 대응되는 상시 멀티뷰 영상 신호를 생성 할 수 있고, 사용자 단말(500)에 멀티뷰 이미지 영상 신호 또는 멀티뷰 이미지의 일부와 대응되는 영상 신호를 택일적으로 송신할 수 있다.
제어부는 사용자 단말(500)의 송신에 적합한 용량으로 인코딩을 수행하여 멀티뷰 이미지의 일부에 대응되는 이미지를 형성할 수 있다.
즉, 화질 개선이 된 영상 신호는 사용자 단말(500)에 최적화된 신호로 인코딩되어 사용자 단말(500)에 송신될 수 있다.
사용자 단말(500)은 인코딩 되고 수신된 영상 신호를 상기 사용자 단말(500)의 대응되는 신호로 디코딩을 수행하여 상기 사용자 단말(500)에 출력할 수 있다.
제어부는 사용자가 선택한 복수의 영역의 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열된 영상 신호를 사용자 단말(500)에 송신할 수 있다.
즉, 사용자는 멀티뷰 영상에서 복수의 영역을 선택할 수 있고 복수의 영역은 미리 결정된 배열로 배치될 수 있다. 디스플레이 장치는 이러한 정보를 모두 포함하는 영상 신호를 사용자 단말(500)에 송신할 수 있다.
제어부는 사용자 명령에 기초하여 멀티뷰 이미지의 일부를 변경할 수 있다. 사용자는 사용자 단말(500)에 출력되는 멀티뷰 이미지의 일부를 변경할 수 있다.
사용자가 멀티뷰 이미지의 일부를 변경하는데 있어서 스크롤(scroll) 및 드래그(drag)가 이용될 수 있다.
제어부(140)는 사용자 단말(500)에 출력되는 이미지를 포함하는 멀티뷰 이미지를 형성할 수 있다. 디스플레이 장치가 사용자 단말(500)과 통신하는 경우 사용자 단말(500)이 송신한 소스에 기초하여 멀티뷰 이미지의 일부에 사용자 단말(500)이 출력하는 이미지를 출력할 수 있다.
제어부는 멀티뷰 이미지 일부의 영상신호를 사용자 단말에 대응되는 디스플레이 정보에 대응되도록 변환하여 사용자 단말에 송신할 수 있다.
구체적으로 디스플레이 장치는 통신부를 통하여 사용자 단말에 대응되는 디스플레이 정보를 수신할 수 있다. 디스플레이 정보는 사용자 단말에 포함된 디스플레이의 정보이며, 디스플레이 정보는 사용자 단말 디스플레이의 해상도, 밝기 및 감마 커브 등이 포함될 수 있으나 이에 한정하지 않는다.
제어부는 영상 신호를 각 사용자 단말에 부합하도록 변환할 수 있다.
제어부가 영상 신호를 변환하는 것은 화질처리 및 영상 이미지의 사이즈 변경이 포함될 수 있다.
구체적으로 제어부는 사용자 단말에 포함된 디스플레이 장치의 해상도에 기초하여 영상 신호를 변경할 수 있다.
예를 들어 사용자 단말이 Full HD의 해상도(1920ㅧ1080)를 지원하는 기기인 경우 디스플레이 장치는 영상 신호를 Full HD의 해상도로 변환하여 사용자 단말에 송신할 수 있다.제어부(140)는 신호 수신부(120) 또는 통신부(130)에 의하여 수신된 영상 프레임 데이터 또는 비디오/오디오 신호를 처리할 수 있다.
즉 제어부는 신호 수신부와 통신부에 의해서 복수의 소스를 수신할 수 있다. 복수의 소스는 방송 신호, HDMI신호, IPTV 등을 의미할 수 있다.
예를 들어, 제어부(140)는 신호 수신부(120)로부터 수신된 영상 프레임 데이터를 디스플레이부(150)로 출력할 수 있다.또한, 제어부(140)는 신호 수신부(120) 또는 통신부(130)에 의하여 수신된 비디오/오디오 신호를 처리하고, 비디오/오디오 신호로부터 생성된 영상 프레임 데이터를 디스플레이부(150)로 출력할 수 있다.
제어부(140)는 디스플레이 장치(100)의 동작 상태 및/또는 사용자 입력에 따라 신호 수신부(120), 디스플레이부(150) 및 음향 출력부(160)의 동작을 제어할 수 있다.예를 들어, 사용자 입력에 의하여 컨텐츠 소스가 선택되면, 제어부(140)는 선택된 컨텐츠 소스로부터 영상 프레임 데이터를 수신하도록 신호 수신부(120)를 제어할 수 있다.또한, 신호 수신부(120)를 통하여 영상 프레임 데이터가 수신되지 아니하면, 제어부(140)는 다른 컨텐츠 소스로부터 영상 프레임 데이티를 수신하도록 신호 수신부(120)를 제어할 수 있다.
특히, 제어부(140)는 영상 프레임 데이터를 수신하는 소스를 선택하기 위한 선택 신호를 신호 수신부(120)의 송수신 커넥터 번들(200)으로 출력할 수 있다. 이러한 제어부(140)는 제어부(140)와, 메모리(146)를 포함할 수 있다.
메모리(146)는 영상 프레임 데이터 및/또는 비디오/오디오 신호를 처리하기 위한 프로그램 및 데이터를 저장하고, 영상 프레임 데이터 및/또는 비디오/오디오 신호를 처리하는 중에 발행하는 데이터를 임시로 기억할 수 있다.또한, 메모리(146)는 디스플레이 장치(100)에 포함된 구성들을 제어하기 위한 프로그램 및 데이터를 저장하고, 디스플레이 장치(100)에 포함된 구성들을 제어하는 중에 발행하는 데이터를 임시로 기억할 수 있다.
메모리(146)는 데이터를 장기간 저장하기 위한 롬(Read Only Memory), 플래시 메모리 등의 비휘발성 메모리와, 데이터를 일시적으로 기억하기 위한 S-램(Static Random Access Memory, S-RAM), D-램(Dynamic Random Access Memory) 등의 휘발성 메모리를 포함할 수 있다.
제어부(140)는 신호 수신부(120) 및/또는 통신부(130)로부터 영상 프레임 데이터 및/또는 비디오/오디오 신호를 수신할 수 있다.제어부(140)는 신호 수신부(120)로부터 수신된 영상 프레임 데이터를 디스플레이부(150)와 음향 출력부(160)로 출력될 수 있다.또한, 제어부(140)는 비디오 신호를 디코딩하여 영상 프레임 데이터를 생성하고, 오디오 신호를 디코딩하고 음향 데이터를 생성할 수 있으며, 영상 프레임 데이터와 음향 데이터를 각각 디스플레이부(150)와 음향 출력부(160)로 출력할 수 있다.
제어부(140)는 사용자 입력부(180)로부터 사용자 입력을 수신하고, 사용자 입력에 따라 신호 수신부(120) 및/또는 디스플레이부(150) 및/또는 음향 출력부(160)를 제어하기 위한 제어 신호를 생성할 수 있다.또한, 제어부(140)는 신호 수신부(120)를 통하여 영상 프레임 데이터가 수신되는지 여부에 따라 신호 수신부(120)의 동작을 제어하기 위한 제어 신호를 생성할 수 있다.
제어부(140)는 논리 연산 및 산술 연산 등을 수행하는 연산 회로와, 연산된 데이터를 기억하는 기억 회로 등을 포함할 수 있다.
제어부(140)는 오디오 신호로부터 디코딩된 음향 데이터를 아날로그 음향 신호로 변환할 수 있으며, 앰프(161)는 제어부(140)로부터 출력된 아날로그 음향 신호를 증폭할 수 있다.
사용자 입력부(180)는 사용자 입력을 수신하는 입력 버튼 그룹(181)를 포함할 수 있다.
예를 들어, 사용자 입력부(180)는 디스플레이 장치(100)를 턴온 또는 턴오프시키기 위한 전원 버튼, 디스플레이 장치(100)에 표시되는 방송 컨텐츠를 선택하기 위한 채널 선택 버튼, 디스플레이 장치(100)가 출력하는 음향의 볼륨을 조절하기 위한 음향 조절 버튼, 컨텐츠 소스를 선택하기 위한 소스 선택 버튼 등을 포함할 수 있다.
입력 버튼 그룹(181)는 각각 사용자 입력을 수신하고 사용자 입력에 대응하는 전기적 신호를 제어부(140)로 출력할 수 있으며, 푸시 스위치, 터치 스위치, 다이얼, 슬라이드 스위치, 토글 스위치 등 다양한 입력 수단에 의하여 구현될 수 있다.
튜너(122)는 방송 수신 안테나 또는 유선 케이블로부터 방송 신호를 수신하고, 방송 신호 중에 사용자에 의하여 선택된 채널의 방송 신호를 추출할 수 있다.예를 들어, 튜너(122)는 방송 수신 안테나 또는 유선 케이블을 통하여 수신된 복수의 방송 신호 중에 사용자에 의하여 선택된 채널에 해당하는 주파수를 가지는 방송 신호를 통과시키고, 다른 주파수를 가지는 방송 신호를 차단할 수 있다.
이처럼, 신호 수신부(120)는 송수신 커넥터 번들(200) 및/또는 튜너(122)를 통하여 영상 프레임 데이터 및/또는 비디오/오디오 신호를 수신할 수 있으며, 송수신 커넥터 번들(200) 및/또는 튜너(122)를 통하여 수신된 영상 프레임 데이터 및/또는 비디오/오디오 신호를 제어부(140)로 출력할 수 있다.
통신부(130)는 외부 장치와 데이터를 주고 받을 수 있는 유선 통신 모듈(131)과 무선 통신 모듈(132)을 포함할 수 있다.
통신부(130)는 사용자 단말(500)과 통신을 수행할 수 있다.
디스플레이 장치는 사용자 단말(500)에 영상 신호를 송신할 수 있다.
사용자 단말(500)은 네트워크를 통해 디스플레이 장치에 접속할 수 있는 컴퓨터나 휴대용 단말기로 구현될 수 있다.여기서, 컴퓨터는 예를 들어, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(desktop), 랩톱(laptop), 태블릿 PC, 슬레이트 PC 등을 포함하고, 휴대용 단말기는 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), WiBro(Wireless Broadband Internet) 단말, 스마트 폰(Smart Phone) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치와 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD) 등과 같은 웨어러블 장치를 포함할 수 있다.유선 통신 모듈(131)은 케이블을 통하여 통신망에 접속하고 통신망을 통하여 외부 장치와 데이터를 주고 받을 수 있다.예를 들어, 유선 통신 모듈(131)은 이더넷(Ethernet, IEEE 802.3 기술 표준)을 통하여 통신망에 접속하고, 통신망을 통하여 제1 및 제2 영상 소스 장치(20, 30)및/또는 외부 장치와과 데이터를 주고 받을 수 있다.
무선 통신 모듈(132)은 액세스 포인트(AP)와 무선으로 통신할 수 있으며, 액세스 포인트(AP)를 통하여 통신망에 접속하고 통신망을 통하여 제1 및 제2 영상 소스 장치(20, 30) 및/또는 외부 장치와과 데이터를 주고 받을 수 있다.예를 들어, 무선 통신 모듈(132)은 와이파이(WiFi™, IEEE 802.11 기술 표준), 블루투스 (Bluetooth™, IEEE 802.15.1 기술 표준), 지그비(ZigBee™, IEEE 802.15.4 기술 표준)을 통하여 액세스 포인트(AP)와 통신할 수 있다. 액세스 포인(AP)를 통하여 외부 장치와 데이터를 주고 받을 수 있다.
이러한 통신부(130)는 통신망을 통하여 영상 프레임 데이터를 수신할 수 있다.
디스플레이부(150)는 영상을 시각적으로 표시하는 디스플레이 패널(152)과, 디스플레이 패널(152)을 구동하는 디스플레이 드라이버(151)를 포함한다.
디스플레이 패널(152)은 디스플레이 드라이버(151)로부터 수신된 영상 데이터에 따라 영상을 생성하고, 영상을 표시할 수 있다.
디스플레이 패널(152)은 영상을 표시하는 단위가 되는 픽셀을 포함할 수 있다.각각의 픽셀은 디스플레이 드라이버(151)로부터 영상을 나타내는 전기적 신호를 수신하고, 수신된 전기적 신호에 대응하는 광학 신호를 출력할 수 있다.이처럼, 복수의 픽셀이 출력하는 광학 신호가 조합됨으로써 하나의 영상이 디스플레이 패널(152)에 표시될 수 있다.
디스플레이 드라이버(151)는 제어부(140)로부터 영상 데이터를 수신하고, 수신된 영상 데이터에 대응하는 영상을 표시하도록 디스플레이 패널(152)을 구동할 수 있다. 구체적으로, 디스플레이 드라이버(151)는 디스플레이 패널(152)을 구성하는 복수의 픽셀 각각에 영상 데이터에 대응하는 전기적 신호를 전달할 수 있다.
디스플레이 드라이버(151)가 디스플레이 패널(152)을 구성하는 각각의 픽셀에 영상 데이터에 대응하는 전기적 신호를 전달하면 각각의 픽셀은 수신된 전기적 신호에 대응하는 광을 출력하고, 각각의 픽셀이 출력하는 광들이 조합되어 하나의 영상을 형성할 수 있다.
음향 출력부(160)는 음향을 증폭하는 앰프(161)와, 증폭된 음향을 청각적으로 출력하는 스피커(162)를 포함한다.
스피커(162)는 앰프(181)에 의하여 증폭된 아날로그 음향 신호를 음향(음파)으로 변환할 수 있다.예를 들어, 스피커(182)는 전기적 음향 신호에 따라 진동하는 박막을 포함할 수 있으며, 박막의 진동에 의하여 음파가 생성될 수 있다.
스피커(162)는 컨텐츠에 포함된 소리 신호를 출력할 수 있다.
전력 공급부(170)는 사용자 입력부(180), 신호 수신부(120), 통신부(130), 제어부(140), 디스플레이부(150), 음향 출력부(160) 및 그 밖의 모든 구성들에 전력을 공급할 수 있다.
전력 공급부(170)는 스위칭 모드 파워 서플라이(Switching Mode Power Supply) (171) (이하 'SMPS'라 한다)를 포함한다.
SMPS (171)는 외부 전원의 교류 전력을 직류 전력으로 변환하는 AC-DC 컨버터와, 직류 전력의 전압을 변경하는 DC-DC 컨버터를 포함할 수 있다.예를 들어, 외부 전원의 교류 전력은 AC-DC 컨버터에 의하여 직류 전력으로 변환되며, 직류 전력의 전압은 DC-DC 컨버터에 의하여 다양한 전압(예를 들어, 5V 및/또는15V)으로 변경될 수 있다.전압이 변경되는 직류 전력을 각각 사용자 입력부(180), 신호 수신부(120), 제어부(140), 디스플레이부(150), 음향 출력부(160) 및 그 밖의 모든 구성들에 공급될 수 있다.
또한, 송수신 커넥터 번들(200)은 영상 프레임 데이터의 소스를 선택하기 위한 스위치부(230)를 포함할 수 있다.
도2에 도시된 디스플레이 장치의 구성 요소들의 성능에 대응하여 적어도 하나의 구성요소가 추가되거나 삭제될 수 있다. 또한, 구성 요소들의 상호 위치는 시스템의 성능 또는 구조에 대응하여 변경될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
한편, 도 2에서 도시된 각각의 구성요소는 소프트웨어 및/또는 Field Programmable Gate Array(FPGA) 및 주문형 반도체(ASIC, Application Specific Integrated Circuit)와 같은 하드웨어 구성요소를 의미한다.
도3내지 5는 일 실시예에 따른 제어부의 세부 구성을 나타내내 도면이다.
도3을 참고하면, 제어부는 화질 제어부(141-1, 141-2), 크기 제어부(142-1, 142-2, 142-3) 및 화면 선택부(144)를 포함할 수 있다.
제1화질 제어부(141-1)는 복수의 소스를 전달 받아 화질을 개선할 수 있다.
화질의 개선에 있어서 화질 제어부는 DE(Detail Enhacement), CE(Contrast Enhancement) 및 NR(Noise Reduction)을 수행할 수 있다.
DE(Detail Enhacement)는 소스 영상 신호를 기초로 영상의 디테일에 해당되는 부분을 개선하는 동작을 의미할 수 있다.
CE(Contrast Enhancement)는 소스 영상 신호를 기초로 영상을 분석하여 음영의 범위를 화면에 적합하게 변화시켜 이미지를 선명하게 하는 동작을 의미할 수 있다.
NR(Noise Reduction)은 영상의 공간(Temporal spatial) 특성을 분석하여 영상과 노이즈를 구분하여 노이즈를 제거하는 동작을 의미할 수 있다.
한편, 제1화질 제어부(141-1)는 텍스쳐 형성 및 딥러닝을 통한 해상도 향상 동작(Deep learning Super resolution )을 수행할 수 있다.
텍스쳐 형성(Texture creation)은 입력 영상을 분석하여 텍스쳐를 만들어 내어 저해상도 영상을 고해상도 영상처럼 출력하는 동작을 의미할 수 있다.
한편 화질 제어부에서 화질이 개선된 후 영상 신호는 제1크기 제어부(142-1)로 전달될 수 있다.
제1크기 제어부(142-1)는 화면에 출력되는 사이즈에 따라 영상 신호의 해상도 및 크기를 조절할 수 있다.
한편 제1크기 제어부(142-1)에서 해상도 및 크기를 변경한 영상 신호는 믹서(145)에서 병합될 수 있고 병합된 신호는 제1프레임 제어부(143-1)에서 프레임이 증가될 수 있다.
구체적으로 제1프레임 제어부(143-1)는 프레임 레이트 변환(Frame rate conversion) 을 수행할 수 있다.
FRC는 Frame rate를 디스플레이에 맞춰 올리고 그에 따르는 보간 프레임(interpolation frame)을 모션 예측 또는 모션 보상(motion estimation, Motion compensation)의 방법으로 생성하여 출력하는 동작을 의미할 수 있다.
제1프레임 제어부(143-1)는 이러한 동작으로 디스플레이 되는 모션 영상의 끌림 현상을 제거할 수 있다.
한편 제1프레임 제어부(143-1)는 떨림 보정을 수행할 수 있다.
떨림 보정(MJC, motion judder correction) 은 디스플레이 프레임 레이트나 입출력 전송 프레임 레이트로 변경 시 발생하는 떨림을 제거하는 동작을 의미할 수 있다.
제1프레임 제어부(143-1)는 영상 신호의 떨림을 제거하여 더욱 향상된 이미지를 생성할 수 있다.
정리하면, 소스 영상 신호는 상술한 동작을 기초로 화질이 개선된 멀티뷰 이미지를 형성할 수 있다. 멀티뷰 이미지는 화질이 개선되어 사용자의 명령에 기초하여 일부 크롭(crop)이 되어 사용자 단말(500)로 전송 될 수 있다.
또한 상술한 동작으로 형성된 멀티뷰 이미지는 디스플레이 장치의 디스플레이부(150)에 출력될 수 있다.
구체적으로 제어부에 포함된 화면 선택부(144)는 디스플레이 장치에 출력되는 화면 중 다른 기기 사용자가 보고자 하는 화면만을 크롭하고 재구성할 수 있다.
한편, 소스 신호(S3)는 상술한 화질 개선 동작을 거치지 않고 멀티뷰 이미지를 형성할 수도 있다.
구체적으로 소스 신호(S3)는 제2크기 제어부(142-2)를 거쳐 멀티뷰 이미지를 형성할 수 있다.
도4를 참고하면 화면 선택부(144)는 상술한 동작을 기초로 화질이 개선된 이미지(R41)와 화질이 개선되지 않은 멀티뷰 이미지(R42)를 모두 수신 받을 수 있다.
구체적으로 소스 신호로부터 화질 개선 동작을 수행하지 않은 영상 신호는 상시 멀티뷰 영상 신호(R42)로 형성될 수 있다.
상시 멀티뷰 영상 신호(R42)는 디스플레이 장치에 출력되는 멀티뷰 이미지와 별개로 형성되는 이미지로 디스플레이 장치에 출력되는 멀티뷰 이미지와 독립적으로 형성되는 신호를 의미할 수 있다.
도4및 도5를 참고하면, 화면 선택부가 두 개 경로로 영상 신호를 수신하면, 디스플레이 장치 시청자가 멀티뷰(V5-2)를 시청하다가 단일 채널(V5-1)로 전환하는 경우에도 디스플레이 장치는 사용자 단말(500)에 멀티뷰 이미지를 제공할 수 있다.
다시 도3을 참고하면, 화면 선택부(144)에서 선택된 영상 신호는 다시 제2프레임 제어부(142-2)로 전달 될 수 있다.
제2프레임 제어부(142-2)로 전달된 영상 신호는 사용자 단말(500)의 출력에 부합되도록 프레임 레이트를 변환할 수 있다.
또한 제2프레임 제어부(142-2)를 거친 영상 신호는 제3크기 제어부(142-3)에서 사용자 단말(500)에 부합한 해상도와 크기로 변경될 수 있다.
또한 영상 신호의 프레임 및 스케일이 변경되면, 제어부에 포함된 인코더(147)는 영상 신호를 사용자 단말(500)의 송신에 적합한 용량으로 인코딩을 수행할 수 있다.
최종적으로 형성되는 영상 신호는 무선 통신 시스템 상의 대역폭 제약이나 무선 채널 환경이 충분한 QoS(Quality of service)을 위하여 영상 신호의 데이터를 감소시킬 수 있다.
한편 이렇게 인코딩 된 영상 신호는 사용자 단말(500)에서 디코딩되어 사용자 단말(500)에서 출력될 수 있다.
한편 인코더(147)에서는 최종적으로 사용자 단말(500)에서 출력 가능한 코덱으로 인코딩되어 사용자 단말(500)에 송신될 수 있다.
한편, 도6는 다른 실시예에 따른 제어부의 구성을 나타내고 있는데 도6에 제시된 제어부의 구성은 사용자가 화면의 일부를 선택하는 것이 아닌, 디스플레이 장치에는 화면이 개선된 멀티뷰 이미지를 출력하고, 사용자 단말(500)에 송신되는 멀티뷰 이미지의 영상 신호는 별도의 경로로 사용자 단말(500)에 송신될 수 있다.
이 경우 멀티뷰 이미지의 일부가 크롭되어 사용자 단말(500)에 전달될 수 는 없지만, 디스플레이 장치는 최적화된 멀티뷰 이미지를 사용자 단말(500)에 송신할 수 있다.
도7은 일 실시예에 따른 멀티뷰 이미지 및, 일 실시예에 따른 사용자가 멀티뷰 이미지의 일부를 선택하는 동작을 나타낸 도면이다.
도7을 참고하면, 멀티뷰 이미지(V7)는 복수의 소스로부터 전달받은 영상 신호를 기초로 형성될 수 있다.
구체적으로 도7에는 방송 신호를 기초로 형성된 컨텐츠(V7-1), 인터넷에서 수신된 신호로 형성된 컨텐츠(V7-2) 및 HDMI로부터 전달 받은 영상 신호로 형성된 컨텐츠(V7-3)로 형성된 멀티뷰 이미지(V7)를 나타내고 있다.
상술한 멀티뷰 이미지는 디스플레이 장치(100)에 출력된 것을 나타내고 있으며, 따라서 화질 개선 동작이 수행된 것을 나타내고 있다.
한편 사용자는 상술한 동작을 기초로 멀티뷰 이미지와 대응되는 영상 신호를 사용자 단말(500)을 통하여 수신 받을 수 있다.
한편 사용자는 멀티뷰 이미지를 그대로 수신 받아 출력할 수 있지만, 멀티뷰 이미지에서 선택된 일부의 컨텐츠를 사용자 단말(500)에 출력할 수도 있다.
사용자가 멀티뷰 이미지(V8)의 일부(P8)를 선택한 경우, 디스플레이 장치의 제어부는 해당 부분을 멀티뷰 이미지에서 크롭한 영상 신호를 사용자 단말(500)에 송신하므로서 사용자에게 해당 영상을 제공할 수 있다.
사용자는 멀티뷰 이미지(V9)에서 복수의 영역(P9-1, P9-2)의 이미지를 선택할 수도 있다.
이 경우 디스플레이 장치의 제어부는 멀티뷰 이미지에서 해당 부분(P9-1, P9-2)을 크롭하고 재구성하여 형성된 영상 신호를 사용자 단말(500)에 송신할 수 있다.
한편 상술한 동작을 통하여 사용자 단말(500)에 송신된 영상 신호가 사용자 단말(500)에 출력된 형태는 아래에서 설명한다.
도8 내지12은 일 실시예에 사용자 단말(500)의 출력 형태를 나타낸 도면이다.
도8을 참고하면, 사용자가 멀티뷰 이미지에서 단일 영역을 선택한 경우의 모습(V10)을 나타낸 도면이다.
사용자가 멀티뷰 이미지에서 화면1을 선택한 경우 제어부는 생성된 멀티뷰 이미지 중 화면1에 대응되는 부분을 크롭 한 영상 신호를 생성하여 사용자 단말(500)에 송신할 수 있다.
한편 도9및 도10는 사용자가 멀티뷰 이미지 중 복수의 영역을 선택한 것을 나타내고 있다.
사용자는 멀티뷰 이미지 중 복수의 영역을 선택한 경우는 복수의 영역의 멀티뷰 이미지를 용자 단말에 출력할 수 있다.
한편 이러한 경우에 디스플레이 장치의 제어부는 복수의 영역의 상기 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열할 수 있다.
도9을 참고하면, 사용자가 선택한 화면1(V11-1)및 화면2(V11-2)가 가로로 배열된 것을 나타내고 있다. 디스플레이 장치는 두 화면이 선택된 경우 가로로 출력하는 어레이로 출력할 수 있다.
도10를 참고하면, 사용자가 선택한 화면 1 (V12-1)및 화면2(V12-2)가 미리 결정된 두 화면을 세로로 배치하는 어레이로 출력되는 모습을 나타낸 것이다.
즉 멀티뷰 이미지에서 복수의 영역이 선택된 경우 출력되는 형태에는 제한이 없다.
또한 도9 및 도10에서는 사용자가 멀티뷰 이미지 중 두 영역을 선택하고 두 영역이 사용자 단말(500)에 출력되는 것을 나타내었으나, 사용자가 멀티뷰 이미지에서 선택할 수 있는 영역의 제한은 없다.
한편 도11은 멀티뷰 이미지 자체(V13)가 출력되는 것을 나타내고 있다.
즉 디스플레이 장치가 생성한 멀티뷰 이미지에 대응되는 영상 신호 자체를 수신한 사용자 단말(500)은 해당 멀티뷰 이미지를 출력할 수 있다. 한편 도13과 같이 사용자 단말(500)에 멀티뷰 이미지 자체가 출력되는 경우에는 재구성된 영상 신호를 기초로 출력할 수 있고, 상시 멀티뷰 영상 신호로 출력할 수도 있다. 또한 디스플레이 자체의 출력에 기초하여 멀티뷰 이미지의 일부가 출력되는 것과 멀티뷰 이미지 자체가 출력되는 것이 변환 될 수도 있다.
한편 사용자는 해당 이미지가 사용자 단말(500)에 출력된 경우 이미지를 변경하는 명령을 입력할 수 있다.
구체적으로 사용자는 사용자 단말(500)에 출력된 영상을 드래그하거나, 마우스 등으로 스크롤하여 사용자 단말(500)에 출력되는 영상을 변경할 수 있다.
한편 상술한 동작은 본 발명의 일 실시예를 설명하기 위한 동작에 불과하며 멀티뷰 이미지를 선택하고 출력하는 본 발명의 동작에는 그 제한이 없다.
도12은 일 실시예에 따른 사용자 단말(500) 영상(P10)이 멀티뷰 이미지에 포함된 것을 나타낸 도면이다.
제어부는 사용자 단말(500)에 출력되는 이미지를 포함하는 멀티뷰 이미지를 형성할 수 있다.
구체적으로 멀티뷰 이미지의 구성 중 사용자 단말(500)에 출력되는 영상통화의 화면을 디스플레이 장치가 수신하여 미리 설정해둔 영역의 화면(P10)을 대체하여 멀티뷰 화면 중 하나로 구성할 수도 있다.
도13는 일 실시예에 따른 순서도이다.
도13를 참고하면, 디스플레이 장치는 소스 영상 신호를 수신할 수 있다(1001). 디스플레이 장치는 수신한 소스 영상 신호를 기초로 화질 개선 동작을 수행할 수 있다(1002).
디스플레이 장치는 화질 개선이 수행된 것을 기초로 멀티뷰 이미지를 형성할 수 있다(1003).
사용자가 멀티뷰 이미지 중 일부를 선택한다면(1004), 디스플레이 장치는 멀티뷰 이미지 중 일부를 크롭(1005)하여 최종 영상 신호를 형성하여 사용자 단말에 송신할 수 있다(1006).
한편 사용자가 해당 영상 중 일부를 선택 하지 않는다면, 디스플레이 장치는 멀티뷰 자체와 대응되는 영상 신호를 사용자 단말에 송신할 수 있다(1006).
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다.본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
100 : 디스플레이 장치
140 : 제어부
141 : 화질 제어부
142 : 크기 제어부
143 : 프레임 제어부
144 : 화면 선택부

Claims (20)

  1. 디스플레이;
    사용자 단말과 통신하는 통신부; 및
    복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성하고,
    상기 멀티뷰 이미지가 상기 디스플레이에 표시되도록 제어하는 제어부;를 포함하고,
    상기 제어부는,
    상기 멀티뷰 이미지의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어하고,
    상기 복수의 컨텐츠 중 적어도 하나의 컨텐츠가 선택되면,
    선택된 컨텐츠에 대응되는 상기 멀티뷰 이미지 일부의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 소스 영상 신호의 화질 개선 프로세스를 수행하는 화질 제어부;
    상기 적어도 일부의 멀티뷰 이미지의 해상도 및 크기를 결정하는 크기 제어부; 상기 멀티뷰 이미지의 프레임 레이트(Frame rate)를 변경하는 프레임 제어부; 및
    상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 선택하는 화면 선택부;를 포함하는 디스플레이 장치.
  3. 제1항에 있어서,
    상기 화질 제어부는,
    상기 소스 영상 신호의 분석에 기초한 상기 화질 개선 프로세스를 수행하는 디스플레이 장치.
  4. 제1항에 있어서,
    상기 제어부는,
    상기 소스 영상 신호를 기초로 상시 멀티뷰 이미지 영상 신호를 형성하고,
    상기 사용자의 명령에 기초하여 상기 멀티뷰 이미지 일부의 영상신호 또는 상시 멀티뷰 이미지 영상 신호를 상기 사용자 단말에 송신하는 디스플레이 장치.
  5. 제1항에 있어서,
    상기 제어부는,
    상기 사용자 단말의 송신에 적합한 용량으로 인코딩을 수행하여 상기 멀티뷰 이미지 일부의 영상신호를 형성하는 디스플레이 장치.
  6. 제5항에 있어서,
    상기 사용자 단말은,
    수신된 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말의 대응되는 신호로 디코딩을 수행하여 상기 사용자 단말에 출력하는 디스플레이 장치.
  7. 제5항에 있어서,
    상기 통신부는,
    상기 사용자 단말로부터 상기 사용자 단말에 대응되는 디스플레이 정보를 수신하고,
    상기 제어부는,
    상기 멀티뷰 이미지 일부의 영상신호를 상기 디스플레이 정보에 대응되도록 변환하여 상기 사용자 단말에 송신하는 디스플레이 장치.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 사용자가 선택한 복수의 영역의 상기 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열한 이미지에 대응되는 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말에 송신하는 디스플레이 장치.
  9. 제7항에 있어서,
    상기 제어부는,
    상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 변경하는 디스플레이 장치.
  10. 제1항에 있어서,
    상기 제어부는,
    상기 사용자 단말에 출력되는 이미지를 포함하는 상기 멀티뷰 이미지를 형성하는 디스플레이 장치.
  11. 사용자 단말과 통신하고
    복수의 소스로부터 수신된 소스 영상 신호를 기초로 화질 개선 프로세스를 수행하여 복수의 콘텐츠를 포함하는 멀티뷰 이미지를 생성하고,
    상기 멀티뷰 이미지가 디스플레이에 표시되도록 제어하고,
    상기 제어부는,
    상기 멀티뷰 이미지의 영상신호가 상기 사용자 단말로 전송되도록 상기 통신부를 제어하고,
    상기 복수의 컨텐츠 중 적어도 하나의 컨텐츠가 선택되면,
    선택된 컨텐츠에 대응되는 상기 멀티뷰 이미지 일부의 영상신호가 상기 사용자 단말로 전송되도록 통신부를 제어하는 디스플레이 장치 제어방법.
  12. 제11항에 있어서,
    상기 화질 개선 프로세스를 수행하는 것은,
    상기 적어도 일부의 멀티뷰 이미지의 해상도 및 크기를 결정하고,
    상기 멀티뷰 이미지의 프레임 레이트(Frame rate)를 변경하는 것을 포함하는 디스플레이 장치 제어방법.
  13. 제11항에 있어서,
    상기 화질 개선 프로세스를 수행하는 것은,
    상기 소스 영상 신호의 분석에 기초한 상기 화질 개선 프로세스를 수행하는 것을 포함하는 디스플레이 장치 제어방법.
  14. 제11항에 있어서,
    상기 소스 영상 신호를 기초로 상시 멀티뷰 이미지 영상 신호를 형성하고,
    상기 사용자의 명령에 기초하여 상기 멀티뷰 이미지 일부의 영상신호 또는 상시 멀티뷰 이미지 영상 신호를 상기 사용자 단말에 송신하는 것을 더 포함하는 디스플레이 장치 제어방법.
  15. 제11항에 있어서,
    상기 사용자 단말의 송신에 적합한 용량으로 인코딩을 수행하여 상기 멀티뷰 이미지 일부의 영상신호를 형성하는 것을 더 포함하는 디스플레이 장치 제어방법.
  16. 제15항에 있어서,
    수신된 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말의 대응되는 신호로 디코딩을 수행하여 상기 사용자 단말에 출력하는 것을 더 포함하는 디스플레이 장치 제어방법.
  17. 제16항에 있어서,
    상기 사용자 단말로부터 상기 사용자 단말에 대응되는 디스플레이 정보를 수신하고,
    상기 멀티뷰 이미지 일부의 영상신호를 상기 디스플레이 정보에 대응되도록 변환하여 상기 사용자 단말에 송신하는 것을 더 포함하는 디스플레이 장치 제어방법.

  18. 제11항에 있어서,
    상기 사용자가 선택한 복수의 영역의 상기 멀티뷰 이미지의 일부를 미리 결정된 어레이로 배열한 이미지에 대응되는 상기 멀티뷰 이미지 일부의 영상신호를 상기 사용자 단말에 송신하는 것을 더 포함하는 디스플레이 장치 제어방법.
  19. 제18항에 있어서,
    상기 사용자 명령에 기초하여 상기 멀티뷰 이미지의 일부를 변경하는 것을 더 포함하는 디스플레이 장치 제어방법.
  20. 제11항에 있어서,
    상기 사용자 단말에 출력되는 이미지를 포함하는 상기 멀티뷰 이미지를 형성하는 것을 더 포함하는 디스플레이 장치 제어방법.
KR1020190177937A 2019-12-30 2019-12-30 디스플레이 장치 및 그 제어방법 KR20210085171A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020190177937A KR20210085171A (ko) 2019-12-30 2019-12-30 디스플레이 장치 및 그 제어방법
US17/136,814 US11394948B2 (en) 2019-12-30 2020-12-29 Display apparatus and method of controlling the same
PCT/KR2020/019423 WO2021137626A1 (en) 2019-12-30 2020-12-30 Display apparatus and method of controlling the same
EP20909864.9A EP4007949A4 (en) 2019-12-30 2020-12-30 DISPLAY DEVICE AND METHODS OF CONTROL THEREOF

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190177937A KR20210085171A (ko) 2019-12-30 2019-12-30 디스플레이 장치 및 그 제어방법

Publications (1)

Publication Number Publication Date
KR20210085171A true KR20210085171A (ko) 2021-07-08

Family

ID=76546990

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190177937A KR20210085171A (ko) 2019-12-30 2019-12-30 디스플레이 장치 및 그 제어방법

Country Status (4)

Country Link
US (1) US11394948B2 (ko)
EP (1) EP4007949A4 (ko)
KR (1) KR20210085171A (ko)
WO (1) WO2021137626A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190311697A1 (en) * 2016-12-01 2019-10-10 Lg Electronics Inc. Image display device and image display system comprising same

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5549220B2 (ja) 2009-12-25 2014-07-16 ソニー株式会社 連携表示システム、連携表示方法およびプログラム
KR101719653B1 (ko) 2010-09-16 2017-03-24 엘지전자 주식회사 이동 단말기, 전자 시스템 및 이를 이용한 데이터 송수신 방법
US9210361B2 (en) 2012-04-24 2015-12-08 Skreens Entertainment Technologies, Inc. Video display system
KR20130137459A (ko) * 2012-06-07 2013-12-17 삼성전자주식회사 디스플레이 장치, 디스플레이 장치를 제어하기 위한 사용자 단말 및 그 제어 방법
KR101346709B1 (ko) 2013-05-14 2014-01-16 주식회사 엘지유플러스 멀티 뷰 영상 송출 서버, 멀티 뷰 영상 수신 장치 및 이들을 이용한 멀티 뷰 방송 시스템 및 방법
US10009657B2 (en) * 2014-10-01 2018-06-26 Lg Electronics Inc. Image display apparatus
KR102309315B1 (ko) 2014-10-01 2021-10-05 엘지전자 주식회사 영상표시장치, 및 그 동작방법
KR102507536B1 (ko) * 2015-10-14 2023-03-08 삼성전자주식회사 콘텐츠 정보를 제공하기 위한 방법 및 그 전자 장치
US10031774B2 (en) 2015-10-15 2018-07-24 Red Hat, Inc. Scheduling multi-phase computing jobs
EP3593536A1 (en) * 2017-03-07 2020-01-15 PCMS Holdings, Inc. Tailored video streaming for multi-device presentations

Also Published As

Publication number Publication date
US11394948B2 (en) 2022-07-19
US20210203906A1 (en) 2021-07-01
EP4007949A1 (en) 2022-06-08
EP4007949A4 (en) 2022-08-31
WO2021137626A1 (en) 2021-07-08

Similar Documents

Publication Publication Date Title
US11985386B2 (en) Remote user interface
EP3167616B1 (en) Adaptive bitrate streaming for wireless video
US9749636B2 (en) Dynamic on screen display using a compressed video stream
JP5899503B2 (ja) 描画装置及び方法
US20170223300A1 (en) Image display apparatus, method for driving the same, and computer - readable recording medium
US20180124353A1 (en) Device and method for displaying a video over a network
US11394948B2 (en) Display apparatus and method of controlling the same
US20120268495A1 (en) Apparatus and method for adjusting resolution of application in wireless terminal
US11119720B2 (en) Display device and display system
CN113475091B (zh) 显示设备及其图像显示方法
KR20210066282A (ko) 디스플레이 장치 및 그 제어방법
US9609215B2 (en) Moving-image recording/reproduction apparatus
US11837190B2 (en) Display apparatus and control method thereof
EP3703383A1 (en) Display device and sound output method
US20190007698A1 (en) Flexible frame referencing for display transport
KR102657462B1 (ko) 디스플레이장치 및 그 제어방법
KR20170133170A (ko) 동영상 제공 방법 및 시스템
JP2017021191A (ja) 電子機器及びその制御方法
US10484714B2 (en) Codec for multi-camera compression
US20140192068A1 (en) Display apparatus, image post-processing apparatus and method for image post-processing of contents
US20220066718A1 (en) Server, display device, and method for controlling same
KR20240055504A (ko) 디스플레이 장치 및 그 동작 방법
JP2022085598A (ja) 表示装置
CN117872822A (zh) 一种显示电路及数据传输方法
CN116528068A (zh) 显示设备、图像处理方法及装置

Legal Events

Date Code Title Description
A201 Request for examination