KR20230083463A - 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법 - Google Patents

디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법 Download PDF

Info

Publication number
KR20230083463A
KR20230083463A KR1020210171472A KR20210171472A KR20230083463A KR 20230083463 A KR20230083463 A KR 20230083463A KR 1020210171472 A KR1020210171472 A KR 1020210171472A KR 20210171472 A KR20210171472 A KR 20210171472A KR 20230083463 A KR20230083463 A KR 20230083463A
Authority
KR
South Korea
Prior art keywords
display device
conversation
user
party
present disclosure
Prior art date
Application number
KR1020210171472A
Other languages
English (en)
Inventor
황성준
김의준
마지연
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020210171472A priority Critical patent/KR20230083463A/ko
Priority to PCT/KR2022/012914 priority patent/WO2023101149A1/ko
Priority to US17/949,406 priority patent/US20230179550A1/en
Publication of KR20230083463A publication Critical patent/KR20230083463A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212Specific keyboard arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 개시의 다양한 실시예는, 대화 상대방의 가용 상태를 고려하여 실시간 대화 또는 비실시간 대화를 수행할 수 있는 디스플레이 장치에 관한 것이다. 이를 위한 디스플레이 장치는, 컨텐츠 신호를 수신하는 컨텐츠 수신부, 수신된 상기 컨텐츠 신호를 표시하는 스크린, 통신망을 통해 외부와 통신하는 통신 인터페이스, 하나 이상의 명령을 포함하는 메모리, 및 프로세서를 포함하며, 상기 하나 이상의 명령을 실행함으로써, 상기 프로세서는, 사용자로부터 입력된, 다른 디스플레이 장치 또는 다른 사용자와의 대화 채널 개설의 요청과, 상기 대화 채널 개설의 상대방 정보를 획득하고, 상기 상대방 정보에 기초하여 상대방 디스플레이 장치를 식별하고, 상기 상대방 디스플레이 장치 상의 대화 상대방 가용 상태를 획득하고, 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태가 실시간 대화 가능인지 실시간 대화 불가인지 정함에 따라, 상기 사용자로 하여금, 상기 상대방 디스플레이 장치 상의 대화 상대방과 실시간 대화 또는 비실시간 대화를 수행할 수 있게 할 수 있다.

Description

디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법{DISPLAY DEVICE AND METHOD FOR SUPPROTING COMMUNICATION BETWEEN DISPLAY DEVICES}
본 개시는, 디스플레이 장치들을 통한 사용자간 대화를 지원하는 방법 및 그러한 대화를 수행하는 디스플레이 장치에 관한 것이며, 보다 구체적으로는 각 디스플레이 장치 상의 대화 상대방의 가용 상태를 고려하고 디스플레이 장치의 스크린 상에 표시되는 컨텐츠에 대한 사용자 시청 경험을 저해하지 않으면서 디스플레이 장치들을 통하여 사용자 간에 적절한 대화가 이루어지도록 지원하는 방법 및 그러한 대화를 수행하는 디스플레이 장치에 관한 것이다.
각 사용자 공간에 배치된 다양한 유형의 전자 장치가 네트워크 상에 연결된 경우가 점차 늘어나고 있고, 최근에는 이러한 전자 장치들을 통해 사용자간 대화를 지원하는 다양한 방법이 시도되고 있다. 최근에는 사용자 공간의 각 전자 장치에 탑재된 음성 비서 기능(Voice Assistant)을 이용하여 댁내 서로 다른 위치의 사용자들 간 대화를 지원하는 방법이 제안된 바 있다.
디스플레이 장치 보급 확산에 따라 댁내 다양한 공간 곳곳에 개인용 또는 공용 TV 등 각종 디스플레이 장치가 설치되는 경우가 많다. 다채로운 사용자 경험의 제공을 위하여, 각 공간에 배치된 디스플레이 장치를 활용하여 사용자 간 대화를 지원할 필요가 있다. 특히, 비교적 큰 스크린을 가진 TV 등의 디스플레이 장치가 주로 고정 공간에 설치되어 사용되는 점, 또는 디스플레이 장치의 주 사용 목적이 멀티미디어 컨텐츠 소비인 점과 같은, 디스플레이 장치 관련 특유의 여러 특성들을 고려하여, 사용자가 최적의 경험을 얻을 수 있도록 하는 디스플레이 장치를 활용한 대화 지원 방안이 마련될 필요가 있다.
본 개시의 일 측면은, 디스플레이 장치간 대화를 지원함에 있어서 각 장치상의 대화 상대방의 가용 상태를 고려하여 실시간 대화 또는 비실시간 대화를 지원하는 장치 및 방법을 제공하는 것이다.
본 개시의 다른 측면은, 디스플레이 장치간 대화를 지원함에 있어서 디스플레이 장치의 스크린 상에 표시되는 컨텐츠에 대한 사용자의 시청 경험을 저해하지 않으면서 각 디스플레이 장치의 스크린 상에 대화 내용을 적절히 표시함으로써 양 장치간 대화가 이루어지도록 지원하는 장치 및 방법을 제공하는 것이다.
본 개시의 일 측면에 따르면, 디스플레이 장치는, 복수의 주파수 채널 각각에 의해 무선 전파되는 컨텐츠 신호를 수신하는 컨텐츠 수신부, 수신된 상기 컨텐츠 신호를 표시하는 스크린, 통신망을 통해 외부와 통신하는 통신 인터페이스, 하나 이상의 명령을 포함하는 메모리, 및 프로세서를 포함하며, 상기 하나 이상의 명령을 실행함으로써, 상기 프로세서는, 사용자로부터 입력된, 다른 디스플레이 장치 또는 다른 사용자와의 대화 채널 개설의 요청과, 상기 대화 채널 개설의 상대방 정보를 획득하고, 상기 상대방 정보에 기초하여 상대방 디스플레이 장치를 식별하고, 상기 상대방 디스플레이 장치 상의 대화 상대방 가용 상태를 획득하고, 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태가 실시간 대화 가능인지 실시간 대화 불가인지 정함에 따라, 상기 사용자로 하여금, 상기 상대방 디스플레이 장치 상의 대화 상대방과 실시간 대화 또는 비실시간 대화를 수행할 수 있게 할 수 있다.
본 개시의 다른 측면에 따르면, 컴퓨터에 의해 수행되는, 통신망을 통해 연결된 복수의 디스플레이 장치들 간 대화를 지원하는 방법은, 상기 복수의 디스플레이 장치들 중 제1 디스플레이 장치로부터, 미리 등록된 복수의 사람들 중 특정인 또는 상기 복수의 디스플레이 장치들 중 제2 디스플레이 장치와의 대화 채널 개설의 요청을 획득하는 동작, 상기 요청이 상기 특정인에 대한 것인 경우 상기 복수의 디스플레이 장치들 중 상기 특정인이 근처에 위치하는 장치를 검색하고, 상기 특정인이 근처에 위치하는 장치가 검색된 경우에는 해당 장치와 상기 제1 디스플레이 장치 간 실시간 대화를 지원하고, 상기 특정인이 근처에 위치하는 장치가 검색되지 않은 경우에는 상기 복수의 장치들 중 상기 특정인과 연계된 장치와 상기 제1 디스플레이 장치 간 비실시간 대화를 지원하는 동작, 및 상기 요청이 상기 제2 디스플레이 장치에 대한 것인 경우, 상기 제2 디스플레이 장치 근처에 사람이 존재하는지 판정하고, 상기 제2 디스플레이 장치 근처에 사람이 존재하는 경우에는 상기 제2 디스플레이 장치와 상기 제1 디스플레이 장치 간에 실시간 대화를 지원하고, 상기 제2 디스플레이 장치 근처에 사람이 존재하는 경우에는 상기 제2 디스플레이 장치와 상기 제1 디스플레이 장치 간에 비실시간 대화를 지원하는 동작을 포함할 수 있다.
본 개시의 다양한 실시예들에 따르면, 사용자는 각자 위치한 공간에서 가까운 디스플레이 장치의 스크린을 활용하여 다른 디스플레이 장치 상의 상대방 사용자와 대화를 진행할 수 있고, 특히 다른 디스플레이 장치 상의 상대방 사용자의 가용 상태에 따라 적절한 시기에 전달하고자 하는 메시지를 전달할 수 있다. 본 개시의 다양한 실시예들에 따르면, 사용자는 또한 디스플레이 장치의 스크린을 통해 컨텐츠를 시청하는 중에도 그러한 컨텐츠 시청 경험을 방해받지 않으면서 다른 장치 상의 상대방 사용자와 대화를 진행할 수 있고, 아울러 시청 중인 컨텐츠를 간단한 방식으로 상대방 사용자와 공유하면서 대화를 계속할 수 있다.
본 개시의 예시적 실시예들에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 아니하며, 언급되지 아니한 다른 효과들은 이하의 기재로부터 본 개시의 예시적 실시예들이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 도출되고 이해될 수 있다. 즉, 본 개시의 예시적 실시예들을 실시함에 따른 의도하지 아니한 효과들 역시 본 개시의 예시적 실시예들로부터 당해 기술분야의 통상의 지식을 가진 자에 의해 도출될 수 있다.
도 1은, 본 개시의 일 실시예에 따라, 통신망을 통해 연결된 디스플레이 장치들의 각 스크린을 이용하여, 원격지의 사용자들 간에 대화가 수행되는 예시적 상황을 보여주는 도면이다.
도 2는, 본 개시의 일 실시예에 따른, 디스플레이 장치들 간 대화를 지원하는 네트워크 환경을 개략적으로 도시한 도면이다.
도 3은, 본 개시의 일 실시예에 따른, 디스플레이 장치(300)의 기능 구성을 개략적으로 도시한 도면이다.
도 4는, 본 개시의 일 실시예에 따른, 복수의 디스플레이 장치들이 서로 간에 대화 가능하도록 연결된 댁내 디스플레이 장치 환경(400)의 일 예를 도시한 도면이다.
도 5는, 본 개시의 일부 실시예들에 따라, 도 4의 댁내 디스플레이 장치 환경(400)에서, 디스플레이 장치들(402-412) 간에 대화 채널이 개설되는 순차적 절차 흐름을 개략적으로 도시한 도면이다.
도 6은, 본 개시의 일 실시예에 따라, 음성 발화 방식으로, 디스플레이 장치 상의 사용자가 대화 채널 개설 요청 및 상대방 정보를 입력하는 상황을 예시적으로 도시한 도면이다.
도 7은, 본 개시의 일 실시예에 따라, 제스처 입력 방식으로, 디스플레이 장치 상의 사용자가 대화 채널 개설 요청 및 상대방 정보를 입력하는 상황을 예시적으로 도시한 도면이다.
도 8은, 본 개시의 일 실시예에 따라, 키 입력 방식으로, 디스플레이 장치 상의 사용자가 대화 채널 개설 요청 및 상대방 정보를 입력하는 상황을 예시적으로 도시한 도면이다.
도 9는, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서, 디스플레이 장치의 요청에 의해 해당 디스플레이 장치와 상대방 디스플레이 장치 사이에 실시간 대화가 이루어지는 경우의 예시적 절차 흐름을 도시한 도면이다.
도 10에는, 본 개시의 일 실시예에 따라, 스크린 상에 멀티미디어 컨텐츠가 표시되고 있는 중에 실시간 대화 채널이 개설된 경우, 대화 채널 개설을 요청한 디스플레이 장치의 스크린 상에, 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다.
도 11에는, 본 개시의 일 실시예에 따라, 스크린 상에 멀티미디어 컨텐츠가 표시되고 있는 중에 실시간 대화 채널이 개설된 경우, 대화 채널 개설을 요청받은 디스플레이 장치의 스크린 상에, 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다.
도 12에는, 본 개시의 일 실시예에 따라, 스크린 상에 멀티미디어 컨텐츠가 표시되지 않는 중에 실시간 대화 채널이 개설된 경우, 대화 채널 개설을 요청받은 디스플레이 장치의 스크린 상에, 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다.
도 13은, 본 개시의 일부 실시예들에 따라, 디스플레이 장치에서 사용자가 대화 메시지를 입력하는 다양한 방식들을 예시적으로 도시한 도면이다.
도 14에는, 본 개시의 일 실시예에 따라, 실시간 대화 진행 중 상대방 디스플레이 장치로부터 컨텐츠를 공유 받은 디스플레이 장치 상의 스크린 표시의 일 예가 도시되어 있다.
도 15는, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서, 디스플레이 장치의 요청에 의해 해당 디스플레이 장치와 상대방 디스플레이 장치 사이에 비실시간 대화가 이루어지는 경우의 예시적 절차 흐름을 도시한 도면이다.
도 16에는, 비실시간 대화에 따른 대화 상대방 디스플레이 장치의 스크린 상에 메시지 및/또는 컨텐츠 정보가 표시되는 예시적 상황이 도시되어 있다.
도 17은, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서 디스플레이 장치들 사이에 사생활 보호 모드 대화 채널이 개설된 경우, 대화 채널 개설 요청을 받은 디스플레이 장치의 예시적 스크린 표시를 도시한 도면이다.
도 18에는, 본 개시의 일 실시예에 따라, 다이렉트 연결이 등록된 디스플레이 장치들 간에 실시간 대화 채널이 개설되는 예시적 상황이 도시되어 있다.
이하에서는 도면을 참조하여 본 개시의 실시예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 도면의 설명과 관련하여, 동일하거나 유사한 구성요소에 대해서는 동일하거나 유사한 참조 부호가 사용될 수 있다. 또한, 도면 및 관련된 설명에서는, 잘 알려진 기능 및 구성에 대한 설명이 명확성과 간결성을 위해 생략될 수 있다.
도 1은, 본 개시의 일 실시예에 따라, 통신망을 통해 연결된 디스플레이 장치들의 각 스크린을 이용하여, 원격지의 사용자들 간에 대화가 수행되는 예시적 상황을 보여주는 도면이다. 도 1에 도시된 바에 의하면, 통신망(110)을 통해 연결된 두 개의 디스플레이 장치(120, 130) 각각의 스크린을 통해, 각 디스플레이 장치(120, 130) 상의 사용자들 간에 대화가 진행되고 있다.
본 개시의 일 실시예에 의하면, 통신망(110)은, 임의의 통신 프로토콜에 따라, 디스플레이 장치(120, 130) 간의 통신을 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신망(110)은, 예컨대 블루투스, WLAN(Wireless LAN), 지그비, 또는 Z-웨이브 등 임의의 근거리 무선 통신 프로토콜을 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신망(110)은 TCP/IP, UDP, HTTP, HTTPS, FTP, SFTP, 또는 MQTT 등 임의의 통신 프로토콜을 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신망(110)은 또한 GSM, CDMA, WCDMA, WiMAX, LTE, LTE-A, 5G, 또는 6G 등 임의의 무선 통신 프로토콜을 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신망(110)은 각 통신 프로토콜에 기초한 통신을 지원하는 복수의 통신망을 통칭하는 것일 수 있고, 디스플레이 장치(120, 130)는 하나 이상의 통신 프로토콜에 기초하여 서로 통신할 수 있다.
본 개시의 일 실시예에 의하면, 디스플레이 장치(120, 130) 각각은, 예컨대 사용자를 위한 각종 멀티미디어 컨텐츠를 유무선 방식으로 외부로부터 수신할 수 있고, 수신된 컨텐츠를 재생하여 스크린 상에 표시할 수 있는 TV를 비롯한 임의의 장치일 수 있고, 본 개시가 특정 형태의 디스플레이 장치로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(120, 130)는, 예컨대 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, Micro LED TV, LCD TV, Mini LED TV, Quantum-dot LED TV 등 다양한 유형의 TV 장치일 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(120, 130)는, 예컨대 도 3과 관련하여 후술하는 각종 기능을 구비한 장치일 수 있다.
본 개시의 일 실시예에 의하면, 디스플레이 장치(120)는, 다른 사용자와의 대화를 개시하는 대화 요청 사용자 A에 의해 이용되는 장치일 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 사용자 A는 자신의 디스플레이 장치(120)의 스크린을 이용하여 소정 멀티미디어 컨텐츠(예컨대, 지상파 방송 컨텐츠)를 시청하는 중에, 소정의 방식에 따라, 디스플레이 장치(120)를 통해 상대방 사용자 B와의 대화를 요청할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 A의 요청에 기초하여 디스플레이 장치(120)와 디스플레이 장치(130) 간에 대화 채널이 개설될 수 있고, 그러한 경우, 도 1에 도시된 바와 같이, 디스플레이 장치(120)의 스크린 상에는 사용자 A가 시청 중인 멀티미디어 컨텐츠가 계속하여 표시되는 가운데 스크린 가장자리의 일부, 예컨대 스크린 좌우 하단 일부에 대화 당사자인 사용자 A의 영상(122) 및 사용자 A로부터의 (사용자 B로 전송되는) 메시지(123)(예컨대, 스크린 좌측 하단)와, 사용자 B의 영상(124) 및 사용자 B로부터의 (사용자 A로 전송되는) 메시지(125)(예컨대, 스크린 우측 하단)가 각각 표시될 수 있다.
본 개시의 일 실시예에 의하면, 사용자 A의 영상(122) 및 사용자 B의 영상(124) 각각은 소정의 정지 영상(예컨대, 사용자 A의 프로필 사진 및 사용자 B의 프로필 사진)일 수 있다. 본 개시의 다른 실시예에 의하면, 사용자 A의 영상(122) 및 사용자 B의 영상(124) 각각은 디스플레이 장치(120) 및 디스플레이 장치(130)에서 실시간 촬영된 동영상일 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 사용자 A의 영상(122) 및 사용자 A로부터의 메시지(123)와, 사용자 B의 영상(124) 및 사용자 B로부터의 메시지(125)는, 도 1에 도시된 바와 같이, 가급적 사용자 A의 컨텐츠 시청 경험을 방해하지 않도록 디스플레이 장치(120)의 스크린 상에서 컨텐츠가 표시되는 영역의 외부 또는 가장자리 영역에 작게 배치될 수 있다.
본 개시의 일 실시예에 의하면, 디스플레이 장치(130)는, 대화 요청 사용자A로부터의 요청에 응답하여 대화를 개시하는 상대방 사용자 B에 의해 이용되는 장치일 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 사용자 B는 자신의 디스플레이 장치(130)의 근처에 위치하고 있으나 디스플레이 장치(130)의 스크린을 이용해 컨텐츠를 시청하지는 않고 있던 중에 디스플레이 장치(130)를 통해 사용자 A로부터의 대화 요청을 수신할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 A의 요청에 기초하여 디스플레이 장치(120)와 디스플레이 장치(130) 간에 대화 채널이 개설된 경우, 도 1에 도시된 바와 같이, 디스플레이 장치(130)의 스크린 중앙부에 대화 당사자인 사용자 B의 영상(132) 및 사용자 B로부터의 (사용자 A로 전송되는) 메시지(133)(예컨대, 스크린 중앙 좌측)와, 사용자 A의 영상(134) 및 사용자 A로부터의 (사용자 B로 전송되는) 메시지(135)(예컨대, 스크린 중앙 우측)가 각각 표시될 수 있다.
본 개시의 일 실시예에 의하면, 디스플레이 장치(130)의 스크린 상에 표시되는 사용자 B의 영상(132) 및 사용자 B로부터의 메시지(133)와, 사용자 A의 영상(134) 및 사용자 A로부터의 메시지(135)는, 디스플레이 장치(120)의 스크린 상에 표시되는 사용자 B의 영상(124) 및 사용자 B로부터의 메시지(125)와, 사용자 A의 영상(122) 및 사용자 A로부터의 메시지(123)에 각각 대응할 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 예컨대 디스플레이 장치(120)의 스크린 상에 표시되는 사용자 A의 영상(122) 및 사용자 B의 영상(124)이 각각 소정의 정지 영상(예컨대, 각 프로필 사진)이고, 디스플레이 장치(130)의 스크린 상에 표시되는 사용자 A의 영상(134) 및 사용자 B의 영상(132)은, 영상(122) 및 영상(124)과 달리, 디스플레이 장치(120) 및 디스플레이 장치(130)에서 실시간 촬영된 동영상일 수 있으며, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(130)의 스크린 상에 표시되는 사용자 B의 영상(132) 및 사용자 B로부터의 메시지(133)와, 사용자 A의 영상(134) 및 사용자 A로부터의 메시지(135)는, 도 1에 도시된 바와 같이, 디스플레이 장치(130)의 스크린 중앙에 크게 표시되어 사용자 B에 의한 대화 집중도를 높일 수 있다.
본 도면에서는, 디스플레이 장치(120)의 스크린 상에 멀티미디어 컨텐츠가 표시되고 디스플레이 장치(130)의 스크린 상에 멀티미디어 컨텐츠가 표시되지 않는 상태에서 양 장치를 통한 대화가 수행되는 경우가 도시되어 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 디스플레이 장치(120, 130) 각각이 스크린 상에 멀티미디어 컨텐츠를 표시하거나 둘 다 멀티미디어 컨텐츠를 표시하지 않는 상태에서 양 장치를 통한 대화가 진행될 수도 있다.
도 2는, 본 개시의 일 실시예에 따른, 디스플레이 장치들 간 대화를 지원하는 네트워크 환경을 개략적으로 도시한 도면이다. 도 2에 도시된 바에 의하면, 네트워크 환경(200)은, 외부 통신망(210)을 통해 연결된 각 댁내 네트워크망(H1, H2) 및 클라우드 서버(220)를 포함할 수 있다.
본 개시의 일 실시예에 의하면, 댁내 네트워크망(H1, H2) 각각은 홈 네트워크 허브(230)와 그에 연결된 복수의 댁내 장치들(232, 234, 236) 또는 홈 네트워크 허브(240)와 그에 연결된 복수의 댁내 장치들(242, 244, 246)을 포함할 수 있다. 본 도면에서는, 댁내 네트워크망(H1, H2) 각각의 댁내 장치들(232, 234, 236) 또는 댁내 장치들(242, 244, 246)이, 각 댁내에서 이격된 위치에 설치된 각 TV 장치인 것으로 도시되어 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다양한 실시예에 의하면, 각 댁내 네트워크망(H1, H2)에서 다양한 유형의 전자 장치들이 소정의 유무선 근거리 통신 프로토콜, 예컨대 블루투스, NFC, WLAN(Wireless LAN), 지그비, Z-웨이브 방식 또는 이더넷, HDMI, USB 방식 등에 의해 각각 홈 네트워크 허브에 연결될 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 홈 네트워크 허브(230, 240) 각각은 각 대응하는 댁내 네트워크망(H1, H2)에 연결된 댁내 장치들(232, 234, 236) 또는 댁내 장치들(242, 244, 246)을 위한 통신을 중계하는 게이트웨이 또는 서버 장치일 수 있다. 본 개시의 일 실시예에 의하면, 홈 네트워크 허브(230, 240) 각각은 각 대응하는 댁내 네트워크망(H1, H2)에 연결된 장치들(232, 234, 236) 또는 장치들(242, 244, 246) 서로 간의 대화를 지원할 수 있다. 본 개시의 일 실시예에 의하면, 홈 네트워크 허브(230)는 댁내 네트워크망(H1)에 연결된 댁내 장치들(232, 234, 236)을, 외부 통신망(210)을 통해 클라우드 서버(220)와 통신하거나 외부의 장치, 예컨대 다른 댁내 네트워크망(H2)에 연결된 댁내 장치들(242, 244, 246) 또는 외부 통신망(210)에 직접 연결된 다른 통신 장치(도시되지 않음)와 통신하도록 지원할 수 있다. 마찬가지로, 홈 네트워크 허브(240)는 댁내 네트워크망(H2)에 연결된 댁내 장치들(242, 244, 246)을, 외부 통신망(210)을 통해 클라우드 서버(220)와 통신하거나 외부의 장치, 예컨대 다른 댁내 네트워크망(H1)에 연결된 댁내 장치들(232, 234, 236) 또는 외부 통신망(210)에 직접 연결된 다른 통신 장치(도시되지 않음)와 통신하도록 지원할 수 있다.
본 도면 및 설명에서는, 댁내 장치들(232, 234, 236, 242, 244, 246) 각각이 서로 통신하거나 외부 통신망(210)을 통해 외부와 통신할 때 각 대응하는 홈 네트워크 허브(230, 240)를 통하는 경우를 중심으로 도시 및 설명되고 있으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 댁내 장치들(232, 234, 236, 242, 244, 246) 각각은 홈 네트워크 허브(230, 240)를 경유하지 않고 직접 서로 간에 통신하거나 또는 외부 통신망(210)을 통해 외부와 통신할 수 있다.
본 개시의 일 실시예에 의하면, 외부 통신망(210)은 TCP/IP, UDP, HTTP, HTTPS, FTP, SFTP, 또는 MQTT 등 임의의 통신 프로토콜을 지원할 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 외부 통신망(210)은 또한 GSM, CDMA, WCDMA, WiMAX, LTE, LTE-A, 5G, 또는 6G 등 임의의 무선 통신 프로토콜을 지원할 수 있으며, 본 개시가 특정 형태로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 클라우드 서버(220)는, 각 홈 네트워크 허브(230, 240)를 통해서나 직접 각 댁내 장치들(232, 234, 236, 242, 244, 246)로부터 정보를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 클라우드 서버(220)는, 수신된 정보에 기초하여 새로운 정보(예컨대, 소정의 제어 정보)를 생성하여 각 댁내 장치들(232, 234, 236, 242, 244, 246)로 전송할 수도 있다. 본 개시의 일 실시예에 의하면, 클라우드 서버(220)는, 예컨대 컨텐츠 제공 서버(예를 들어, IPTV 서버, OTT 서버 등)를 포함할 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 클라우드 서버(220)는, 각 댁내 장치(232, 234, 236, 242, 244, 246)로부터의 요청에 응답하여 외부 통신망(210)을 통해 소정 멀티미디어 컨텐츠를 해당 장치로 전송할 수 있다.
도 3은, 본 개시의 일 실시예에 따른, 디스플레이 장치(300)의 기능 구성을 개략적으로 도시한 도면이다. 도시된 바에 의하면, 디스플레이 장치(300)는, 입력 획득부(310), 컨텐츠 수신부(320), 신호 출력부(330), 통신부(340), 데이터베이스(350), 프로세서(360), 및 메모리(370)를 포함할 수 있다.
본 개시의 일 실시예에 의하면, 입력 획득부(310)는 사용자 또는 외부로부터의 다양한 종류의 입력 신호를 수신하고 수신된 입력 신호에 포함된 정보를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 입력 획득부(310)는 음성 획득부(312), 영상 획득부(314), 모션 정보 획득부(316), 및 키 입력 획득부(318)를 포함할 수 있다.
본 개시의 일 실시예에 의하면, 음성 획득부(312)는, 사용자의 발화 음성을 수신하고 수신된 발화 음성을 전기 신호로 변환할 수 있는, 예컨대 마이크를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 음성 획득부(312)는, 수신된 발화 음성으로부터 획득된 전기 신호를 분석하여 필요한 정보를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 음성 획득부(312)는 STT(Speech-To-Text) 모듈(도시되지 않음)을 포함할 수 있고, STT 모듈에 의해, 사용자로부터 획득된 음성 신호로부터 대응하는 텍스트 정보를 획득할 수 있다.
본 개시의 일 실시예에 의하면, 영상 획득부(314)는, 예컨대 디스플레이 장치(300)의 하우징에 배치되거나 그에 연결된 하나 이상의 카메라를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 영상 획득부(314)의 각 카메라는, 해당 카메라의 인식 범위 내의 사용자 및/또는 주변에 관한 영상 신호를 감지하고, 감지된 영상 신호로부터 필요한 정보를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 각 카메라의 인식 범위는 해당 카메라의 각도 및 주변 환경 조건에 따라 다양하게 설정될 수 있다. 본 개시의 일 실시예에 따라, 영상 획득부(314)가 복수의 카메라를 포함하는 경우, 각 카메라로부터 획득된 영상을 이용하여 3차원 이미지가 획득될 수도 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 영상 획득부(314)는, 각각의 카메라를 통해, 사용자로부터, 소정의 제스처를 포함한 영상 정보를 획득할 수 있다.
본 개시의 일 실시예에 의하면, 모션 정보 획득부(316)는, 디스플레이 장치(300)의 근처, 예컨대 주변 소정 범위의 공간에서 이루어지는 사용자의 모션 또는 제스처를 감지할 수 있는 다양한 센서를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 모션 정보 획득부(316)는, 예컨대 디스플레이 장치(300)와 사용자 간 거리를 감지하는 초음파 센서나 적외선 센서를 비롯한 다양한 유형의 모션 센서를 포함할 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 모션 정보 획득부(316)에 의해 감지되는 사용자의 모션 또는 제스처는 사용자의 얼굴, 표정, 손, 주먹, 손가락과 같은 사용자의 신체 일부분에 의한 소정 움직임을 포함할 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 키 입력 획득부(318)는, 예컨대 디스플레이 장치(300) 상에 구비된 입력 버튼(구체적으로 도시되지 않음)을 통한 사용자의 입력 또는 외부의 리모컨이나 스마트폰 앱 상에서의 키 입력을 통한 사용자로부터의 원격 입력을 수신할 수 있다.
본 개시의 일 실시예에 의하면, 음성 획득부(312)가 획득한 음성 정보, 영상 획득부(314)가 획득한 영상 정보, 모션 정보 획득부(316)가 획득한 모션 정보, 및/또는 키 입력 획득부(318)가 획득한 키 입력 정보는, 디스플레이 장치(300)의 턴 온 또는 턴 오프 제어 명령, 디스플레이 장치(300)가 컨텐츠를 수신할 소스를 선택하기 위한 제어 명령, 또는 디스플레이 장치(300)의 출력 음향의 볼륨 조절 명령을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 음성 획득부(312)가 획득한 음성 정보, 영상 획득부(314)가 획득한 영상 정보, 모션 정보 획득부(316)가 획득한 모션 정보, 및/또는 키 입력 획득부(318)가 획득한 키 입력 정보는, 다른 사용자 또는 다른 장치와의 대화 채널 개설 요청 명령, 다른 사용자로부터의 대화 채널 개설 요청에 대한 응답 명령, 또는 디스플레이 장치(300)의 스크린 상에 제시되는 선택 항목들 사이의 네비게이션 및 특정 항목의 선택을 위한 명령 등 디스플레이 장치(300)의 제어를 위한 각종 명령 정보를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 음성 획득부(312)가 획득한 음성 정보, 영상 획득부(314)가 획득한 영상 정보, 모션 정보 획득부(316)가 획득한 모션 정보, 및/또는 키 입력 획득부(318)가 획득한 키 입력 정보는, 다른 사용자 또는 다른 장치와의 대화를 위한 메시지를 포함할 수 있다.
본 개시의 일 실시예에 의하면, 컨텐츠 수신부(320)는 다양한 유무선 방식 중 임의의 방식에 따라 다양한 외부 컨텐츠 소스 장치로부터 멀티미디어 컨텐츠 데이터를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 멀티미디어 컨텐츠 데이터는, 예컨대 동영상 또는 정지 영상의 비디오 데이터 또는 음성 또는 음악의 오디오 데이터를 포함할 수 있다.
본 개시의 일 실시예에 의하면, 컨텐츠 수신부(320)는, 예컨대 공중에 방송되는 무선 전파 신호들 중에서 특정 채널(주파수)의 신호(예컨대, 방송 신호)를 튜닝함으로써 선택적으로 각 방송 컨텐츠 데이터를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 컨텐츠 수신부(320)는 다양한 종류의 영상 전송 케이블, 예컨대 컴포넌트 케이블, CVBS 케이블, HDMI 케이블, USB 케이블, 이더넷 케이블 등을 이용한 유선 방식으로 또는 Wi-Fi, 블루투스, 지그비, Z-웨이브 등의 근거리 무선 프로토콜에 따라 소정의 컨텐츠 소스 장치, 예컨대 셋탑 박스 또는 기타 외부 컨텐츠 소스 장치로부터 컨텐츠 데이터를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 컨텐츠 수신부(320)는, 예컨대 TCP/IP, UDP, HTTP, HTTPS, FTP, SFTP, MQTT, GSM, CDMA, WCDMA, WiMAX, LTE, LTE-A, 5G, 또는 6G 등 임의의 유무선 통신 프로토콜에 따라 외부의 컨텐츠 제공 서버로부터 각종 컨텐츠 데이터를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 외부의 컨텐츠 서버는, 예컨대 IPTV 서버, OTT 서버 등일 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 신호 출력부(330)는, 영상 정보 출력을 위한 디스플레이 스크린(332)과 음향 정보 출력을 위한 스피커(334)를 포함할 수 있다(이로써 제한되는 것은 아님). 본 개시의 일 실시예에 의하면, 디스플레이 스크린(332)은, LED, OLED, Micro LED, LCD, Mini LED, Quantum-dot LED 등 다양한 형태의 디스플레이 스크린일 수 있고, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 디스플레이 스크린(332)은 외부로부터 수신된 각종 멀티미디어 컨텐츠의 영상 신호를 표시할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 스크린(332)은 다른 디스플레이 장치와의 대화 채널 개설을 위하여 대화 상대방을 선택하도록 제공되는 대화 상대방(사람 및/또는 장치/장소) 후보들을 나타내는 시각적 정보 목록을 표시할 수 있고, 다른 디스플레이 장치와의 대화 동안 대화 상대방의 영상, 대화를 통해 상대방에게 제공할 메시지의 선택을 위한 후보 메시지 목록, 또는 대화를 통해 사용자로부터 상대방에게 전달되는 메시지 및 상대방으로부터 수신한 메시지 등 각종 영상 정보를 표시할 수 있다. 본 개시의 일 실시예에 의하면, 스피커(334)는 외부로부터 수신된 각종 컨텐츠로부터의 음성/음향 신호, 기타 각종 음성/음향 신호를 출력할 수 있다.
본 개시의 일 실시예에 의하면, 통신부(340)는, 디스플레이 장치(300)가 소정의 유무선 통신 프로토콜에 따라, 예컨대 도 2의 홈 네트워크 허브(230, 240) 및/또는 기타 통신망과 통신하도록 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신부(340)는, 예컨대 디스플레이 장치(300)가, 소정의 유무선 통신 프로토콜에 따라, 소정의 정보를 홈 네트워크 허브(230, 240)로 전송할 수 있게 하고, 또한 홈 네트워크 허브(230, 240)로부터의 정보를 수신하도록 지원할 수 있다. 본 개시의 일 실시예에 의하면, 통신부(340)를 통해, 디스플레이 장치(300)로부터의 대화 채널 개설 요청 및/또는 대화 메시지가 외부로 전송될 수 있고, 외부로부터 디스플레이 장치(300)에 대한 대화 채널 개설 요청 및/또는 대화 메시지가 수신될 수 있다.
본 개시의 일 실시예에 의하면, 데이터베이스(350)는 디스플레이 장치(300)에 관련된 각종 설정 정보를 저장할 수 있다. 본 개시의 일 실시예에 의하면, 데이터베이스(350)는 디스플레이 장치(300)와 댁내외 다른 디스플레이 장치 간의 대화 채널의 개설 및 대화 진행을 위하여 미리 정해진 정보를 저장할 수 있다. 본 개시의 일 실시예에 의하면, 데이터베이스(350)는 해당 디스플레이 장치(300)와 대화 채널을 개설할 수 있는 대화 상대방 후보에 관한 정보, 예컨대 해당 댁내 다른 사용자들 각각의 식별자(예컨대, 이름이나 별명) 및 영상 정보(미리 정해진 프로필 영상 및 얼굴 인식을 위한 여러 정보), 해당 댁내 다른 디스플레이 장치(또는 그 디스플레이 장치가 설치된 장소) 각각의 식별자(이름) 및 관련 영상 정보, 댁내외 대화 상대방이 될 수 있는 다른 사용자들 및/또는 장치들의 소정 식별 정보 등을 저장할 수 있다. 본 개시의 일 실시예에 의하면, 데이터베이스(350)는 해당 디스플레이 장치(300)를 디폴트 장치로 하는 사용자(예컨대, 디스플레이 장치(300)의 주 사용자)에 관한 정보를 저장할 수 있다. 본 개시의 일 실시예에 의하면, 데이터베이스(350)는, 해당 디스플레이 장치(300)와 다이렉트 연결(다이렉트 연결에 관하여는 이하 도 18을 참고하여 후술할 것임)이 등록된 대화 상대방이 있을 경우 그러한 대화 상대방 사용자 또는 장치에 관한 식별 정보를 저장할 수 있다.
본 개시의 일 실시예에 의하면, 데이터베이스(350)는 해당 디스플레이 장치(300)와 댁내외 다른 디스플레이 장치 간 대화 채널 상에서 사용자가 상대방에게 보낼 메시지로 선택할 만한 메시지 후보들을 저장할 수 있다. 본 개시의 일 실시예에 의하면, 사용자가 대화 채널 상에서 선택할 만한 메시지 후보들은, 예컨대 사용자에 의해 미리 설정된 메시지들일 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 데이터베이스(350)에 저장된, 사용자가 대화 채널 상에서 선택할 만한 메시지 후보들은, 예컨대 대화 상대방 별로 그리고/또는 대화 중에 상대방으로부터 수신된 메시지(또는 메시지에 포함된 키워드) 별로 분류된 하나 이상의 메시지들을 포함할 수 있다.
본 개시의 일 실시예에 의하면, 프로세서(360)는, 외부로부터 디스플레이 장치(300)가 획득한 정보가 무엇인지 분석 및 판정할 수 있고, 디스플레이 장치(300) 각 부의 전반적 동작을 제어할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는, 입력 획득부(310)에서 획득된 사용자 입력 정보가 무엇인지, 예를 들어 댁내외 다른 디스플레이 장치 또는 다른 사용자와의 대화 채널 개설 요청인지, 다른 사용자로부터의 대화 채널 개설 요청에 대한 응답인지, 대화를 통하여 전달하려는 메시지인지, 또는 디스플레이 장치(300)의 제어를 위한 각종 명령인지 등을 판정할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는, 통신부(340)를 통해 외부로부터 수신된 정보가 무엇인지 판정할 수 있다.
본 개시의 일 실시예에 의하면, 프로세서(360)는, 입력 획득부(310) 또는 통신부(340)에서 획득된 각 정보에 따라 디스플레이 장치(300)의 각 부의 동작을 제어할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는, 예컨대 컨텐츠 수신부(320)가 컨텐츠 데이터를 수신할 것인지 여부 및 수신할 컨텐츠 소스 장치가 무엇인지를 제어할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는, 컨텐츠 수신부(320)가 외부의 컨텐츠 소스 장치부터 수신한 컨텐츠 데이터의 영상 및/또는 음성/음향 정보를 처리하여 디스플레이 스크린(332) 및 스피커(334)를 통해 출력되도록 제어할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는, 입력 획득부(310)에서 획득된 사용자 입력 정보가, 예를 들어 댁내외 다른 디스플레이 장치 또는 다른 사용자와의 대화 채널 개설 요청, 다른 사용자로부터의 대화 채널 개설 요청에 대한 응답, 또는 대화를 통하여 전달하려는 메시지라고 판정한 경우, 그에 대응한 절차 진행, 예컨대 해당 디스플레이 장치(300)와 댁내외 다른 디스플레이 장치 간의 대화 채널 개설 및/또는 대화 진행(메시지 교환)을 위하여 디스플레이 장치(300) 내 각 부의 동작을 제어할 수 있다. 본 개시의 일 실시예에 의하면, 통신부(340)를 통해 외부로부터 디스플레이 장치(300)에 대한 대화 채널 개설 요청 및/또는 메시지를 수신한 경우, 그에 대응한 절차 진행을 위하여 디스플레이 장치(300) 내 각 부의 동작을 제어할 수 있다.
본 개시의 일 실시예에 의하면, 메모리(370)는, 프로세서(360)의 동작을 위한 프로그램 및/또는 프로세서(360)가 실행 가능한 하나 이상의 명령을 저장할 수 있다. 본 개시의 일 실시예에 의하면, 메모리(370)는 플래시 메모리 타입, 하드디스크 타입, 멀티미디어 카드 마이크로 타입, 카드 타입, RAM, SRAM, ROM, EEPROM, PROM, 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 프로세서(360)는 메모리(370)에 저장된 적어도 하나의 명령 또는 프로그램을 실행하여 디스플레이 장치(300) 상에서 수행될 수 있는 각종 동작, 예컨대 컨텐츠의 수신 및 표시 제공, 댁내외 다른 디스플레이 장치와의 대화 채널 개설 및 대화 진행 등의 다양한 동작을 수행할 수 있다.
도 4는, 본 개시의 일 실시예에 따른, 복수의 디스플레이 장치들이 서로 간에 대화 가능하도록 연결된 댁내 디스플레이 장치 환경(400)의 일 예를 도시한 도면이다. 도 4에 도시된 바에 의하면, 댁내 각 위치에 설치된 디스플레이 장치들(402-414) 각각은 서로를 대화 가능한 후보로서 미리 등록 및 저장하고 있을 수 있다.
도 4를 참조하면, 예컨대 디스플레이 장치(402)는 거실에 설치되어 "거실"이라는 장소명 식별자와 함께 각 디스플레이 장치(402-414) 상에 등록되어 있을 수 있고, 디스플레이 장치(404) 및 디스플레이 장치(406) 각각은 "Amy 방" 및 "Ann 방"이라는 장소명 식별자와 함께 각 디스플레이 장치(402-414) 상에 등록되어 있을 수 있다. 또한 디스플레이 장치(408)는 "부엌"이라는 장소명 식별자와 함께 각 디스플레이 장치(402-414) 각각에 등록되어 있을 수 있다. 마찬가지로, 디스플레이 장치(410), 디스플레이 장치(412), 및 디스플레이 장치(414) 각각은 "Adam 방", "Smith 방", 및 "Tom 방"이라는 장소명 식별자와 함께 각 디스플레이 장치(402-414) 상에 등록되어 있을 수 있다. 또한, 본 개시의 일 실시예에 의하면, 사용자 Amy, 사용자 Ann, 사용자 Adam, 사용자 Smith, 및 사용자 Tom이 댁내 디스플레이 장치 환경(400)에서 각 디스플레이 장치를 통해 서로 대화할 수 있는 사람들로서 미리 등록 및 저장되어 있을 수 있다. 본 개시의 일 실시예에 의하면, "Amy 방", "Ann 방", "Adam 방", "Smith 방", 및 "Tom 방"에 설치된 디스플레이 장치(404, 406, 410, 412, 414) 각각을 디폴트 장치로 하는 각각의 사용자로서 사용자 Amy, 사용자 Ann, 사용자 Adam, 사용자 Smith, 및 사용자 Tom이 정해져 있을 수 있다. 도 4에 도시된 바에 의하면, 현재 "Ann 방"의 디스플레이 장치(406)의 근처에는 해당 장치를 디폴트 장치로 하는 사용자 Ann이 위치하고 있다. 또한, 현재 "거실"에는 사용자 Adam 및 사용자 Smith가 디스플레이 장치(402) 근처에 위치하고 있고, "부엌"에는 사용자 Amy가 디스플레이 장치(408) 근처에 위치하고 있다.
이하, 도 5 내지 8을 참조하여, 본 개시의 일부 실시예들에 따라, 디스플레이 장치들 간에 대화 채널이 개설되는 상황에 대해 설명하기로 한다.
도 5는, 본 개시의 일부 실시예들에 따라, 도 4의 댁내 디스플레이 장치 환경(400)에서, 디스플레이 장치들(402-414) 간에 대화 채널이 개설되는 순차적 절차 흐름을 개략적으로 도시한 도면이다.
본 개시의 일 실시예에 의하면, 도시된 바와 같이, 단계(502)에서, 디스플레이 장치들(402-414) 중 소정 디스플레이 장치가 해당 장치 상의 사용자로부터 대화 채널 개설 요청 및 상대방 정보를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치의 사용자는 음성 발화, 제스처, 및 키 입력(본 개시가 이로써 제한되는 것은 아님)을 포함한 다양한 입력 방식 중 하나에 의해 대화 채널 개설 요청 및 상대방 정보를 입력할 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 디스플레이 장치(406)가 사용자 Ann으로부터 사용자 Amy를 상대방으로 하는 대화 채널 개설 요청을 획득할 수 있다. 본 개시의 다른 실시예에 의하면, 예컨대 디스플레이 장치(406)가 사용자 Ann으로부터 사용자 Tom을 상대방으로 하는 대화 채널 개설 요청을 획득할 수 있다. 본 개시의 또 다른 실시예에 의하면, 예컨대 디스플레이 장치(406)가 사용자 Ann으로부터 사용자 Adam을 상대방으로 하는 대화 채널 개설 요청을 획득할 수 있다.
이와 관련하여, 도 6 내지 8에는, 본 개시의 일부 실시예들에 따라, 디스플레이 장치(406)의 사용자 Ann이 대화 채널 개설 요청 및 상대방 정보를 입력하는 다양한 상황이 예시적으로 도시되어 있다. 예컨대, 도 6 내지 8에는, 디스플레이 장치(406)의 사용자 Ann이, 해당 디스플레이 장치(406)의 스크린을 통해 소정의 멀티미디어 방송 컨텐츠를 시청하는 중에 대화 채널 개설 요청 및 상대방 정보를 입력하는 경우가 도시되어 있는데, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 임의의 디스플레이 장치 상의 사용자가, 해당 디스플레이 장치의 디스플레이 스크린이 유휴 상태(예컨대, 디스플레이 스크린의 각 화소가 꺼진 상태)이거나 외부로부터 입력된 멀티미디어 컨텐츠가 아닌 디스플레이 장치에 저장된 소정의 고정된 표시를 제공하는 상태(예컨대, 날짜, 날씨, 시간 등 고정 정보를 제공하거나 장식용 목적의 그림이나 사진과 같은 고정 이미지를 제공하는 경우)인 중에 대화 채널 개설 요청 및 상대방 정보를 입력할 수도 있다.
먼저, 도 6을 참조하면, 사용자 Ann이 디스플레이 장치(406) 상에서, 예컨대 음성 발화에 의해 대화 채널 개설 요청 및 상대방 정보를 입력할 수 있다. 본 개시의 일 실시예에 의하면, 도 6에 도시된 바와 같이, 예컨대 음성 입력 모드를 트리거 하기 위하여 사용자 Ann은, 미리 정해진 음성 발화 입력(예를 들어, "하이 빅스비"와 같이 미리 정해진 음성 발화 정보일 수 있고, 본 개시가 이로써 제한되는 것은 아님)을 제공할 수 있다. 본 개시의 일 실시예에 의하면, 도 6에 도시된 바와 같이, 음성 입력 모드가 트리거 된 후, 사용자 Ann은 디스플레이 장치(406) 상에서 대화 채널 개설 요청 및 상대방 정보에 관한 음성 발화 입력(단지 예로서, "Amy 연결해줘!")을 제공할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는, 예컨대 해당 장치 상의 음성 획득부를 통해, 사용자로부터의 음성 발화 입력을 획득할 수 있다.
한편, 본 개시의 일 실시예에 의하면, 도 3의 디스플레이 장치(300)와 관련하여 전술한 바와 유사하게, 디스플레이 장치(406) 상에는, 디스플레이 장치(406)와의 대화의 상대방이 될 수 있는 후보들의 정보가 미리 등록 및 저장되어 있을 수 있다. 본 개시의 다양한 실시예에 의하면, 대화 상대방 후보들은, 예컨대 댁내외 가족들 및/또는 친구들을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 대화 상대방 후보들에 포함된 댁내외 가족들 및/또는 친구들 각각에 대해, 각 사람 별 식별자(예컨대, 이름이나 별명), 각 사람 별 미리 정해진 프로필 영상 및 얼굴 인식을 위한 정보, 및 각 사람 별 디폴트 장치 식별 정보(예컨대, 장치 주소 등)가 서로 연관되어 디스플레이 장치(406) 상에 미리 등록 및 저장되어 있을 수 있다. 본 개시의 다양한 실시예에 의하면, 대화 상대방 후보들은, 예컨대 댁내외 각 장소에 설치된 장치들을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 대화 상대방 후보들에 포함된 장치들 각각에 대해, 각 장치 별 영상 정보(예컨대, 장치 사진), 및 각 장치 별 식별 정보(예컨대, 장치 이름, 설치 장소 이름 및/또는 장치 주소 등)가 연관되어 디스플레이 장치(406) 상에 미리 저장되어 있을 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406) 상에는, 예컨대 대화 상대방 후보들로서 소정의 사용자들(예컨대, 사용자 Amy, 사용자 Adam, 사용자 Smith, 및 사용자 Tom를 포함할 수 있고, 이로써 제한되는 것은 아님) 및/또는 소정의 장치들(예컨대, 디스플레이 장치들(402, 404, 408-414)을 포함할 수 있고, 이로써 제한되는 것은 아님)이, 전술한 각 대응하는 정보들과 함께 미리 등록 및 저장되어 있을 수 있다.
도 6으로 돌아가서, 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는, 사용자 Ann으로부터 음성 발화 입력(단지 예로서, "Amy 연결해줘")을 획득한 후, 획득된 음성 발화 입력을 전기 신호로 변환하고 이를 다시 텍스트 정보로 변환하여, 해당 음성 발화 입력이 다른 디스플레이 장치 또는 사용자와의 대화 채널 개설 요청인지 여부를 판정할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는 또한, 획득된 음성 발화 입력으로부터 특정 사람의 식별자(예컨대, 이름이나 별명) 또는 특정 장치의 식별 정보(예컨대, 장치 이름 또는 설치 장소 이름)를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는 사용자 Ann으로부터 음성 발화 입력(단지 예로서, "Amy 연결해줘")을 획득한 후, 획득된 정보와 디스플레이 장치(406) 상에 미리 등록 및 저장된 정보의 비교에 기초하여 사용자가 원하는 대화의 상대방 정보(예컨대, 사용자 Amy)를 획득할 수 있다.
한편, 본 개시의 일 실시예에 의하면, 도 6의 경우와 달리, 도 7의 (a) 및 (b)에 도시된 바와 같이, 사용자 Ann이 디스플레이 장치(406)에서, 예컨대 제스처 입력에 의해 대화 채널 개설 요청 및 상대방 정보를 입력할 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 대화 채널 개설 요청을 위하여 사용자가 입력하는 제스처 입력은, 미리 정해진 제스처 정보(예를 들어, 손목을 소정 방향으로 소정 각도 이상 스윙)를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는, 예컨대 해당 장치 상의 영상 입력부 및/또는 모션 정보 획득부를 통해, 사용자로부터의 제스처 입력을 획득할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 Ann으로부터 소정의 제스처 입력을 획득한 디스플레이 장치(406)는, 획득된 제스처 입력을 분석하여 해당 입력이 다른 디스플레이 장치 또는 사용자와의 대화 채널 개설 요청인지 여부를 판정할 수 있다.
또한, 대화 채널 개설 요청을 위해 미리 정해진 제스처를 입력한 경우, 사용자는 대화 채널 개설 요청의 입력에 이어서 별도로 상대방 정보를 다시 입력해야 할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는 사용자 Ann으로부터 획득한 제스처 입력이 대화 채널 개설 요청이라고 판정한 경우, 도 7의 (b)에 도시된 바와 같이, 상대방 정보 획득을 위해 스크린 상에 대화 후보들을 나타내는 시각 정보 목록(702)을 제공할 수 있다. 본 도면에서는, 시각 정보 목록(702)이 각 대화 후보자의 프로필 사진(또는 관련 사진)과 각 식별자(예컨대, 이름 또는 장소명)를 포함하는 것으로 도시되어 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 상대방 정보 획득을 위해 스크린 상에 제시되는 대화 후보들을 나타나는 시각 정보 목록은, 예컨대 각 대화 후보자의 이름/별명이나 설치 장소명, 또는 각 대화 후보 장치의 관련 사진을 선택적으로 포함할 수 있다. 본 개시의 일 실시예에 의하면, 사용자는, 미리 정해진 하나 이상의 제스처 입력에 의해, 디스플레이 장치(406)의 스크린 상에 제공된 시각 정보 목록(702)을 네비게이팅하여 해당 시각 정보 목록(702) 상에서 특정 상대방(예컨대, 사용자 Amy)을 선택할 수 있고, 전술한 바와 같이 디스플레이 장치(406)의 영상 획득부 또는 모션 정보 획득부가 그 하나 이상의 제스처 입력을 획득 및 분석하여 사용자가 원하는 대화의 상대방 정보를 획득할 수 있다.
이와 달리, 본 개시의 일 실시예에 의하면, 도 8의 (a) 및 (b)에 도시된 바와 같이, 사용자 Ann이 디스플레이 장치(406)에서, 예컨대 소정의 키 입력에 의해 대화 채널 개설 요청 및 상대방 정보를 입력할 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 대화 채널 개설 요청을 트리거 하기 위한 사용자로부터의 키 입력은, 미리 정해진 것(예컨대, 특정한 전용 키 또는 키 조합의 입력 등)일 수 있다. 본 개시의 일 실시예에 의하면, 사용자 Ann은, 예컨대 리모컨 또는 스마트폰 앱을 이용하여 소정의 키 입력을 입력할 수 있고, 디스플레이 장치(406)는, 예컨대 해당 장치 상의 키 입력 획득부를 통해, 사용자로부터의 키 입력을 획득할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 Ann으로부터 소정의 키 입력을 획득한 디스플레이 장치(406)는, 획득된 키 입력을 분석하여 해당 입력이 다른 디스플레이 장치 또는 사용자와의 대화 채널 개설 요청임을 판정할 수 있다.
또한, 도 7과 관련하여 전술한 제스처 방식에 의하는 경우와 마찬가지로, 대화 채널 개설 요청을 위해 미리 정해진 키 입력을 제공한 경우, 사용자는 대화 채널 개설 요청을 입력한 후 그와 별도로 상대방 정보를 다시 입력해야 할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(406)는 사용자 Ann으로부터 획득한 키 입력이 대화 채널 개설 요청이라고 판정한 경우, 도 8의 (b)에 도시된 바와 같이, 상대방 정보 획득을 위해 스크린 상에 대화 후보들을 나타내는 시각 정보 목록(802)을 제공할 수 있다. 도 7의 (b)에서와 같이, 본 도면에서는, 시각 정보 목록(802)이 각 대화 후보자의 프로필 사진(또는 관련 사진)과 각 식별자(예컨대, 이름 또는 장소명)을 포함하는 것으로 도시되어 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 상대방 정보 획득을 위해 스크린 상에 제시되는 대화 후보들을 나타나는 시각 정보 목록은, 예컨대 각 대화 후보자의 이름/별명이나 설치 장소명, 또는 각 대화 후보 장치의 관련 사진을 선택적으로 포함할 수 있다. 본 개시의 일 실시예에 의하면, 사용자는, 미리 정해진 하나 이상의 키 입력에 의해, 디스플레이 스크린 상에 제공된 시각 정보 목록(802)을 네비게이팅하여 해당 목록(802) 상에서 특정 상대방(예컨대, 사용자 Amy)을 선택할 수 있고, 전술한 바와 같이 디스플레이 장치(406)의 키 입력 획득부가 그 하나 이상의 키 입력을 획득 및 분석하여 사용자가 원하는 대화의 상대방 정보를 획득할 수 있다.
도 5로 돌아가서, 단계(502)에서 대화 채널 개설 요청 및 상대방 정보를 획득한 후, 단계(504)에서 디스플레이 장치(예컨대, 디스플레이 장치(406))는 획득된 상대방 정보가 특정 사람에 관한 것인지 또는 특정 장치(또는 장소)에 관한 것인지 판정할 수 있다. 단계(504)에서 획득된 상대방 정보가 특정 사람에 관한 것(예컨대, 음성 발화에 의해 특정 사람의 이름이 호출된 경우, 제스처나 키 입력에 의해 목록 상에서 특정 사람에 관한 항목이 선택된 경우 등)이라고 판정된 경우, 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 단계(506)에서, 해당 디스플레이 장치와 대화 가능한 것으로 미리 등록 및 저장된 대화 후보 장치들 각각(예컨대, 도 4의 디스플레이 장치(402, 404, 408-414))을 호출하여 그 특정 사람(예컨대, 사용자 Amy)이 해당 장치 가까이에 위치하는지를 질의하고 그에 대한 회신을 수신할 수 있다.
본 개시의 일 실시예에 의하면, 예컨대 디스플레이 장치(406)로부터 호출된 디스플레이 장치들(402, 404, 408-414) 각각은, 다양한 방식에 따라 그 특정 사람(예컨대, 사용자 Amy)이 해당 장치 가까이에 위치하는지 판정하고 판정 결과를 디스플레이 장치(406)로 회신할 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 호출된 각 디스플레이 장치(402, 404, 408-414)는, 해당 디스플레이 장치 상의 영상 획득부를 통해 각각의 주변 영상을 획득하고, 획득된 주변 영상을 분석하여 해당 특정 사람(예컨대, 사용자 Amy)이 영상 중에 존재하는지 판정할 수 있고, 그러한 판정 결과를 디스플레이 장치(406)로 회신할 수 있다. 본 개시의 다른 실시예에 의하면, 예컨대 각 디스플레이 장치(402, 404, 408-414)는, 미리 정해진 근거리 통신 방식에 따라 해당 디스플레이 장치(402, 404, 408-414)로부터 소정 거리 이내에 해당 사람(예컨대, 사용자 Amy)과 연관된 통신 단말(예컨대, 스마트폰)이 존재하는지 판정할 수 있고, 그러한 판정 결과를 디스플레이 장치(406)로 회신할 수 있다.
단계(508)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 호출된 대화 후보 장치들(예컨대, 디스플레이 장치들(402, 404, 408-412)) 중 질의된 특정 사람이 해당 장치의 가까이에 위치한다고 회신한 장치가 있는지를 판정하고 그러한 경우(예컨대, 디스플레이 장치(408)가 사용자 Amy가 근처에 있다고 회신한 경우)에는 단계(510)로 진행할 수 있다. 단계(510)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))는 해당 회신 장치(예컨대, 디스플레이 장치(408))를 대화 상대방 장치로 특정하고, 요청된 대화의 타입을 실시간 대화로 결정한 후 실시간 대화 절차를 진행할 수 있다.
단계(508)에서 질의된 특정 사람이 해당 장치의 가까이에 위치한다고 회신한 장치가 없는 경우(예컨대, 단계(504)에서 획득된 상대방 정보가 사용자 Tom이고, 호출된 대화 후보 장치들(402, 404, 408-414) 중 Tom이 해당 장치 가까이에 위치한다고 회신한 장치가 없는 경우), 절차는 단계(512)로 진행하고 디스플레이 장치(406)는 그 특정 사람(예컨대, Tom)과 관련하여 미리 정해진 디폴트 장치(예컨대, 디스플레이 장치(414))를 대화 상대방 장치로 특정하고 요청된 대화의 타입을 비실시간 대화로 결정한 후 비실시간 대화 절차를 진행할 수 있다.
한편, 단계(504)에서, 획득된 상대방 정보가 특정 장치(예컨대, 도 4의 환경에서 디스플레이 장치(402))에 관한 것이라고 판정된 경우(예컨대, 음성 발화에 의해 특정 장치/장소 이름이 호출된 경우, 또는 제스처나 키 입력에 의해 목록 상에서 특정 장치/장소에 관한 항목이 선택된 경우), 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 단계(514)로 진행하여 해당 특정 장치(예컨대, 디스플레이 장치(402))를 대화 상대방 장치로 특정할 수 있다. 그런 다음, 단계(516)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 해당 대화 상대방 장치(예컨대, 디스플레이 장치(402))를 호출하여 해당 장치 근처에 사람(여기서의 사람은 특정인이 아닌, 임의의 사람일 수 있음)이 있는지 질의하고 그에 대한 응답을 수신할 수 있다.
본 개시의 일 실시예에 의하면, 예컨대 호출된 특정 디스플레이 장치(예컨대, 디스플레이 장치(402))는 다양한 방식에 따라 해당 장치 근처에 사람이 존재하는지 여부를 판정할 수 있다. 본 개시의 일 실시예에 의하면, 그 특정 디스플레이 장치는 해당 장치 상의 영상 획득부를 통해 주변 영상을 획득하고, 획득된 주변 영상을 분석하여 영상 속에 사람이 존재하는지 판정할 수 있고, 그러한 판정 결과를 디스플레이 장치(예컨대, 디스플레이 장치(406))로 회신할 수 있다. 본 개시의 다른 실시예에 의하면, 예컨대 그 특정 디스플레이 장치(예컨대, 디스플레이 장치(402))는, 해당 장치 상의 모션 입력 획득부 또는 기타 다양한 방식에 기초하여, 해당 장치 주변에 사람이 존재하는지 판정할 수 있고, 그러한 판정 결과를 디스플레이 장치(406)로 회신할 수 있다.
단계(518)에서 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 호출된 장치(예컨대, 디스플레이 장치(402))로부터의 응답이 해당 장치 가까이에 사람이 존재한다는 것인지 판정하고, 그러한 경우에는 단계(520)로 진행하여 요청된 대화의 타입을 실시간 대화로 결정한 후 실시간 대화 절차를 진행할 수 있다. 예컨대, 도 4에 도시된 환경에서, 디스플레이 장치(406)가, 거실에 설치된 디스플레이 장치(402)를 대화 상대방으로 하는 대화 채널 개설 요청을 획득하였고 거실에 설치된 디스플레이 장치(402)로부터 근처에 사람(예컨대, 사용자 Adam 및 사용자 Simith)이 존재한다는 응답을 받은 경우, 디스플레이 장치(402)와의 실시간 대화 절차를 진행할 수 있다. 단계(518)에서 호출된 장치로부터의 응답이 해당 장치 가까이에 사람이 존재하지 않는다는 것이라고 판정된 경우, 절차는 단계(522)로 진행하고 디스플레이 장치(406)는 요청된 대화의 타입을 비실시간 대화로 결정하고 비실시간 대화 절차를 진행할 수 있다.
도 9는, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))의 요청에 의해 해당 디스플레이 장치와 상대방 디스플레이 장치(예컨대, 디스플레이 장치(408)) 사이에 실시간 대화가 이루어지는 경우의 예시적 절차 흐름을 도시한 도면이다. 본 개시의 일 실시예에 따르면, 예컨대 디스플레이 장치(406)에는 사용자 Ann이 해당 장치를 디폴트 장치로 하는 사용자로서 미리 등록 및 저장되어 있을 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 따르면, 예컨대 디스플레이 장치(406)에서 획득된 대화 채널 개설 요청과 관련된 상대방 정보가 특정 사람, 즉 사용자 Amy에 관한 것일 수 있고, 도 5와 관련하여 전술한 절차에 따라 디스플레이 장치(408)가 사용자 Amy와의 대화를 위한 대화 상대방 장치로서 특정될 수 있다.
본 개시의 일 실시예에 따라, 단계(902)에서, 대화 채널 개설을 요청한 디스플레이 장치(예컨대, 디스플레이 장치(406))와, 대화 상대방 장치로 특정된 디스플레이 장치(예컨대, 디스플레이 장치(408))) 간에 실시간 대화 채널이 개설되고, 양측 디스플레이 장치(예컨대, 디스플레이 장치(406, 408))의 각 스크린 상에 양측 대화 당사자 정보 및/또는 대화 내용이 시각적으로 표시될 수 있다. 본 개시의 일 실시예에 의하면, 양측 디스플레이 장치의 각 스크린 상에 시각적으로 표시될 수 있는 대화 당사자 정보는, 해당 대화에 관련된 사람을 나타내는 시각 정보(예컨대, 각 관련된 사람의 이름이나 별명 또는 프로필 사진) 또는 해당 장치(장소)를 나타내는 시각 정보(예컨대, 해당 장치 또는 장소의 관련 사진이나 설치 장소명)를 포함할 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 양측 디스플레이 장치의 각 스크린 상에 시각적으로 표시될 수 있는 대화 내용은, 각 단계별로 사용자에 의해 입력되는 각각의 메시지 정보를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 각각의 디스플레이 장치(예컨대, 디스플레이 장치(406, 408)) 각각의 스크린 상에 각 대화 당사자 정보 및/또는 대화 내용이 시각적으로 표시되는 구체적인 위치 및 방법은, 해당 스크린을 통해 멀티미디어 컨텐츠가 표시되고 있는 중인지에 따라 달라질 수 있다.
도 10에는, 본 개시의 일 실시예에 따라, 디스플레이 장치(406)의 스크린 상에서 멀티미디어 컨텐츠가 표시되고 있는 중에 상대방 디스플레이 장치(408)와의 실시간 대화 채널이 개설된 경우, 대화 채널 개설을 요청한 디스플레이 장치(406)의 스크린 상에 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다. 본 개시의 일 실시예에 의하면, 실시간 대화 채널이 개설되는 중(예컨대 디스플레이 장치(406) 상에서 대화 채널 개설 요청이 획득된 후 상대방 장치(408)로부터 대화 채널 개설을 위한 응답이 있을 때까지), 도 10의 (a)에 도시된 바와 같이, 디스플레이 장치(406)의 스크린의 일측(예컨대, 좌측 하단 구석)에, 해당 디스플레이 장치(406) 상의 대화 당사자(예컨대, 디스플레이 장치(406)를 디폴트 장치로 하는 사용자로서 미리 등록된 사용자 Ann)의 정보(예컨대, 사용자 Ann의 프로필 사진)(1012)가 표시될 수 있다. 또한, 도 10의 (a)에 도시된 바와 같이, 디스플레이 장치(406)의 스크린의 일측(예컨대, 좌측 하단 구석)에, 디스플레이 장치(406)에서 사용자로부터 획득된 대화 메시지(1013)가 함께 표시될 수 있다. 본 도면에서는, 디스플레이 장치(406)의 스크린 상에 표시되는 대화 당사자 정보가 특정 사용자, 즉 사용자 Ann의 프로필 사진으로 도시되어 있으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 디스플레이 장치(406) 상에 표시되는 대화 당사자 정보는, 특정 사용자, 예컨대 사용자 Ann의 이름이나 별명과 같은 다른 식별 정보 또는 해당 디스플레이 장치(406)를 나타내는 시각 정보, 예컨대 디스플레이 장치(406) 또는 설치 장소의 사진이나 설치 장소명(예컨대, "Ann 방")일 수 있고, 본 개시가 특정한 경우로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 디스플레이 장치(406)와 디스플레이 장치(408) 간 실시간 대화 채널이 개설된 후(예컨대 상대방 장치(408)로부터 대화 채널 개설을 위한 응답이 있은 후), 예컨대 도 10의 (b)에 도시된 바와 같이, 디스플레이 장치(406)의 스크린의 일측(예컨대, 좌측 하단 구석)에 표시된 디스플레이 장치(406) 상의 대화 당사자 정보(예컨대, 사용자 Ann의 프로필 사진(1012)) 및 대화 메시지(1013)와 함께, 스크린의 다른 일측(예컨대, 우측 하단 구석)에 상대방 디스플레이 장치(408) 상의 대화 상대방 당사자 정보(예컨대, 사용자 Amy의 프로필 사진)(1022)와 상대방 디스플레이 장치(408) 상에서 획득된 대화 메시지(1023)가 표시될 수 있다. 본 도면에서는, 디스플레이 장치(406) 상에 표시되는 대화 상대방 당사자 정보가 사용자 Amy의 프로필 사진으로 도시되어 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 디스플레이 장치(406) 상에 표시되는 대화 상대방 당사자 정보는, 대화 상대방 사용자를 나타내는 다른 식별 정보, 예컨대 사용자 Amy의 이름이나 별명일 수 있다. 본 개시의 다른 실시예에 의하면, 예컨대 디스플레이 장치(406)에서, 해당 대화 채널 개설 요청과 관련하여 획득된 상대방 정보가, 특정 장치(또는 장소) 자체에 관한 것인 경우(즉, 획득된 상대방 정보가 디스플레이 장치(408)를 특정한 경우), 디스플레이 장치(406) 상에 표시되는 대화 상대방 당사자 정보는 디스플레이 장치(408)를 나타내는 시각 정보, 예컨대 디스플레이 장치(408) 또는 대응 설치 장소의 사진이나 설치 장소명(예를 들어, "부엌")일 수 있고, 본 개시가 특정한 경우로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 도 10의 (a) 및 (b)에 도시된 바와 같이, 디스플레이 장치(406)의 스크린 상에 멀티미디어 컨텐츠가 제공되는 중에 실시간 대화에 관한 각종 정보가 표시될 경우에는, 스크린을 통한 사용자의 멀티미디어 컨텐츠의 시청을 방해하지 않도록 스크린에 표시 중인 컨텐츠 외부 또는 그 가장자리 일부 영역에 그러한 정보가 되도록 작게 표시될 수 있다.
한편, 도 11에는, 본 개시의 일 실시예에 따라, 디스플레이 장치(408)의 스크린 상에 멀티미디어 컨텐츠가 제공되는 중에 디스플레이 장치(406)로부터의 요청에 따라 양측 디스플레이 장치 간 실시간 대화 채널이 개설된 경우, 대화 요청을 받은 디스플레이 장치(408)의 스크린 상에, 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다. 본 개시의 일 실시예에 의하면, 실시간 대화 채널이 개설되는 중, 도 11의 (a)에 도시된 바와 같이, 디스플레이 장치(408)의 스크린의 일측(예컨대, 우측 하단 구석)에, 대화 채널 개설을 요청한 디스플레이 장치(406) 상의 대화 당사자 정보(1112), 예컨대 사용자 Ann의 프로필 사진과, 디스플레이 장치(406)로부터 수신된 대화 메시지(1113)가 표시될 수 있다. 본 도면에서는, 디스플레이 장치(408)의 스크린 상에 표시되는, 디스플레이 장치(406)에 관한 대화 당사자 정보(1112)가, 도 10에 도시된 대화 채널 개설을 요청한 디스플레이 장치(406)의 스크린 좌측 하단에 해당 디스플레이 장치(406)에 관하여 표시된 정보(1012)와 동일한 것으로 도시되어 있으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 대화를 요청한 디스플레이 장치(406)의 스크린 상에는 해당 디스플레이 장치(406)에 관하여 표시된 정보로서 사용자 Ann의 프로필 사진이 표시되는 반면 대화를 요청받은 디스플레이 장치(408)의 스크린 상에는 대화를 요청한 디스플레이 장치(406)에 관한 대화 당사자 정보로서 사용자 Ann의 이름이나 별명 또는 디스플레이 장치(406)가 설치된 장소의 프로필 사진이나 설치 장소명(예컨대, "부엌")이 표시될 수 있고, 본 개시가 특정한 경우로 제한되는 것은 아니다.
본 개시의 일 실시예에 의하면, 이어서, 실시간 대화 채널이 개설된 후(예컨대 디스플레이 장치(408) 상에서 사용자 응답이 획득된 때부터), 도 11의 (b)에 도시된 바와 같이, 디스플레이 장치(408)의 스크린의 일측(예컨대, 우측 하단 구석)에 표시된 디스플레이 장치(406) 상의 대화 당사자 정보(예컨대, 사용자 Ann의 프로필 사진)(1112) 및 대화 메시지(1113)와 함께, 스크린의 다른 일측(예컨대, 좌측 하단 구석)에 해당 디스플레이 장치(408) 상의 대화 당사자 정보(예컨대, 사용자 Amy의 프로필 사진)(1122)과 디스플레이 장치(408) 상에서 획득된 대화 메시지(1123)가 표시될 수 있다. 본 도면에서는, 디스플레이 장치(408)의 스크린 상에 표시되는, 해당 디스플레이 장치(408)에 관한 대화 당사자 정보(1122)가, 도 10에 도시된 디스플레이 장치(406)의 스크린 우측 하단에 디스플레이 장치(408)에 관하여 표시된 정보(1022)와 동일한 것으로 도시되어 있으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 대화를 요청한 디스플레이 장치(406)의 스크린 상에는 디스플레이 장치(408)에 관하여 표시된 정보로서 사용자 Amy의 프로필 사진이 표시되는 반면 대화를 요청받은 디스플레이 장치(408)의 스크린 상에는 해당 디스플레이 장치(408)에 관한 대화 당사자 정보로서 사용자 Amy의 이름이나 별명 또는 디스플레이 장치(408)가 설치된 장소의 프로필 사진이나 설치 장소명(예컨대, "Amy 방")이 표시될 수 있고, 본 개시가 특정한 경우로 제한되는 것은 아니다.
도 10 및 11에는, 본 개시의 일 실시예에 따라, 디스플레이 장치(406) 및 디스플레이 장치(408) 각각의 스크린 상에 멀티미디어 컨텐츠가 제공되는 중에 양 장치간 실시간 대화 채널이 개설된 경우, 디스플레이 장치(406)와 디스플레이 장치(408) 각각의 스크린 상에서 각 멀티미디어 컨텐츠의 시청을 방해하지 않도록 스크린의 좌우 하단 구석에 해당 실시간 대화와 관련된 정보가 표시되는 것으로 도시되어 있으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 각 멀티미디어 컨텐츠의 시청을 방해하지 않는 범위에서, 디스플레이 장치(406) 및 디스플레이 장치(408) 각각의 다른 일부 영역에 그와 같은 실시간 대화와 관련된 정보가 표시될 수 있다.
한편, 도 11에 도시된 바와 달리, 도 12에는, 본 개시의 일 실시예에 따라, 디스플레이 장치(408)의 스크린 상에 멀티미디어 컨텐츠가 제공되지 않는 중에 디스플레이 장치(406)로부터의 요청에 따라 디스플레이 장치(406)와 디스플레이 장치(408) 간 실시간 대화 채널이 개설된 경우, 디스플레이 장치(408)의 스크린 상에, 실시간 대화의 양측 당사자 정보 및 각 대화 메시지가 시각적으로 표시되는 상황의 일 예가 도시되어 있다. 본 개시의 일 실시예에 의하면, 실시간 대화 채널이 개설되는 중에는, 도 12의 (a)에 도시된 바와 같이, 디스플레이 장치(408)의 스크린의 중앙부에, 디스플레이 장치(406)의 대화 당사자 정보, 예컨대, 사용자 Ann의 프로필 사진(1212)과, 디스플레이 장치(406)로부터 수신된 대화 메시지(1213)가 표시될 수 있다. 본 개시의 일 실시예에 의하면, 이어서, 실시간 대화 채널이 개설된 후, 도 12의 (b)에 도시된 바와 같이, 디스플레이 장치(408)의 스크린의 중앙부에 표시되어 있던 디스플레이 장치(406) 상의 대화 당사자 정보(예컨대, 사용자 Ann의 프로필 사진)(1212) 및 대화 메시지(1213)가 스크린 중앙부에서 약간 우측으로 이동하여 표시되는 동시에, 그 좌측에 해당 디스플레이 장치(408) 상의 대화 당사자 정보(예컨대, 사용자 Amy의 프로필 사진)(1222) 및 대화 메시지(1223)가 표시될 수 있다. 본 개시의 일 실시예에 의하면, 도 12의 (a) 및 (b)에 도시된 바와 같이, 스크린 상에 멀티미디어 컨텐츠가 제공되지 않는 중에 실시간 대화에 관한 정보를 표시할 경우에는, 사용자의 대화 집중도 향상을 위해 스크린의 중앙부에 비교적 크게 표시할 수 있다. 본 개시에서, 디스플레이 장치의 스크린 상에 멀티미디어 컨텐츠가 제공되지 않는 경우라 함은, 해당 디스플레이 장치의 디스플레이 스크린이 유휴 상태(예컨대, 디스플레이 스크린의 각 화소가 꺼진 상태)인 경우 뿐만 아니라 외부로부터 입력된 시청용 멀티미디어 컨텐츠가 아닌 디스플레이 장치에 저장된 소정의 고정된 표시를 제공하는 상태(예컨대, 날짜, 날씨, 시간 등 고정 정보를 제공하거나 장식용 목적의 그림이나 사진과 같은 고정 이미지를 제공하는 경우)를 포함할 수 있다.
도 9로 돌아와서, 단계(904)에서는, 각 디스플레이 장치에서 실시간 대화를 위하여 사용자로부터의 메시지 입력이 이루어질 수 있고, 입력된 메시지가 대화에 참여 중인 각 디스플레이 장치의 스크린 상에 순차적으로 표시될 수 있다. 본 개시의 일 실시예에 의하면, 각 디스플레이 장치에서 이루어지는 메시지 입력은, 전술한 대화 채널 개설 요청의 경우와 마찬가지로 다양한 방식, 예컨대 음성 발화, 제스처, 또는 키 입력 등에 의해 이루어질 수 있다.
도 13은, 본 개시의 일부 실시예들에 따라, 디스플레이 장치에서 사용자가 대화 메시지를 입력하는 다양한 방식들을 예시적으로 도시한 도면이다.
예를 들어, 도 13의 (a)에는 메시지 입력이 음성 발화 방식에 의하는 경우의 일 예가 도시되어 있다. 구체적으로 도시되지는 않았으나, 사용자는, 음성 입력 모드 진입을 위해, 미리 정해진 음성 발화(예를 들어, "하이 빅스비" 등과 같이 미리 정해진 음성 발화 정보일 수 있고, 본 개시가 이로써 제한되는 것은 아님)를 입력할 수 있다(이미 음성 입력 모드에 진입해 있는 상태라면, 음성 입력 모드 진입을 위한 음성 발화의 단계를 생략할 수 있음). 본 개시의 일 실시예에 의하면, 음성 입력 모드가 트리거 된 후, 사용자는 전달하고자 하는 메시지를 포함한 음성 발화를 입력할 수 있다. 본 개시의 일 실시예에 의하면, 해당 디스플레이 장치는, 음성 획득부를 통해, 사용자로부터의 음성 발화 입력을 획득할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치는 또한 획득된 음성 발화 입력을 전기 신호로 변환하고 텍스트 정보로 변환하여 해당 텍스트 정보를 상대방 디스플레이 장치로 전달할 수 있다. 이때 해당 디스플레이 장치 및 상대방 디스플레이 장치는 각각 스크린 상에 전술한 텍스트 정보, 즉 대화 메시지를 표시할 수 있다.
도 13의 (b)에는, 메시지 입력이 제스처 입력 방식에 의하는 경우의 일 예가 도시되어 있다. 본 개시의 일 실시예에 의하면, 사용자는, 메시지 입력 모드 진입을 트리거 하기 위해, 미리 정해진 소정의 제스처를 행할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치는, 해당 디스플레이 장치의 영상 획득부 및/또는 모션 정보 획득부를 통해, 사용자로부터의 제스처 입력을 획득할 수 있고, 획득된 입력을 분석함으로써 해당 제스처 입력이 메시지 입력 모드 진입을 트리거 하기 위한 제스처인지 여부를 판정할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치는, 사용자로부터 입력된 제스처가 메시지 입력 모드 진입을 위한 것이라고 판정한 경우, 도 13의 (b)에 도시된 바와 같이, 해당 디스플레이 장치의 스크린 상에 사용자가 선택할 만한 메시지 후보 항목들을 나타내는 메시지 목록(1302)을 표시할 수 있다. 본 개시의 일 실시예에 의하면, 메시지 후보 항목들은, 해당 메시지를 입력하는 사용자가 자주 사용하는 메시지, 해당 메시지를 전달받을 상대방 사용자에게 자주 사용하는 메시지, 이전 단계에서 해당 사용자가 상대방 사용자로부터 수신한 메시지에 대한 응답으로 자주 사용되는 메시지 등 다양한 기준을 고려하여 미리 준비된 메시지들일 수 있다. 본 개시의 일 실시예에 의하면, 사용자는, 미리 정해진 하나 이상의 제스처 입력에 의해, 스크린 상에 표시된 목록(1302)을 네비게이팅하여 해당 목록(1302) 상에서 특정 메시지를 선택할 수 있고, 선택된 메시지가 상대방 디스플레이 장치로 전달될 수 있다. 이때 해당 디스플레이 장치 및 상대방 디스플레이 장치는 각각 스크린 상에 그 선택된 대화 메시지를 표시할 수 있다.
도 13의 (c)에는, 메시지 입력이 키 입력 방식에 의하는 경우의 일 예가 도시되어 있다. 본 개시의 일 실시예에 의하면, 사용자는, 메시지 입력 모드 진입을 트리거 하기 위해, 미리 정해진 소정의 키 입력을 행할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치는, 해당 디스플레이 장치의 키 입력 획득부를 통해, 사용자로부터의 소정의 키 입력을 획득할 수 있고, 획득된 입력을 분석함으로써 해당 키 입력이 메시지 입력 모드 진입을 트리거 하기 위한 키 입력인지 여부를 판정할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치는, 사용자로부터 입력된 키 입력이 메시지 입력 모드 진입을 위한 것이라고 판정한 경우, 도 13의 (c)에 도시된 바와 같이, 해당 디스플레이 장치의 스크린 상에 사용자가 선택할 만한 메시지 후보 항목들을 나타내는 메시지 목록(1304)을 표시할 수 있다. 본 개시의 일 실시예에 의하면, 이와 같이 키 입력에 의해 메시지 입력 모드에 진입한 경우 디스플레이 장치의 스크린 상에 표시되는 메시지 목록(1304)은, 도 13의 (b)에서 제스처 입력에 의해 메시지 입력 모드에 진입한 경우 해당 디스플레이 장치의 스크린 상에 표시되는 메시지 목록(1302)과 동일한 것일 수 있고, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 사용자는, 미리 정해진 하나 이상의 키 입력에 의해, 스크린 상에 제공된 목록(1304)을 네비게이팅하여 해당 목록(1304) 상에서 특정 메시지를 선택할 수 있고, 선택된 메시지가 상대방 디스플레이 장치로 전달될 수 있다. 이때 해당 디스플레이 장치 및 상대방 디스플레이 장치는 각각 스크린 상에 그 선택된 대화 메시지를 표시할 수 있다.
한편, 본 개시의 일 실시예에 의하면, 대화를 진행하는 각 디스플레이 장치, 예컨대 디스플레이 장치(406) 및 디스플레이 장치(408) 각각에서의 메시지 입력 방식은, 예컨대 매 입력 시마다 사용자의 선택에 의해 다양하게 정해질 수 있다. 예컨대, 디스플레이 장치(406) 상의 사용자가 음성 발화 방식으로 대화 채널 개설 요청을 하거나 메시지를 입력한 이후, 다음 턴에서는 제스처 또는 키 입력 방식으로 메시지를 입력할 수도 있고, 그와 다른 순서에 의해 각각 다른 입력 방식으로 메시지를 입력할 수 있으며, 본 개시가 특정 순서로 제한되는 것은 아니다.
도 9로 다시 돌아와서, 단계(906)에서는, 실시간 대화 중의 양측 디스플레이 장치 중 하나(예컨대 디스플레이 장치(408)) 상에서 사용자로부터 해당 장치의 스크린을 통해 표시되고 있는 컨텐츠를 대화 상대방 디스플레이 장치(예컨대, 디스플레이 장치(406))와 공유하고자 하는 공유 요청이 입력될 수 있다. 본 개시의 일 실시예에 의하면, 컨텐츠 공유 요청은, 전술한 음성 발화, 제스처, 키 입력을 비롯한 다양한 방식들 중 하나에 의해 이루어질 수 있다. 단계(908)에서는, 단계(906)에서 입력된 컨텐츠 공유 요청이 상대방 디스플레이 장치(예컨대, 디스플레이 장치(406))로 전달될 수 있고, 그에 대한 응답이 요청 디스플레이 장치(예컨대, 디스플레이 장치(408)) 상에서 수신될 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 상대방으로부터 컨텐츠 공유 요청을 수신한 디스플레이 장치(예컨대, 디스플레이 장치(406))의 스크린 상에 컨텐츠 공유 요청의 수락 여부에 관한 질의가 표시될 수 있고, 해당 장치(예컨대, 디스플레이 장치(406)) 상의 사용자로부터 그러한 질의에 대한 응답이 획득된 후, 획득된 응답이 컨텐츠 공유 요청을 보내온 디스플레이 장치(예컨대, 디스플레이 장치(408))로 전송될 수 있다.
단계(910)에서는, 상대방 디스플레이 장치(예컨대, 디스플레이 장치(406))로부터 수신된 응답이 컨텐츠 공유 수락인지 여부가 판정될 수 있고, 그러한 경우 절차는 단계(912)로 진행하여 해당 컨텐츠 정보가 상대방 디스플레이 장치(예컨대, 디스플레이 장치(406))로 공유될 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 컨텐츠의 종류에 따라, 컨텐츠 공유를 위하여 상대방 디스플레이 장치로 제공되는 정보에 차이가 있을 수 있다. 예컨대, 본 개시의 일 실시예에 의하면, 공유하려는 컨텐츠가 공중파 방송 컨텐츠 또는 OTT 컨텐츠인 경우, 해당 컨텐츠에 관한 컨텐츠 획득 정보가 상대방 디스플레이 장치로 제공될 수 있다. 본 개시의 일 실시예에 의하면, 공유하려는 컨텐츠가 해당 디스플레이 장치 상에서 획득되는 고유의 외부 입력(예컨대, HDMI 유선 연결에 따라 획득된 입력 등)인 경우에는 해당 디스플레이 장치 상에서 재생 중인 디스플레이 정보가 실시간으로 상대방 디스플레이 장치로 스트리밍 전송될 수 있다.
도 14에는, 본 개시의 일 실시예에 따라, 실시간 대화 진행 중 상대방 디스플레이 장치로부터 컨텐츠를 공유 받은 디스플레이 장치 상의 스크린 표시 변화의 일 예가 도시되어 있다. 도 14의 (a)에 도시된 바에 의하면, 컨텐츠 공유 이전 각 대화 당사자인 디스플레이 장치(406) 및 디스플레이 장치(408) 각각의 스크린에 표시 중인 컨텐츠는 상이하다. 본 도면에서는, 양 디스플레이 장치의 스크린 상에 양측 대화 당사자의 프로필 사진이 각각 컨텐츠 시청을 방해하지 않도록 양측 구석에 작게 표시되어 있으나, 설명의 편의 상 각 단계에서 양자 간에 교환되는 대화 메시지의 표시는 생략되어 있으며, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 예컨대 디스플레이 장치(408)로부터 컨텐츠 공유 요청이 있고 디스플레이 장치(406)가 이를 수락한 경우, 도 14의 (b)에 도시된 바와 같이, 디스플레이 장치(406)의 스크린에는 디스플레이 장치(408)의 스크린에 표시 중이던 컨텐츠와 동일한 컨텐츠가 공유 표시될 수 있다. 이러한 경우, 양측 당사자는, 공유되는 컨텐츠를 함께 시청하면서 서로 대화를 나눌 수 있다.
도 15는, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))의 요청에 의해 해당 디스플레이 장치와 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414)) 사이에 비실시간 대화가 이루어지는 경우의 예시적 절차 흐름을 도시한 도면이다. 본 개시의 일 실시예에 의하면, 예컨대 디스플레이 장치(406)에서 획득된 대화 채널 개설 요청과 관련된 상대방 정보가 특정 사람, 즉 사용자 Tom에 관한 것일 수 있고, 도 5와 관련하여 전술한 절차에 따라 디스플레이 장치(414)가 비실시간 대화 채널의 대화 상대방 장치로서 특정될 수 있으며, 본 개시가 이로써 제한되는 것은 아니다.
본 개시의 일 실시예에 따라, 단계(1502)에서, 대화 채널 개설을 요청한 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 대화 상대방으로 특정된 디스플레이 장치(예컨대, 디스플레이 장치(414))로 비실시간 대화 메시지를 전송할 수 있다. 본 개시의 일 실시예에 의하면, 디스플레이 장치(예컨대, 디스플레이 장치(406)) 상의 사용자는, 전술한 실시간 대화의 경우와 유사하게 다양한 방식, 예컨대 발화 음성, 제스처, 또는 키 입력 방식에 따라 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414))로 전달하려는 메시지를 입력할 수 있고, 해당 디스플레이 장치는 사용자로부터 입력된 메시지를 상대방 디스플레이 장치로 전송할 수 있다. 본 개시의 일 실시예에 의하면, 단계(1504)에서, 디스플레이 장치(예컨대, 디스플레이 장치(406))는, 사용자로부터의 요청에 의해, 해당 디스플레이 장치의 스크린 상에서 표시 중인 컨텐츠를 공유하기 위하여 해당 컨텐츠의 정보를 상대방 디스플레이 장치로 전송할 수 있다. 본 개시의 일 실시예에 의하면, 전송되는 컨텐츠 정보는, 공유하려는 컨텐츠의 종류에 따라 달라질 수 있다. 예컨대, 공유하려는 컨텐츠가 공중파 방송 컨텐츠 또는 OTT 컨텐츠인 경우 해당 컨텐츠 획득 정보가 전송될 수 있고, 그와 달리 디스플레이 장치 상에서 획득되는 고유의 외부 입력인 경우 해당 디스플레이 장치 상에서 재생 중인 디스플레이 정보 자체가 전송될 수 있다.
단계(1506)에서, 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414))는, 단계(1502) 및 단계(1503)에서 전송된 메시지 및/또는 컨텐츠 정보 등을 수신하되, 스크린 상에 표시하지는 않은 채, 저장할 수 있다. 단계(1508)에서, 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414))는, 해당 장치 상의 영상 획득부 또는 모션 정보 획득부를 통해, 해당 디스플레이 장치 근처에 사용자(예컨대, 사용자 Tom)가 나타났는지(돌아왔는지) 여부를 판정할 수 있다. 단계(1508)에서, 디스플레이 장치 근처에 사용자가 나타난 것으로 판정된 경우, 절차는 단계(1510)로 진행하여 디스플레이 장치(예컨대, 디스플레이 장치(414))의 스크린 상에 앞서 단계(1506)에서 수신 및 저장되어 있던 메시지 및/또는 컨텐츠 정보 등을 표시할 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 디스플레이 장치(414)의 스크린의 중앙부에 해당 메시지 및/또는 컨텐츠 정보가 표시될 수 있고, 본 개시가 이로써 제한되는 것은 아니다.
이와 관련하여, 도 16에는, 비실시간 대화에 따른 대화 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414))의 스크린 상에 메시지 및/또는 컨텐츠 정보가 표시되는 예시적 상황이 도시되어 있다. 도 16의 (a)에는, 대화 상대방 장치인 디스플레이 장치(예컨대, 디스플레이 장치(414))의 근처에 사용자(예컨대, 사용자 Tom)가 존재하지 않은 동안, 해당 대화 상대방 디스플레이 장치의 스크린이 유휴 상태인 것으로 도시되어 있다. 도 16의 (b)에는, 본 개시의 일 실시예에 따라, 사용자(예컨대, 사용자 Tom)가 대화 상대방 디스플레이 장치(예컨대, 디스플레이 장치(414)) 근처에 나타난 경우, 이를 탐지한 디스플레이 장치(예컨대, 디스플레이 장치(414))의 스크린 상에 사용자의 부재 중에 수신되었던 부재중 메시지들 및/또는 컨텐츠 정보가, 수신된 시간 정보와 함께 표시된 것이 도시되어 있다.
한편, 도 15 및 16을 참조하여 전술한 비실시간 대화에 관한 설명에서는, 예컨대 대화 상대방 디스플레이 장치(414)가, 해당 디스플레이 장치(414) 근처에 사용자가 부재 중인 동안에 디스플레이 장치(406)로부터 메시지 및/또는 컨텐츠 정보를 수신해 두었다가, 디스플레이 장치(414) 근처에 사용자가 나타난 경우에 비로소 해당 스크린 상에 앞서 수신했던 메시지(문자, 음성녹음, 또는 영상을 포함할 수 있음) 및/또는 컨텐츠 정보를 표시하는 것으로 설명되었으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 대화 상대방 디스플레이 장치(414)는, 해당 디스플레이 장치(414) 근처에 사용자가 부재 중인 동안에 디스플레이 장치(406)로부터 메시지 및/또는 컨텐츠 정보를 수신한 후, 수신된 메시지 및/또는 컨텐츠 정보를 해당 디스플레이 장치(414)와 미리 연계된 모바일 장치(예컨대, 사용자 Tom의 모바일 장치)로 전송할 수 있고, 본 개시가 이로써 제한되는 것은 아니다.
한편, 본 개시의 다른 실시예에 의하면, 전술한 실시간 대화 채널 및 비실시간 대화 채널 이외에, 디스플레이 장치들 간에 사생활 보호 모드 대화 채널이 개설될 수 있다. 본 개시의 일 실시예에 의하면, 예컨대 도 4의 댁내 디스플레이 환경(400)과 관련하여 특정 디스플레이 장치(예컨대, 디스플레이 장치(406))로부터의 대화 채널 개설의 요청과 관련된 상대방 정보가 특정 사람(예컨대, 사용자 Adam)에 관한 것이고, 대화 상대방 후보 장치들(402, 404, 408-414) 중 특정 장치(예컨대, 디스플레이 장치(402))의 근처에 그 특정 사람(예컨대, 사용자 Adam)이 존재하는 한편, 그와 동시에 또 다른 사용자(예컨대, 사용자 Smith)가 해당 장치(예컨대, 디스플레이 장치(402)) 근처에 더 존재하는 경우, 디스플레이 장치(402)가 대화 상대방 장치로 특정되되 디스플레이 장치(402)와 디스플레이 장치(406) 사이에, 실시간 대화 채널을 대신하여 사생활 보호 모드 대화 채널이 개설될 수 있다.
도 17은, 본 개시의 일 실시예에 따라, 도 4의 댁내 디스플레이 환경(400)에서 디스플레이 장치들(예컨대, 디스플레이 장치(406)와 디스플레이 장치(402)) 사이에 사생활 보호 모드 대화 채널이 개설된 경우, 대화 채널 개설 요청을 받은 디스플레이 장치(예컨대, 디스플레이 장치(402))에서의 예시적 스크린 표시를 도시한 도면이다. 본 개시의 일 실시예에 의하면, 도 17의 (a)에 도시된 바와 같이, 사생활 보호 모드 대화 채널이 개설된 경우 대화 채널 개설 요청을 받은 디스플레이 장치(예컨대, 디스플레이 장치(402))의 스크린 일측(예컨대, 본 도면에서는 우측 하단부)에, 그러한 대화 채널 개설 요청의 수신을 알리는 알림창(1702)이 표시될 수 있다. 본 개시의 일 실시예에 의하면, 본 도면에 도시된 바와 같이, 알림창(1702)은, 특정 사용자(예컨대, 사용자 Ann)로부터 대화 채널 개설 요청이 있음을 표시하되, 구체적인 메시지 내용의 표시를 생략할 수 있다. 본 개시의 다른 실시예에 의하면, 알림창(1702)은, 단순히 대화 채널 개설 요청이 있다는 점만 표시하고 그러한 대화 채널 개설 요청을 보낸 상대방 정보도 감출 수 있고, 본 개시가 특정한 경우로 제한되는 것은 아니다. 본 개시의 또 다른 실시예에 의하면, 알림창(1702)은, 특정 사용자(예컨대, 사용자 Ann)로부터 특정 상대방(예컨대, 사용자 Adam)에 대한 대화 채널 개설 요청이 있음을 표시할 수도 있고, 본 개시가 특정 형태로 제한되는 것은 아니다. 본 도면에 도시된 바에 의하면, 디스플레이 장치(402)의 스크린 상에 멀티미디어 컨텐츠가 표시되는 중에 특정 상대방(예컨대, 사용자 Adam)에 대한 대화 채널 개설 요청이 수신되어, 전술한 알림창(1702)이 스크린 상에 표시 중인 멀티미디어 컨텐츠의 시청을 방해하지 않도록 구석에 작게 표시되어 있다. 한편, 본 도면에 명시되지는 않았으나, 본 개시의 일 실시예에 의하면, 스크린 상에 표시되는 알림창(1702)은 소정 시간 경과와 함께 사라질 수 있고, 본 개시가 이로써 제한되는 것은 아니다.
또한, 본 개시의 일 실시예에 의하면, 도 17의 (a)의 상황에서, 대화 채널개설의 요청을 받은 디스플레이 장치(예컨대, 디스플레이 장치(402)) 상에서 상대방 사용자(예컨대, 사용자 Adam)로부터, 임의의 방식에 따라, 사생활 보호 모드의 해제를 위한 명령(예컨대, 본 도면에 도시된 바에 의하면, 수신된 메시지를 보여 달라는 음성 발화 명령)이 수신될 수 있다. 본 개시의 일 실시예에 의하면, 사생활 보호 모드의 해제를 위한 명령이 수신된 경우, 사생활 보호 모드가 해제되고, 디스플레이 장치들(예컨대, 대화 채널 개설을 요청한 디스플레이 장치와 그러한 요청을 받은 디스플레이 장치) 간에 실시간 대화 채널이 개설될 수 있다. 본 개시의 일 실시예에 의하면, 도 17의 (b)에 도시된 바와 같이, 대화 채널 개설 요청을 받은 디스플레이 장치(예컨대, 디스플레이 장치(402))의 스크린 상에, 대화를 요청한 사용자(예컨대, 사용자 Ann)의 프로필 사진(1704)과 그로부터 수신된 메시지 내용(1706)이 표시될 수 있다.
본 개시의 일 실시예에 의하면, 특정 디스플레이 장치들 간에는 양 장치간 사전 합의에 의한 다이렉트 연결이 미리 등록되어 있을 수 있다. 도 4 내지 8을 참조하여 전술한 바에 의하면, 예컨대 음성 발화, 제스처, 또는 키 입력 방식 별로 정해진 단계적 절차들에 따라, 소정 디스플레이 장치 상에서 대화 채널 개설 요청의 입력이 이루어지고 대화 상대방으로 지정된 디스플레이 장치의 근처에 사람이 있는지 여부가 확인된 후 비로소 대화 채널 개설을 요청한 디스플레이 장치와 대화 상대방 디스플레이 장치 사이에 실시간 또는 비실시간 대화 채널이 개설될 수 있다. 본 개시의 일 실시예에 의하면, 다이렉트 연결이 등록된 디스플레이 장치들 간에는, 전술한 단계적 절차들 없이, 미리 지정된 특정 입력에 의해 바로 양 디스플레이 장치들 사이에 실시간 대화 채널이 개설될 수 있다. 예컨대, 각자의 집 또는 방에 있는 부모와 자녀 간에, 각자 위치의 디스플레이 장치들을 이용하여, 복잡한 절차를 거치지 않고서, 간단한 입력에 의해 실시간 대화 채널을 신속하게 개설할 수 있다.
도 18에는, 본 개시의 일 실시예에 따라, 다이렉트 연결이 등록된 디스플레이 장치(1812)와 디스플레이 장치(1822) 간에 실시간 대화 채널이 개설되는 예시적 상황이 도시되어 있다. 도 18의 (a)에 도시된 바에 의하면, 예컨대 할머니와 할아버지가 공간(1810)에 설치된 디스플레이 장치(1812)의 스크린을 통해 컨텐츠를 시청 중이고, 아이들이 공간(1820)에 설치된 디스플레이 장치(1822)의 스크린을 통해 컨텐츠를 시청 중이다. 도 18의 (a)에는, 예컨대 공간(1810)의 할아버지가, 디스플레이 장치(1812)의 스크린을 통해 컨텐츠를 시청하는 중에, 소정의 제스처에 의해 다이렉트 연결을 호출하는 상황이 도시되어 있다. 본 도면에 명시되지는 않았으나, 디스플레이 장치(1812)와 디스플레이 장치(1822) 간에는 양자 사이에 미리 다이렉트 연결이 등록되어 있고, 그러한 다이렉트 연결을 호출하는 소정의 입력(예컨대, 미리 정해진 특정 음성 발화, 미리 정해진 특정 제스처, 또는 미리 정해진 특정 키 입력일 수 있고, 본 도면에서는 단지 예로서 소정의 제스처 입력)이 미리 정해져 있을 수 있다. 도 18의 (a)에 도시된 바에 따라, 디스플레이 장치(1812)가 다이렉트 연결의 호출을 위한 입력(예컨대, 소정의 제스처 입력)을 감지하면, 디스플레이 장치(1812)와 디스플레이 장치(1822) 사이에 추가적인 절차 없이 바로 실시간 대화 채널이 개설될 수 있다.
본 개시의 일 실시예에 의하면, 다이렉트 연결의 호출에 의해 디스플레이 장치들(1812, 1822) 간 실시간 대화 채널이 개설된 경우, 도 18의 (a)에 도시된 바와 같이, 디스플레이 장치(1822)의 스크린(현재 컨텐츠가 재생되는 중임) 상에, 디스플레이 장치(1812)와의 사이에 실시간 대화 채널이 개설됨을 알리는 표시가 제공될 수 있다. 도시된 바에 의하면, 디스플레이 장치(1812)와 관련하여 미리 등록된 사용자, 예컨대 할아버지의 프로필 사진(1814)과, 할아버지로부터의 호출이 있음을 알리는 문구(1816)가 표시되고 있는데, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 디스플레이 장치들(1812, 1822) 간의 실시간 대화 채널이 형성됨을 알리는 다양한 표시가 디스플레이 장치(1822)의 스크린 상에 표시될 수 있을 것이다. 한편, 본 도면에 도시되지는 않았으나, 본 개시의 일 실시예에 의하면, 다이렉트 연결의 호출이 이루어진 경우, 디스플레이 장치(1812)의 스크린 상에도 디스플레이 장치(1822)와의 사이에 다이렉트 연결에 의한 실시간 대화 채널이 연결됨을 알리는 표시가 제공될 수 있다.
본 도면 및 관련 설명은, 디스플레이 장치(1812) 측에서의 다이렉트 연결 호출에 의해 디스플레이 장치(1812)와 디스플레이 장치(1822) 사이에 실시간 대화 채널이 개설되는 경우에 관련되지만 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 디스플레이 장치(1822) 측에서의 다이렉트 연결 호출에 의해 디스플레이 장치(1812)와 디스플레이 장치(1822) 사이에 실시간 대화 채널이 개설될 수도 있다. 또한, 본 도면 및 관련 설명은, 디스플레이 장치(1812) 및 디스플레이 장치(1822) 각각의 스크린 상에 컨텐츠가 표시되고 있는 중에 양 장치간 다이렉트 연결이 이루어지는 경우에 관련되지만, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 각 디스플레이 장치가 유휴 상태인 중에도, 다이렉트 연결의 호출을 위한 소정의 입력이 이루어지는 경우, 양 장치간 다이렉트 연결 및 그에 따른 실시간 대화 채널의 개설이 이루어질 수 있다.
본 개시의 일 실시예에 의하면, 다이렉트 연결과 관련하여 미리 등록된 설정에 따라, 디스플레이 장치들(1812, 1822) 간에 실시간 대화 채널이 형성되는 경우, 각 디스플레이 장치의 스크린 상에 상대방 디스플레이 장치 상의 영상 획득부(예컨대, 카메라)에 의해 촬영된 영상 정보가 표시될 수 있으며, 본 개시가 이로써 제한되는 것은 아니다. 예컨대, 본 개시의 일 실시예에 의하면, 도 18의 (b)에 도시된 바와 같이, 미리 등록된 설정에 따라, 디스플레이 장치들(1812, 1822) 간 다이렉트 연결에 의한 실시간 대화 채널이 형성된 경우, 디스플레이 장치(1812)의 스크린 상에 디스플레이 장치(1822) 상의 영상 획득부에 의해 획득된 정지 영상 또는 동영상이 표시될 수 있다. 마찬가지로, 본 개시의 일 실시예에 의하면, 미리 등록된 설정에 따라, 디스플레이 장치들(1812, 1822) 간 다이렉트 연결에 의한 실시간 대화 채널이 형성된 경우, 디스플레이 장치(1822)의 스크린 상에는 디스플레이 장치(1812) 상의 영상 획득부에 의해 획득된 정지 영상 또는 동영상이 표시될 수 있다. 그러나, 본 개시가 특정 형태로 제한되는 것은 아니며, 디스플레이 장치(1812, 1822)의 각 스크린 상에는 표시 중이던 컨텐츠가 그대로 표시된 채 실시간 대화를 위한 표시가 일측에 작게 표시될 수도 있다.
본 개시에서는, 주로 댁내 환경에서 복수의 디스플레이 장치들 간의 대화 채널 개설의 경우를 중심으로 설명되었으나 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다양한 실시예에 의하면, 서로 등록된 댁내외 환경의 다양한 디스플레이 장치들 간에 대화 채널이 개설될 수 있고, 각 사용자는 가까운 위치의 디스플레이 장치의 스크린을 통해 다른 사용자와 대화를 수행할 수 있다. 본 개시에서는, 주로 디스플레이 장치들의 각 스크린을 이용한 텍스트 채팅의 경우를 중심으로 설명되었으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다양한 실시예들이, 디스플레이 장치들을 통한 음성 채팅 및 영상 통화에도 적용될 수 있다.
본 개시에서 사용되는, "실시간 대화" 및 "비실시간 대화"는, 소정의 디스플레이 장치에서 입력된 상대방에게 전달하려는 메시지가, 부가적 조건 없이 상대방 디스플레이 장치의 스크린 상에 바로 표시되는지, 아니면 상대방 디스플레이 장치에서의 부가적 조건(예컨대, 해당 상대방 디스플레이 장치 근처에 사람이 돌아왔는가) 달성을 전제로 해당 스크린 상에 표시되는지를 나타내는 것일 뿐, 실제 메시지의 전달에 소요되는 시간을 의미하는 것은 아니다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 예를 들면, 단수로 표현된 구성요소는 문맥상 명백하게 단수만을 의미하지 않는다면 복수의 구성요소를 포함하는 개념으로 이해되어야 한다. 본 문서에서 사용되는 '및/또는'이라는 용어는, 열거되는 항목들 중 하나 이상의 항목에 의한 임의의 가능한 모든 조합들을 포괄하는 것임이 이해되어야 한다. 본 개시에서 사용되는 '포함하다,' '가지다,' '구성되다' 등의 용어는 본 개시 상에 기재된 특징, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것일 뿐이고, 이러한 용어의 사용에 의해 하나 또는 그 이상의 다른 특징들이나 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하려는 것은 아니다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다.
본 문서의 다양한 실시예들에서 사용된 용어 "~부" 또는 "~모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. "~부" 또는 "~모듈"은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일 실시예에 따르면, "~부" 또는 "~모듈"은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서를 통해 설명된 디스플레이 장치에 의해 실행되는 프로그램은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 프로그램은 컴퓨터로 읽을 수 있는 명령어들을 수행할 수 있는 모든 시스템에 의해 수행될 수 있다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령어(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로 (collectively) 처리 장치를 명령할 수 있다. 소프트웨어는, 컴퓨터로 읽을 수 있는 저장 매체(computer-readable storage media)에 저장된 명령어를 포함하는 컴퓨터 프로그램으로 구현될 수 있다. 컴퓨터가 읽을 수 있는 저장 매체로는, 예를 들어 마그네틱 저장 매체(예컨대, ROM(Read-Only Memory), RAM(Random-Access Memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 저장 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 컴퓨터 프로그램은 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있으며, 복수의 개체 중 일부는 다른 구성요소에 분리 배치될 수도 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (20)

  1. 디스플레이 장치로서,
    컨텐츠 신호를 수신하는 컨텐츠 수신부,
    수신된 상기 컨텐츠 신호를 표시하는 스크린,
    통신망을 통해 외부와 통신하는 통신 인터페이스,
    하나 이상의 명령을 포함하는 메모리, 및
    프로세서를 포함하며, 상기 하나 이상의 명령을 실행함으로써, 상기 프로세서는,
    사용자로부터 입력된, 다른 디스플레이 장치 또는 다른 사용자와의 대화 채널 개설의 요청과, 상기 대화 채널 개설의 상대방 정보를 획득하고,
    상기 상대방 정보에 기초하여 상대방 디스플레이 장치를 식별하고, 상기 상대방 디스플레이 장치 상의 대화 상대방 가용 상태를 획득하고,
    상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태가 실시간 대화 가능인지 실시간 대화 불가인지 정함에 따라, 상기 사용자로 하여금, 상기 상대방 디스플레이 장치 상의 대화 상대방과 실시간 대화 또는 비실시간 대화를 수행할 수 있게 하는, 디스플레이 장치.
  2. 제1항에 있어서,
    상기 사용자로부터, 상기 대화 채널 개설의 요청 및 상기 상대방 정보를 포함한 발화 음성 입력을 수신하는 음성 획득부를 더 포함하는, 디스플레이 장치.
  3. 제1항에 있어서,
    상기 상대방 정보는, 미리 정해진 복수의 사람들 중 특정인 또는 미리 정해진 복수의 장치들 중 특정 장치에 관한 식별 정보를 포함하는, 디스플레이 장치.
  4. 제3항에 있어서,
    상기 디스플레이 장치의 주변 영상 신호를 감지하는 영상 획득부, 상기 디스플레이 장치의 주변에서 발생하는 모션 입력을 감지하는 모션 정보 획득부, 및 키 입력 획득부 중 적어도 하나를 더 포함하고,
    상기 프로세서는,
    상기 영상 획득부 또는 상기 모션 정보 획득부에 의해서 감지된 영상 신호 또는 모션 입력으로부터 획득된 제스처 입력, 또는 상기 키 입력 획득부로부터 획득된 키 입력에 기초하여, 상기 대화 채널 개설의 요청을 획득하는, 디스플레이 장치.
  5. 제4항에 있어서,
    상기 프로세서는,
    상기 스크린 상에 상기 복수의 사람들 또는 상기 복수의 장치들 각각을 나타내는 항목들의 리스트가 표시되도록 하고,
    상기 사용자로부터의 상기 제스처 입력 또는 상기 키 입력에 따라 상기 리스트 중에서 선택된 하나의 항목으로부터 상기 상대방 정보를 획득하는, 디스플레이 장치.
  6. 제1항에 있어서,
    상기 프로세서는,
    획득된 상기 대화 채널 개설의 요청이, 미리 정해진 디폴트 장치에 대한 요청인 경우, 상기 미리 정해진 디폴트 장치를 상기 상대방 디스플레이 장치로 식별하고, 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태를 상기 실시간 대화 가능으로 정하는, 디스플레이 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 상대방 정보가 미리 정해진 복수의 사람들 중 특정인의 식별 정보를 포함하는 경우, 상기 통신 인터페이스를 통해, 미리 정해진 복수의 장치들 각각에 대해, 해당 장치 근처에 상기 특정인이 위치하는지 여부를 질의하고,
    상기 통신 인터페이스를 통해 상기 복수의 장치들 중 소정 장치로부터 상기 특정인이 해당 장치 근처에 위치한다는 응답을 수신한 경우, 상기 소정 장치를 상기 상대방 디스플레이 장치로 식별하고, 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태를 상기 실시간 대화 가능으로 정하는, 디스플레이 장치.
  8. 제7항에 있어서,
    상기 프로세서는,
    상기 통신 인터페이스를 통해 상기 복수의 장치들 중 어떠한 장치로부터도 상기 특정인이 해당 장치 근처에 위치한다는 응답을 수신하지 못한 경우, 상기 복수의 장치들 중 상기 특정인과 관련하여 미리 정해진 장치를 상기 상대방 디스플레이 장치로 식별하고, 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태를 상기 실시간 대화 불가로 정하는, 디스플레이 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 상대방 정보가 미리 정해진 복수의 장치들 특정 장치의 식별 정보를 포함하는 경우, 상기 특정 장치를 상기 상대방 디스플레이 장치로 식별하고,
    상기 통신 인터페이스를 통해, 상기 특정 장치로, 상기 특정 장치의 근처에 사람이 존재하는지 여부를 질의하고,
    상기 통신 인터페이스를 통해 상기 특정 장치로부터, 상기 특정 장치의 근처에 사람이 존재한다는 응답을 수신한 경우 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태를 상기 실시간 대화 가능으로 정하고, 상기 특정 장치의 근처에 사람이 존재하지 않는다는 응답을 수신한 경우 상기 상대방 디스플레이 장치 상의 상기 대화 상대방 가용 상태를 상기 실시간 대화 불가로 정하는, 디스플레이 장치.
  10. 제1항에 있어서,
    상기 사용자로부터의 발화 음성 입력을 수신하는 음성 획득부, 상기 디스플레이 장치의 주변 영상 신호를 감지하는 영상 획득부, 상기 디스플레이 장치의 주변에서 발생하는 모션 입력을 감지하는 모션 정보 획득부, 및 키 입력 획득부 중 적어도 하나를 더 포함하고,
    상기 프로세서는, 상기 실시간 대화 또는 상기 비실시간 대화 수행을 위해,
    상기 음성 획득부에서 수신된 상기 발화 음성 입력에 기초하여 생성된 텍스트 메시지를 상기 상대방 디스플레이 장치로 전송하거나,
    상기 스크린 상에 복수의 메시지 항목들의 리스트가 표시되도록 하고, 상기 영상 획득부 또는 상기 모션 정보 획득부에 의해서 감지된 영상 신호 또는 모션 입력으로부터 획득된 제스처 입력이나, 상기 키 입력 획득부로부터 획득된 키 입력에 기초하여, 상기 리스트 중에서 선택된 하나의 텍스트 메시지를 상기 상대방 디스플레이 장치로 전송하는, 디스플레이 장치.
  11. 제1항에 있어서,
    상기 프로세서는,
    상기 상대방 디스플레이 장치 상의 상기 대화 상대방과 실시간 대화를 수행하는 동안,
    상기 스크린 상에 상기 컨텐츠 신호가 표시 중인 경우, 상기 스크린 상에서 상기 컨텐츠 신호의 표시 외부 또는 상기 컨텐츠 신호의 표시 가장자리 영역에 상기 실시간 대화의 정보가 표시되도록 하고,
    상기 스크린 상에 상기 컨텐츠 신호가 표시 중이지 않은 경우, 상기 스크린의 중앙부에 상기 실시간 대화의 정보가 표시되도록 하는, 디스플레이 장치.
  12. 제11항에 있어서,
    상기 스크린 상에 표시되는 상기 대화의 정보는,
    상기 사용자로부터의 대화 메시지 및 상기 사용자를 나타내는 영상과, 상기 대화 상대방으로부터의 대화 메시지 및 상기 대화 상대방 또는 상기 상대방 디스플레이 장치를 나타내는 영상을 포함하는, 디스플레이 장치.
  13. 제1항에 있어서,
    상기 프로세서는,
    상기 사용자가 상기 상대방 디스플레이 장치 상의 상기 대화 상대방과 상기 실시간 대화를 수행하는 동안,
    상기 사용자로부터, 상기 스크린 상에 표시 중인 상기 컨텐츠 신호를 상기 상대방 디스플레이 장치와 공유하려는 공유 요청을 획득하고,
    상기 공유 요청에 대한 상기 상대방 디스플레이 장치로부터의 수락 의사가 획득된 경우, 상기 컨텐츠 신호의 공유를 위한 동작을 수행하는, 디스플레이 장치.
  14. 제13항에 있어서,
    상기 컨텐츠 신호의 공유를 위한 동작은,
    상기 컨텐츠 신호가 지상파 방송 컨텐츠 신호 또는 OTT 컨텐츠 신호인 경우, 상기 지상파 방송 컨텐츠 신호 또는 상기 OTT 컨텐츠 신호의 획득을 위한 정보를 상기 상대방 디스플레이 장치로 전송하는 것을 포함하고,
    상기 컨텐츠 신호가 상기 지상파 방송 컨텐츠 신호 또는 상기 OTT 컨텐츠 신호가 아닌 경우, 상기 스크린 상에 표시 중인 상기 컨텐츠 신호를 상기 상대방 디스플레이 장치로 스트리밍 전송하는 것을 포함하는, 디스플레이 장치.
  15. 제1항에 있어서,
    상기 디스플레이 장치의 주변 영상 신호를 획득하는 영상 획득부를 더 포함하고,
    상기 프로세서는,
    상기 통신 인터페이스를 통한 외부의 다른 디스플레이 장치로부터의 요청에 응답하여, 상기 영상 획득부에 의해 획득된 상기 영상 신호에 기초하여, 상기 디스플레이 장치의 근처에 소정의 인물 또는 임의의 인물이 존재하는지 판정하고,
    상기 판정의 결과가, 상기 통신 인터페이스를 통해 상기 다른 디스플레이 장치로 전송되도록 하는, 디스플레이 장치.
  16. 제1항에 있어서,
    상기 프로세서는,
    소정의 방식에 따라, 상기 디스플레이 장치의 근처에 복수의 사람이 존재하는지 여부를 판정하고,
    상기 디스플레이 장치의 근처에 복수의 사람이 존재한다고 판정된 경우, 상기 통신 인터페이스를 통해 외부의 다른 디스플레이 장치로부터 상기 디스플레이 장치 상의 상기 사용자에 대한 대화 메시지가 수신되면, 상기 스크린 상에 상기 대화 메시지의 내용은 숨긴 채 상기 대화 메시지의 수신 사실을 알리는 표시가 표시되도록 하는, 디스플레이 장치.
  17. 제1항에 있어서,
    상기 프로세서는,
    상기 통신 인터페이스를 통해 외부의 다른 디스플레이 장치로부터 비실시간 대화를 위한 대화 메시지를 수신하고,
    소정의 방식에 따라, 상기 디스플레이 장치의 근처에 사람이 존재하는지 여부를 판정하고,
    상기 디스플레이 장치의 근처에 사람이 존재한다고 판정된 경우, 상기 스크린 상에 상기 대화 메시지가 표시되도록 하는, 디스플레이 장치.
  18. 컴퓨터에 의해 수행되는, 통신망을 통해 연결된 복수의 디스플레이 장치들 간 대화를 지원하는 방법으로서,
    상기 복수의 디스플레이 장치들 중 제1 디스플레이 장치로부터, 미리 등록된 복수의 사람들 중 특정인 또는 상기 복수의 디스플레이 장치들 중 제2 디스플레이 장치와의 대화 채널 개설의 요청을 획득하는 동작,
    상기 요청이 상기 특정인에 대한 것인 경우 상기 복수의 디스플레이 장치들 중 상기 특정인이 근처에 위치하는 장치를 검색하고, 상기 특정인이 근처에 위치하는 장치가 검색된 경우에는 해당 장치와 상기 제1 디스플레이 장치 간 실시간 대화를 지원하고, 상기 특정인이 근처에 위치하는 장치가 검색되지 않은 경우에는 상기 복수의 장치들 중 상기 특정인과 연계된 장치와 상기 제1 디스플레이 장치 간 비실시간 대화를 지원하는 동작, 및
    상기 요청이 상기 제2 디스플레이 장치에 대한 것인 경우, 상기 제2 디스플레이 장치 근처에 사람이 존재하는지 판정하고, 상기 제2 디스플레이 장치 근처에 사람이 존재하는 경우에는 상기 제2 디스플레이 장치와 상기 제1 디스플레이 장치 간에 실시간 대화를 지원하고, 상기 제2 디스플레이 장치 근처에 사람이 존재하는 경우에는 상기 제2 디스플레이 장치와 상기 제1 디스플레이 장치 간에 비실시간 대화를 지원하는 동작을 포함하는,
    디스플레이 장치들 간 대화 지원 방법.
  19. 제18항에 있어서,
    상기 실시간 대화를 지원하는 동작은, 상기 실시간 대화에 관련된 양측 디스플레이 장치의 각 스크린 상에 상기 양측 디스플레이 장치에서 획득된 각 대화 메시지를 표시하는 동작을 포함하는, 디스플레이 장치들 간 대화 지원 방법.
  20. 제18항에 있어서,
    상기 비실시간 대화를 지원하는 동작은, 상기 비실시간 대화에서 상기 제1 디스플레이 장치의 상대방인 장치에 대해, 해당 장치의 근처에 사람이 존재한다고 판정함을 조건으로 해당 장치의 스크린 상에, 상기 제1 디스플레이 장치로부터 획득된 대화 메시지를 표시하는 동작을 포함하는, 디스플레이 장치들 간 대화 지원 방법.
KR1020210171472A 2021-12-03 2021-12-03 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법 KR20230083463A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020210171472A KR20230083463A (ko) 2021-12-03 2021-12-03 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법
PCT/KR2022/012914 WO2023101149A1 (ko) 2021-12-03 2022-08-30 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법
US17/949,406 US20230179550A1 (en) 2021-12-03 2022-09-21 Display device and method for supporting communication between display devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210171472A KR20230083463A (ko) 2021-12-03 2021-12-03 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법

Publications (1)

Publication Number Publication Date
KR20230083463A true KR20230083463A (ko) 2023-06-12

Family

ID=86612590

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210171472A KR20230083463A (ko) 2021-12-03 2021-12-03 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법

Country Status (2)

Country Link
KR (1) KR20230083463A (ko)
WO (1) WO2023101149A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW463503B (en) * 1998-08-26 2001-11-11 United Video Properties Inc Television chat system
KR101685974B1 (ko) * 2010-01-06 2016-12-13 엘지전자 주식회사 단말기, 통신 시스템 및 이것들의 방송 관련 대화 서비스 수행 방법
KR101882276B1 (ko) * 2012-03-02 2018-07-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20140110664A (ko) * 2013-03-08 2014-09-17 인포뱅크 주식회사 채팅 서비스 제공 장치 및 방법과 기록매체
JP2018156646A (ja) * 2017-03-15 2018-10-04 キャンプ モバイル コーポレーション 外部デバイスを利用したモバイルデバイスにおけるチャット方法およびシステム

Also Published As

Publication number Publication date
WO2023101149A1 (ko) 2023-06-08

Similar Documents

Publication Publication Date Title
JP6445173B2 (ja) デバイスの制御方法及び装置
KR101767203B1 (ko) 스마트 기기의 음성 제어 방법, 장치, 제어 기기, 스마트 기기, 프로그램 및 컴퓨터가 판독가능한 기록매체
CA3067348C (en) Systems and methods for intelligent routing of notifications of incoming voice communication requests
US10453331B2 (en) Device control method and apparatus
US9529738B2 (en) Method and system for sharing content, device and computer-readable recording medium for performing the method
US9648153B2 (en) Method and device for incoming call notification
US20160210105A1 (en) Method, device and system for projection on screen
US10334282B2 (en) Methods and devices for live broadcasting based on live broadcasting application
CN106231378A (zh) 直播间的显示方法、装置及系统
US10236016B1 (en) Peripheral-based selection of audio sources
US20220224735A1 (en) Information processing apparatus, non-transitory computer readable medium storing program, and method
KR20150144547A (ko) 영상 표시 기기 및 그의 동작 방법
US9591435B2 (en) Communications via a receiving device network
KR20160048528A (ko) 자막기능을 지원하는 컨텐츠 수신장치와 디스플레이장치, 그것을 구비하는 시스템 및 그 자막 제공방법
US11606595B1 (en) Voice interaction with digital signage using mobile device
CN104243288A (zh) 消息传输方法及装置、电子设备
KR20180091798A (ko) 음성 명령에 기반하여 서비스를 제공하는 공용 단말 및 방법, 음성 명령에 기반하여 동작하는 캐릭터를 제공하는 공용 단말
CN104254021A (zh) 信息显示方法、装置和系统
JP6767924B2 (ja) システム、方法及びプログラム
KR20230083463A (ko) 디스플레이 장치 및 디스플레이 장치들 간 대화 지원 방법
US20190069062A1 (en) Microphone cooperation device
US20230179550A1 (en) Display device and method for supporting communication between display devices
CN107294983B (zh) 网络连接方法、装置、用户设备及终端
EP4117263A1 (en) Call method, terminal, and non-transitory computer-readable storage medium
KR102128107B1 (ko) WebRTC 기반의 음성정보검색 서비스 제공 시스템 및 그 방법