KR20160087644A - 전자 장치 및 전자 장치에서의 정보 처리 방법 - Google Patents

전자 장치 및 전자 장치에서의 정보 처리 방법 Download PDF

Info

Publication number
KR20160087644A
KR20160087644A KR1020150006873A KR20150006873A KR20160087644A KR 20160087644 A KR20160087644 A KR 20160087644A KR 1020150006873 A KR1020150006873 A KR 1020150006873A KR 20150006873 A KR20150006873 A KR 20150006873A KR 20160087644 A KR20160087644 A KR 20160087644A
Authority
KR
South Korea
Prior art keywords
electronic device
information
various embodiments
content associated
application
Prior art date
Application number
KR1020150006873A
Other languages
English (en)
Other versions
KR102296323B1 (ko
Inventor
최민석
김정용
민부건
신재식
이대호
신은옥
조현아
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150006873A priority Critical patent/KR102296323B1/ko
Priority to US14/995,589 priority patent/US10445045B2/en
Priority to CN201680012167.7A priority patent/CN107430480B/zh
Priority to PCT/KR2016/000410 priority patent/WO2016114609A1/en
Priority to EP16737573.2A priority patent/EP3245583B1/en
Publication of KR20160087644A publication Critical patent/KR20160087644A/ko
Application granted granted Critical
Publication of KR102296323B1 publication Critical patent/KR102296323B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363—Graphics controllers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G09G2340/145—Solving problems related to the presentation of information to be displayed related to small screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/06—Use of more than one graphics processor to process data before displaying to one or more screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 제1 전자 장치가, 상기 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면을 표시하는 표시부; 및 상기 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체를 제2 전자 장치로 전송하기 위한 입력을 수신하고, 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 프로세서;를 포함할 수 있으며, 상기 선택된 적어도 하나의 객체에 관련된 컨텐츠를 상기 제1 전자 장치의 실행 화면에 표시되지 않고, 제2 전자 장치에서 표시할 수 있다.

Description

전자 장치 및 전자 장치에서의 정보 처리 방법{ELECTRONIC DEVICE AND METHOD FOR PROCESSING INFORMATION IN THE ELECTRONIC DEVICE}
본 발명의 다양한 실시 예들은 전자 장치 및 전자 장치에서의 정보 처리 방법에 관한 것이다.
최근 사용되는 전자 장치는 사용자에게 정보를 제공하기 위해 정보를 화면에 표시하거나 음원 정보로 출력할 수 있도록 다양한 기능을 포함할 수 있다.
또한, 전자 장치는 다양한 통신 방식을 통해 다양한 분야 또는 다양한 형태의 정보들을 언제 어디서나 쉽게 제공받을 수 있다.
상기 전자 장치는 표시부의 화면의 크기가 제한되어 있으므로 제한된 크기의 화면에서 많은 정보를 표시하기 쉽지 않다.
더욱이, 최근 사용되는 전자 장치는 다양한 애플리케이션 또는 프로그램이 동시에 실행될 수 있으며, 이에 따른 정보들을 사용자에게 표시함으로써 다양한 서비스를 제공하고 있다. 다양한 정보를 제공하기 때문에 전자 장치에서는 화면 분할, 화면 전환 또는 팝업창을 통해 표시된 정보 외에 추가로 제공되는 정보를 표시할 수 있다.
그러나 화면 분할, 화면 전환 또는 팝업창을 통해 정보를 표시할 경우, 현재 실행 화면의 일부를 가리거나 전체 화면을 전환해야 하므로 현재 실행되는 화면에서 제공하는 정보를 정상적으로 확인하기 어려울 수 있다.
본 발명의 다양한 실시 예들은, 예를 들면, 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보(예를 들어, 컨텐츠)를 제2 전자 장치로 전송하도록 제어하기 위한 전자 장치 및 전자 장치에서의 정보 처리 방법을 제공할 수 있다.
진술한 과제 또는 다른 과제를 해결하기 위한, 다양한 실시 예 중 어느 하나에 따른 제1 전자 장치는, 상기 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면을 표시하는 표시부; 및 상기 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하고, 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 프로세서;를 포함할 수 있다.
또한, 다양한 실시 예 중 어느 하나에 따른 제1 전자 장치에서의 정보 전송 방법은, 상기 제1 전자 장치에서 애플리케이션을 실행하는 동작; 상기 애플리케이션의 실행 화면 내에 표시된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하는 동작; 및 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작;을 포함할 수 있다.
다양한 실시 예에 따른 전자 장치 및 전자 장치에서의 정보 처리 방법에 따라, 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체에 관련된 정보를 제2 전자 장치로 전송함으로써, 상기 선택된 적어도 하나의 객체에 관련된 정보를 상기 제1 전자 장치의 실행 화면에 표시되지 않고, 제2 전자 장치에서 표시할 수 있다.
도 1은 본 발명의 다양한 실시 예에 따른 정보 처리를 위한 시스템의 예를 나타내는 도면이다.
도 2는 본 발명의 다양한 실시 예에 따른 전자 장치의 구성 예를 나타내는 도면이다.
도 3은 본 발명의 다양한 실시 예에 따른 제1 전자 장치와 연동하는 제2 전자 장치의 예를 나타내는 도면이다.
도 4는 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
도 5는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
도 6은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
도 7은 본 발명의 다양한 실시 예에 따른 제1 전자 장치, 제2 전자 장치 및 서버 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
도 8은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
도 9는 본 발명의 다양한 실시 예에 따른 제1 전자 장치, 제2 전자 장치 및 서버 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
도 10은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
도 11은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 12는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 13은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 14는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 15는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 16은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 17은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 18은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 19는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 20은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 21은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
도 22는 본 발명의 다양한 실시 예에 따른 전자 장치의 세부 구조를 나타내는 블록도이다.
도 23은 본 발명의 다양한 실시 예에 따른 전자 장치의 세부 구조를 나타내는 블록도이다.
이하, 첨부된 도면을 참조하여 본 개시(present disclosure)를 설명한다. 본 개시는 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나 이는 본 개시를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 개시 가운데 사용될 수 있는"포함한다" 또는 "포함할 수 있다" 중의 표현은 개시된 해당 기능, 동작 또는 구성요소 중의 존재를 가리키며, 추가적인 적어도 하나의 기능, 동작 또는 구성요소 중을 제한하지 않는다. 또한, 본 개시에서, "포함하다" 또는 "가지다" 중의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 중의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", " A 및 B 중 적어도 하나", 또는 " A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
다양한 실시 예에서 사용된 "제 1", "제 2", "첫째", 또는 "둘째" 중의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 해당 구성요소들을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들면, 제 1 사용자 기기와 제 2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 개시의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성(또는 설정)된 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 적어도 하나의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다.
기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 개시의 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 일반적으로 사용되는 사전에 정의된 용어들은 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미를 가지는 것으로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 개시의 실시 예들을 배제하도록 해석될 수 없다.
본 개시의 다양한 실시 예들에 따른 전자 장치는, 적어도 하나의 프로세서를 구비하는 임의의 장치일 수 있으며, 카메라, 휴대 장치, 이동 단말, 통신 단말, 휴대용 통신 단말, 휴대용 이동 단말 등을 포함할 수 있다. 예를 들면, 전자 장치는 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상 전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예컨대, 시계형 장치, 안경형 장치, 의류형 장치 형태의 장치로서, 스마트 안경, 머리 착용형 장치(head-mounted-device(HMD)), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 스마트 미러, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에서, 전자 장치는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(예: Xbox™, PlayStation™), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 중), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 중), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로콤파스 중), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구, 온수탱크, 히터, 보일러 중) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 중) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 개시의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부된 도면을 참조하여 다양한 실시 예에 따른 전자 장치에 대해서 살펴본다.
다양한 실시 예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예를 들어, 인공지능 전자 장치)를 지칭할 수 있다.
다양한 실시 예에서 이용되는 객체(object)는 실행된 애플리케이션의 데이터 또는 그 데이터와 관련된 정보를 지칭할 수 있거나, 실행된 애플리케이션의 실행 화면을 구성하는 정보, 정보의 일부 또는 정보들의 조합을 지칭할 수 있다. 다양한 실시 예에 따르면, 상기 실행된 애플리케이션의 실행 화면을 구성하는 정보는 실행 화면 내의 데이터(예를 들어, 텍스트, 이미지, 동영상 또는 음원 정보 중 적어 하나를 포함하는 컨텐츠), 영역(예를 들어, 위치 정보), 프레임 또는 메뉴에 관련된 정보 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에서 이용되는 객체의 소스 정보는 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보(예를 들어, 선택된 적어도 하나의 객체와 관련된 컨텐츠)를 얻기 위해 이용되는 정보(예를 들어, 주소 정보(URL), 쿼리(query)에 관련된 정보 또는 객체에 대응하는 정보 중 적어도 하나를 포함)를 지칭할 수 있다. 또한, 다양한 실시 예에서 이용되는 객체의 소스 정보는 애플리케이션의 구조화된 문서(예를 들어, html(hypertext markup Language) 언어 문서 또는 XML(extensible markup language) 문서)에 포함된 상기 적어도 하나의 객체에 대응하는 정보 또는 정보 제공 출처(예를 들어, 주소 정보(URL)) 또는 정보 요청 또는 응답에 관련된 정보(예를 들어, 쿼리문) 중 적어도 하나를 지칭할 수 있다.
다양한 실시 예에서 이용되는 객체와 관련된 정보는 제2 전자 장치에서 보여지는 정보로서, 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면 내에서 선택된 객체에 대한 정보, 상기 선택된 객체에 관련하여 제1 전자 장치에서 가공된(예를 들어, 검색 또는 추출) 새로운 정보, 또는 상기 선택된 객체에 관련하여 서버에서 가공하여 제공한 새로운 정보 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에서 이용되는 가공이라는 용어는 선택된 적어도 하나의 객체를 인공적으로 처리하여 대응하는 새로운 정보 즉, 상기 객체와 관련된 정보를 만드는 프로세서를 지칭할 수 있거나, 선택된 적어도 하나의 객체에 관련된 정보를 제1 전자 장치에서 추출 또는 서버로부터 수신하는 프로세서를 지칭할 수 있다.
도 1은 본 발명의 다양한 실시 예에 따른 정보 처리를 위한 시스템의 예를 나타내는 도면이다.
상기 도 1을 참조하면, 상기 시스템은 제1 전자 장치(101), 적어도 하나의 제2 전자 장치(103, 105 또는 107)를 포함할 수 있다. 또한, 상기 시스템은 유선 또는 무선 통신 방식의 네트워크(111)를 통해 통신을 수행하는 서버(109)를 더 포함할 수 있다.
다양한 실시 예에 따르면, 제1 전자 장치(101)는 유선 또는 무선 통신(예를 들어, 근거리 무선 통신)을 통해 적어도 하나의 제2 전자 장치(103, 105 또는 107)와 통신을 수행할 수 있거나, 유선 또는 무선 통신의 네트워크(111)를 통해 적어도 하나의 제2 전자 장치(103, 105 또는 107) 또는 서버(109) 중 적어도 하나와 통신을 수행할 수 있다. 또한, 제2 전자 장치(103, 105 또는 107) 중 적어도 하나는 네트워크(111)를 통해 서버(109)와 통신을 수행할 수 있다.
다양한 실시 예에 따르면, 제1 전자 장치(101)는 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보(예를 들어, 선택된 적어도 하나의 객체와 관련된 컨텐츠)를 제2 전자 장치(103, 105 또는 107)로 전송할 수 있다. 또한, 다양한 실시 예에 따르면, 제1 전자 장치(101)는 유선 또는 무선 통신 네트워크(111)를 통해 서버(109)와 통신을 수행하여 서버(109)로부터 상기 선택된 적어도 하나의 객체에 관련된 정보를 수신하고, 수신된 적어도 하나의 객체와 관련된 정보를 제2 전자 장치(103, 105 또는 107)로 전송할 수 있다.
다양한 실시 예에 따르면, 제2 전자 장치(103, 105 또는 107)는 제1 전자 장치(101)에서 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보를 제1 전자 장치(101) 또는 서버(109)로부터 수신하여 표시하거나 음원 정보로 출력할 수 있다.
다양한 실시 예에 따르면, 서버(109)는 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))에서 구현되는 동작(또는, 기능)들 중 적어도 하나의 동작(또는, 기능)을 수행함으로써, 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 동작을 지원할 수 있다. 예를 들면, 상기 서버(109)는 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))에 구현된 프로세서를 지원하기 위한 정보를 제공할 수 있으며, 상기 프로세서가 수행하는 동작(또는, 기능)들 중 적어도 하나의 동작을 수행(또는, 대행)할 수도 있다. 다양한 실시 예에 따르면, 상기 서버(109)는 제1 전자 장치(101) 및 제2 전자 장치(103, 105 또는 107) 간의 정보 송수신을 지원할 수 있으며, 정보 송수신에 관련된 애플리케이션을 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107)로 제공할 수 있다.
다양한 실시 예에 따르면, 유선 또는 무선 통신을 위한 통신 네트워크(telecommunications network)(111)는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에 따르면, 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107)와 외부 장치 간의 통신을 위한 프로토콜(예를 들어, transport layer protocol, data link layer protocol 또는 physical layer protocol)은 애플리케이션, 애플리케이션 프로그래밍 인터페이스, 미들웨어, 커널 또는 통신 인터페이스 중 적어도 하나에서 지원될 수 있다.
도 2는 본 발명의 다양한 실시 예에 따른 전자 장치의 구성 예를 나타내는 도면이다. 본 발명의 다양한 실시 예에 따른, 전자 장치는 예를 들어, 상기 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107) 중 적어도 하나일 수 있다.
상기 도 2를 참조하면, 본 발명의 다양한 실시 예에 따라, 전자 장치(예를 들어, 도 1에 도시된 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))는 제어부(200), 통신부(210), 입력부(220), 저장부(230) 및/또는 표시부(240) 중 적어도 하나를 포함하여 구성될 수 있다. 어떤 실시 예에서는, 상기 전자 장치가, 상기 구성요소들 중 적어도 하나를 생략하거나 다른 구성 요소를 추가적으로 구성할 수 있다.
이하, 설명의 편의를 위해 상기 제1 전자 장치(101)는 실행된 애플리케이션 내에서 선택된 적어도 하나의 객체에 관련된 정보(예를 들어, 선택된 적어도 하나의 객체와 관련된 컨텐츠(content))를 상기 제2 전자 장치(103, 105 또는 107)로 전송하도록 요청하는 역할을 수행하는 것으로 설명하기로 하고, 상기 제2 전자 장치(103, 105 또는 107)는 상기 선택된 적어도 하나의 객체에 관련된 정보를 수신하는 것으로 설명하기로 한다. 또한, 제1 전자 장치(101) 및 제2 전자 장치(103, 105 또는 107)는 모두 상기 도 2를 참조하여 설명하기로 한다.
또한, 본 발명의 다양한 실시 예에 따른 통신은 정보를 전자 장치들 간에 주고 받는 작용, 현상 또는 행위일 수 있다. 본 발명의 다양한 실시 예에 따라, 상기 통신은 이전에 제1 전자 장치(101), 제2 전자 장치(103, 105 또는 107) 및 서버(109)간 수행되었던 한번의 통신뿐만 아니라 다수의 통신을 포함하는 의미일 수 있다. 본 발명의 다양한 실시 예에 따라 상기 통신은 통신 네트워크를 통한 유선 또는 무선 통신, 통신 네트워크를 통하지 않은 직접 연결을 통한 통신 또는 근거리 무선 통신 중 적어도 하나를 포함할 수 있다.
상기 도 2를 참조하면, 본 발명의 다양한 실시 예에 따르면, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 제어부(200)는 전자 장치의 동작에 따른 정보, 애플리케이션 또는 기능의 실행에 따른 정보(예를 들어, 컨텐츠)를 처리할 수 있으며, 애플리케이션 실행에 따른 정보를 실행 화면에 표시하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 제어부(200)는 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체를 확인하고, 확인된 객체와 관련된 정보를 검색하도록 제어할 수 있다. 또한, 상기 제어부(200)는 상기 선택된 적어도 하나의 객체와 관련된 정보를 획득하면, 획득한 적어도 하나의 객체와 관련된 정보(예를 들어, 컨텐츠)를 다른 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107)로 전송하도록 제어할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107) 중 적어도 하나)의 제어부(200)는 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101)) 또는 서버로부터 상기 적어도 하나의 객체와 관련된 정보를 수신하면, 수신된 적어도 하나의 객체와 관련된 정보를 표시하거나 음원 정보로 출력하도록 처리할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 제어부(200)는 실행된 애플리케이션의 실행 화면 내에서 적어도 하나의 영역 또는 위치가 사용자에 의해 선택되면, 선택에 따른 입력 정보를 수신하고, 입력 정보를 확인하여 선택된 영역 또는 위치에 대응하는 적어도 하나의 객체를 확인할 수 있다. 또한, 상기 제어부(200)는 선택된 적어도 하나의 객체와 관련된 정보를 제2 전자 장치로 전송하기 위한 명령에 대한 입력 정보를 수신할 수 있다. 상기 명령에 대한 입력을 수신하면, 상기 제어부(200)는 확인된 적어도 하나의 객체의 소스 정보를 확인하고, 소스 정보를 기반으로 상기 적어도 하나의 객체와 관련된 정보를 검색 또는 서버로 요청할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 검색된 또는 서버로부터 수신된 적어도 하나의 객체와 관련된 정보를 표시부(240)의 현재 실행 화면에 표시하지 않도록 설정할 수 있다. 또한, 상기 제어부(200)는 상기 적어도 하나의 객체와 관련된 정보를 제2 전자 장치로 전송하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 서버로 상기 선택된 적어도 하나의 객체와 관련된 정보를 요청하는 메시지를 전송 시 메시지에 상기 선택된 적어도 하나의 객체의 소스 정보를 포함하여 전송하도록 제어할 수 있다. 또한, 상기 제어부(200)는 서버에서 직접 상기 선택된 적어도 하나의 객체와 관련된 정보를 전송하도록 요청하는 정보 및 제2 전자 장치의 식별 정보를 상기 메시지에 더 포함하여 전송하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 현재 실행되는 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보를 다른 애플리케이션을 통해 획득하도록 제어할 수 있다. 다양한 실시 예에 따라, 상기 제어부(200)는 선택된 적어도 하나의 객체가 텍스트인 경우, 텍스트와 관련된 정보를 검색할 수 있는 애플리케이션(예를 들어, 사전, 번역, 검색, 지도, 위치 측위, 문자 메시지 또는 메신저 서비스 중 적어도 하나 또는 이외에 텍스트 검색이 가능한 제1 전자 장치에서 제공하는 다양한 서비스 중 하나)를 통해 선택된 텍스트와 관련된 정보를 검색하도록 제어할 수 있다. 다양한 실시 예에 따라, 제어부(200)는 선택된 적어도 하나의 객체가 이미지인 경우, 이미지와 관련된 정보를 검색할 수 있는 애플리케이션(예를 들어, 앨범(갤러리), 이미지 검색 또는 카메라 관련 서비스 중 적어도 하나)을 통해 선택된 이미지와 관련된 정보를 검색하도록 제어할 수 있다. 아울러, 제1 전자 장치의 제어부(200)는 상술한 바와 같이, 다른 애플리케이션을 통해 선택된 적어도 하나의 객체와 관련된 정보를 검색 시 다른 애플리케이션의 실행 화면은 표시부(240)에 표시하지 않도록 설정할 수 있으며, 단지, 정보 획득을 위한 일부 프로세싱 동작만 연동하도록 제어할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 이전 실행 화면에서 적어도 하나의 객체를 사용자에 의해 선택받은 후, 전환된 현재 실행 화면에서 제2 전자 장치로 선택된 적어도 하나의 객체와 관련된 정보를 전송하도록 하는 명령을 입력받을 수 있다. 상기 명령이 입력됨에 따라 상기 제어부(200)는 상기 명령에 대응하여 상기 선택된 객체와 관련된 정보를 저장부(230)에서 검색하거나 서버로 요청할 수 있다. 또한, 상기 제어부(200)는 상기 선택된 객체와 관련된 정보를 획득하더라도 획득한 정보를 표시하기 위해, 화면 분할, 화면 전환 또는 팝업창 중 적어도 하나의 동작을 수행하지 않도록 제어할 수 있다. 즉, 상기 제어부(200)는 현재 표시되는 실행 화면을 그대로 표시하고, 획득한 정보는 제2 전자 장치에서 표시하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 상기 선택된 적어도 하나의 정보가 갱신되면, 갱신된 정보를 현재 실행 화면에 표시하지 않고, 제2 전자 장치로 전송하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 제1 전자 장치의 제어부(200)는 주변에 위치한 제2 전자 장치를 검색하고, 검색된 제2 전자 장치 중 선택된 적어도 하나의 객체를 표시하거나 음원 정보로 출력할 수 있는 제2 전자 장치를 선택할 수 있다. 또한, 상기 제어부(200)는 검색된 제2 전자 장치들의 식별 정보를 실행 화면에 표시하도록 제어할 수 있다.
또한, 다양한 실시 예에 따라, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 제어부(200)는 전자 장치의 동작을 실행하는 동작 실행부(도시되지 않음)를 더 포함할 수 있다. 상기 동작 실행부는 사용자의 입력 또는 감지된 입력에 대응하여 동작을 수행할 수 있도록 제어할 수 있다. 또한, 다양한 실시 예에 따라, 동작 실행부는 동작 실행에 따른 실행 화면, 애플리케이션 또는 정보를 표시할 수 있도록 표시부(240)를 제어할 수 있거나, 전자 장치의 다양한 동작(예를 들어, 진동 발생, 스피커를 통한 음원 정보 출력, 카메라 모듈과 관련된 동작 중 적어도 하나)들을 제어할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 제어부(200)는 프로세서의 적어도 일부일 수 있으며, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 제어부(200)의 적어도 일부의 구성은 하드웨어적으로 CPU(central processing unit)/MPU(micro processingunit)를 포함하는 적어도 하나의 프로세서와 적어도 하나의 메모리 로딩 데이터가 로딩되는 메모리(예를 들어, 레지스터 및/또는 RAM(random access memory)) 및 프로세서와 메모리로 적어도 하나의 데이터들을 입출력하는 버스의 일부를 포함하여 이루어질 수 있다. 또한, 상기 제어부(200)는 소프트웨어적으로 전자 장치에 정의된 기능을 수행하기 위해 소정의 기록매체로부터 메모리로 로딩되어 상기 프로세서에 의해 연산 처리되는 소정의 프로그램 루틴(routine) 또는 프로그램 데이터를 포함하여 이루어질 수 있다.
본 발명의 다양한 실시 예에 따라, 전자 장치(예를 들어, 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))에 포함된 통신부(210)는 통신 인터페이스를 통해 다른 전자 장치(도시되지 않음) 또는 서버(103) 간의 통신을 수행할 수 있다. 또한, 다양한 실시 예에 따라, 상기 통신부(210)는 통신 인터페이스를 통해 무선 통신 또는 유선 통신을 통해서 네트워크(111)에 연결 또는 장치 간 연결을 통해 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(bluetooth), NFC(near field communication), GPS(global positioning system) 또는 셀룰라(cellular) 통신(예를 들어, LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 중) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다. 또한, 통신부(210)는 상술한 통신 방식 이외에도 기타 널리 공지되었거나 향후 개발될 모든 형태의 통신 방식을 포함할 수 있다.
또한, 다양한 실시 예에 따라, 통신부(210)는 제어부(200)의 제어에 따라 정보를 송수신할 수 있다.
본 발명의 다양한 실시 예에 따르면, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 통신부(210)는 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체를 분석한 정보(예를 들어, 선택된 객체의 소스 정보(예컨대, html 언어의 문서))를 제어부(200)로부터 전달받을 수 있다. 또한, 상기 통신부(210)는 전달받은 상기 적어도 하나의 객체를 분석한 정보와 관련된 정보(예를 들어, 컨텐츠)를 검색하기 위한 메시지를 버스(도시되지 않음)를 통해 제1 전자 장치 내에 포함된 저장부(230) 또는 통신 네트워크를 통해 서버(예를 들어, 도 1의 서버(109))로 전송할 수 있다. 상기 통신부(210)는 상기 선택된 적어도 하나의 객체를 분석한 정보를 기반으로 검색된 정보 예를 들어, 상기 선택된 적어도 하나의 객체에 관련된 정보를 수신할 수 있다. 상기 통신부(210)는 검색된 정보를 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107)로 전송하도록 요청하는 메시지를 서버(예를 들어, 도 1의 서버(109))로 전송할 수 있다. 또한, 상기 통신부(210)는 검색된 정보를 제2 전자 장치 예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107)로 전송할 수 있다.
또한, 본 발명의 실시 예에 따르면, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 통신부(210)는 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107) 중 적어도 하나)와 유선 또는 무선 통신 방식을 통해 통신하거나, 통신 네트워크를 통해 통신을 수행할 수 있다. 다양한 실시 예에 따라, 상기 통신부(210)는 예를 들어, 근거리 무선 통신을 통해 상기 제2 전자 장치를 검색하기 위한 신호를 전송하고, 제2 전자 장치로부터 전송 신호에 대한 응답 신호를 수신할 수 있다. 또한, 상기 통신부(210)는 선택된 제2 전자 장치와 접속 절차를 위한 메시지들을 송수신할 수 있으며, 선택된 제2 전자 장치로 적어도 하나의 선택된 객체와 관련된 정보 또는 갱신 정보 중 적어도 하나를 포함한 정보 전송 메시지를 전송할 수 있다.
또한, 본 발명의 실시 예에 따르면, 상기 제1 전자 장치의 통신부(210)는 서버로 상기 선택된 적어도 하나의 객체에 대한 소스 정보, 선택된 제2 전자 장치의 식별 정보 또는 선택된 제2 전자 장치로 정보를 직접 전송하도록 요청하는 정보 중 적어도 하나를 포함하는 정보 요청 메시지를 전송할 수 있다. 또한, 상기 통신부(210)는 검색된 적어도 하나의 객체와 관련된 정보를 포함하는 정보 전송 메시지 또는 정보 전송 결과 메시지 중 적어도 하나를 서버로부터 수신하여 제어부(200)로 전달할 수 있다.
본 발명의 다양한 실시 예에 따라, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 및 제2 전자 장치(103, 105 또는 107))의 입력부(220)는 사용자로부터 입력되는 숫자 및 문자 정보 중의 다양한 정보, 각종 기능 설정 및 전자 장치의 기능 제어와 관련하여 입력되는 신호를 제어부(200)로 전달할 수 있다. 또한, 상기 입력부(220)는 특정 기능을 지원하는 애플리케이션을 실행하기 위한 사용자 입력을 지원할 수 있다. 상기 입력부(220)는 키보드나 키패드와 같은 키 입력 2수단, 터치센서나 터치 패드와 같은 터치 입력 수단, 음원 입력 수단, 다양한 센서 및 카메라 중 적어도 하나 이상을 포함할 수 있으며, 제스처 입력 수단을 포함할 수도 있다. 이 외에도 입력부(220)는 현재 개발 중이거나 향후 개발될 수 있는 모든 형태의 입력 수단이 포함될 수 있다. 또한, 본 발명의 다양한 실시 예에 따라, 상기 입력부(220)는 표시부(230)의 터치패널을 통해 사용자가 입력하는 정보를 사용자로부터 입력받을 수 있으며, 입력된 정보를 제어부(200)로 전달할 수 있다.
또한, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 입력부(220)는 표시부(240)에 표시된 애플리케이션의 실행 화면 내에서 적어도 하나의 객체 선택에 따라 입력되는 입력 정보를 제어부(200)로 전달할 수 있다. 또한, 상기 입력부(220)는 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107))로 적어도 하나의 객체와 관련된 정보를 전송하기 위한 명령에 따라 입력된 입력 정보(예를 들어, 터치 입력, 키 입력, 제스쳐 입력 또는 펜 입력 중 적어도 하나)를 제어부(200)로 전달할 수 있다.
본 발명의 다양한 실시 예에 따라, 전자 장치(예를 들어, 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 저장부(230)는 다양한 실시 예에 따른 기능 동작에 필요한 프로그램을 비롯하여, 프로그램 실행 중에 발생하는 다양한 데이터를 일시적으로 저장할 수 있다. 상기 저장부(230)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다. 상기 프로그램 영역은 전자 장치를 부팅시키는 운영체제(OS)와 같은 전자 장치의 구동을 위한 관련된 정보들을 저장할 수 있다. 상기 데이터 영역은 다양한 실시 예에 따라 송수신된 데이터 및 생성된 데이터를 저장할 수 있다. 또한, 상기 저장부(230)는 플래시 메모리(flash memory), 하드디스크(hard disk), 멀티미디어 카드 마이크로(multimedia card micro) 타입의 메모리(예를 들어, SD 또는 XD 메모리 중), 램(RAM), 롬(ROM) 중의 적어도 하나의 저장매체를 포함하여 구성될 수 있다.
본 발명의 다양한 실시 예에 따르면, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 저장부(230)는 실행되는 애플리케이션에 관련된 정보, 현재 표시부(240)에 표시된 애플리케이션의 실행 화면에 관련된 정보(예를 들어, 실행 화면의 소스 정보(html 언어의 문서)) 및 애플리케이션 실행 또는 제어에 따른 정보 중 적어도 하나를 저장할 수 있다. 또한, 상기 저장부(230)는 실행된 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체를 분석한 정보(예를 들어, 애플리케이션의 실행 화면의 소스 정보에서 선택된 객체를 분석한 정보)를 저장할 수 있다. 또한, 상기 저장부(230)는 상기 분석한 정보의 검색 요청에 따라 수신된 정보(예를 들어, 선택된 적어도 하나의 객체에 관련된 정보)를 저장할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107))의 저장부(230)는 제1 전자 장치 또는 서버로부터 수신된 정보(예를 들어, 선택된 적어도 하나의 객체에 관련된 정보)를 저장할 수 있다.
본 발명의 다양한 실시 예에 따라, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 및 제2 전자 장치(103, 105 또는 107))의 표시부(240)는 동작 실행부(도시되지 않음)로부터의 동작 제어에 따라 동작 실행 정보 및 동작 실행 결과 정보를 표시할 수 있다. 또한, 상기 표시부(240)는 사용자에게 각종 정보(예를 들어, 텍스트, 이미지, 동영상 또는 음원 중 적어도 하나)를 표시하거나 음원 정보로 출력할 수 있다. 또한, 상기 표시부(240)는 화면상에서 입력창 또는 입력창에 다양한 문자, 숫자, 기호 중 적어도 하나를 입력할 수 있는 입력 패드(예를 들어, 버튼)를 다양한 방법으로 표시할 수 있다. 또한, 상기 표시부(240)는 정보 송수신에 관련된 다양한 애플리케이션의 실행에 따른 서비스 실행 화면을 표시할 수 있다.
본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101))의 표시부(240)는 실행된 애플리케이션의 실행 화면을 표시하고, 실행된 애플리케이션의 실행 화면 내에서 적어도 하나의 객체를 선택함에 따른 결과 화면을 표시(예를 들어, 선택된 객체를 하이라이트 표시, 블록화하여 표시, 다른 색상으로 표시 또는 명암을 달리하여 표시 중 적어도 하나 즉, 실행 화면을 가리지 않는 형태의 표시)할 수 있다. 또한, 상기 표시부(240)는 상기 적어도 하나의 객체 선택에 따라 적용할 적어도 하나의 기능(예를 들어, 관련 서비스)을 표시할 수 있으며, 주변에 위치한 적어도 하나의 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107))에 대한 정보를 표시할 수 있다. 상기 표시부(240)는 제2 전자 장치로 선택된 적어도 하나의 객체에 관련된 정보를 현재 실행 화면에 표시하지 않으며, 화면분할, 화면 전환 또는 팝업창 중 적어도 하나가 표시되지 않고, 현재 실행되는 애플리케이션의 실행 화면을 그대로 표시할 수 있다.
또한, 본 발명의 다양한 실시 예에 따라, 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107))의 표시부(240)는 제1 전자 장치 또는 서버로부터 수신된 적어도 하나의 객체와 관련된 정보를 표시할 수 있다. 또한, 상기 표시부(240)는 상기 적어도 하나의 객체와 관련된 정보의 갱신 정보를 수신하면, 수신된 갱신 정보를 표시할 수 있다.
또한, 본 발명의 다양한 실시 예에 따르면, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 표시부(240)가 터치 스크린의 형태로 구현될 경우, 입력부(220) 및/또는 표시부(240)는 터치 스크린에 대응할 수 있다. 상기 표시부(240)는 터치 스크린 형태로 입력부(220)와 함께 구현되는 경우, 사용자의 터치 동작에 따라 발생하는 다양한 정보들을 표시할 수 있다.
또한, 다양한 실시 예에 따라, 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 표시부(240)는 LCD(liquid crystal display), TFT-LCD(thin film transistor LCD), OLED(organic light emitting diodes), 발광다이오드(LED), AMOLED(active matrix organic LED), 플렉시블 디스플레이(flexible display) 및 3차원 디스플레이(3 dimension) 중 적어도 하나 이상으로 구성될 수 있다. 또한, 이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 TOLED(transparant OLED)를 포함하는 투명 디스플레이 형태로 구성될 수 있다.
또한, 상기 도 2를 통해 도시된 전자 장치(예를 들어, 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))의 주요 구성요소의 위치는 다양한 실시 예에 따라 변경 가능하다. 또한, 제어부(200)를 구성하는 구성요소는 상기 도 2에 도시된 구성 요소에 한정되는 것은 아니며, 다양한 기능을 수행하는 다양한 구성요소를 포함하여 구성될 수도 있다.
이와 같이, 도 2의 전자 장치(예를 들어, 제1 전자 장치(101) 또는 제2 전자 장치(102))를 통해 전자 장치의 주요 구성요소에 대해 설명하였다. 그러나 도 2를 통해 도시된 구성요소가 모두 필수 구성요소인 것은 아니며, 도시된 구성요소보다 많은 구성 요소에 의해 상기 전자 장치가 구현될 수도 있고, 그 보다 적은 구성요소에 의해 상기 전자 장치가 구현될 수도 있다. 예를 들어, 상기 전자 장치는 전기적인 신호인 음원을 아날로그 신호로 변환하여 출력하는 음원 출력부(예를 들어, 스피커)(도시되지 않음)를 더 포함하여 구성될 수 있다.
도 3은 본 발명의 다양한 실시 예에 따른 제1 전자 장치와 연동하는 제2 전자 장치의 예를 나타내는 도면이다.
상기 도 3을 참조하면, 제1 전자 장치(301)(예컨대, 도 1의 제1 전자 장치(101))는 예를 들어, 스마트폰일 수 있으며, 제1 전자 장치와 연동하는 제2 전자 장치(302)(예컨대, 도 1의 제2 전자 장치(103, 105 또는 107)는 제1 전자 장치(301)에서 실행되는 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 정보를 표시 또는 음원 정보로 출력할 수 있는 디바이스로서, 예를 들어, 제1 전자 장치(301)의 주변에 위치한 웨어러블 디바이스일 수 있다. 그러나 본 발명의 다양한 실시 예들에서는 상기 제1 전자 장치(301) 및 상기 제2 전자 장치(302)가 이에 한정되는 것은 아니다. 상기 웨어러블 디바이스는 예컨대, 시계형 장치, 안경형 장치, 의류형 장치 형태의 장치로서, 스마트 안경, 머리 착용형 장치(head-mounted-device(HMD)), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 스마트 미러, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
또한, 상기 제1 전자 장치(301)와 상기 제2 전자 장치(302)는 소정의 통신 네트워크를 통해 연결될 수 있다. 예컨대, 상기 통신 네트워크는 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 단거리 통신망(PAN; personal area network), 근거리 통신망(LAN; local area network), 도시권 통신망(MAN; metropolitan area network), 광역 통신망(WAN; wide area network) 등 다양한 통신망으로 구성될 수 있다. 또한, 상기 통신 네트워크는 공지의 월드와이드웹(WWW; world wide web)일 수 있으며, 적외선(infrared data association; IrDA) 또는 블루투스(bluetooth)와 같이 단거리 통신에 이용되는 무선전송기술을 이용할 수도 있다. 또한, 상기 통신 네트워크는 방송 신호를 수신하기 위한 케이블 방송 통신망, 지상파 방송 통신망, 위성 방송 통신망 등을 포함할 수도 있다.
또한, 상기 제1 전자 장치(301)와 상기 제2 전자 장치(302)가 근거리에 위치할 경우 상기 통신 수단들 중에서 예를 들어, 근거리 무선 통신 수단(예컨대, 블루투스(bluetooth) 통신 수단)에 의해 서로 연결될 수 있다.
본 발명의 다양한 실시 예 중 어느 하나에 따른 제1 전자 장치는, 제1 전자 장치에 있어서, 상기 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면을 표시하는 표시부; 및 상기 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하고, 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 프로세서;를 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠가 업데이트되는 경우, 업데이트된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 선택된 적어도 하나의 객체에 관련된 컨텐츠가 상기 애플리케이션의 현재 실행 화면에 표시되지 않도록 설정할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 적어도 하나의 객체의 소스 정보를 기반으로 기 저장된 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 검색하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 서버에 요청하고, 요청에 따라 상기 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 선택된 적어도 하나의 객체의 소스 정보 및 상기 제2 전자 장치의 식별 정보를 기반으로 서버에서 직접 상기 제2 전자 장치로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 전송하도록 요청할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 연관된 다른 애플리케이션과 연동하여, 상기 다른 애플리케이션을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 선택된 적어도 하나의 객체와 관련된 적어도 하나의 서비스 또는 기능을 표시하고, 상기 적어도 하나의 기능에 대해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 제1 전자 장치의 주변에 위치한 통신이 가능한 제2 전자 장치를 검색하고, 검색된 제2 전자 장치들 중 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 표시 또는 음성 정보로 출력하기 위한 상기 제2 전자 장치를 선택할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 제1 전자 장치의 주변에 위치한 상기 제2 전자 장치가 적어도 둘 이상이 검색된 경우, 검색된 적어도 둘 이상의 제2 전자 장치에 대한 정보를 상기 실행 화면에 표시할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 프로세서는, 상기 애플리케이션의 이전 실행 화면 내에서 적어도 하나의 객체가 선택된 후, 전환된 현재 실행 화면에서 사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 전환된 현재 실행 화면에 상기 이전 실행 화면에서 선택된 상기 적어도 하나의 객체와 관련된 컨텐츠를 검색하여 획득한 정보를 상기 현재 실행 화면에 표시하지 않고 상기 제2 전자 장치로 전송하도록 제어할 수 있다.
이하, 본 발명의 다양한 실시 예에 따른 전자 장치에서의 정보 처리 방법을 첨부된 도면들을 참조하여 구체적으로 설명하기로 한다.
도 4는 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
도 4를 참조하면, 401 동작에서는, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 도 3의 제1 전자 장치(301))가 애플리케이션을 실행하고, 실행된 애플리케이션의 실행 화면을 표시할 수 있다.
403 동작에서는, 상기 제1 전자 장치가 애플리케이션의 실행 화면 내에서 사용자에 의해 적어도 하나의 객체를 선택받을 수 있다.
405 동작에서는, 상기 제1 전자 장치가 상기 선택된 적어도 하나의 객체를 제2 전자 장치로 전송하기 위한 명령을 입력받을 수 있다. 다양한 실시 예에 따라, 상기 명령은 상기 선택된 적어도 하나의 객체를 제2 전자 장치로 전송하기 위해 설정된 사용자의 제스쳐일 수 있다. 상기 제스쳐는 사용자가 신체의 일부 또는 사용자와 연계된 물체의 일부를 사용하여 만든 움직임을 의미하고, 손가락 또는 손 등의 특정 신체 부위의 움직임만을 한정하지는 않는다. 예컨대, 제스처는 팔의 접힘, 고개의 움직임, 펜을 이용한 움직임 등과 같은 다양한 동작들을 포함하는 의미로 해석될 수 있다. 예컨대, 상기 제스처는 터치(touch), 터치의 해제(release), 회전(rotate), 핀치(pinch), 스프레드(spread), 터치 드래그(touch drag), 플릭(flick), 스와이프(swipe), 터치 앤 홀드(touch and hold), 탭(tap), 더블 탭(double tap), 드래그(drag), 드래그 앤 드롭(drag and drop), 멀티 스와이프(multiswipes), 쉐이크(shake), 로테이트(rotate) 등의 동작을 포함할 수 있다. 또한, 터치한 상태란 터치 스크린상에 손가락이 닿았거나 실제로 닿지 않았더라도 매우 근접하게 접근한 것을 포함할 수 있다. 본 발명의 다양한 실시 예에서는 전자 장치의 디스플레이가 커버로 덮인 상태에서 커버의 화면 투영부를 통해 표시되는 영역에 대해 사용자가 상기 각종 제스처를 취함으로써 다양한 애플리케이션의 실행 화면들을 제공 또는 선택된 적어도 하나의 객체를 다른 디바이스로 전송할 수 있다. 이때, 본 발명의 다양한 실시 예들에 따라 전자 장치에 구비된 다양한 센서들로부터 센싱된 정보를 이용하여 사용자의 각 상황에 따른 다양한 기능들을 제공할 수도 있다.
407 동작에서, 상기 제1 전자 장치가 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송할 수 있다.
본 발명의 다양한 실시 예 중 어느 하나에 따른 제1 전자 장치의 정보 처리 방법에 있어서, 상기 방법은, 상기 제1 전자 장치에서 애플리케이션을 실행하는 동작; 상기 애플리케이션의 실행 화면 내에 표시된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하는 동작; 및 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작;을 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 방법은, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠가 업데이트되는 경우, 업데이트된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작을 더 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 방법은, 상기 선택된 적어도 하나의 객체에 관련된 컨텐츠가 상기 애플리케이션의 현재 실행 화면에 표시되지 않도록 설정하는 동작을 더 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 상기 적어도 하나의 객체의 소스 정보를 기반으로 기 저장된 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 검색하도록 제어할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 서버에 요청하는 동작; 요청에 따라 상기 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신하는 동작; 및 수신된 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 상기 선택된 적어도 하나의 객체의 소스 정보 및 상기 제2 전자 장치의 식별 정보를 서버로 전송하는 동작; 및 상기 소스 정보를 기반으로 검색된 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 식별 정보를 기반으로 직접 상기 제2 전자 장치로 전송한 결과 정보를 상기 서버로부터 수신하는 동작;을 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 연관된 다른 애플리케이션과 연동하는 동작; 상기 다른 애플리케이션을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및 획득한 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 선택된 적어도 하나의 객체와 관련된 서비스 또는 기능을 표시하는 동작; 상기 표시된 서비스 또는 기능 중 적어도 하나의 서비스 또는 기능을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및 획득한 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 방법은, 상기 제1 전자 장치의 주변에 위치한 통신이 가능한 제2 전자 장치를 검색하는 동작; 및 검색된 제2 전자 장치들 중 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 표시 또는 음성 정보로 출력하기 위한 상기 제2 전자 장치를 선택하는 동작;을 더 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 방법은, 상기 제1 전자 장치의 주변에 위치한 상기 제2 전자 장치가 적어도 둘 이상이 검색된 경우, 검색된 적어도 둘 이상의 제2 전자 장치에 대한 정보를 상기 실행 화면에 표시하는 동작;을 더 포함할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은, 상기 애플리케이션의 이전 실행 화면 내에서 적어도 하나의 객체가 선택된 후, 전환된 현재 실행 화면에서 사용자에 의해 적어도 하나의 제스쳐의 입력을 수신하는 동작; 상기 전환된 현재 실행 화면에 상기 이전 실행 화면에서 선택된 상기 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및 획득한 상기 적어도 하나의 객체와 획득한 정보를 상기 현재 실행 화면에 표시하지 않고 상기 제2 전자 장치로 전송하는 동작;을 포함할 수 있다.
상술한 바와 같은 전자 장치의 구성 및 동작을 기반으로 본 발명의 다양한 실시 예를 구체적으로 설명하기로 한다. 이하, 본 발명의 다양한 실시 예에서 실행된 애플리케이션에의 실행 화면 내에서 선택된 영역 또는 위치는 선택된 영역 또는 위치에 대응하는 실행 화면 내에 표시된 적어도 하나의 객체로서 설명하기로 하며, 상기 선택된 적어도 하나의 객체에 관련된 정보는 선택된 적어도 하나의 객체와 관련된 컨텐츠를 예를 들어 설명하기로 한다.
도 5는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
상기 도 5를 참조하면, 본 발명의 다양한 실시 예에 따라, 511 동작에서는, 제1 전자 장치(501)가 사용자에 의해 실행된 애플리케이션의 실행 화면 내에서 적어도 하나의 객체가 선택되면, 적어도 하나의 객체의 선택에 따른 제1 입력 정보 및 선택된 적어도 하나의 객체를 제2 전자 장치(503)로 전송하기 위한 명령(예를 들어, 제스쳐)에 대한 제2 입력 정보를 수신할 수 있다. 상기 제1 입력 정보 및 제2 입력 정보는 사용자의 각 입력 동작에 의해 각각 수신될 수 있으나, 이에 한정되지 않고 제1 입력 정보 및 제2 입력 정보가 사용자의 한 번의 입력 동작에 의해 수신될 수 있다. 다양한 실시 예에 따라, 사용자가 실행 화면 내에서 적어도 하나의 위치 또는 영역에 대응하는 객체를 선택하면, 사용자의 객체 선택의 동작에 대응하여 사용자의 별도의 입력(예를 들어, 제스쳐) 없이, 선택된 객체의 전송 명령이 동시에 이루어질 수 있다. 즉, 사용자에 의한 적어도 하나의 객체가 선택되면, 제1 전자 장치(501)는 상기 적어도 하나의 객체 선택에 따른 입력 정보를 수신함에 따라 별도의 전송 명령에 대한 입력 정보를 수신하지 않더라도 상기 선택된 적어도 하나의 객체에 관련된 정보(예를 들어, 컨텐츠)를 전송하기 위한 동작을 수행할 수 있다.
513 동작에서, 상기 제1 전자 장치(501)는 수신된 제1 입력 정보를 기반으로 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제어부(511)는 상기 제1 입력 정보 예를 들어, 사용자에 위해 선택된 위치 또는 영역을 확인하여, 확인된 위치 또는 영역에 대응하는 객체를 확인할 수 있다.
515 동작에서, 상기 제1 전자 장치(501)는 저장부(도시되지 않음)에서 상기 선택된 적어도 하나의 객체에 관련된 정보를 검색하여, 상기 선택된 적어도 하나의 객체에 관련된 정보를 획득할 수 있다.
517 동작에서는 상기 제1 전자 장치(501)는 획득한 정보 즉, 적어도 하나의 객체에 관련된 정보를 제2 전자 장치(503)에서 표시 또는 음원 정보로 출력할 수 있도록 상기 획득한 정보를 포함한 정보 전송 메시지를 제2 전자 장치(503)로 전송할 수 있다.
519 동작에서는, 제2 전자 장치(503)가 정보 전송 메시지를 수신하면, 정보 전송 메시지에 포함된 적어도 하나의 객체와 관련된 정보를 표시하거나 음원 정보로 출력할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 적어도 하나의 객체에 관련된 정보가 갱신될 때, 상기 제1 전자 장치로부터 갱신된 정보를 수신하여, 갱신된 정보를 표시 또는 음원 정보로 출력할 수 있다. 또한, 다양한 실시 예에 따라, 상기 제2 전자 장치(503)는 정보 전송 메시지에 상기 적어도 하나의 객체와 관련된 정보를 제공하는 서버 또는 정보 제공 장치의 주소 정보가 포함된 경우, 상기 주소 정보를 기반으로 해당 서버 또는 정보 제공 장치로부터 직접 갱신된 정보를 수신할 수 있으며, 갱신된 정보를 표시 또는 음원 정보로 출력할 수 있다.
상술한 바와 같이, 제1 전자 장치(501)는 선택된 적어도 하나의 객체와 관련된 정보를 저장부에 저장된 정보들을 검색하여 획득할 수 있으며, 현재 실행 중인 애플리케이션(예를 들어, 제1 애플리케이션) 외에 상기 선택된 적어도 하나의 객체와 관련된 정보를 다른 애플리케이션(예를 들어 제2 애플리케이션)과의 연동을 통해 획득할 수도 있다.
도 6은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
상기 도 6을 참조하여 보다 구체적으로 설명하면, 601 동작에서는, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 5의 제1 전자 장치(501))가 실행된 애플리케이션의 실행 화면 내에서 사용자에 의해 적어도 하나의 객체를 선택 받은 후, 선택된 객체에 대한 전송 명령에 대한 입력 정보가 수신되었는지를 확인할 수 있다.
확인 결과, 상기 입력 정보를 수신하지 않은 경우, 계속해 601 동작을 수행하고, 전송 명령에 대한 입력 정보를 수신하면, 603 동작에서, 상기 제1 전자 장치는 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 사용자에 의해 실행 화면 내에서 적어도 하나의 객체가 표시된 위치 또는 영역이 선택되면, 선택된 위치 또는 영역의 위치 정보를 확인하고, 상기 실행 화면의 전체 소스 정보에서 확인된 위치 정보에 대응하는 소스 정보를 추출할 수 있다.
605 동작에서, 상기 제1 전자 장치는 현재 선택된 적어도 하나의 객체에 관련된 정보(예를 들어, 컨텐츠)를 전송할 제2 전자 장치(예를 들어, 도 3의 제2 전자 장치(103, 105 또는 107) 또는 도 3의 제2 전자 장치(302))가 존재하지 않으면, 주변에 위치한 적어도 하나의 제2 전자 장치를 검색하여 검색된 제2 전자 장치들 중 적어도 하나의 제2 전자 장치를 선택할 수 있다. 상기 605 동작은 상황에 따라 수행하지 않거나 동작 순서를 달리하여 수행할 수 있다. 다양한 실시 예에 따라, 상기 제1 전자 장치는 미리 접속된 제2 전자 장치가 존재하면, 605 동작을 수행하지 않을 수 있다.
607 동작에서는, 상기 제1 전자 장치가 추출된 소스 정보를 기반으로 저장부(예를 들어, 도 1의 저장부(230))에 저장된 정보들을 검색하여 상기 선택된 적어도 하나의 객체에 관련된 정보를 획득할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 저장된 컨텐츠 중에서 상기 추출된 소스 정보에 포함된 적어도 하나의 정보를 포함하는 적어도 하나의 객체와 관련된 정보(예를 들어, 컨텐츠)를 검색할 수 있다. 상기 컨텐츠는 다른 애플리케이션 또는 기능의 실행에 따라 이전에 저장된 이미지, 텍스트, 동영상, 음원 또는 이들을 조합한 형태의 컨텐츠 중 적어도 하나일 수 있다.
또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 정보 검색 요청에 따라 연관된 다른 애플리케이션과 연동하여, 연동한 애플리케이션이 외부 장치 또는 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 정보를 제공받아 저장하면, 이를 검색하여 상기 적어도 하나의 객체와 관련된 정보를 획득할 수 있다. 또한, 다양한 실시 예에 따라 상기 제1 전자 장치는 설정된 조건에 따라 검색된 정보 중 사용자가 선택 또는 설정된 서비스 또는 기능에 관련된 정보를 필터링하여 유효한 정보 즉, 상기 적어도 하나의 객체와 관련된 정보(예를 들어, 컨텐츠)를 획득할 수 있다.
609 동작에서는, 상기 제1 전자 장치가 획득한 정보 즉, 상기 선택된 적어도 하나의 객체와 관련된 정보를 현재 실행 화면에 표시하지 않도록 설정할 수 있다. 611 동작에서, 상기 제1 전자 장치는 상기 선택된 적어도 하나의 객체와 관련된 정보를 상기 선택된 제2 전자 장치로 전송할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 상기 적어도 하나의 객체에 관련된 정보에 대한 갱신 이벤트가 발생하면, 갱신된 정보를 상기 제2 전자 장치로 전송할 수 있다.
도 7은 본 발명의 다양한 실시 예에 따른 제1 전자 장치, 제2 전자 장치 및 서버 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
상기 도 7을 참조하면, 본 발명의 다양한 실시 예에 따라, 711 동작에서는, 제1 전자 장치(701)가 사용자에 의해 실행된 애플리케이션의 실행 화면 내에서 적어도 하나의 객체가 선택되면, 적어도 하나의 객체의 선택에 따른 제1 입력 정보 및 선택된 적어도 하나의 객체를 제2 전자 장치(703)로 전송하기 위한 명령(예를 들어, 터치 입력, 키 입력, 제스쳐 입력 또는 펜 입력 중 적어도 하나를 포함)에 대한 제2 입력 정보를 수신할 수 있다. 상기 제1 입력 정보 및 제2 입력 정보는 사용자의 각 입력 동작에 의해 각각 수신될 수 있으나, 이에 한정되지 않고 제1 입력 정보 및 제2 입력 정보가 사용자의 한 번의 입력 동작에 의해 수신될 수 있다. 다양한 실시 예에 따라, 사용자가 실행 화면 내에서 적어도 하나의 위치 또는 영역에 대응하는 객체를 선택하면, 사용자의 객체 선택의 동작에 대응하여 사용자의 별도의 입력(예를 들어, 터치 입력, 키 입력, 제스쳐 입력 또는 펜 입력 중 적어도 하나를 포함) 없이, 선택된 객체의 전송 명령이 입력될 수 있다. 즉, 사용자에 의한 적어도 하나의 객체가 선택되면, 제1 전자 장치(701)는 상기 적어도 하나의 객체 선택에 따른 입력 정보를 수신함에 따라 별도의 전송 명령에 대한 입력 정보를 수신하지 않더라도 상기 선택된 적어도 하나의 객체에 관련된 정보(예를 들어, 컨텐츠)를 전송하기 위한 동작을 수행할 수 있다.
713 동작에서, 상기 제1 전자 장치(701)는 수신된 제1 입력 정보를 기반으로 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치(701)는 상기 제1 입력 정보 예를 들어, 사용자에 위해 선택된 위치 또는 영역을 확인하여, 확인된 위치 또는 영역에 대응하는 객체를 확인할 수 있다. 또한, 상기 제1 전자 장치(701)는 확인된 객체에 대한 소스 정보를 확인할 수 있다.
715 동작에서, 상기 제1 전자 장치(701)는 선택된 적어도 하나의 객체에 대한 소스 정보를 포함한 정보 요청 메시지를 서버로 전송하여, 상기 선택된 적어도 하나의 객체에 관련된 정보를 요청할 수 있다.
717 동작에서, 서버에서는 상기 정보 요청 메시지를 수신하면, 상기 정보 요청 메시지에 포함된 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 정보를 검출할 수 있다.
719 동작에서, 상기 제1 전자 장치(701)는 서버로부터 요청한 상기 적어도 하나의 객체에 관련된 정보를 포함한 정보 전송 메시지를 수신할 수 있다.
721 동작에서는 상기 제1 전자 장치(701)는 수신한 정보 전송 메시지에 포함된 적어도 하나의 객체에 관련된 정보를 제2 전자 장치(703)에서 표시 또는 음원 정보로 출력할 수 있도록 상기 적어도 하나의 객체와 관련된 정보를 포함한 정보 전송 메시지를 제2 전자 장치(703)로 전송할 수 있다.
723 동작에서는, 제2 전자 장치(703)가 정보 전송 메시지를 수신하면, 정보 전송 메시지에 포함된 적어도 하나의 객체와 관련된 정보를 표시하거나 음원 정보로 출력할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제2 전자 장치(703)는 상기 적어도 하나의 객체에 관련된 정보가 갱신될 때, 상기 제1 전자 장치(701)로부터 갱신된 정보를 수신하여, 갱신된 정보를 표시 또는 음원 정보로 출력할 수 있다. 또한, 다양한 실시 예에 따라, 상기 제2 전자 장치(703)는 정보 전송 메시지에 상기 적어도 하나의 객체와 관련된 정보를 제공하는 서버 또는 정보 제공 장치의 주소 정보가 포함된 경우, 상기 주소 정보를 기반으로 해당 서버 또는 정보 제공 장치로부터 직접 갱신된 정보를 수신할 수 있으며, 갱신된 정보를 표시 또는 음원 정보로 출력할 수 있다.
상술한 바와 같이, 제1 전자 장치(701)는 선택된 적어도 하나의 객체와 관련된 정보를 서버로부터 획득할 수 있으며, 현재 실행 중인 애플리케이션(예를 들어, 제1 애플리케이션) 외에 상기 선택된 적어도 하나의 객체와 관련된 정보를 다른 애플리케이션(예를 들어 제2 애플리케이션)과의 연동을 통해 서버로부터 획득할 수도 있다.
도 8은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
상기 도 8을 참조하여 보다 구체적으로 설명하면, 801 동작에서는, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 7의 제1 전자 장치(701))가 실행된 애플리케이션의 실행 화면 내에서 사용자에 의해 적어도 하나의 객체를 선택 받은 후, 선택된 객체에 대한 전송 명령에 따른 입력 정보가 수신되었는지를 확인할 수 있다.
확인 결과, 상기 입력 정보를 수신하지 않은 경우, 상기 801 동작을 수행하고, 전송 명령에 따른 입력 정보를 수신하면, 803 동작에서, 상기 제1 전자 장치는 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 사용자에 의해 실행 화면 내에서 적어도 하나의 객체가 표시된 위치 또는 영역이 선택되면, 선택된 위치 또는 영역의 위치 정보를 확인하고, 상기 실행 화면의 전체 소스 정보에서 확인된 위치 정보에 대응하는 객체에 대한 소스 정보를 추출할 수 있다.
805 동작에서, 상기 제1 전자 장치는 현재 선택된 적어도 하나의 객체에 관련된 정보를 전송할 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107) 또는 도 3의 제2 전자 장치(302))가 존재하지 않으면, 주변에 위치한 적어도 하나의 제2 전자 장치를 검색하여 검색된 제2 전자 장치들 중 적어도 하나의 제2 전자 장치를 선택할 수 있다. 상기 805 동작은 상황에 따라 수행하지 않거나 동작 순서를 달리하여 수행할 수 있다. 다양한 실시 예에 따라, 상기 제1 전자 장치는 미리 접속된 제2 전자 장치가 존재하면, 805 동작을 수행하지 않을 수 있다.
807 동작에서는, 상기 제1 전자 장치가 추출된 소스 정보를 기반으로 서버로 상기 선택된 적어도 하나의 객체에 관련된 정보를 요청할 수 있다.
809 동작에서는, 상기 제1 전자 장치가 서버로부터 요청에 따라 검색된 상기 적어도 하나의 객체에 관련된 정보를 수신할 수 있다. 다양한 실시 예에 따라 상기 수신된 적어도 하나의 객체에 관련된 정보는 상기 추출된 소스 정보에 포함된 적어도 하나의 정보를 포함하는 컨텐츠 중 적어도 하나를 포함할 수 있다. 상기 컨텐츠는 다른 애플리케이션 또는 기능의 실행에 따라 이전에 저장된 이미지, 텍스트, 동영상, 음원 또는 이들을 조합한 형태의 컨텐츠 중 적어도 하나일 수 있다. 또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 정보 검색 요청에 따라 연관된 다른 애플리케이션과 연동하여, 연동한 애플리케이션이 외부 정보 제공 장치 또는 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신할 수 있다. 또한, 다양한 실시 예에 따라 상기 서버에서는 설정된 조건에 따라 검색된 컨텐츠 중 설정된 서비스 또는 기능에 관련된 컨텐츠를 필터링하여 유효한 컨텐츠를 상기 적어도 하나의 객체와 관련된 정보로 상기 제1 전자 장치로 제공할 수 있다. 상술한 다양한 실시 예에 따라, 상기 서버로부터 수신한 상기 적어도 하나의 객체에 관련된 정보는 상기 도 8뿐만 아니라, 서버로부터 선택된 적어도 하나의 객체에 관련된 정보를 수신하는 동작을 설명하는 다른 도면들에서도 적용될 수 있다.
811 동작에서는, 상기 제1 전자 장치가 획득한 정보 즉, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 현재 실행 화면에 표시하지 않도록 설정할 수 있다. 813 동작에서, 상기 제1 전자 장치는 상기 선택된 적어도 하나의 객체와 관련된 정보를 상기 선택된 제2 전자 장치로 전송할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 상기 적어도 하나의 객체에 관련된 정보에 대한 갱신 이벤트가 발생하면, 갱신된 정보를 상기 제2 전자 장치로 전송할 수 있다.
도 9는 본 발명의 다양한 실시 예에 따른 제1 전자 장치, 제2 전자 장치 및 서버 간의 정보 처리를 위한 동작 절차를 나타내는 도면이다.
상기 도 9를 참조하면, 본 발명의 다양한 실시 예에 따라, 911 동작에서는, 제1 전자 장치(901)가 사용자에 의해 실행된 애플리케이션의 실행 화면 내에서 적어도 하나의 객체가 선택되면, 적어도 하나의 객체의 선택에 따른 제1 입력 정보 및 선택된 적어도 하나의 객체를 제2 전자 장치(903)로 전송하기 위한 명령(예를 들어, 터치 입력, 키 입력, 제스쳐 입력 또는 펜 입력 중 적어도 하나를 포함)에 대한 제2 입력 정보를 수신할 수 있다. 상기 제1 입력 정보 및 제2 입력 정보는 사용자의 각 입력 동작에 의해 각각 수신될 수 있으나, 이에 한정되지 않고 제1 입력 정보 및 제2 입력 정보가 사용자의 한 번의 입력 동작에 의해 수신될 수 있다. 다양한 실시 예에 따라, 사용자가 실행 화면 내에서 적어도 하나의 위치 또는 영역에 대응하는 객체를 선택하면, 사용자의 객체 선택의 동작에 대응하여 사용자의 별도의 입력(예를 들어, 터치 입력, 키 입력, 제스쳐 입력 또는 펜 입력 중 적어도 하나를 포함) 없이, 선택된 객체의 전송 명령이 동시에 이루어질 수 있다. 즉, 사용자에 의한 적어도 하나의 객체가 선택되면, 제1 전자 장치(901)는 상기 적어도 하나의 객체 선택에 따른 입력 정보를 수신함에 따라 별도의 전송 명령에 대한 입력 정보를 수신하지 않더라도 상기 선택된 적어도 하나의 객체에 관련된 정보(예를 들어, 컨텐츠)를 전송하기 위한 동작을 수행할 수 있다.
913 동작에서, 상기 제1 전자 장치(901)는 수신된 제1 입력 정보를 기반으로 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치(901)는 상기 제1 입력 정보 예를 들어, 사용자에 위해 선택된 위치 또는 영역을 확인하여, 확인된 위치 또는 영역에 대응하는 객체를 확인할 수 있다.
915 동작에서, 상기 제1 전자 장치(901)는 선택된 적어도 하나의 객체에 대한 분석(또는 확인) 결과 정보(예를 들어, 소스 정보) 및 선택된 제2 전자 장치(903)의 식별 정보를 포함한 정보 요청 메시지를 서버로 전송하여, 상기 선택된 적어도 하나의 객체에 관련된 정보를 요청할 수 있다.
917 동작에서는, 본 발의 다양한 실시 예에 따라, 서버(905)가, 수신한 적어도 하나의 객체에 대한 소스 정보를 확인하여, 상기 소스 정보에 관련된 정보를 검출할 수 있다.
919 동작에서는, 상기 서버(905)가 검색된 정보 즉, 상기 적어도 하나의 객체와 관련된 정보를 포함한 정보 전송 메시지를 상기 제2 전자 장치의 식별 정보를 기반으로 확인된 제2 전자 장치(903)로 전송할 수 있다.
921 동작에서는, 상기 서버(905)가 제2 전자 장치(903)로 상기 정보 전송 메시지를 전송함에 따른 결과 정보를 포함한 정보 전송 결과 메시지를 제1 전자 장치(901)로 전송할 수 있다.
923 동작에서는 제2 전자 장치(903)가 정보 전송 메시지를 수신하면, 정보 전송 메시지에 포함된 적어도 하나의 객체와 관련된 정보를 표시하거나 음원 정보로 출력할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제2 전자 장치(903)는 상기 적어도 하나의 객체에 관련된 정보가 갱신될 때, 상기 서버(905)로부터 갱신된 정보를 수신하여, 갱신된 정보를 표시하거나 음원 정보로 출력할 수 있다.
상술한 바와 같이, 제1 전자 장치(901)는 선택된 적어도 하나의 객체와 관련된 정보를 서버에서 직접 제2 전자 장치(903)로 전송하도록 요청할 수 있다.
도 10은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 동작 절차를 나타내는 도면이다.
상기 도 10을 참조하여 보다 구체적으로 설명하면, 1001 동작에서는, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치(예를 들어, 도 1의 제1 전자 장치(101) 또는 도 9의 제1 전자 장치(901))가 실행된 애플리케이션의 실행 화면 내에서 사용자에 의해 적어도 하나의 객체를 선택받은 후, 선택된 객체에 대한 전송 명령에 대한 입력 정보가 수신되었는지를 확인할 수 있다.
확인 결과, 상기 입력 정보를 수신하지 않은 경우, 상기 1001 동작을 수행하고, 전송 명령에 대한 입력 정보를 수신하면, 1003 동작에서, 상기 제1 전자 장치는 선택된 적어도 하나의 객체를 확인할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 사용자에 의해 실행 화면 내에서 적어도 하나의 객체가 표시된 위치 또는 영역이 선택되면, 선택된 위치 또는 영역의 위치 정보를 확인하고, 상기 실행 화면의 전체 소스 정보에서 확인된 위치 정보에 대응하는 객체에 대한 소스 정보를 추출할 수 있다.
1005 동작에서, 상기 제1 전자 장치는 현재 선택된 적어도 하나의 객체에 관련된 정보를 전송할 제2 전자 장치(예를 들어, 도 1의 제2 전자 장치(103, 105 또는 107) 또는 도 3의 제2 전자 장치(302))가 존재하지 않으면, 주변에 위치한 적어도 하나의 제2 전자 장치를 검색하여 검색된 제2 전자 장치들 중 적어도 하나의 제2 전자 장치를 선택할 수 있다. 또한, 상기 제1 전자 장치는 제2 전자 장치가 존재하면, 존재하는 적어도 하나의 제2 전자 장치를 선택할 수 있다. 상기 1005 동작은 상황에 따라 수행하지 않거나 동작 순서를 달리하여 수행할 수 있다. 다양한 실시 예에 따라, 상기 제1 전자 장치는 미리 접속된 제2 전자 장치가 존재하면, 1005 동작을 수행하지 않을 수 있다.
1007 동작에서는, 상기 제1 전자 장치가 추출된 소스 정보를 기반으로 서버로 상기 선택된 적어도 하나의 객체에 관련된 정보를 요청할 수 있으며, 선택된 제2 전자 장치의 식별 정보를 서버로 전송하여 직접 선택된 제2 전자 장치로 검색된 적어도 하나의 객체와 관련된 정보를 전송하도록 요청할 수 있다.
1009 동작에서는, 상기 제1 전자 장치가 서버로부터 정보 전송 결과 메시지를 수신할 수 있다. 상기 정보 전송 결과 메시지는 상기 제2 전자 장치로 상기 적어도 하나의 객체와 관련된 정보를 전송함에 따른 결과 정보를 포함할 수 있다.
만약, 상기 서버에서 상기 제2 전자 장치로 요청한 정보를 전송하지 못한 경우, 제1 전자 장치는 다시 정보를 요청하여 상기 적어도 하나의 객체와 관련된 정보를 수신하고, 수신된 적어도 하나의 객체와 관련된 정보를 상기 제2 전자 장치로 전송할 수 있다.
다양한 실시 예에 따라 상기 적어도 하나의 객체에 관련된 정보는 상기 추출된 소스 정보에 포함된 적어도 하나의 정보를 포함하는 컨텐츠 중 적어도 하나를 포함할 수 있다. 상기 컨텐츠는 다른 애플리케이션 또는 기능의 실행에 따라 이전에 저장된 이미지, 텍스트, 동영상, 음원 또는 이들을 조합한 형태의 컨텐츠 중 적어도 하나일 수 있다.
또한, 다양한 실시 예에 따라 상기 서버에서는 설정된 조건에 따라 검색된 컨텐츠 중 설정된 서비스 또는 기능에 관련된 컨텐츠를 필터링하여 유효한 컨텐츠를 상기 적어도 하나의 객체와 관련된 정보로 상기 제1 전자 장치로 제공할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 적어도 하나의 객체에 관련된 정보에 대한 갱신 이벤트가 발생하면, 갱신된 정보를 상기 서버로부터 직접 수신할 수 있다.
이하, 후술되는 본 발명의 다양한 실시 예에서는 선택된 적어도 하나의 객체에 관련된 정보는 예를 들어, 선택된 적어도 하나의 객체에 관련된 컨텐츠로 설명하기로 한다.
도 11은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이고, 도 12는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 11을 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 애플리케이션(예를 들어, 문서를 보기 위한 애플리케이션)을 실행하고, 표시부에 실행된 애플리케이션의 실행 화면(1101)(예를 들어, 문서)을 표시할 수 있다.
사용자가 상기 실행 화면에 표시된 문서에서 적어도 하나의 객체(예를 들어, 문서 내의 적어도 하나의 단어 또는 숙어를 선택하면(1105), 제1 전자 장치는 사용자에 의해 선택된 적어도 하나의 단어 또는 숙어(1103)를 확인하고, 선택된 단어 또는 숙어(예를 들어, 선택된 단어 또는 숙어의 소스 정보)를 검색하거나, 서버로 전송하여 선택된 단어 또는 숙어에 관련된 적어도 하나의 컨텐츠를 요청할 수 있다. 다양한 실시 예에 따라, 제1 전자 장치는 저장부의 데이터베이스(예를 들어, 사전 DB(도시되지 않음))에서 상기 선택된 단어 또는 숙어에 관련된 적어도 하나의 컨텐츠(예를 들어, 선택된 단어 또는 숙어의 의미, 다른 언어로의 번역, 유사어, 반의어, 예문 또는 선택된 단어 또는 숙어가 포함된 문서 중 적어도 하나)를 검색하여 제2 전자 장치에서 표시할 선택된 단어 또는 숙어에 관련된 적어도 하나의 컨텐츠를 획득할 수 있다. 다양한 실시 예에 따라, 상기 선택된 단어 또는 숙어의 소스 정보는 실행 화면에 표시된 문서(예를 들어, html 언어의 문서)에 포함된 단어 또는 숙어에 대응하는 소스 정보, 상기 문서를 제공하는 주소 정보(URL) 또는 쿼리(query)에 관련된 정보 중 적어도 하나를 포함할 수 있다. 또한, 상기 선택된 단어 또는 숙어의 소스 정보는 상기 선택된 단어에 관련된 정보를 제공할 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 다양한 실시 예에 따라 상기 문서 내에 포함된 쿼리에 관련된 정보를 통해 상기 문서를 제공하는 주소(URL)로 선택된 단어 또는 숙어에 관련된 정보를 요청하면, 응답을 통해 상기 선택된 단어 또는 숙어에 관련된 정보를 제공하는 주소 정보(URL)를 제공받을 수 있다.
또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 다른 애플리케이션과 연동하여, 다른 애플리케이션(예를 들어, 사전 서비스, 번역 서비스, 메신저 서비스 또는 검색 서비스 애플리케이션 중 적어도 하나)을 통해 상기 선택된 단어에 관련된 적어도 하나의 컨텐츠를 제공받을 수 있다. 또한, 다양한 실시 예에 따라 상기 제1 전자 장치는 상기 선택된 단어를 서버로 전송하여 서버에서 제공하는 상기 선택된 단어와 관련된 컨텐츠를 제공받아 제2 전자 장치로 전송하거나, 직접 제2 전자 장치로 전송하도록 요청할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 상기 선택된 단어를 포함하는 광고, 이미지, 동영상, 지도, 이벤트 또는 메신저 내용 중 적어도 하나를 상기 선택된 단어에 관련된 컨텐츠로 획득할 수 있다.
상기 도 12를 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 획득한 상기 선택된 단어에 관련된 컨텐츠를 상기 제2 전자 장치로 전송하거나, 서버에서 직접 제2 전자 장치로 전송하도록 요청할 수 있다. 상기 제2 전자 장치는 상기 도 12의 (b)와 같이, 상기 선택된 단어에 관련된 적어도 하나의 컨텐츠(예를 들어, 사전 서비스에 따라 획득한 컨텐츠)(1203)를 표시할 수 있다. 그리고 상기 제1 전자 장치는 상기 도 12의 (a)와 같이, 상기 선택된 단어에 관련된 적어도 하나의 컨텐츠를 표시하지 않으므로 화면 가림 또는 선택된 단어에 따른 화면 전환을 수행하지 않고, 현재 실행되는 애플리케이션의 실행 화면(1201)을 축소, 화면 분할, 화면 전환 또는 화면 겹쳐짐(예를 들어, 팝업창)이 없이 표시할 수 있다.
도 13은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이고, 도 14는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 13을 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 애플리케이션(예를 들어, 문서를 보기 위한 애플리케이션)을 실행하고, 표시부에 실행된 애플리케이션의 실행 화면(3101)(예를 들어, 문서)을 표시할 수 있다.
사용자가 상기 실행 화면에 표시된 문서에서 적어도 하나의 객체(예를 들어, 문서 내에서 일정 영역의 문장을 선택하면(1305), 제1 전자 장치는 사용자에 의해 선택된 문장(1303)을 확인하고, 선택된 문장(예를 들어, 선택된 문장 영역에 대응하는 프레임의 소스 정보)의 소스 정보를 이용하여 선택된 문장을 검색 또는 서버로 선택된 문장에 관련된 적어도 하나의 컨텐츠를 요청할 수 있다. 다양한 실시 예에 따라 상기 선택된 문장의 소스 정보는 실행되는 애플리케이션의 문서를 제공하는 출처(예를 들어, 주소정보(URL)), 쿼리문 또는 선택된 문장에 대한 정보 중 적어도 하나를 포함할 수 있다. 또한, 상기 선택된 문장 영역의 소스 정보는 상기 선택된 문장에 관련된 컨텐츠를 제공할 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 다양한 실시 예에 따라 상기 문서 내에 포함된 쿼리에 관련된 정보를 통해 상기 문서를 제공하는 주소(URL)로 선택된 문장에 관련된 컨텐츠를 요청하면, 응답을 통해 상기 선택된 문장에 관련된 컨텐츠를 제공하는 주소 정보(URL)를 제공받을 수 있다.
다양한 실시 예에 따라, 제1 전자 장치는 다른 애플리케이션(예를 들어, 사전 서비스, 번역 서비스 또는 검색 서비스 애플리케이션 중 적어도 하나)을 통해 상기 선택된 문장에 관련된 컨텐츠(예를 들어, 번역 정보)를 제공받을 수 있다. 또한, 다양한 실시 예에 따라 상기 제1 전자 장치는 상기 선택된 문장의 소스 정보를 서버로 전송하여 서버에서 제공하는 상기 선택된 단어와 관련된 컨텐츠를 제공받아 제2 전자 장치로 전송하거나, 직접 제2 전자 장치로 전송하도록 요청할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 예를 들어, 상기 선택된 문장의 번역 정보, 상기 선택된 문장에 포함된 적어도 하나의 단어 또는 특정 표식이 있는 단어를 포함하는 광고, 이미지, 동영상, 지도, 이벤트 또는 메신저 내용 중 적어도 하나를 상기 선택된 문장에 관련된 컨텐츠로서 획득할 수 있다.
상기 도 14를 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 획득한 상기 선택된 문장에 관련된 컨텐츠를 상기 제2 전자 장치로 전송하거나, 서버에서 직접 제2 전자 장치로 전송하도록 요청할 수 있다. 상기 제2 전자 장치는 상기 도 12의 (b)와 같이, 상기 선택된 문장에 관련된 적어도 하나의 컨텐츠(예를 들어, 사전 서비스 또는 번역 서비스에 따라 획득한 문장의 번역 정보)(1403)를 표시할 수 있다. 그리고 상기 제1 전자 장치는 상기 도 12의 (a)와 같이, 상기 선택된 문장에 관련된 적어도 하나의 컨텐츠를 표시하지 않으므로 화면 가림 또는 선택된 단어에 따른 화면 전환을 수행하지 않고, 현재 실행되는 애플리케이션의 실행 화면(예를 들어, 문서)(1401)을 화면 축소, 화면 분할, 화면 전환 또는 화면 겹쳐짐(예를 들어, 팝업창)이 없이 표시할 수 있다.
도 15는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 15의 (a)를 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 현재 실행된 애플리케이션의 실행 화면(예를 들어, 문서) 내에서 사용자에 의해 선택된 적어도 하나의 객체(예를 들어, 단어, 문장, 이미지 또는 영역, 프레임 중 적어도 하나)에 대한 입력 정보를 수신할 수 있다. 다양한 실시 예에 따라, 사용자에 의해 상기 문서 내에서 적어도 하나의 단어(1503)가 선택되면, 상기 제1 전자 장치는 선택된 단어와 관련된 컨텐츠를 제공받기 위해 설정된 조건에 따라 연동 가능한 서비스 또는 기능을 검색하여 실행 화면에 표시할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 선택된 적어도 하나의 객체가 단어인 경우, 선택된 단어에 관련된 컨텐츠 검색이 가능한 서비스 또는 기능(예를 들어, 다른 애플리케이션)에 대한 정보(예를 들어, 사전, 검색 또는 지도 중 적어도 하나)(1505)를 화면에 표시할 수 있다.
본 발명의 다양한 실시 예에 따라, 상기 제1 전자 장치는 사용자에 의해 표시된 서비스 또는 기능들 중 적어도 하나의 서비스 또는 기능(예를 들어, 검색)이 선택되면, 선택된 서비스 또는 기능을 실행 화면에 표시된 제2 전자 장치의 리스트 내에서 선택된 적어도 하나의 제2 전자 장치에서 표시할 수 있도록 설정(1507)할 수 있다. 다양한 실시 예에 따라, 상기 제1 전자 장치는 화면에 표시된 기능을 사용자가 선택하면, 사용자의 특정 제스쳐(예를 들어, 드래그)를 통해 이동한 위치에 표시된 제2 전자 장치를 선택할 수 있다. 또한, 상기 제1 전자 장치는 주변에 위치한 제2 전자 장치들을 검색하고, 검색된 제2 전자 장치들 중 통신이 가능한 제2 전자 장치들의 식별 정보를 리스트 형태(1501) 상기 실행 화면에 표시할 수 있다.
또한, 도 15의 (b)를 참조하면, 본 발명의 다양한 실시 예에 따라, 상기 제1 전자 장치는 상기 선택된 단어에 관련된 컨텐츠를 선택된 서비스 또는 기능(예를 들어, 검색)을 통해 검색하여 상기 선택된 단어에 관련된 컨텐츠를 획득하거나 상기 선택된 단어에 관련된 컨텐츠를 제공하는 서버에서 상기 제2 전자 장치로 직접 전송하도록 요청할 수 있다. 상기 제1 전자 장치의 상기 선택된 단어에 관련된 컨텐츠 획득 또는 요청에 따라, 본 발명의 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 제1 전자 장치 또는 서버로부터 선택된 단어에 관련된 정보를 수신하고, 수신된 정보를 표시(1509)할 수 있다. 다양한 실시 예에 따라 상기 제2 전자 장치는 수신된 정보를 음원 정보로 출력할 수도 있다.
또한, 본 발명의 다양한 실시 예에 따라 상기 제1 전자 장치는 상기 선택된 단어에 관련하여 획득한 적어도 하나의 컨텐츠를 표시하지 않으므로 화면 가림 또는 선택된 단어에 따른 화면 전환을 수행하지 않고, 화면 축소, 화면 분할, 화면 전환 또는 화면 겹쳐짐(예를 들어, 팝업창)이 없이 현재 실행되는 애플리케이션의 실행 화면을 표시할 수 있다.
도 16은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 16을 참조하면, 본 발명의 다양한 실시 예에 따라, 사용자에 의해 선택된 적어도 하나의 단어(1603)를 검색하기 위한 서비스 또는 기능(예를 들어, 지도)이 선택되면, 선택된 서비스 또는 기능을 실행 화면에 표시된 제2 전자 장치의 리스트 내에서 선택된 적어도 하나의 제2 전자 장치에서 표시할 수 있도록 설정(1507)할 수 있다. 다양한 실시 예에 따라, 상기 제1 전자 장치는 화면에 표시된 기능을 사용자가 선택하면, 사용자의 특정 제스쳐(예를 들어, 드래그)를 통해 이동한 위치에 표시된 제2 전자 장치를 선택할 수 있다. 또한, 상기 제1 전자 장치는 주변에 위치한 제2 전자 장치들을 검색하고, 검색된 제2 전자 장치들 중 통신이 가능한 제2 전자 장치들의 식별 정보를 리스트 형태(1501)로 상기 실행 화면에 표시할 수 있다.
상기 제1 전자 장치는 지도 서비스를 통해 검색된 적어도 하나의 관련 컨텐츠를 획득 또는 서버에서 직접 제2 전자 장치로 전송하도록 요청할 수 있다.
본 발명의 실시 예에 따라, 상기 제2 전자 장치는 상기 제1 전자 장치로부터 상기 적어도 하나의 관련 컨텐츠로 지도 정보를 수신하고, 수신된 지도 정보를 표시(1609)할 수 있다. 다양한 실시 예에 따라 제2 전자 장치는 지도를 표시하여, 상기 선택된 단어의 위치 정보를 제공할 수 있다.
또한, 본 발명의 다양한 실시 예에 따라 상기 제1 전자 장치는 상기 선택된 단어에 관련하여 획득한 적어도 하나의 컨텐츠를 표시하지 않으므로 화면 가림 또는 선택된 단어에 따른 화면 전환을 수행하지 않고, 축소 또는 화면 겹쳐짐(예를 들어, 팝업창)이 없이 현재 실행되는 애플리케이션의 실행 화면을 표시할 수 있다.
도 17은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 17을 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 웹 애플리케이션을 실행하여, 실행 화면에 웹 페이지(1701)를 표시할 수 있다. 상기 제1 전자 장치는 사용자에 의해 상기 웹 페이지(1701) 내에서 적어도 하나의 객체(예를 들어, 적어도 하나의 영역 또는 적어도 하나의 영역에 위치한 프레임(1703))을 선택하고, 선택된 적어도 하나의 객체의 소스 정보를 추출하고, 추출된 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 검색 또는 서버로 요청할 수 있다. 다양한 실시 예에 따라 상기 선택된 객체의 소스 정보는 실행되는 애플리케이션의 문서를 제공하는 출처(예를 들어, 주소정보(URL)), 쿼리에 관련된 정보 또는 선택된 객체에 대한 정보 중 적어도 하나를 포함할 수 있다. 또한, 상기 선택된 객체의 소스 정보는 상기 선택된 문장에 관련된 컨텐츠를 제공할 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 다양한 실시 예에 따라 상기 문서 내에 포함된 쿼리에 관련된 정보를 통해 상기 문서를 제공하는 주소(URL)로 선택된 객체에 관련된 컨텐츠를 요청하면, 응답을 통해 상기 선택된 객체에 관련된 컨텐츠를 제공하는 주소 정보(URL)를 제공받을 수 있다. 또한, 다양한 실시 예에 따라 상기 선택된 객체의 소스 정보는 상기 선택된 객체(예를 들어, 적어도 하나의 영역 또는 적어도 하나의 영역에 위치한 프레임)를 제공하는 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 상기 선택된 적어도 하나의 영역 또는 적어도 하나의 영역에 위치한 프레임을 제공하는 출처는 상기 실행되는 애플리케이션의 전체 문서를 제공하는 출처와 상이 또는 동일할 수 있다.
본 발명의 실시 예에 따라, 제2 전자 장치는 상기 제1 전자 장치의 검색 또는 요청에 따라 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신하고, 수신된 상기 적어도 하나의 객체와 관련된 컨텐츠(1705)를 표시할 수 있다. 상기 적어도 하나의 객체와 관련된 컨텐츠는 상기 선택된 적어도 하나의 프레임의 소스 정보에 포함된 모든 텍스트(예를 들어, " MLB 월드 시리즈 TV 중계 캔자스시티 2회말 0:0 샌프란시스코")이거나, 소스 정보를 포함하는 일부 컨텐츠(예를 들어, "캔자스시티 2회말 0:0 샌프란시스코")(1705), 상기 소스 정보에 포함된 이미지 또는 동영상 중 적어도 하나일 수 있다. 상기 제2 전자 장치에 상기 적어도 하나의 객체와 관련된 컨텐츠가 표시될 때, 상기 제1 전자 장치는 상기 적어도 하나의 객체와 관련된 컨텐츠를 표시하지 않고, 사용자에 의한 스크롤 입력 또는 화면 전환 입력에 따라 제공되는 웹 페이지를 표시할 수 있다.
도 18은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이고, 도 19는 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 18을 참조하면, 본 발명의 다양한 실시 예에 따라, 상기 제1 전자 장치는 웹 또는 메신저 애플리케이션을 실행하여, 실행 화면에 예를 들어, 웹 페이지, 인터넷 TV, DMB, 메신저, 또는 소셜 네트워크 서비스(social network service)에 대한 정보를 표시할 수 있다. 다양한 실시 예에 따라 상기 제1 전자 장치는 동영상 영역(1801) 및 댓글 영역(1803)을 포함하는 웹 페이지를 표시할 수 있다. 상기 제1 전자 장치는 사용자에 의해 예를 들어, 표시된 웹 페이지 내에서 일정 영역에 위치한 프레임, 메뉴 또는 위치에 대응하는 적어도 하나의 객체(예를 들어, 댓글)(1805))를 선택하고, 선택된 객체(예를 들어, 댓글)에 대한 소스 정보(예를 들어, "댓글"이라는 텍스트)를 추출하고, 추출된 소스 정보를 기반으로 상기 선택된 객체(예를 들어, 댓글)에 관련된 컨텐츠를 검색 또는 서버로 요청할 수 있다. 또한, 상기 제1 전자 장치는 사용자에 의해 댓글이 선택된 이후, 사용자에 의해 화면 확장 메뉴(1807)를 선택되면, 실행 화면 전체에 동영상 영역(1801)이 표시되도록 할 수 있다. 다양한 실시 예에 따라 상기 선택된 객체의 소스 정보는 실행되는 어플리케이션의 문서를 제공하는 출처(예를 들어, 주소정보(URL)), 쿼리문 또는 선택된 객체(예를 들어, 댓글)에 대한 정보 중 적어도 하나를 포함할 수 있다. 또한, 상기 선택된 객체의 소스 정보는 상기 선택된 객체(예를 들어 댓글)에 관련된 컨텐츠를 제공할 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 다양한 실시 예에 따라 상기 문서 내에 포함된 쿼리에 관련된 정보를 통해 상기 문서를 제공하는 주소(URL)로 선택된 객체(예를 들어, 댓글)에 관련된 컨텐츠를 요청하면, 응답을 통해 상기 선택된 객체에 관련된 컨텐츠를 제공하는 주소 정보(URL)를 제공받을 수 있다. 또한, 다양한 실시 예에 따라 상기 선택된 객체의 소스 정보는 상기 선택된 객체(예를 들어, 댓글)를 제공하는 출처(예를 들어, 주소 정보(URL))를 포함할 수 있다. 상기 선택된 객체(예를 들어, 댓글)를 제공하는 출처는 상기 실행되는 어플리케이션의 전체 문서를 제공하는 출처와 상이 또는 동일할 수 있다.
도 19를 참조하면, 본 발명의 다양한 실시 예에 따라, 상기 제1 전자 장치는 검색 또는 요청에 따라 획득한 댓글에 관련된 컨텐츠를 제2 전자 장치로 전송할 수 있다. 또한, 제1 전자 장치는 수신된 댓글에 관련된 컨텐츠를 현재 실행 화면에 표시하지 않도록 설정함으로써, 상기 도 19의 (a)에 도시된 바와 같이, 현재 실행 화면에 수신된 댓글에 관련된 컨텐츠를 표시하지 않고, 동영상 영역에 대한 컨텐츠만을 표시할 수 있다.
또한, 본 발명의 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 댓글에 관련된 컨텐츠를 제1 전자 장치 또는 서버로부터 수신하고, 수신된 댓글에 관련된 컨텐츠(1703)를 표시할 수 있다. 상기 표시되는 댓글에 관련된 컨텐츠(1703)는 예를 들어, 이전에 표시된 웹 페이지 내의 댓글 영역에 포함된 댓글 내용, 댓글 선택 이후 제공된 댓글 내용 또는 댓글 선택 이후 갱신된 댓글 내용 중 적어도 하나일 수 있다. 또한, 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 댓글에 관련된 컨텐츠(1703)가 갱신될 때, 상기 서버로부터 갱신된 댓글에 관련된 컨텐츠를 수신하여, 갱신된 댓글에 관련된 컨텐츠를 표시 또는 음원 정보로 출력할 수 있다.
도 20은 본 발명의 다양한 실시 예에 따른 제1 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이고, 도 21은 본 발명의 다양한 실시 예에 따른 제1 전자 장치 및 제2 전자 장치의 정보 처리를 위한 화면 예를 나타내는 도면이다.
상기 도 20을 참조하면, 본 발명의 다양한 실시 예에 따라, 제1 전자 장치는 사진을 표시하기 위한 애플리케이션을 실행하고, 실행된 애플리케이션의 실행 화면에 사진 앨범 리스트(2001)를 표시할 수 있다. 상기 실행 화면 내에서 설정된 제스쳐(예를 들어, 롱 터치) 또는 펜 입력 중 적어도 하나의 입력을 감지하면, 상기 제1 전자 장치는 제2 전자 장치로 현재 실행 화면 내에서 선택된 객체(위치 또는 일정 영역)와 관련된 컨텐츠(예를 들어, 사진 앨범 리스트(2001))를 검색할 수 있다.
상기 도 21을 참조하면, 본 발명의 다양한 실시 예에 따라, 상기 제1 전자 장치는 이후, 선택된 사진 또는 상기 전송 명령에 대한 입력 시 선택된 사진 또는 앨범으로 화면을 전환하여 선택된 사진 또는 앨범(2101)을 현재 실행 화면에 표시할 수 있다. 상기 제1 전자 장치는 선택된 객체와 관련된 컨텐츠를 현재 실행 화면에 표시하지 않도록 설정할 수 있다.
본 발명의 다양한 실시 예에 따라, 제2 전자 장치는 상기 제1 전자 장치 또는 서버로부터 수신된 상기 선택된 객체와 관련된 컨텐츠(예를 들어, 도 21의 (b)와 같은 사진 앨범 리스트(2105))를 표시할 수 있다. 또한, 다양한 실시 예에 따라, 상기 제2 전자 장치는 상기 도 21의 (b)와 같은 이전 화면에 표시된 사진 앨범 리스트를 표시할 뿐만 아니라, 전송 명령 입력 이후, 선택되는 사진의 소스 정보를 수신하여 표시할 수도 있다. 또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 상기 선택된 사진의 소스 정보를 확인하여, 설정 조건 예를 들어, 확인된 선택된 사진의 촬영 시간 전/후로 일정 시간 동안 촬영된 사진, 확인된 소스 정보의 일부를 포함하는 사진 또는 다른 애플리케이션(예를 들어, 인물 확인 프로그램)과 연동하여 선택된 사진에 포함된 인물과 동일한 인물이 포함된 사진들을 상기 선택된 객체와 관련된 컨텐츠로서 검색할 수 있다. 그리고 상기 제1 전자 장치는 상기 설정된 조건에 따라 검색된 사진들을 상기 선택된 객체와 관련된 컨텐츠로서 상기 제2 전자 장치에서 표시하도록 전송할 수 있다.
또한, 다양한 실시 예에 따라 상기 제1 전자 장치는, 상기 도 20의 상기 전송 명령에 대한 입력을 받으면, 선택된 객체의 소스 정보를 서버로 전송할 수 있다. 상기 소스 정보를 수신한 서버에서는 클라우드 서비스를 통해 저장된 사진들을 검색하여 상기 선택된 객체와 관련된 적어도 하나의 사진을 제2 전자 장치에서 표시하도록 직접 제2 전자 장치로 전송하거나 제1 전자 장치로 전송할 수 있다.
또한, 다양한 실시 예에 따라 제1 전자 장치가 상기 도 21의 (a)와 같이, 현재 실행 화면에서 앨범 메뉴(2103)에 대한 특정 입력(예를 들어, 터치 입력, 키 입력, 제스쳐 입력, 펜 입력 또는 이 외에 다른 입력 중 적어도 하나를 포함)을 수신하면, 제2 전자 장치로 상기 선택된 객체와 관련된 컨텐츠(예를 들어, 도 21의 (b)와 같은 사진 앨범 리스트(2105))를 전송할 수 있다.
또한, 다양한 실시 예에 따라, 상기 제1 전자 장치는 앨범 만들기 기능을 통해 구성된 앨범에 포함된 사진의 메모를 검색하여, 검색된 메모를 현재 실행 화면에 표시하지 않고, 상기 선택된 객체와 관련된 컨텐츠로서 상기 제2 전자 장치로 전송하여 표시하도록 할 수도 있다.
상술한 바와 같은 도 11 내지 도 21을 참조하여 설명한 본 발명의 다양한 실시 예들은 상기 도 5 내지 도 10 중 적어도 하나의 동작 절차에 따라 수행될 수 있으며, 제1 전자 장치 또는 제2 전자 장치는 도 5 내지 도 10 중 적어도 하나의 동작 절차를 조합하여 본 발명의 다양한 실시 예에 따른 동작을 수행할 수 있다. 또한, 제1 전자 장치 또는 제2 전자 장치는 도 5 내지 도 10 중 적어도 하나의 동작 절차와 상기 도 11 내지 도 21의 화면 예에 따른 본 발명의 다양한 실시 예들 중 적어도 하나와 조합하여 동작을 수행할 수 있다.
도 22는 다양한 실시 예들에 따른 전자 장치(2201)의 블록도(2200)를 도시한다. 상기 전자 장치(2201)는, 예를 들면, 도 1에 도시된 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107)의 전체 또는 일부를 구성할 수 있다. 도 22를 참조하면, 상기 전자 장치(2201)는 적어도 하나의 애플리케이션 프로세서(AP: application processor)(2210), 통신 모듈(2220), SIM(subscriber identification module) 카드(2224), 메모리(2230), 센서 모듈(2240), 입력 장치(2250), 디스플레이(2260), 인터페이스(22270), 오디오 모듈(2280), 카메라 모듈(2291), 전력관리 모듈(2295), 배터리(2296), 인디케이터(2297) 및 모터(2298)를 포함할 수 있다.
상기 적어도 하나의 애플리케이션 프로세서(2210)는, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 상기 적어도 하나의 애플리케이션 프로세서(2210)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 적어도 하나의 애플리케이션 프로세서(2210)는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시 예에 따르면, 상기 적어도 하나의 애플리케이션 프로세서(2210)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다. 상기 적어도 하나의 애플리케이션 프로세서(2210)는 도 22에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈(2221))를 포함할 수도 있다. 상기 적어도 하나의 애플리케이션 프로세서(2210)는 다른 구성요소들 (예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 통신 모듈(2220)은, 예를 들어, 도 2의 상기 통신부(210)와 동일 또는 유사한 구성을 가질 수 있다. 상기 통신 모듈(2220)은, 예를 들면, 셀룰러 모듈(2221), WIFI 모듈(2223), BT 모듈(2225), GPS 모듈(2227), NFC 모듈(2228) 및 RF(radio frequency) 모듈(2229)을 포함할 수 있다.
상기 셀룰러 모듈(2221)은, 예를 들면, 통신망을 통해서 음원 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 중을 제공할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈(2221)은 가입자 식별 모듈(예: SIM 카드(2224))을 이용하여 통신 네트워크 내에서 전자 장치(2201)의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈(2221)은 상기 적어도 하나의 애플리케이션 프로세서(2210)가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈(2221)은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다.
상기 WIFI 모듈(2223), 상기 BT 모듈(2225), 상기 GPS 모듈(2227) 또는 상기 NFC 모듈(2228) 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 어떤 실시 예에 따르면, 셀룰러 모듈(2221), WIFI 모듈(2223), BT 모듈(2225), GPS 모듈(2227) 또는 NFC 모듈(2228) 중 적어도 일부(예: 두 개 이상)는 하나의 집적 칩(integrated chip)(IC) 또는 IC 패키지 내에 포함될 수 있다.
상기 RF 모듈(2229)은, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. 상기 RF 모듈(2229)은, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter), LNA(low noise amplifier), 또는 안테나 중을 포함할 수 있다. 다른 실시 예에 따르면, 셀룰러 모듈(2221), WIFI 모듈(2223), BT 모듈(2225), GPS 모듈(2227) 또는 NFC 모듈(2228) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다.
상기 SIM 카드(2224)는, 예를 들면, 가입자 식별 모듈을 포함하는 카드 및/또는 내장 SIM(embedded SIM)을 포함할 수 있으며, 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI (international mobile subscriber identity))를 포함할 수 있다.
상기 메모리(2230)는 예를 들어, 상기 도 2의 저장부(230)와 동일 또는 유사한 구성을 가질 수 있다. 또한, 상기 메모리(2230)은 예를 들면, 내장 메모리(2232) 또는 외장 메모리(2234)를 포함할 수 있다. 상기 내장 메모리(2232)는, 예를 들면, 휘발성 메모리(예: DRAM(dynamic RAM), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 중), 비휘발성 메모리(non-volatile Memory)(예: OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 중), 하드 드라이브, 또는 솔리드스테이트 드라이브(solid state drive(SSD)) 중 적어도 하나를 포함할 수 있다.
상기 외장 메모리(2234)는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital), 또는 메모리 스틱(memory stick) 중을 더 포함할 수 있다. 상기 외장 메모리(2234)는 다양한 인터페이스를 통하여 상기 전자 장치(2201)와 기능적으로 및/또는 물리적으로 연결될 수 있다.
상기 센서 모듈(2240)은 예를 들어, 상기 도 2의 입력부(220)와 일부 유사한 구성을 가질 수 있으며, 적어도 하나의 객체와 관련된 정보를 전송하기 위한 명령에 대응하는 입력 정보(예를 들어, 제스쳐 입력)를 센싱할 수 있다. 또한, 상기 센서 모듈(2240)은 예를 들면, 물리량을 계측하거나 전자 장치(2201)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈(2240)은, 예를 들면, 제스처 센서(2240A), 자이로 센서(2240B), 기압 센서(2240C), 마그네틱 센서(2240D), 가속도 센서(2240E), 그립 센서(2240F), 근접 센서(2240G), 컬러(color) 센서(예: RGB(red, green, blue) 센서(2240H)), 생체 센서(2240I), 온/습도 센서(2240J), 조도 센서(2240K), 또는 UV(ultra violet) 센서(2240M) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대안적으로, 상기 센서 모듈(2240)은, 예를 들면, 후각 센서(E-nose sensor), EMG 센서(electromyography sensor), EEG 센서(electroencephalogram sensor), ECG 센서(electrocardiogram sensor), IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 상기 센서 모듈(2240)은 그 안에 속한 적어도 하나의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시 예에서는, 전자 장치(2201)는 적어도 하나의 애플리케이션 프로세서(2210)의 일부로서 또는 별도로, 센서 모듈(2240)을 제어하도록 구성된 프로세서를 더 포함하여, 상기 적어도 하나의 애플리케이션 프로세서(2210)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(2240)을 제어할 수 있다.
상기 입력 장치(2250)는 예를 들어, 도 2의 상기 입력부(220)와 동일 또는 유사한 구성을 가질 수 있다. 또한, 상기 입력 장치(2250)는, 예를 들면, 터치 패널 (touch panel)(2252), (디지털) 펜 센서(pen sensor)(2254), 키 (key)(2256), 또는 초음파(ultrasonic) 입력 장치(2258)를 포함할 수 있다. 상기 터치 패널(2252)은, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 상기 터치 패널(2252)은 제어 회로를 더 포함할 수도 있다. 상기 터치 패널(2252)은 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털)펜 센서(2254)는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 쉬트(sheet)를 포함할 수 있다. 상기 키(2256)는, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드를 포함할 수 있다. 상기 초음파 입력 장치(2258)는 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치(2201)에서 마이크(예: 마이크(2288))로 음파를 감지하여 데이터를 확인할 수 있다.
상기 디스플레이(2260)는 예를 들어, 도 2의 상기 표시부(240)와 동일 또는 유사한 구성을 가질 수 있다. 또한, 상기 디스플레이(2260)는 패널(2262), 홀로그램 장치(2264), 또는 프로젝터(2266)를 포함할 수 있다. 상기 패널(2262)은, 도 1의 디스플레이(160)과 동일 또는 유사한 구성을 포함할 수 있다. 상기 패널(2262)은, 예를 들면, 유연하게 (flexible), 투명하게 (transparent), 또는 착용할 수 있게 (wearable) 구현될 수 있다. 상기 패널(2262)은 상기 터치 패널(2252)과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치(2264)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터(2266)는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치(2201)의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 상기 디스플레이(2260)은 상기 패널(2262), 상기 홀로그램 장치(2264), 또는 프로젝터(2266)를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스(2270)는, 예를 들면, HDMI(high-definition multimedia interface)(2272), USB(universal serial bus)(2274), 광 인터페이스(optical interface)(2276), 또는 D-sub(D-subminiature)(2278)를 포함할 수 있다. 상기 인터페이스(2270)는, 예를 들면, 도 2에 도시된 통신부(210)에 포함될 수 있다. 추가적으로 또는 대안적으로, 상기 인터페이스(2270)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure digital) 카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈(2280)은, 예를 들면, 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈(2280)의 적어도 일부 구성요소는, 예를 들면, 상기 도 2에서 설명한 음원 출력부(도시되지 않음)에 포함될 수 있다. 상기 오디오 모듈(2280)은, 예를 들면, 스피커(2282), 리시버(2284), 이어폰(2286), 또는 마이크(2288) 중을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈(2291)은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 적어도 하나의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래쉬(flash)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈(2295)은, 예를 들면, 상기 전자 장치(2201)의 전력을 관리할 수 있다. 한 실시 예에 따르면, 상기 전력 관리 모듈(2295)은 PMIC(power management integrated circuit), 충전 IC(charger integrated circuit), 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다. 상기 PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 중을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 중을 더 포함할 수 있다. 상기 배터리 게이지는, 예를 들면, 상기 배터리(2296)의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 상기 배터리(2296)는, 예를 들면, 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터(2297)는 상기 전자 장치(2201) 혹은 그 일부(예: 애플리케이션 프로세서(2210))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 중을 표시할 수 있다. 상기 모터(2298)는 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동(vibration), 또는 햅틱(haptic) 효과 중을 발생시킬 수 있다. 도시되지는 않았으나, 상기 전자 장치(2201)는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어 플로우 (media flow) 중의 규격에 따른 미디어 데이터를 처리할 수 있다.
상기 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시 예에서, 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 다양한 실시 예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다. 예를 들어, 상기 도 1 및 도 2의 전자 장치는 상기 전자 장치의 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있다.
도 23은 다양한 실시 예에 따른 프로그램 모듈(2310)의 블록도(2300)이다. 다양한 실시 예에 따르면, 상기 프로그램 모듈(2310)(예: 프로그램)은 전자 장치(예: 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))에 관련된 자원을 제어하는 운영 체제(operation system (OS)) 및/또는 운영 체제상에서 구동되는 다양한 애플리케이션을 포함할 수 있다. 상기 운영 체제는, 예를 들면, 안드로이드(android), iOS, 윈도우즈(windows), 심비안(symbian), 타이젠(tizen), 또는 바다(bada) 중이 될 수 있다.
프로그램 모듈(2310)은 커널(2320), 미들웨어(2330), API(application programming interface)(2360), 및/또는 애플리케이션(2370)을 포함할 수 있다. 상기 프로그램 모듈(2310)의 적어도 일부는 전자 장치상에 프리로드(preload) 되거나, 서버(예: 도 1의 서버(109))로부터 다운로드(download) 가능하다.
상기 커널(2320)은, 예를 들면, 시스템 리소스 매니저(2321) 또는 디바이스 드라이버(2323)를 포함할 수 있다. 상기 시스템 리소스 매니저(2321)는 시스템 리소스의 제어, 할당, 또는 회수 중을 수행할 수 있다. 한 실시 예에 따르면, 상기 시스템 리소스 매니저(2321)는 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부 중을 포함할 수 있다. 상기 디바이스 드라이버(2323)는, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, WIFI 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다.
상기 미들웨어(2330)는, 예를 들면, 상기 애플리케이션(2370)이 공통적으로 필요로 하는 기능을 제공하거나, 상기 애플리케이션(2370)이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 상기 API(2360)를 통해 다양한 기능들을 상기 애플리케이션(2370)으로 제공할 수 있다. 한 실시 예에 따르면, 상기 미들웨어(2330)는 런타임 라이브러리(2335), 애플리케이션 매니저(application manager)(2341), 윈도우 매니저(window manager)(2342), 멀티미디어 매니저(multimedia manager)(2343), 리소스 매니저(resource manager)(2344), 파워 매니저(power manager)(2345), 데이터베이스 매니저(database manager)(2346), 패키지 매니저(package manager)(2347), 연결 매니저(connectivity manager)(2348), 통지 매니저(notification manager)(2349), 위치 매니저 (location manager)(2350), 그래픽 매니저(graphic manager)(2351), 또는 보안 매니저(security manager)(2352) 중 적어도 하나를 포함할 수 있다.
상기 런타임 라이브러리(2335)는, 예를 들면, 상기 애플리케이션(2370)이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 상기 런타임 라이브러리(2335)는 입출력 관리, 메모리 관리, 또는 산술 함수에 대한 기능 중을 수행할 수 있다.
상기 애플리케이션 매니저(2341)는, 예를 들면, 상기 애플리케이션(2370) 중 적어도 하나의 애플리케이션의 라이프 사이클(life cycle)을 관리할 수 있다. 상기 윈도우 매니저(2342)는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 상기 멀티미디어 매니저(2343)는 다양한 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 상기 리소스 매니저(2344)는 상기 애플리케이션(2370) 중 적어도 어느 하나의 애플리케이션의 소스 코드, 메모리 또는 저장 공간 중의 자원을 관리할 수 있다.
상기 파워 매니저(2345)는, 예를 들면, 바이오스(BIOS: basic input/output system) 중과 함께 동작하여 배터리(battery) 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보 중을 제공할 수 있다. 상기 데이터베이스 매니저(2346)는 상기 애플리케이션(2370) 중 적어도 하나의 애플리케이션에서 사용할 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 상기 패키지 매니저(2347)는 패키지 파일의 형태로 배포되는 애플리케이션의 설치 또는 업데이트를 관리할 수 있다.
상기 연결 매니저(2348)는, 예를 들면, WIFI 또는 블루투스 중의 무선 연결을 관리할 수 있다. 상기 통지 매니저(2349)는 도착 메시지, 약속, 근접성 알림 중의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 상기 위치 매니저(2350)는 전자 장치의 위치 정보를 관리할 수 있다. 상기 그래픽 매니저(2351)는 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 상기 보안 매니저(2352)는 시스템 보안 또는 사용자 인증 중에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(예컨대, 도 1의 제1 전자 장치(101) 또는 제2 전자 장치(103, 105 또는 107))가 전화 기능을 포함한 경우, 상기 미들웨어(2330)는 상기 전자 장치의 음원 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager)를 더 포함할 수 있다.
상기 미들웨어(2330)는 전술한 구성요소들의 다양한 기능의 조합을 형성하는 미들웨어 모듈을 포함할 수 있다. 상기 미들웨어(2330)는 차별화된 기능을 제공하기 위해 운영 체제의 종류별로 특화된 모듈을 제공할 수 있다. 또한, 상기 미들웨어(2330)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다.
상기 API(2360)는, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼별로 하나의 API 셋을 제공할 수 있으며, 타이젠(tizen)의 경우, 플랫폼별로 두 개 이상의 API 셋을 제공할 수 있다.
상기 애플리케이션(2370)은, 예를 들면, 홈(2371), 다이얼러(2372), SMS/MMS(2373), IM(instant message)(2374), 브라우저(2375), 카메라(2376), 알람(2377), 컨택트(2378), 음원 다이얼(2379), 이메일(2380), 달력(2381), 미디어 플레이어(2382), 앨범(2383), 또는 시계(2384), 건강 관리(health care)(예: 운동량 또는 혈당 중을 측정), 또는 환경 정보 제공(예: 기압, 습도, 또는 온도 정보 중을 제공) 중의 기능을 제공할 수 있는 적어도 하나의 애플리케이션을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 애플리케이션(2370)은 상기 전자 장치(예: 도 1의 제1 전자 장치(101))와 외부 전자 장치(예: 도 1의 제2 전자 장치(103, 105 또는 107), 서버(109)) 사이의 정보 교환을 지원하는 애플리케이션(이하, 설명의 편의상, "정보 교환 애플리케이션")을 포함할 수 있다. 상기 정보 교환 애플리케이션은, 예를 들면, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 애플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 애플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 애플리케이션은 상기 전자 장치의 다른 애플리케이션(예: SMS/MMS 애플리케이션, 이메일 애플리케이션, 건강 관리 애플리케이션, 또는 환경 정보 애플리케이션 중)에서 발생된 알림 정보를 외부 전자 장치로 전달하는 기능을 포함할 수 있다. 또한, 상기 알림 전달 애플리케이션은, 예를 들면, 외부 전자 장치로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 애플리케이션은, 예를 들면, 상기 전자 장치와 통신하는 외부 전자 장치의 적어도 하나의 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴-온/턴-오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 애플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제, 또는 업데이트)할 수 있다.
한 실시 예에 따르면, 상기 애플리케이션(2370)은 상기 외부 전자 장치의 속성(예: 전자 장치의 속성으로서, 전자 장치의 종류가 모바일 의료 기기)에 따라 지정된 애플리케이션(예: 건강 관리 애플리케이션)을 포함할 수 있다. 한 실시 예에 따르면, 상기 애플리케이션(2370)은 외부 전자 장치로부터 수신된 애플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 상기 애플리케이션(2370)은 프리로드 애플리케이션(preloaded application) 또는 서버로부터 다운로드 가능한 제3자 애플리케이션(third party application)을 포함할 수 있다. 도시된 실시 예에 따른 프로그램 모듈(2310)의 구성요소들의 명칭은 운영 체제의 종류에 따라서 달라질 수 있다.
다양한 실시 예에 따르면, 상기 프로그램 모듈(2310)의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어, 또는 이들 중 적어도 둘 이상의 조합으로 구현될 수 있다. 상기 프로그램 모듈(2310)의 적어도 일부는, 예를 들면, 프로세서(예: AP(2310))에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그램 모듈(2310)의 적어도 일부는 적어도 하나의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트(sets of instructions) 또는 프로세스 중을 포함할 수 있다.
본 문서에서 사용된 용어 "모듈" 또는 "기능부"는, 예를 들면, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈" 또는 "기능부"는, 예를 들면, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component), 또는 회로(circuit) 중의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈" 또는 "기능부"는, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈" 또는 "기능부"는 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, "모듈" 또는 "기능부"는, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예를 들어, 프로그램 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 프로세서 (예: 프로세서(120))에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리(130)가 될 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체는, 하드디스크, 플로피디스크, 마그네틱 매체(magnetic media)(예: 자기테이프), 광기록 매체(optical media)(예: CD-ROM(compact disc read only memory), DVD(digital versatile disc), 자기-광 매체(magneto-optical media)(예: 플롭티컬 디스크(floptical disk)), 하드웨어 장치(예: ROM(read only memory), RAM(random access memory), 또는 플래시 메모리 중) 중을 포함할 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 중을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 다양한 실시 예의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
다양한 실시 예에 따른 모듈 또는 프로그램 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 다양한 실시 예에 따른 모듈, 프로그램 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
다양한 실시 예에 따르면, 컴퓨터상에서 수행하기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체에 있어서, 상기 프로그램은, 프로세서에 의한 실행 시, 상기 프로세서가, 상기 제1 전자 장치에서 애플리케이션을 실행하는 동작; 상기 애플리케이션의 실행 화면 내에 표시된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하는 동작; 및 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작;을 수행하도록 하는 실행 가능한 명령을 포함할 수 있다.
그리고 본 명세서와 도면에 발명된 본 발명의 실시 예들은 본 발명의 실시 예에 따른 기술 내용을 쉽게 설명하고 본 발명의 실시 예의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 실시 예의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 다양한 실시 예의 범위는 여기에 발명된 실시 예들 이외에도 본 발명의 다양한 실시 예의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 다양한 실시 예의 범위에 포함되는 것으로 해석되어야 한다.
101 : 제1 전자 장치 103, 105 또는 107 : 제2 전자 장치
109 : 서버 111 : 네트워크
200 : 제어부 210 : 통신부
220 : 입력부 230 : 저장부
240 : 표시부

Claims (23)

  1. 제1 전자 장치에 있어서,
    상기 제1 전자 장치에서 실행되는 애플리케이션의 실행 화면을 표시하는 표시부; 및
    상기 애플리케이션의 실행 화면 내에서 선택된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하고, 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 프로세서;를 포함하는, 제1 전자 장치.
  2. 제1항에 있어서, 상기 프로세서는,
    상기 선택된 적어도 하나의 객체와 관련된 컨텐츠가 업데이트되는 경우, 업데이트된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는, 제1 전자 장치.
  3. 제1항에 있어서, 상기 프로세서는,
    상기 선택된 적어도 하나의 객체에 관련된 컨텐츠가 상기 애플리케이션의 현재 실행 화면에 표시되지 않도록 설정하는, 제1 전자 장치.
  4. 제1항에 있어서, 상기 프로세서는,
    상기 적어도 하나의 객체의 소스 정보를 기반으로 기 저장된 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 검색하도록 제어하는, 제1 전자 장치.
  5. 제1항에 있어서, 상기 프로세서는,
    상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 서버에 요청하고, 요청에 따라 상기 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신하도록 제어하는, 제1 전자 장치.
  6. 제1항에 있어서, 상기 프로세서는,
    상기 선택된 적어도 하나의 객체의 소스 정보 및 상기 제2 전자 장치의 식별 정보를 기반으로 서버에서 직접 상기 제2 전자 장치로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 전송하도록 요청하는, 제1 전자 장치.
  7. 제1항에 있어서, 상기 프로세서는,
    상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 연관된 다른 애플리케이션과 연동하여, 상기 다른 애플리케이션을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는, 제1 전자 장치.
  8. 제1항에 있어서, 상기 프로세서는,
    사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 선택된 적어도 하나의 객체와 관련된 적어도 하나의 서비스 또는 기능을 표시하고, 상기 적어도 하나의 기능에 대해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는, 제1 전자 장치.
  9. 제1항에 있어서, 상기 프로세서는,
    상기 제1 전자 장치의 주변에 위치한 통신이 가능한 제2 전자 장치를 검색하고, 검색된 제2 전자 장치들 중 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 표시 또는 음성 정보로 출력하기 위한 상기 제2 전자 장치를 선택하는, 제1 전자 장치.
  10. 제9항에 있어서, 상기 프로세서는,
    상기 제1 전자 장치의 주변에 위치한 상기 제2 전자 장치가 적어도 둘 이상이 검색된 경우, 검색된 적어도 둘 이상의 제2 전자 장치에 대한 정보를 상기 실행 화면에 표시하는, 제1 전자 장치.
  11. 제1항에 있어서, 상기 프로세서는,
    상기 애플리케이션의 이전 실행 화면 내에서 적어도 하나의 객체가 선택된 후, 전환된 현재 실행 화면에서 사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 전환된 현재 실행 화면에 상기 이전 실행 화면에서 선택된 상기 적어도 하나의 객체와 관련된 컨텐츠를 검색하여 획득한 정보를 상기 현재 실행 화면에 표시하지 않고 상기 제2 전자 장치로 전송하도록 제어하는, 제1 전자 장치.
  12. 제1 전자 장치에서의 정보 처리 방법에 있어서,
    상기 제1 전자 장치에서 애플리케이션을 실행하는 동작;
    상기 애플리케이션의 실행 화면 내에 표시된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하는 동작; 및
    상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작;을 포함하는, 방법.
  13. 제12항에 있어서, 상기 방법은,
    상기 선택된 적어도 하나의 객체와 관련된 컨텐츠가 업데이트되는 경우, 업데이트된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작을 더 포함하는, 방법.
  14. 제12항에 있어서, 상기 방법은,
    상기 선택된 적어도 하나의 객체에 관련된 컨텐츠가 상기 애플리케이션의 현재 실행 화면에 표시되지 않도록 설정하는 동작을 더 포함하는, 방법.
  15. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    상기 적어도 하나의 객체의 소스 정보를 기반으로 기 저장된 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 검색하도록 제어하는, 방법.
  16. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 서버에 요청하는 동작;
    요청에 따라 상기 서버로부터 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 수신하는 동작;
    수신된 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함하는 방법.
  17. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    상기 선택된 적어도 하나의 객체의 소스 정보 및 상기 제2 전자 장치의 식별 정보를 서버로 전송하는 동작; 및
    상기 소스 정보를 기반으로 검색된 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 식별 정보를 기반으로 직접 상기 제2 전자 장치로 전송한 결과 정보를 상기 서버로부터 수신하는 동작;
    을 포함하는 방법.
  18. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    상기 선택된 적어도 하나의 객체의 소스 정보를 기반으로 상기 선택된 적어도 하나의 객체와 연관된 다른 애플리케이션과 연동하는 동작;
    상기 다른 애플리케이션을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및
    획득한 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함하는, 방법.
  19. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    사용자에 의해 적어도 하나의 제스쳐가 입력되면, 상기 선택된 적어도 하나의 객체와 관련된 서비스 또는 기능을 표시하는 동작;
    상기 표시된 서비스 또는 기능 중 적어도 하나의 서비스 또는 기능을 통해 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및
    획득한 상기 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하는 동작;을 포함하는, 방법.
  20. 제12항에 있어서, 상기 방법은,
    상기 제1 전자 장치의 주변에 위치한 통신이 가능한 제2 전자 장치를 검색하는 동작;
    검색된 제2 전자 장치들 중 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 표시 또는 음성 정보로 출력하기 위한 상기 제2 전자 장치를 선택하는 동작;을 더 포함하는,방법.
  21. 제20항에 있어서, 상기 방법은,
    상기 제1 전자 장치의 주변에 위치한 상기 제2 전자 장치가 적어도 둘 이상이 검색된 경우, 검색된 적어도 둘 이상의 제2 전자 장치에 대한 정보를 상기 실행 화면에 표시하는 동작;을 더 포함하는, 방법.
  22. 제12항에 있어서, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작은,
    상기 애플리케이션의 이전 실행 화면 내에서 적어도 하나의 객체가 선택된 후, 전환된 현재 실행 화면에서 사용자에 의해 적어도 하나의 제스쳐의 입력을 수신하는 동작;
    상기 전환된 현재 실행 화면에 상기 이전 실행 화면에서 선택된 상기 적어도 하나의 객체와 관련된 컨텐츠를 획득하는 동작; 및
    획득한 상기 적어도 하나의 객체와 획득한 정보를 상기 현재 실행 화면에 표시하지 않고 상기 제2 전자 장치로 전송하는 동작;을 포함하는 방법.
  23. 컴퓨터상에서 수행하기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체에 있어서, 상기 프로그램은, 프로세서에 의한 실행 시, 상기 프로세서가, 상기 제1 전자 장치에서 애플리케이션을 실행하는 동작; 상기 애플리케이션의 실행 화면 내에 표시된 적어도 하나의 객체와 관련된 컨텐츠(content)를 제2 전자 장치로 전송하기 위한 입력을 수신하는 동작; 및 상기 입력에 대응하여, 상기 선택된 적어도 하나의 객체와 관련된 컨텐츠를 상기 제2 전자 장치로 전송하도록 제어하는 동작;을 수행하도록 하는 실행 가능한 명령을 포함하는, 컴퓨터 판독 가능한 기록 매체.
KR1020150006873A 2015-01-14 2015-01-14 전자 장치 및 전자 장치에서의 정보 처리 방법 KR102296323B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020150006873A KR102296323B1 (ko) 2015-01-14 2015-01-14 전자 장치 및 전자 장치에서의 정보 처리 방법
US14/995,589 US10445045B2 (en) 2015-01-14 2016-01-14 Electronic device and method of processing information in electronic device
CN201680012167.7A CN107430480B (zh) 2015-01-14 2016-01-14 电子设备和在电子设备中处理信息的方法
PCT/KR2016/000410 WO2016114609A1 (en) 2015-01-14 2016-01-14 Electronic device and method of processing information in electronic device
EP16737573.2A EP3245583B1 (en) 2015-01-14 2016-01-14 Electronic device and method of processing information in electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150006873A KR102296323B1 (ko) 2015-01-14 2015-01-14 전자 장치 및 전자 장치에서의 정보 처리 방법

Publications (2)

Publication Number Publication Date
KR20160087644A true KR20160087644A (ko) 2016-07-22
KR102296323B1 KR102296323B1 (ko) 2021-09-01

Family

ID=56367622

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150006873A KR102296323B1 (ko) 2015-01-14 2015-01-14 전자 장치 및 전자 장치에서의 정보 처리 방법

Country Status (5)

Country Link
US (1) US10445045B2 (ko)
EP (1) EP3245583B1 (ko)
KR (1) KR102296323B1 (ko)
CN (1) CN107430480B (ko)
WO (1) WO2016114609A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180015532A (ko) * 2016-08-03 2018-02-13 삼성전자주식회사 디스플레이 제어 방법, 저장 매체 및 전자 장치
WO2021182890A1 (ko) * 2020-03-12 2021-09-16 삼성전자 주식회사 메시지 처리 방법 및 이를 위한 전자 장치
US11323850B2 (en) 2018-07-27 2022-05-03 Huawei Cloud Computing Technologies Co., Ltd. Vehicle-to-everything communication solution

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105808667A (zh) * 2016-02-29 2016-07-27 北京小米移动软件有限公司 获取图像的方法、装置及系统
US10769182B2 (en) * 2016-06-10 2020-09-08 Apple Inc. System and method of highlighting terms
US10831763B2 (en) 2016-06-10 2020-11-10 Apple Inc. System and method of generating a key list from multiple search domains
KR20180005377A (ko) * 2016-07-06 2018-01-16 엘지전자 주식회사 이동단말기 및 그 제어 방법, 디스플레이 디바이스 및 그 제어 방법
US11582179B2 (en) * 2017-11-15 2023-02-14 Huawei Technologies Co., Ltd. Information search method, terminal, network device, and system
CN108320745A (zh) * 2018-02-08 2018-07-24 北京小米移动软件有限公司 控制显示的方法及装置
CN108958680A (zh) * 2018-05-24 2018-12-07 努比亚技术有限公司 显示控制方法、装置、显示系统及计算机可读存储介质
KR102631745B1 (ko) * 2018-10-16 2024-02-01 삼성전자주식회사 이종 운영체제의 실행을 제어하기 위한 방법, 이를 위한 전자 장치 및 저장 매체
CN110300502B (zh) * 2019-06-30 2021-03-12 Oppo广东移动通信有限公司 电子设备及电子设备控制方法
CN113157231A (zh) * 2019-09-18 2021-07-23 华为技术有限公司 一种数据传输的方法及相关设备
CN112987580B (zh) * 2019-12-12 2022-10-11 华为技术有限公司 一种设备的控制方法、装置、服务器以及存储介质
CN113885973B (zh) * 2020-07-02 2024-07-30 华为技术有限公司 翻译结果显示方法、装置及电子设备
US11644902B2 (en) * 2020-11-30 2023-05-09 Google Llc Gesture-based content transfer
CN112820222A (zh) * 2021-01-22 2021-05-18 北京小米移动软件有限公司 显示方法及装置、存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100299436A1 (en) * 2009-05-20 2010-11-25 Shafiqul Khalid Methods and Systems for Using External Display Devices With a Mobile Computing Device
KR20120114331A (ko) * 2010-01-06 2012-10-16 애플 인크. 상호 작용 팝업 뷰들을 갖는 장치, 방법 및 그래픽 사용자 인터페이스
KR20130021614A (ko) * 2011-08-23 2013-03-06 삼성전자주식회사 휴대단말기의 표시 방법 및 장치
US20140068520A1 (en) * 2012-08-29 2014-03-06 Apple Inc. Content presentation and interaction across multiple displays

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050219211A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for content management and control
KR101431741B1 (ko) 2007-08-01 2014-08-20 삼성전자주식회사 휴대용 단말기에서 컨텐츠를 전송하는 장치 및 방법
WO2010047569A2 (en) * 2008-10-24 2010-04-29 Samsung Electronics Co., Ltd. Method and system for synchronizing attributes among multiple electronic devices
US20110008311A2 (en) * 2008-11-03 2011-01-13 The Board Of Trustees Of The University Of Illinois Animal Model and Use of 17Beta-Hydroxysteroid Dehydrogenase Type 7 in the Diagnosis of Anencephaly
US8914462B2 (en) * 2009-04-14 2014-12-16 Lg Electronics Inc. Terminal and controlling method thereof
US8457651B2 (en) * 2009-10-02 2013-06-04 Qualcomm Incorporated Device movement user interface gestures for file sharing functionality
US9417694B2 (en) * 2009-10-30 2016-08-16 Immersion Corporation System and method for haptic display of data transfers
KR101690232B1 (ko) * 2010-05-28 2016-12-27 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR101750898B1 (ko) * 2010-12-06 2017-06-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101746540B1 (ko) 2010-12-15 2017-06-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101757870B1 (ko) * 2010-12-16 2017-07-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN103535028A (zh) 2010-12-30 2014-01-22 汤姆逊许可公司 用于提供与显示的内容相关的附加内容的方法和系统
KR101872976B1 (ko) * 2011-05-20 2018-07-02 삼성전자주식회사 네트워크 내에서의 서비스 실행 방법 및 서비스 실행 디바이스
US8930492B2 (en) 2011-10-17 2015-01-06 Blackberry Limited Method and electronic device for content sharing
CN103092547B (zh) * 2011-10-31 2016-12-28 联想(北京)有限公司 一种数据传输方法和电子设备
US9674331B2 (en) 2012-06-08 2017-06-06 Apple Inc. Transmitting data from an automated assistant to an accessory
US8799710B2 (en) * 2012-06-28 2014-08-05 International Business Machines Corporation 3-D stacked multiprocessor structures and methods to enable reliable operation of processors at speeds above specified limits
US10325686B2 (en) * 2012-07-05 2019-06-18 Siemens Healthcare Gmbh System and methods for integrated and predictive analysis of molecular, imaging, and clinical data for patient-specific management of diseases
CN103677724B (zh) * 2012-09-03 2018-08-10 联想(北京)有限公司 电子设备及其信息处理方法
KR102022042B1 (ko) * 2012-09-28 2019-09-18 삼성전자주식회사 데이터 전송 방법 및 시스템
US20140101606A1 (en) * 2012-10-09 2014-04-10 Microsoft Corporation Context-sensitive information display with selected text
KR102001218B1 (ko) * 2012-11-02 2019-07-17 삼성전자주식회사 객체와 관련된 정보 제공 방법 및 이를 위한 디바이스
KR102097640B1 (ko) 2013-03-08 2020-04-06 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
CN103237086B (zh) * 2013-05-15 2017-03-01 努比亚技术有限公司 一种信息传输系统和信息传输方法
US9584583B2 (en) * 2013-09-11 2017-02-28 Oracle International Corporation Desktop and mobile device integration
US10409454B2 (en) * 2014-03-05 2019-09-10 Samsung Electronics Co., Ltd. Smart watch device and user interface thereof
CN104077051A (zh) * 2014-06-24 2014-10-01 广州三星通信技术研究有限公司 用于可穿戴设备的待机以及提供待机图像的方法和设备
CN104077101B (zh) * 2014-06-30 2018-12-14 联想(北京)有限公司 一种投影方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100299436A1 (en) * 2009-05-20 2010-11-25 Shafiqul Khalid Methods and Systems for Using External Display Devices With a Mobile Computing Device
KR20120114331A (ko) * 2010-01-06 2012-10-16 애플 인크. 상호 작용 팝업 뷰들을 갖는 장치, 방법 및 그래픽 사용자 인터페이스
KR20130021614A (ko) * 2011-08-23 2013-03-06 삼성전자주식회사 휴대단말기의 표시 방법 및 장치
US20140068520A1 (en) * 2012-08-29 2014-03-06 Apple Inc. Content presentation and interaction across multiple displays

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180015532A (ko) * 2016-08-03 2018-02-13 삼성전자주식회사 디스플레이 제어 방법, 저장 매체 및 전자 장치
US11323850B2 (en) 2018-07-27 2022-05-03 Huawei Cloud Computing Technologies Co., Ltd. Vehicle-to-everything communication solution
WO2021182890A1 (ko) * 2020-03-12 2021-09-16 삼성전자 주식회사 메시지 처리 방법 및 이를 위한 전자 장치

Also Published As

Publication number Publication date
US20160202943A1 (en) 2016-07-14
CN107430480A (zh) 2017-12-01
EP3245583B1 (en) 2021-08-04
EP3245583A1 (en) 2017-11-22
WO2016114609A1 (en) 2016-07-21
EP3245583A4 (en) 2018-03-07
CN107430480B (zh) 2020-11-20
US10445045B2 (en) 2019-10-15
KR102296323B1 (ko) 2021-09-01

Similar Documents

Publication Publication Date Title
US11036257B2 (en) Electronic device and method for controlling display
KR102296323B1 (ko) 전자 장치 및 전자 장치에서의 정보 처리 방법
KR102503937B1 (ko) 전자 장치의 사용자 인터페이스 제공 방법 및 장치
KR102528389B1 (ko) 전자 장치 및 전자 장치에서의 노티피케이션 처리 방법
KR20180099352A (ko) 전자 장치 및 전자 장치의 윈도우 관리 방법
KR102409202B1 (ko) 전자 장치 및 전자 장치에서 폴더 내 객체를 관리하기 위한 방법
CN117492522A (zh) 电子设备以及用于显示其运行的应用的历史的方法
KR20160105242A (ko) 스크린 미러링 서비스 제공장치 및 방법
KR20170058152A (ko) 전자 장치 및 전자 장치의 디스플레이 설정 방법
KR20160101600A (ko) 스크린 미러링 서비스 제공방법 및 장치
KR102343990B1 (ko) 디스플레이의 서로 다른 영역을 독립적으로 제어하는 전자 장치 및 방법
KR20170059201A (ko) 전자 장치 및 전자 장치의 컨텐츠 출력 방법
EP3477456B1 (en) Notification information display method and device
CN108475165B (zh) 电子设备及其控制方法
KR102366289B1 (ko) 디스플레이 제어 방법 및 그 전자 장치
KR20170100309A (ko) 음성 인식 제어를 제공하는 전자 장치 및 그 동작 방법
KR20180073188A (ko) 전자장치 및 이를 활용한 웹 페이지 표시 방법
KR102416071B1 (ko) 전자장치 및 전자장치의 어플리케이션 실행 방법
KR20160031217A (ko) 제어 방법 및 그 방법을 처리하는 전자장치
KR20170111250A (ko) 화면 출력 방법 및 이를 지원하는 전자 장치
KR20160026328A (ko) 웹 페이지에서 영역 선택을 위한 방법 및 그 전자 장치
KR102512755B1 (ko) 전자 장치 및 전자 장치의 디스플레이 방법
KR20180070216A (ko) 콘텐츠 태깅 방법 및 이를 지원하는 전자 장치
KR102332674B1 (ko) 콘텐츠 변경 알림 방법 및 장치
KR20160068531A (ko) 어플리케이션 제어 방법 및 전자 장치

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant