KR20210042065A - 미러링 방법 및 장치 - Google Patents

미러링 방법 및 장치 Download PDF

Info

Publication number
KR20210042065A
KR20210042065A KR1020210040643A KR20210040643A KR20210042065A KR 20210042065 A KR20210042065 A KR 20210042065A KR 1020210040643 A KR1020210040643 A KR 1020210040643A KR 20210040643 A KR20210040643 A KR 20210040643A KR 20210042065 A KR20210042065 A KR 20210042065A
Authority
KR
South Korea
Prior art keywords
application program
display device
mirrored
virtual display
mirroring
Prior art date
Application number
KR1020210040643A
Other languages
English (en)
Inventor
넝준 오우양
자오롱 천
지안저 천
준페이 부
Original Assignee
베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디. filed Critical 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디.
Publication of KR20210042065A publication Critical patent/KR20210042065A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/213—Virtual instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/04—Display device controller operating with a plurality of display units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명의 실시예는 미러링 방법 및 장치를 제공한다. 일 측면에 따른 미러링 방법은 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 단계; 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 단계; 및 가상 디스플레이 스크린을 제2 표시 기기에 전송하여 표시하는 단계;를 포함한다. 상기 실시형태는 제1 표시 기기에 표시된 내용을 제2 표시 기기에 미러링하여 스크린 확장을 실현한다.

Description

미러링 방법 및 장치{A METHOD AND A DEVICE FOR MIRRORING}
본 발명의 실시예는 컴퓨터 기술분야에 관한 것이고, 구체적으로 미러링 방법 및 장치에 관한 것이다.
외출의 편안함에 대한 사람들의 요구가 점점 더 높아짐에 따라, 기존의 전면 장착 자동차 전자 장치가 더 이상 사람들의 요구를 충족할 수 없게 되고, 스마트 백미러가 사람들의 생활에 나타나 사람들의 내비게이션, 음성, 전화, 채팅, 주행기록계 등에 대한 수요를 만족시키며 시장 승인을 받고 있다. 그럼에도 불구하고, 스마트 백미러를 사용하는 과정에서 필연적으로 사용자에게 불편을 끼칠 수 밖에 없다. 예를 들어, 스마트 백미러를 사용하는 과정에서 항상 눈 앞에 화면이 있어서, 백미러의 기존 기능을 발휘하지 못하고 주행 안전에도 영향을 미친다.
본 발명의 실시예는 미러링 방법 및 장치를 제공한다.
일 측면에 따른 미러링 방법은, 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 단계; 상기 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 단계; 및 상기 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시하는 단계;를 포함한다.
일부 실시예에서, 상기 보조 스크린 데이터를 생성하는 단계는, 상기 제2 표시 기기의 화면 비율에 따라, 상기 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축하는 단계; 상기 페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성하는 단계; 및 상기 표시 윈도우와 상기 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득하는 단계;를 포함한다.
일부 실시예에서, 상기 가상 디스플레이 스크린을 생성하는 단계는, 상기 보조 스크린 데이터에 따라, 데이터 베어러(bearere)를 렌더링하여 가상 디스플레이 스크린을 획득하는 단계;를 포함한다.
일부 실시예에서, 상기 제1 표시 기기에 제1 응용 프로그램이 설치되고, 상기 제2 표시 기기에 제2 응용 프로그램이 설치되며, 상기 제1 표시 기기와 상기 제2 표시 기기는 상기 제1 응용 프로그램 및 상기 제2 응용 프로그램을 통해 통신 연결된다.
일부 실시예에서, 상기 제1 응용 프로그램은 미러링 서비스를 포함하고, 상기 미러링할 콘텐츠는, 기설정된 소프트웨어 개발 키트가 집적된 미러링할 응용 프로그램에 의해 제공되며; 상기 표시하는 단계는, 상기 소프트웨어 개발 키트를 실행하여, 상기 미러링할 응용 프로그램과 상기 제1 응용 프로그램의 연결 채널을 구축하는 단계; 및 상기 연결 채널을 통해 상기 미러링 서비스를 호출하여, 상기 가상 디스플레이 스크린을 상기 제1 응용 프로그램에 송신하는 단계;를 포함한다.
일부 실시예에서, 상기 표시하는 단계는, 상기 가상 디스플레이 스크린에 대해 코딩을 진행하고, 상기 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 상기 제2 응용 프로그램에 전송하여 표시하는 단계;를 포함한다.
다른 측면에 따른 미러링 장치는, 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 제1 생성 유닛; 상기 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 제2 생성 유닛; 및 상기 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시하는 미러링 유닛;을 포함한다.
일부 실시예에서, 상기 제1 생성 유닛은, 상기 제2 표시 기기의 화면 비율에 따라, 상기 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축하며; 페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성하고; 상기 표시 윈도우와 상기 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득한다.
일부 실시예에서, 상기 제2 생성 유닛은, 상기 보조 스크린 데이터에 따라, 데이터 베어러(bearer)를 렌더링하여 가상 디스플레이 스크린을 획득한다.
일부 실시예에서, 상기 제1 표시 기기에 제1 응용 프로그램이 설치되고, 상기 제2 표시 기기에 제2 응용 프로그램이 설치되며, 상기 제1 표시 기기와 상기 제2 표시 기기는 상기 제1 응용 프로그램 및 상기 제2 응용 프로그램을 통해 통신 연결된다.
일부 실시예에서, 상기 제1 응용 프로그램은 미러링 서비스를 포함하고, 상기 미러링할 콘텐츠는, 기설정된 소프트웨어 개발 키트가 집적된 미러링할 응용 프로그램에 의해 제공되며; 상기 미러링 유닛은, 상기 소프트웨어 개발 키트를 실행하여, 상기 미러링할 응용 프로그램과 상기 제1 응용 프로그램의 연결 채널을 구축하고; 상기 연결 채널을 통해 상기 미러링 서비스를 호출하여, 상기 가상 디스플레이 스크린을 상기 제1 응용 프로그램에 송신한다.
일부 실시예에서, 상기 미러링 유닛은, 상기 가상 디스플레이 스크린에 대해 코딩을 진행하고, 상기 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 상기 제2 응용 프로그램에 전송하여 표시한다.
다른 측면에따른 전자 기기는, 적어도 하나의 프로세서; 및 적어도 하나의 프로그램이 저장된 저장 장치를 포함하고, 상기 적어도 하나의 프로그램이 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 상술한 방법을 구현한다.
또 다른 측면에 따른 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 저장 매체에서, 상기 프로그램이 프로세서에 의해 실행될 경우, 상술한 방법을 구현한다.
또 다른 측면에 따른 컴퓨터 판독 가능한 저장 매체에 저장된 컴퓨터 프로그램에서, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 경우 상술한 방법을 구현한다.
본 발명의 상기 실시예가 제공하는 미러링 방법 및 장치는, 우선, 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성한다. 다음, 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성한다. 마지막으로, 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시한다. 본 실시예의 방법은 제1 표시 기기에 표시된 내용을 제2 표시 기기에 미러링하여 스크린 확장을 실현한다.
아래 첨부 도면에 도시된 비 제한적인 실시예의 상세한 설명에 대한 열독 및 참조를 통해 본 발명의 다른 특징, 목적 및 장점이 보다 명확해질 것이다.
도 1은 본 발명의 일 실시예가 적용될 수 있는 예시적 시스템 아키텍처이다.
도 2는 본 발명에 따른 미러링 방법의 일 실시예의 흐름도이다.
도 3은 본 발명에 따른 미러링 방법의 일 응용 장면의 모식도이다.
도 4는 본 발명에 따른 미러링 방법의 다른 일 실시예의 흐름도이다.
도 5는 본 발명에 따른 미러링 장치의 일 실시예의 구조 모식도이다.
도 6은 본 발명의 실시예를 구현하기 위한 전자 기기의 컴퓨터 시스템의 구조 모식도이다.
본 실시예들에서 사용되는 용어는 본 실시예들에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 부분에서 상세히 그 의미를 기재할 것이다. 따라서, 본 실시예들에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 실시예들 전반에 걸친 내용을 토대로 정의되어야 한다.
본 실시예들은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는바, 일부 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 실시예들을 특정한 개시형태에 대해 한정하려는 것이 아니며, 본 실시예들의 사상 및 기술범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 명세서에서 사용한 용어들은 단지 실시예들의 설명을 위해 사용된 것으로, 본 실시예들을 한정하려는 의도가 아니다.
본 실시예들에 사용되는 용어들은 다르게 정의되지 않는 한, 본 실시예들이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 실시예들에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않아야 한다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.
한편, 본 명세서에서 하나의 도면 내에서 개별적으로 설명되는 기술적 특징은 개별적으로 구현될 수도 있고, 동시에 구현될 수도 있다.
본 명세서에서, "~유닛(unit)"은 프로세서 또는 회로와 같은 하드웨어 구성(hardware component), 및/또는 프로세서와 같은 하드웨어 구성에 의해 실행되는 소프트웨어 구성(software component)일 수 있다.
아래 첨부 도면 및 실시예를 참조하여 본 발명을 더 상세히 설명한다. 여기서 설명되는 구체적인 실시예는 관련 발명을 해석하기 위한 것일 뿐 본 발명은 이에 한정되지 않음을 이해할 수 있을 것이다. 이 밖에, 설명의 편의를 위해 도면에는 해당 발명과 관련된 부분만이 도시되었음을 유의해야 한다.
모순되지 않는 한 본 발명의 실시예 및 실시예의 특징은 서로 조합될 수 있음을 유의해야 한다. 아래 첨부 도면을 참조하고 실시예를 참조하여 본 발명을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예가 적용될 수 있는 예시적 시스템 아키텍처이다.
도 1에 도시된 바와 같이, 시스템 아키텍처(100)는 제1 표시 기기(101, 102), 네트워크(103) 및 제2 표시 기기(104)를 포함할 수 있다. 네트워크(103)는 제1 표시 기기(101, 102)와 제2 표시 기기(104) 사이에서 통신 링크의 매체를 제공한다. 네트워크(103)는 다양한 연결 타입을 포함할 수 있는 바, 예를 들면 유선, 무선 통신 링크 또는 광섬유 케이블 등이다.
제1 표시 기기(101, 102)는 스크린을 구비하는 임의의 전자 기기일 수 있고, 예를 들면 스마트 백미러, 스마트폰, 스마트 스피커 등일 수 있다. 제1 표시 기기(101, 102)에는 다양한 응용 프로그램이 설치될 수 있고, 제1 표시 기기(101, 102)는 상기 응용 프로그램의 인터페이스를 표시할 수 있다. 사용자는 제1 표시 기기(101, 102)의 스크린 또는 버튼을 통해 제1 표시 기기(101, 102)를 조작할 수 있다.
제2 표시 기기(104)는 스크린을 구비하는 임의의 전자 기기일 수 있고, 예를 들면 차량 탑재 단말기, 태블릿 PC, 랩톱형 휴대용 컴퓨터 및 데스크톱 컴퓨터 등일 수 있다. 제2 표시 기기(104)에는 다양한 응용 프로그램이 설치될 수도 있다.
제1 표시 기기(101, 102)와 제2 표시 기기(104)는 네트워크(103)를 통해 연결될 수 있고, 연결선을 통해 연결될 수도 있다. 제1 표시 기기(101, 102)는 데이터를 제2 표시 기기(104)에 전송하여 제2 표시 기기(104)에 표시할 수 있다.
본 발명의 실시예가 제공하는 미러링 방법은 일반적으로 제1 표시 기기(101, 102)에 의해 수행되고, 상응하게 미러링 장치는 통상적으로 제1 표시 기기(101, 102)에 설치된다.
도 1에서 제1 표시 기기(101, 102), 네트워크(103) 및 제2 표시 기기(104)의 개수는 예시적인 것일 뿐이다. 실제 필요에 따라, 시스템 아키텍처(100)는 임의의 개수의 제1 표시 기기(101, 102), 네트워크(103) 및 제2 표시 기기(104)를 구비할 수 있다.
도 2는 본 발명에 따른 미러링 방법의 일 실시예의 흐름도이다.
도 2를 참조하면, 본 실시예에서 제1 표시 기기에 미러링할 응용 프로그램이 설치된다. 상기 미러링할 응용 프로그램은 영상 재생 애플리케이션, 음악 재생 애플리케이션, 이미지 브라우징 애플리케이션 등일 수 있다. 본 실시예의 미러링 방법은 아래와 같은 단계를 포함한다.
단계(201)에서, 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성한다.
본 실시예에서, 미러링 방법의 수행주체(예를 들면, 도 1에 도시된 제1 표시 기기(101, 102))는 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성할 수 있다. 상기 미러링할 콘텐츠는 제1 표시 기기에 설치된 응용 프로그램의 표시 내용일 수 있고, 응용 프로그램의 디스플레이 인터페이스, 재생 윈도우 등을 포함할 수 있다. 보조 스크린 데이터는 상기 미러링할 콘텐츠를 포함할 수 있고, 상기 미러링할 콘텐츠에 대해 처리한 후의 내용을 포함할 수도 있따. 상기 처리는 해상도 조절, 표시 레이아웃 조절 등을 포함할 수 있으나 이에 한정되는 것은 아니다.
일부 구체적인 응용에서, 제1 표시 기기가 Android 운영 체제일 경우, Presentation 클래스를 이용하여 보조 스크린 데이터를 생성한다. Presentation 클래스는 Dialog(대화박스)를 계승하고 독립적인 Window(윈도우)를 구비하며, 스크린을 보조하여 상이한 내용을 보여줄 수 있다.
수행주체는 미러링할 응용 프로그램에 미리 개발한 SDK(Software Development Kit, 소프트웨어 개발 키트)를 집적하여 보조 스크린 데이터를 생성할 수 있다. 상기 SDK를 실행하여, 미러링할 응용 프로그램의 표시 콘텐츠를 미러링할 콘텐츠로 하고 보조 스크린 데이터를 생성한다.
단계(202)에서, 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성한다.
본 실시예에서, 수행주체는 보조 스크린 데이터를 생성한 후 가상 디스플레이 스크린을 생성할 수 있다. 상기 보조 스크린 데이터은 하나의 독립적인 윈도우일 수 있고 하나의 독립적인 디스플레이 인터페이스일 수도 있다. 가상 디스플레이 스크린은 보조 스크린 데이터를 포함할 수 있고, 사용자가 조작할 수 있는 버튼 또는 입구를 포함할 수도 있다. 사용자는 이런 버튼 또는 입구를 통해 가상 디스플레이 스크린을 종료하거나 이동하는 등 조작을 진행할 수 있다. 구체적으로, 수행주체는 제1 표시 기기에 설치된 운영체제 중의 컴포넌트를 통해 가상 디스플레이 스크린을 생성할 수 있다. 상기 컴포넌트는 스크린에 표시된 데이터를 처리하는 베어러(bearer)이다. Android 운영체제에 있어서 상기 컴포넌트는 surface 컴포넌트이다.
단계(203)에서, 가상 디스플레이 스크린을 제2 표시 기기에 전송하여 표시한다.
본 실시예에서, 수행주체는 상기 가상 디스플레이 스크린을 제2 표시 기기에 전송할 수 있다. 이로써 제2 표시 기기의 스크린에 상기 가상 디스플레이 스크린을 표시할 수 있다. 수행주체는 다양한 통신 방식으로 가상 디스플레이 스크린을 제2 표시 기기에 전송할 수 있는 바, 예를 들면 데이터 케이블 연결 방식, 무선 연결 방식 등을 이용할 수 있다. 상기 제2 표시 기기는 기존의 스크린을 2개의 부분으로 나누고 그 중 하나에 상기 가상 디스플레이 스크린의 내용을 표시하고 다른 하나에 기존의 스크린의 내용을 표시할 수 있다. 또는 상기 가상 디스플레이 스크린을 제2 표시 기기의 기존의 스크린 위에 플로팅하여 표시할 수 있다.
도 3은 본 발명에 따른 미러링 방법의 일 응용 장면의 모식도이다.
도 3의 응용 장면에서 사용자의 차량에 스마트 백미러(301) 및 차량 머신(302)이 설치되어 있고, 상기 스마트 백미러(301) 및 차량 머신(302)에는 다양한 응용 프로그램이 설치될 수 있다. 스마트 백미러(301) 및 차량 머신(302)은 모두 스크린을 구비하고, 응용 프로그램의 디스플레이 인터페이스를 표시할 수 있다. 사용자의 주행 과정에서 상기 스마트 백미러(301)의 스크린이 계속 켜진 상태이고 차량의 전방 또는 후방의 영상을 표시하고 있으면 사용자의 주행 안전에 영향을 줄 수 있다. 본 실시예에서, 도 2의 단계(201) 내지 단계(203)을 통해 원래 스마트 백미러(301)에 표시된 콘텐츠를 차량 머신(302)의 스크린에 표시하고 스마트 백미러(301)의 스크린을 끈다. 이로써 사용자는 차량 머신(302)의 스크린에서 스마트 백미러(301)의 콘텐츠를 관람할 수 있다.
본 발명의 상기 실시예가 제공하는 미러링 방법 및 장치는, 우선, 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성한다. 다음, 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성한다. 마지막으로, 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시한다. 본 실시예의 방법은 제1 표시 기기에 표시된 내용을 제2 표시 기기에 미러링하여 스크린 확장을 실현한다.
도 4는 본 발명에 따른 미러링 방법의 다른 일 실시예의 흐름도이다.
도 4를 참조하면, 본 실시예에서, 제1 표시 기기에 제1 응용 프로그램이 설치되고, 제2 표시 기기에 제2 응용 프로그램이 설치되며, 제1 표시 기기와 제2 표시 기기는 제1 응용 프로그램 및 제2 응용 프로그램을 통해 통신 연결된다. 제1 표시 기기와 제2 표시 기기 사이는 USB 데이터 케이블을 통해 연결될 수 있고, WiFi를 통해 직접 연결될 수도 있다.
본 실시예에서, 제1 표시 기기에 설치된 미러링할 응용 프로그램에는 기설정된 SDK가 집적되고, 상기 SDK는 미러링할 응용 프로그램과 제1 응용 프로그램을 연결한다. 제1 응용 프로그램은 다양한 서비스를 포함할 수 있고, 미러링할 응용 프로그램은 상기 연결을 통해 제1 응용 프로그램의 다양한 서비스를 호출할 수 있으며, 미러링할 응용 프로그램과 제1 응용 프로그램 사이의 인터랙션을 실현한다.
상기 제1 응용 프로그램 및 제2 응용 프로그램은 상이한 단말을 어댑팅하는 스마트 연결 애플리케이션일 수 있고, 예를 들면 MirrorLink, CarPlay, CarLife, Android Auto이다. 일부 구체적인 응용 장면에서 상기 제1 응용 프로그램은 휴대폰 버전 CarLife일 수 있고, 제2 응용 프로그램은 차량 버전 CarLife일 수 있다. 휴대폰 버전 CarLife과 차량 버전 CarLife 사이는 CarLife 전송 프로토콜을 통해 데이터를 전송하고, 상기 데이터는 오디오, 영상 및 명령을 포함할 수 있다. CarLife 전송 프로토콜을 통해 통화를 할 수도 있다. 차량 버전 CarLife은 HMI 계층, 프로토콜 계층 및 하드웨어 계층을 포함한다. 여기서 HMI 계층은 CarLife 콘텐츠를 운전 사용자에게 보여주고, 최종적으로 사용자에게 더 편리하고 풍부한 운전 체험을 제공하기 위함이다. 프로토콜 계층은 주로 터치 스크린/물리적 버튼 정보의 획득을 포함하고, 차량 버전 CarLife과 휴대폰 버전 CarLife의 기기 발견 및 권한 부여 관리, 데이터 전송, 영상 디코딩 및 오디오의 재생과 관리 등 기능을 수행한다. 하드웨어 계층에서 차량단 CarLife는 USB Host/Wifi, 블루투스 전송, 영상 디코딩, 오디오 재생 등 하드웨어 지원을 받아야 한다. CarLife 프로토콜을 배합하여 차량단 CarLife의 대응되는 기능을 최종적으로 완료할 수 있다.
도 4에 도시된 바와 같이, 본 실시예의 미러링 방법은 아래와 같은 단계를 포함할 수 있다.
단계(401)에서, 제2 표시 기기의 화면 비율에 따라, 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축한다.
수행주체는 우선 제2 표시 기기의 화면 비율을 획득할 수 있다. 시중에 유통되는 스크린의 화면 비율은 4：3, 5：4, 16:10, 16:9, 21:9를 포함할 수 있다. 차량 머신에 있어서, 대다수 화면 비율은 16:9이다, 스마트 백미러에 있어 스크린의 화면 비율은 대부분 24:9이다. 미러링할 애플리케이션이 스마트 백미러에서의 표시 페이지를 직접 차량 머신단에 미러링할 경우, 페이지 효과가 아주 좋지 않아, 사용자 체험에 영향을 준다. 본 실시예에서, 제2 표시 기기의 화면 비율에 따라 미러링할 응용 프로그램의 표시 콘텐츠의 페이지 레이아웃을 조절한다. 구체적으로 수행주체는 미러링할 응용 프로그램의 표시 콘텐츠를 캡쳐하여 적절한 비율을 얻을 수 있다.
수행주체는 가상 디스플레이 객체를 구축할 수 있고, 상기 가상 디스플레이 객체는 스크린의 영상 또는 이미지를 획득하기 위한 것이다. 객체 지향 분야에 있어 타입과 객체는 객체 지향 전체에서 가장 기초적인 구성 유닛이다. 클래스는 추상적인 개념 집합으로서 하나의 공통성 산물을 가리키고 클래스에 정의된 것은 속성 및 행위(방법)이다. 객체는 하나의 개성의 표현으로서 하나의 독립적인 개체를 가리키고 각각의 객체는 자기만의 독립적인 속성을 구비하며 속성에 의해 상이한 객체를 구분한다. 본 실시예에서, 가상 디스플레이에 대응되는 클래스를 통해 가상 디스플레이 객체를 구축한다.
Android 운영체제에서 수행주체는 Presentation 표시 컨트롤을 통해 표시할 콘텐츠를 지정된 스크린에 표시할 수 있다. 구체적으로 수행주체는 Presentation 표시 컨트롤 DisplayManager 클래스의 createVirtualDisplay() 함수를 호출하여 가상 디스플레이 객체를 구축할 수 있다.
단계(402)에서, 페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성한다.
본 실시예에서, 수행주체는 미러링할 콘텐츠의 페이지 레이아웃을 결정한 후 페이지 레이아웃을 결정한 후의 인터페이스에 따라 표시 윈도우를 생성할 수 있다. 구체적으로, 수행주체는 상기 페이지 레이아웃을 포함하는 인터페이스를 표시 윈도우의 콘텐츠로 하거나, 상기 인터페이스를 처리하여 표시 윈도우의 콘텐츠로 할 수 있다. 상기 처리는 압축 등 조작을 포함할 수 있다.
Android 운영체제에서 수행주체는 Activity 응용 컴포넌트를 통해 보조 스크린을 생성할 수 있다. 여기서 Activity는 스크린을 제공하여 인터랙션을 진행한다. 각각의 Activity는 모두 사용자 인터페이스를 드로잉하기 위한 표시 윈도우를 획득한다. 이 표시 윈도우는 스크린을 꽉 채울 수 있고 스크린보다 작아 다른 윈도우 위에 플로팅할 수도 있다.
단계(403)에서, 표시 윈도우와 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득한다..
수행주체는 상기 표시 윈도우를 획득한 후, 표시 윈도우와 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득할 수 있다. 이로써, 수행주체는 스크린 중의 영상 또는 이미지를 상기 표시 윈도우에 표시할 수 있다. 구체적으로 수행주체는 운영체제의 하위 계층 조작 함수를 통해 표시 윈도우와 가상 디스플레이 객체를 연관시킬 수 있다.
단계(404)에서, 보조 스크린 데이터에 따라, 데이터 베어러를 렌더링하여 가상 디스플레이 스크린을 획득한다.
보조 스크린 데이터를 획득한 후, 수행주체는 데이터 베어러를 렌더링하여 가상 디스플레이 스크린을 얻을 수 있다. 데이터 베어러는 보조 스크린 데이터의 표시를 위해 제공한 컴포넌트로 이해할 수 있다. 렌더링 시 수행주체는 운영체제의 하위 계층 조작 함수를 통해 상기 데이터 베어러를 렌더링할 수 있다. 구체적으로, Android 운영체제에서 수행주체는 보조 스크린 데이터를 surface 컨트롤에 렌더링하여 가상 디스플레이 스크린을 획득할 수 있다.
단계(405)에서, 소프트웨어 개발 키트를 실행하여, 미러링할 응용 프로그램과 1 응용 프로그램의 연결 채널을 구축한다
수행주체는 소프트웨어 개발 키트를 실행하여, 미러링할 응용 프로그램과 1 응용 프로그램의 연결 채널을 구축할 수 있다. 구체적으로, Android 운영체제에서 수행주체는 미러링할 응용 프로그램과 제1 응용 프로그램의 AIDL 연결을 구축할 수 있다. AIDL는 Android 중 IPC(Inter-Process Communication) 방식 중 하나로서, AIDL는 Android Interface definition language의 약칭이이며, AIDL는 두 개의 응용 프로그램의 인터랙션을 실현할 수 있다.
수행주체는 iBinder를 통해 가상 디스플레이 스크린을 미러링할 응용 프로그램으로부터 제1 응용 프로그램에 송신할 수 있다. IBinder는 Android 개발 중 하나의 인터페이스이다. 이 인터페이스는 객체에 대해 원격 조작을 진행할 수 있는 하나의 기본 인터페이스이다. 인-프로세스(In Process)와 아웃 오브 프로세스(Out of Process) 사이의 호출을 위해 고성능의 경량 원격 호출의 핵심 부분을 제공한다. 상기 인터페이스는 원격 객체와 인터랙션을 진행하는 추상 프로토콜이다.
단계(406)에서, 연결 채널을 통해 미러링 서비스를 호출하여, 가상 디스플레이 스크린을 제1 응용 프로그램에 송신한다.
본 실시예에서, 제1 응용 프로그램은 미러링 서비스를 포함한다. 응용 프로그램에 있어 서비스는 백그라운드에서 실행되고 인터페이스를 사용하지 않으며 동일한 기기의 다른 응용 프로그램의 호출을 제공할 수 있다. 서비스 호출을 통해 응용 프로그램 간 인터랙션이 가능하다. 본실시예는 연결 채널을 통해 미러링 서비스를 호출하여, 미러링할 응용 프로그램과 제1 응용 프로그램의 인터랙션을 실현한다. 이로서 제1 응용 프로그램은 가상 디스플레이 스크린을 제1 응용 프로그램에 송신할 수 있다.
본 실시예의 일부 선택 가능한 실시형태에서, 수행주체는 상기 가상 디스플레이 스크린을 코딩한다. 다음 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 제2 응용 프로그램에 전송한다. 제2 응용 프로그램은 상기 코딩 후의 가상 디스플레이 스크린을 수신하여 코딩을 진행한 다음 제2 표시 기기에서 상기 가상 디스플레이 스크린을 표시한다.
제1 표시 기기가 표시하는 영상에 있어서, 수행주체는 상기 영상에 대해 h264 압축 코딩을 통해 영상 스트림을 얻을 수 있다.
본 발명의 상기 실시예가 제공하는 미러링 방법은 carlife를 통해 스마트 백미러 중의 영상을 차량 머신단에 전송하고 차량 머신단에서 표시함으로써 스마트 백미러의 스크린 확장을 실현할 수 있다. 아울러, 스마트 백미러 중의 각각의 응용 프로그램이 차량 머신 단의 화면 비율에 따라 페이지 레이아웃을 조절하도록 하여 사용자 브라우징 체험을 향상시킬 수 있다.
도 5는 본 발명에 따른 미러링 장치의 일 실시예의 구조 모식도이다.
도 5를 참조하면, 미러링 장치(500)의 일 실시예를 제공하고, 상기 장치(500)의 실시예는 도 2에 도시된 방법 실시예와 대응된다. 상기 장치(500)는 구체적으로 통신 연결된 제1 표시 기기 및 제2 표시 기기에 적용될 수 있고, 상기 제1 표시 기기는 미러링할 응용 프로그램을 포함한다.
도 5에 도시된 바와 같이, 본 실시예의 미러링 장치(500)는 제1 생성 유닛(501), 제2 생성 유닛(502) 및 미러링 유닛(503)을 포함한다.
제1 생성 유닛(501)은 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성한다.
제2 생성 유닛(502)은 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성한다.
미러링 유닛(503)은 가상 디스플레이 스크린을 제2 표시 기기에 전송하여 표시한다.
본 실시예의 일부 선택 가능한 실시형태에서, 제1 생성 유닛(501)은, 제2 표시 기기의 화면 비율에 따라, 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축하며; 페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성하고; 표시 윈도우와 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득할 수 있다.
본 실시예의 일부 선택 가능한 실시형태에서, 제2 생성 유닛(502)은, 보조 스크린 데이터에 따라, 데이터 베어러를 렌더링하여 가상 디스플레이 스크린을 획득한다.
본 실시예의 일부 선택 가능한 실시형태에서, 제1 표시 기기에 제1 응용 프로그램이 설치되고, 제2 표시 기기에 제2 응용 프로그램이 설치되며, 제1 표시 기기와 제2 표시 기기는 제1 응용 프로그램 및 제2 응용 프로그램을 통해 통신 연결된다.
본 실시예의 일부 선택 가능한 실시형태에서, 제1 응용 프로그램은 미러링 서비스를 포함하고, 미러링할 콘텐츠는, 기설정된 소프트웨어 개발 키트가 집적된 미러링할 응용 프로그램에 의해 제공된다. 미러링 유닛(503)은, 소프트웨어 개발 키트를 실행하여, 미러링할 응용 프로그램과 제1 응용 프로그램의 연결 채널을 구축하고; 연결 채널을 통해 미러링 서비스를 호출하여, 가상 디스플레이 스크린을 제1 응용 프로그램에 송신한다.
본 실시예의 일부 선택 가능한 실시형태에서, 미러링 유닛(503)은, 가상 디스플레이 스크린에 대해 코딩을 진행하고, 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 제2 응용 프로그램에 전송하여 표시한다.
미러링 장치(500)에 포함된 유닛(501) 내지 유닛(503)은 각각 도 2를 참조하여 상술한 미러링 방법 중 각각의 단계에 대응된다. 여기서, 앞에서 미러링 방법에 대해 설명한 조작 및 특징은 마찬가지로 장치(500) 및 이에 포함된 유닛에 적용되고 여기서는 더이상 설명하지 않는다.
도 6은 본 발명의 실시예를 구현하기 위한 전자 기기의 컴퓨터 시스템의 구조 모식도이다.
도 6을 참조하면, 전자 기기(600)는 하나의 예시일 뿐, 본 발명의 실시예의 기능 또는 사용범위에 대한 어떠한 한정도 아니다.
도 6에 도시된 바와 같이, 전자 기기(600)는 판독 전용 메모리(ROM)(602)에 저장된 프로그램 또는 저장 장치(608)로부터 랜덤 액세스 메모리(RAM)(603)로 로딩된 프로그램에 따라 다양하고 적절한 동작 및 처리를 수행할 수 있는 처리 장치(예를 들면 중앙 처리 장치, 그래픽 처리 장치 등)(601)를 포함한다. RAM(603)에는 또한 전자 기기(600)의 조작에 필요한 다양한 프로그램 및 데이터가 저장된다. 처리 장치(601), ROM(602) 및 RAM(603)은 버스(604)를 통해 서로 연결된다. 입/출력(I/O) 인터페이스(605) 역시 버스(604)에 연결된다.
일반적으로, 예를 들어 터치 스크린, 터치 패드, 키보드, 마우스, 카메라, 마이크, 가속도계, 자이로스코프 등을 포함하는 입력 장치(606); 예를 들어 액정 디스플레이(LCD), 스피커, 진동기 등을 포함하는 출력 장치(607); 예를 들어 자기 테이프, 하드 드라이버 등을 포함하는 저장 장치(608); 및 통신 장치(609)는 I/O 인터페이스(605)에 연결될 수 있다. 통신 장치(609)는 전자 기기(600)가 무선 또는 유선으로 다른 기기와 통신하여 데이터를 교환하도록 허용할 수 있다. 비록, 도 6에서 다양한 장치를 갖는 전자 기기(600)를 나타냈지만, 모든 도시된 장치를 실시하거나 구비할 필요는 없음을 이해해야 한다. 전자 기기(600)는 보다 많거나 보다 적은 장치를 대체적으로 실시하거나 구비할 수 있다. 도 6에 도시된 각각의 블록은, 하나의 장치를 가리킬 수 있고, 필요에 따라 다수의 장치를 가리킬 수도 있다.
특히, 본 발명의 실시예에 따르면, 앞에서 흐름도를 참조하여 설명한 과정은 컴퓨터 소프트웨어 프로그램으로서 구현될 수 있다. 예를 들어, 본 발명의 실시예는 컴퓨터 판독 가능 매체에 베어링된 컴퓨터 프로그램을 포함하는 컴퓨터 프로그램 제품을 포함하고, 상기 컴퓨터 프로그램은 흐름도에 도시된 방법을 수행하기 위한 프로그램 코드를 포함한다. 이런 실시예에서, 상기 컴퓨터 프로그램은 통신 장치(609)를 통해 네트워크로부터 다운로드 및 설치될 수 있거나 또는 저장 장치(608)로부터 설치되거나 또는 ROM(602)으로부터 설치될 수 있다. 컴퓨터 프로그램이 처리 장치(601)에 의해 실행될 때, 본 발명의 방법에 한정된 상기 기능들이 수행된다. 본 발명에 기재된 컴퓨터 판독 가능 매체는 컴퓨터 판독 가능 신호 매체 또는 컴퓨터 판독 가능 매체 또는 이 양자의 임의의 조합일 수 있음에 유의해야 한다. 컴퓨터 판독 가능 매체는 예를 들어, 전자, 자기, 광학, 전자기, 적외선 또는 반도체 시스템, 장치 또는 소자, 또는 이들의 임의의 조합일 수 있지만, 이에 한정되지 않는다. 컴퓨터 판독 가능 매체의 보다 구체적인 예는 하나 또는 복수의 도선에 의해 전기적으로 연결되, 휴대용 컴퓨터 디스크, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 소거 가능 프로그램 가능 읽기 전용 메모리(EPROM 또는 플래시 메모리), 광섬유, 휴대용 컴팩트 디스크 판독 전용 메모리(CD-ROM), 광학 저장 장치, 자기 저장 장치 또는 이들의 임의의 적절한 조합을 포함할 수 있지만, 이에 한정되지 않는다. 본 발명에서, 컴퓨터 판독 가능 매체는 명령 실행 시스템, 장치 또는 소자 또는 이들과 결합되어 사용될 수 있는 프로그램을 포함하거나 저장할 수 있는 임의의 타입의 매체일 수 있다. 본 발명의 실시예에서, 컴퓨터 판독 가능 신호 매체는 컴퓨터 판독 가능 프로그램 코드를 베어링하는 베이스 밴드 또는 캐리어의 일부로 전파되는 데이터 신호를 포함할 수 있다. 이러한 전파된 데이터 신호는 전자기 신호, 광학 신호, 또는 상기 임의의 적절한 조합을 포함하지만 이에 한정되지 않는 다양한 형태를 취할 수 있다. 컴퓨터 판독 가능 신호 매체는 또한 명령 실행 시스템, 장치 또는 소자에 사용되거나 이와 결합하여 사용하기 위한 프로그램을 전송, 전파 또는 전송할 수 있는 컴퓨터 판독 가능 매체 이외의 임의의 컴퓨터 판독 가능 매체일 수 있다. 컴퓨터 판독 가능 매체에 포함된 프로그램 코드는 무선, 유선, 광섬유 케이블, RF(무선주파수) 등, 또는 상기의 임의의 적절한 조합을 포함하지만 이에 한정되지 않는 임의의 적절한 매체에 의해 전송될 수 있다.
상기 컴퓨터 판독가능 저장 매체는 상기 전자 기기에 포함될 수 있거나 상기 전자 기기에 조립되지 않고 별도로 존재할 수 있다. 상기 컴퓨터 판독 가능 매체에는 하나 또는 복수의 프로그램이 베어링되어, 상기 하나 또는 복수의 프로그램이 상기 전자 기기에 의해 실행시 상기 전자 기기로 하여금 제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 단계; 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 단계; 및 가상 디스플레이 스크린을 제2 표시 기기에 전송하여 표시하는 단계를 수행하도록 한다.
본 발명의 동작을 수행하기 위한 컴퓨터 프로그램 코드는 하나 또는 하나 이상의 프로그래밍 언어, 또는 그들의 조합으로 작성 될 수 있다. 상기 프로그래밍 언어는 Java, Smalltalk, C++를 비롯한 객체 지향 프로그래밍 언어와 "C" 언어 또는 유사한 프로그래밍 언어를 비롯한 기존 절차적 프로그래밍 언어를 포함한다. 프로그램 코드는 완전히 사용자의 컴퓨터에서 실행되거나, 부분적으로 사용자의 컴퓨터에서 실행되거나, 독립형 소프트웨어 패키지로서 실행되거나, 일부는 사용자의 컴퓨터에서 실행되고 일부는 원격 컴퓨터에서 실행되거나, 또는 완전히 원격 컴퓨터 또는 서버에서 실행될 수 있다. 원격 컴퓨터의 경우 원격 컴퓨터는 LAN 또는 WAN을 포함한 모든 종류의 네트워크를 통해 사용자의 컴퓨터에 연결되거나 외부 컴퓨터에 연결될 수 있다(예를 들어, 인터넷 서비스 제공 업체를 이용하여 인터넷을 통해 연결).
도면의 흐름도 및 블록도는 본 발명의 다양한 실시예에 따른 시스템, 방법 및 컴퓨터 프로그램 제품의 구현 가능한 아키텍처, 기능 및 동작을 도시한다. 이 점에서, 흐름도 또는 블록도의 각 블록은 지정된 논리적 기능을 구현하기 위한 하나 또는 하나 이상의 실행 가능한 명령을 포함하는 모듈, 프로그램 세그먼트 또는 코드의 일부를 나타낼 수 있다. 일부 대안적인 구현에서, 블록에 표기된 기능은 또한 도면에 도시된 것과 다른 순서로 구현될 수 있음에 유의해야 한다. 예를 들어, 연속적으로 표현된 2개의 블록은 실제로 병렬 실행될 수 있고, 관련 기능에 따라 때때로 역순으로 실행될 수도 있다. 또한, 블록도 및/또는 흐름도의 각 블록, 및 블록도 및/또는 흐름도에서 블록의 조합은 지정된 기능 또는 동작을 수행하는 전용 하드웨어 기반 시스템에서 구현될 수 있거나 전용 하드웨어와 컴퓨터 명령어를 조합하여 구현할 수도 있음에 유의해야 한다.
본 발명의 실시예들에 설명된 유닛들은 소프트웨어 또는 하드웨어에 의해 구현될 수 있다. 설명된 유닛은 또한 프로세서에 설치될 수 있고, 예를 들어 프로세서는 제1 생성 유닛, 제2 생성 유닛 및 미러링 유닛을 포함한다고 할 수도 있다. 여기서 이들 유닛의 명칭은 경우에 따라서는 유닛 자체로 한정되지 않으며, 예를 들어, 제1 생성 유닛은 “보조 스크린 데이터 생성 유닛”으로 기술될 수도 있다.
상기 설명은 본 발명의 바람직한 실시예 및 적용된 기술의 원리에 대한 설명일 뿐이다. 본 발명이 속하는 기술분야의 통상의 기술자들은 본 발명에 언급된 본 발명의 범위는 상기 기술적 특징의 특정 조합에 따른 기술적 해결수단에 한정되지 않으며, 동시에 본 발명의 사상을 벗어나지 않으면서 상기 기술적 특징 또는 그 등가 특징에 대해 임의로 조합하여 형성된 다른 기술적 해결수단, 예를 들어, 상기 특징과 본 발명에 공개된(단 이에 한정되지 않음) 유사한 기능을 구비하는 기술적 특징을 서로 교체하여 형성된 기술적 해결수단을 포함함을 이해하여야 한다.

Claims (15)

  1. 미러링 방법으로서,
    제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 단계;
    상기 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 단계; 및
    상기 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시하는 단계;를 포함하는 방법.
  2. 제1항에 있어서,
    상기 보조 스크린 데이터를 생성하는 단계는,
    상기 제2 표시 기기의 화면 비율에 따라, 상기 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축하는 단계;
    상기 페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성하는 단계; 및
    상기 표시 윈도우와 상기 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득하는 단계;를 포함하는 방법.
  3. 제1항에 있어서,
    상기 가상 디스플레이 스크린을 생성하는 단계는,
    상기 보조 스크린 데이터에 따라, 데이터 베어러(bearer)를 렌더링하여 가상 디스플레이 스크린을 획득하는 단계;를 포함하는 방법.
  4. 제1항에 있어서,
    상기 제1 표시 기기에 제1 응용 프로그램이 설치되고, 상기 제2 표시 기기에 제2 응용 프로그램이 설치되며, 상기 제1 표시 기기와 상기 제2 표시 기기는 상기 제1 응용 프로그램 및 상기 제2 응용 프로그램을 통해 통신 연결되는 방법.
  5. 제4항에 있어서,
    상기 제1 응용 프로그램은 미러링 서비스를 포함하고, 상기 미러링할 콘텐츠는, 기설정된 소프트웨어 개발 키트가 집적된 미러링할 응용 프로그램에 의해 제공되며,
    상기 표시하는 단계는,
    상기 소프트웨어 개발 키트를 실행하여, 상기 미러링할 응용 프로그램과 상기 제1 응용 프로그램의 연결 채널을 구축하는 단계; 및
    상기 연결 채널을 통해 상기 미러링 서비스를 호출하여, 상기 가상 디스플레이 스크린을 상기 제1 응용 프로그램에 송신하는 단계;를 포함하는 방법.
  6. 제5항에 있어서,
    상기 표시하는 단계는,
    상기 가상 디스플레이 스크린에 대해 코딩을 진행하고, 상기 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 상기 제2 응용 프로그램에 전송하여 표시하는 단계;를 포함하는 방법.
  7. 미러링 장치로서,
    제1 표시 기기의 미러링할 콘텐츠에 따라, 보조 스크린 데이터를 생성하는 제1 생성 유닛;
    상기 보조 스크린 데이터에 따라, 가상 디스플레이 스크린을 생성하는 제2 생성 유닛; 및
    상기 가상 디스플레이 스크린을 상기 제2 표시 기기에 전송하여 표시하는 미러링 유닛;을 포함하는 장치.
  8. 제7항에 있어서,
    상기 제1 생성 유닛은,
    상기 제2 표시 기기의 화면 비율에 따라, 상기 미러링할 콘텐츠의 페이지 레이아웃을 결정하고 가상 디스플레이 객체를 구축하며;
    페이지 레이아웃을 결정한 후의 인터페이스에 따라, 표시 윈도우를 생성하고;
    상기 표시 윈도우와 상기 가상 디스플레이 객체를 연관시켜, 보조 스크린 데이터를 획득하는 장치.
  9. 제7항에 있어서,
    상기 제2 생성 유닛은,
    상기 보조 스크린 데이터에 따라, 데이터 베어러(bearber)를 렌더링하여 가상 디스플레이 스크린을 획득하는 장치.
  10. 제7항에 있어서,
    상기 제1 표시 기기에 제1 응용 프로그램이 설치되고, 상기 제2 표시 기기에 제2 응용 프로그램이 설치되며, 상기 제1 표시 기기와 상기 제2 표시 기기는 상기 제1 응용 프로그램 및 상기 제2 응용 프로그램을 통해 통신 연결되는 장치.
  11. 제10항에 있어서,
    상기 제1 응용 프로그램은 미러링 서비스를 포함하고, 상기 미러링할 콘텐츠는, 기설정된 소프트웨어 개발 키트가 집적된 미러링할 응용 프로그램에 의해 제공되며,
    상기 미러링 유닛은,
    상기 소프트웨어 개발 키트를 실행하여, 상기 미러링할 응용 프로그램과 상기 제1 응용 프로그램의 연결 채널을 구축하고;
    상기 연결 채널을 통해 상기 미러링 서비스를 호출하여, 상기 가상 디스플레이 스크린을 상기 제1 응용 프로그램에 송신하는 장치.
  12. 제11항에 있어서,
    상기 미러링 유닛은,
    상기 가상 디스플레이 스크린에 대해 코딩을 진행하고, 상기 제1 응용 프로그램을 통해 코딩 후의 가상 디스플레이 스크린을 상기 제2 응용 프로그램에 전송하여 표시하는 장치.
  13. 전자 기기로서,
    적어도 하나의 프로세서; 및
    적어도 하나의 프로그램이 저장된 저장 장치;를 포함하고,
    상기 적어도 하나의 프로그램이 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 제1항 내지 제6항 중 어느 한 항에 따른 방법을 구현하는 전자 기기.
  14. 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 저장 매체로서,
    상기 프로그램이 프로세서에 의해 실행될 경우, 제1항 내지 제6항 중 어느 한 항에 따른 방법을 구현하는 저장 매체.
  15. 컴퓨터 판독 가능한 저장 매체에 저장된 컴퓨터 프로그램으로서,
    상기 컴퓨터 프로그램이 프로세서에 의해 실행될 경우 제1항 내지 제6항 중 어느 한 항에 따른 방법을 구현하는 컴퓨터 프로그램.
KR1020210040643A 2020-05-29 2021-03-29 미러링 방법 및 장치 KR20210042065A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010471888.2 2020-05-29
CN202010471888.2A CN111634188B (zh) 2020-05-29 2020-05-29 用于投屏的方法和装置

Publications (1)

Publication Number Publication Date
KR20210042065A true KR20210042065A (ko) 2021-04-16

Family

ID=72325096

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210040643A KR20210042065A (ko) 2020-05-29 2021-03-29 미러링 방법 및 장치

Country Status (3)

Country Link
JP (1) JP7352589B2 (ko)
KR (1) KR20210042065A (ko)
CN (1) CN111634188B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024034851A1 (ko) * 2022-08-09 2024-02-15 삼성전자 주식회사 외부 전자 장치에 화면을 표시하는 전자 장치 및 그 동작 방법

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112181336A (zh) * 2020-09-25 2021-01-05 深圳市智行至美科技有限公司 行车记录仪及其投屏方法、装置及计算机可读存储介质
CN114554274A (zh) * 2020-11-25 2022-05-27 陕西重型汽车有限公司 一种基于WiFi的车载端投屏系统和方法
CN114584816B (zh) * 2020-11-30 2024-06-11 上海新微技术研发中心有限公司 安卓投屏清晰度设置方法、计算机可读存储介质和设备
CN115145515A (zh) * 2021-03-31 2022-10-04 华为技术有限公司 一种投屏方法及相关装置
CN113138737B (zh) 2021-04-16 2023-11-03 阿波罗智联(北京)科技有限公司 投屏场景的显示控制方法、装置、设备、介质及程序产品
CN115314584B (zh) * 2021-05-07 2024-08-09 华为技术有限公司 一种音频播放方法、装置和设备
CN113766266B (zh) * 2021-09-10 2024-02-13 阿波罗智联(北京)科技有限公司 音视频处理方法、装置、设备以及存储介质
CN113835663A (zh) * 2021-09-24 2021-12-24 北京字节跳动网络技术有限公司 显示控制方法、装置、系统、电子设备、介质及程序产品
CN114063951B (zh) * 2021-09-26 2022-12-02 荣耀终端有限公司 投屏异常处理方法及电子设备
CN115914700A (zh) * 2021-09-30 2023-04-04 上海擎感智能科技有限公司 投屏处理方法、系统、电子设备和存储介质
CN114035973A (zh) * 2021-10-08 2022-02-11 阿波罗智联(北京)科技有限公司 一种应用程序的投屏方法、装置、电子设备及存储介质
CN114153542A (zh) * 2021-11-30 2022-03-08 阿波罗智联(北京)科技有限公司 投屏方法、装置、电子设备及计算机可读存储介质
CN114398112B (zh) * 2021-12-01 2024-05-14 瑞芯微电子股份有限公司 控制屏幕切换的方法、系统和计算机可读介质
CN114125526B (zh) * 2021-12-24 2024-03-15 北京淳中科技股份有限公司 一种屏幕镜像方法及装置
CN115550498B (zh) * 2022-08-03 2024-04-02 阿波罗智联(北京)科技有限公司 投屏方法、装置、设备和存储介质
CN116389352B (zh) * 2023-03-17 2024-09-20 深圳市同行者科技有限公司 车载交互投屏数据的传输方法、系统及相关设备
CN116795316B (zh) * 2023-08-24 2023-11-03 南京维赛客网络科技有限公司 投屏时小窗口播放场景内画面的方法、系统及存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8963799B2 (en) * 2011-01-11 2015-02-24 Apple Inc. Mirroring graphics content to an external display
US8866701B2 (en) * 2011-03-03 2014-10-21 Citrix Systems, Inc. Transparent user interface integration between local and remote computing environments
US20140333508A1 (en) * 2012-08-31 2014-11-13 Game Concourse Inc. System and method for communicating and interacting with a display screen using a remote device
JP6163011B2 (ja) * 2013-05-14 2017-07-12 株式会社アイ・オー・データ機器 アダプタ装置、ミラーリングシステム、および、ミラーリング方法
CN104978156B (zh) * 2014-04-02 2021-10-22 联想(北京)有限公司 多屏显示方法及多屏显示处理装置
JP2017045104A (ja) * 2015-08-24 2017-03-02 株式会社デンソー 表示制御装置
CN105677329B (zh) * 2015-12-30 2018-12-14 联想(北京)有限公司 一种控制方法及电子设备
WO2019044100A1 (ja) * 2017-08-31 2019-03-07 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
CN107835398B (zh) * 2017-09-27 2020-02-18 苏州车萝卜汽车电子科技有限公司 一种基于投屏的定制化导航信息显示方法、装置
CN111198609A (zh) * 2018-11-16 2020-05-26 广东虚拟现实科技有限公司 交互显示方法、装置、电子设备及存储介质
CN109491627A (zh) * 2018-09-30 2019-03-19 广州市保伦电子有限公司 一种多应用投屏方法、多应用投屏系统和存储介质
CN110248022A (zh) * 2019-06-06 2019-09-17 武汉卡比特信息有限公司 一种基于手机互联的三方应用的投屏方法
CN111078168B (zh) * 2019-11-13 2021-10-22 联想(北京)有限公司 一种信息处理方法、第一电子设备和存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024034851A1 (ko) * 2022-08-09 2024-02-15 삼성전자 주식회사 외부 전자 장치에 화면을 표시하는 전자 장치 및 그 동작 방법

Also Published As

Publication number Publication date
JP7352589B2 (ja) 2023-09-28
CN111634188B (zh) 2023-03-24
CN111634188A (zh) 2020-09-08
JP2021179972A (ja) 2021-11-18

Similar Documents

Publication Publication Date Title
KR20210042065A (ko) 미러링 방법 및 장치
US10019224B2 (en) Electronic device and method of operating the same
US20170148421A1 (en) Methods, devices, and computer-readable storage medium for image display
WO2018161534A1 (zh) 一种显示图像的方法、双屏终端和计算机可读的非易失性存储介质
KR20150026786A (ko) 전력 제어를 위한 전자 장치 및 방법
CN113377366B (zh) 控件编辑方法、装置、设备、可读存储介质及产品
US11064150B2 (en) High resolution user interface
CN113377365B (zh) 代码显示方法、装置、设备、计算机可读存储介质及产品
KR100650954B1 (ko) 이동 단말기에서 복수의 화면을 동시에 출력하는 방법 및장치
CN110070496A (zh) 图像特效的生成方法、装置和硬件装置
CN110070592B (zh) 特效包的生成方法、装置和硬件装置
CN105739815A (zh) 图像显示设备和图像显示方法
CN111352560B (zh) 分屏方法、装置、电子设备和计算机可读存储介质
WO2024187857A1 (zh) 3d显示方法、装置、设备及存储介质
KR102580521B1 (ko) 전자 장치 및 전자 장치의 음량 조절 방법
CN111459597A (zh) 用户引导的生成方法、装置、电子设备及计算机可读介质
KR20180020418A (ko) 디스플레이 장치 및 그 컨텐츠 디스플레이 방법
CN115576470A (zh) 图像处理方法和装置、增强现实系统及介质
KR20170091437A (ko) 전자 장치 및 전자 장치의 제어 방법
CN110603516B (zh) 计算机图形用户界面的个性化可感知性设置
KR20170011363A (ko) 디스플레이 장치 및 디스플레이 방법
CN117575882B (zh) 顶点缓冲区的更新方法、装置及存储介质
CN115348478B (zh) 设备交互显示方法、装置、电子设备及可读存储介质
US20220291890A1 (en) Method for interaction between devices and medium
WO2020238276A1 (zh) 一种视图控件的滑动控制方法、装置、设备和存储介质

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application