KR20230131020A - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20230131020A
KR20230131020A KR1020220028366A KR20220028366A KR20230131020A KR 20230131020 A KR20230131020 A KR 20230131020A KR 1020220028366 A KR1020220028366 A KR 1020220028366A KR 20220028366 A KR20220028366 A KR 20220028366A KR 20230131020 A KR20230131020 A KR 20230131020A
Authority
KR
South Korea
Prior art keywords
touch
interest
coordinate information
region
touch coordinate
Prior art date
Application number
KR1020220028366A
Other languages
English (en)
Inventor
티엔 오안 레
두이 통 부이
쾅 후이 레
반 후이 부이
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020220028366A priority Critical patent/KR20230131020A/ko
Priority to PCT/KR2022/020004 priority patent/WO2023167396A1/ko
Priority to US18/117,771 priority patent/US20230280858A1/en
Publication of KR20230131020A publication Critical patent/KR20230131020A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1624—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with sliding enclosures, e.g. sliding keyboard or display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102—Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mathematical Physics (AREA)

Abstract

전자 장치가 개시된다. 본 전자 장치는 터치 디스플레이 및 터치 디스플레이와 연결되어 전자 장치를 제어하는 프로세서를 포함하며, 프로세서는 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하고, 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.

Description

전자 장치 및 그 제어 방법 { ELECTRONIC APPARATUS AND CONTROL METHOD THEREOF }
본 개시는 전자 장치 및 그 제어 방법에 대한 것으로, 더욱 상세하게는 화면을 렌더링하는 전자 장치 및 그 제어 방법에 대한 것이다.
전자 기술의 발달에 힘입어 다양한 유형의 서비스가 개발되고 있다. 특히, 최근에는 스마트폰이나 태블릿 PC 등과 같은 휴대용 전자 장치의 대중화에 따라 전자 장치의 하드웨어 및 소프트웨어가 빠르게 발전하고 있다. 가령, 최근의 전자 장치는 고해상도의 디스플레이를 구비하고 있으며, 펜이나 손가락을 이용한 터치를 통해 제어가 가능하다.
이때, GPU(graphics processing unit)는 Vsync를 기반으로 프레임 별로 렌더링을 수행하게 되나, 전체 화면을 매 프레임마다 렌더링하는 것은 비효율적일 수 있다.
예를 들어, 도 1에 도시된 바와 같이, 사용자가 펜을 이용하여 일부 영역에 그림을 그리는 경우, 전체 화면(W × H)의 대부분은 이전 프레임과 동일하고, 매우 작은 일부 영역만이 이전 프레임과 상이할 수 있다. 즉, 매우 작은 일부 영역만이 이전 프레임과 상이함에도 전체 화면을 렌더링하는 것은 프로세싱 측면 및 전력 소모 측면에서 비효율적이다. 따라서, 이러한 문제를 해결하기 위한 방법이 개발될 필요가 있다.
본 개시는 상술한 필요성에 따른 것으로, 본 개시의 목적은 효율적인 렌더링을 통해 작업 부하를 줄여 전력 소모를 줄이는 전자 장치 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따르면, 전자 장치는 터치 디스플레이 및 상기 터치 디스플레이와 연결되어 상기 전자 장치를 제어하는 프로세서를 포함하며, 상기 프로세서는 상기 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 상기 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하고, 상기 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
또한, 상기 프로세서는 상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 외부이면 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 내부이면 상기 제1 관심 영역을 유지할 수 있다.
그리고, 상기 프로세서는 상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 터치 입력의 속도 및 가속도를 획득하고, 상기 속도 및 상기 가속도에 기초하여 상기 제2 터치 좌표 정보를 획득할 수 있다.
또한, 상기 프로세서는 상기 복수의 터치 지점 중 상기 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고, 상기 터치 지점들에 대한 정보에 기초하여 상기 터치 지점들에 대응되는 복수의 가속도를 획득하고, 상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 현재 시점의 속도를 획득하고, 상기 속도 및 상기 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득하고, 상기 기설정된 시간 간격은 상기 터치 디스플레이를 통해 디스플레이되는 화면의 샘플링 간격일 수 있다.
그리고, 상기 프로세서는 상기 전자 장치가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고, 상기 터치 입력이 수신되면 상기 제1 모드를 제2 모드로 변경하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
또한, 상기 프로세서는 상기 전자 장치가 상기 제1 모드인 상태에서 상기 터치 디스플레이의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 상기 기본 관심 영역을 업데이트하고, 상기 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다.
그리고, 상기 프로세서는 오브젝트를 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하고, 상기 터치 디스플레이를 통해 상기 오브젝트에 대한 드래그 입력이 수신되면 상기 오브젝트의 크기 및 상기 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고, 상기 오브젝트의 크기 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
또한, 상기 프로세서는 동영상을 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하고, 상기 터치 입력이 수신되면 상기 동영상의 디스플레이 위치 및 상기 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고, 상기 동영상의 디스플레이 위치 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
그리고, 상기 프로세서는 기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 상기 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 상기 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 제1 터치 좌표 정보 1에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 상기 제1 터치 좌표 정보 2에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고, 상기 제2 터치 좌표 정보 1 및 상기 제2 터치 좌표 정보 2에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
또한, 상기 프로세서는 운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며, 상기 제1 프로세싱 유닛은 상기 터치 디스플레이를 통해 상기 터치 입력이 수신되면, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하고, 상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고, 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어할 수 있다.
한편, 본 개시의 일 실시 예에 따르면, 전자 장치의 제어 방법은 상기 전자 장치의 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 상기 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계, 상기 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하는 단계, 상기 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하는 단계 및 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는 단계를 포함한다.
또한, 상기 식별하는 단계는 상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 외부이면 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 내부이면 상기 제1 관심 영역을 유지할 수 있다.
그리고, 상기 획득하는 단계는 상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 터치 입력의 속도 및 가속도를 획득하고, 상기 속도 및 상기 가속도에 기초하여 상기 제2 터치 좌표 정보를 획득할 수 있다.
또한, 상기 획득하는 단계는 상기 복수의 터치 지점 중 상기 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고, 상기 터치 지점들에 대한 정보에 기초하여 상기 터치 지점들에 대응되는 복수의 가속도를 획득하고, 상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 현재 시점의 속도를 획득하고, 상기 속도 및 상기 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득하고, 상기 기설정된 시간 간격은 상기 터치 디스플레이를 통해 디스플레이되는 화면의 샘플링 간격일 수 있다.
그리고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 전자 장치가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고, 상기 터치 입력이 수신되면 상기 제1 모드를 제2 모드로 변경하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
또한, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 전자 장치가 상기 제1 모드인 상태에서 상기 터치 디스플레이의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 상기 기본 관심 영역을 업데이트하고, 상기 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다.
그리고, 오브젝트를 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하는 단계를 더 포함하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 터치 디스플레이를 통해 상기 오브젝트에 대한 드래그 입력이 수신되면 상기 오브젝트의 크기 및 상기 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 식별하는 단계는 상기 오브젝트의 크기 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별할 수 있다.
또한, 동영상을 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하는 단계를 더 포함하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 터치 입력이 수신되면 상기 동영상의 디스플레이 위치 및 상기 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 식별하는 단계는 상기 동영상의 디스플레이 위치 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별할 수 있다.
그리고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 상기 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 상기 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 상기 획득하는 단계는 상기 제1 터치 좌표 정보 1에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 상기 제1 터치 좌표 정보 2에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고, 상기 식별하는 단계는 상기 제2 터치 좌표 정보 1 및 상기 제2 터치 좌표 정보 2에 기초하여 상기 제2 관심 영역을 식별할 수 있다.
또한, 상기 전자 장치는 운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 터치 디스플레이를 통해 상기 터치 입력이 수신되면, 상기 제1 프로세싱 유닛이 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하고, 상기 획득하는 단계는 상기 제1 프로세싱 유닛이 상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고, 상기 식별하는 단계는 상기 제1 프로세싱 유닛이 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고, 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는 상기 제1 프로세싱 유닛이 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치는 디스플레이의 전체 영역이 아닌 일부 영역만을 렌더링함에 따라 작업 부하를 줄여 전력 소모를 줄일 수 있다.
도 1은 종래 기술을 설명하기 위한 도면이다.
도 2는 본 개시의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블록도이다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블럭도이다.
도 4는 본 개시의 일 실시 예에 따른 터치 디스플레이(110)의 구조를 설명하기 위한 도면이다.
도 5 및 도 6은 본 개시의 다양한 실시 예에 따른 기본 관심 영역의 업데이트를 설명하기 위한 도면들이다.
도 7은 본 개시의 일 실시 예에 따른 관심 영역을 식별하는 방법을 설명하기 위한 도면이다.
도 8 내지 도 10은 본 개시의 일 실시 예에 따른 제2 터치 좌표 정보를 획득하는 방법을 설명하기 도면들이다.
도 11은 본 개시의 일 실시 예에 따른 렌더링 동작을 전반적으로 설명하기 위한 흐름도이다.
도 12는 본 개시의 일 실시 예에 따른 모드 변경을 설명하기 위한 흐름도이다.
도 13은 본 개시의 일 실시 예에 따른 제2 관심 영역의 식별 방법을 설명하기 위한 흐름도이다.
도 14 내지 도 16은 본 개시의 일 실시 예에 따른 효과를 설명하기 위한 도면들이다.
도 17은 본 개시의 일 실시 예에 따른 제2 관심 영역을 설명하기 위한 도면이다.
도 18 및 도 19는 본 개시의 다른 실시 예에 따른 오브젝트가 디스플레이되는 경우를 설명하기 위한 도면들이다.
도 20 및 도 21은 본 개시의 다른 실시 예에 따른 동영상이 디스플레이되는 경우를 설명하기 위한 도면들이다.
도 22 및 도 23은 본 개시의 다른 실시 예에 따른 복수의 터치 입력이 수신되는 경우를 설명하기 위한 도면들이다.
도 24는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
이하에서는 첨부 도면을 참조하여 본 개시를 상세히 설명한다.
본 개시의 실시 예에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 명세서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
A 또는/및 B 중 적어도 하나라는 표현은 "A" 또는 "B" 또는 "A 및 B" 중 어느 하나를 나타내는 것으로 이해되어야 한다.
본 명세서에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공 지능 전자 장치)를 지칭할 수 있다.
이하 첨부된 도면들을 참조하여 본 개시의 다양한 실시 예를 보다 상세하게 설명한다.
도 2는 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 나타내는 블록도이다. 전자 장치(100)는 도 2에 도시된 바와 같이, 터치 디스플레이(110) 및 프로세서(120)를 포함한다.
전자 장치(100)는 터치 입력을 수신하여 터치 입력에 대응되는 터치 궤적을 디스플레이하는 장치일 수 있다. 예를 들어, 전자 장치(100)는 스마트폰, 태블릿 PC 등일 수 있으며, 터치 입력을 수신하고, 터치 입력에 대응되는 터치 궤적을 디스플레이할 수 있는 장치라면 어떠한 장치라도 무방하다.
터치 디스플레이(110)는 프로세서(120)의 제어에 따라 터치 입력에 대응되는 터치 궤적을 디스플레이할 수 있다.
터치 디스플레이(110)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 터치 디스플레이(110) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다.
터치 디스플레이(110)는 터치 감지부와 결합하여 터치 스크린으로 구현될 수 있다. 여기서, 터치 감지부는 터치 패널을 포함할 수 있다. 터치 패널은 사용자의 손가락 제스처 입력을 감지하고, 감지된 터치 신호에 해당하는 터치 이벤트 값을 출력할 수 있다. 터치 패널은 터치 디스플레이(110)의 아래에 실장될 수 있다.
터치 패널이 사용자의 손가락 제스처 입력을 감지하는 방식에는 정전식 방식이 이용될 수 있다. 예를 들어, 정전식은 사용자의 인체로 야기되는 미세 전기를 감지하여 터치 좌표를 산출하는 방식이다. 다만, 이에 한정되는 것은 아니며, 터치 패널은 두 개의 전극 판을 포함하며, 터치된 지점의 상하 판이 접촉되면 전류를 감지하여 터치 좌표를 산출하는 감압식 방식으로 구현될 수도 있다.
또는, 터치 디스플레이(110)는 터치 패널 대신 적외선 센서를 통해 터치 좌표를 산출할 수도 있다. 예를 들어, 복수의 적외선 송신기(tx)가 전자 장치(100)의 좌측 및 상측 베젤에 구비되고, 복수의 적외선 송신기(tx)에 대응되는 복수의 적외선 수신기(rx)가 전자 장치의 우측 및 하측 베젤에 구비될 수 있다. 전자 장치의 좌측 베젤에 구비된 적외선 송신기(tx)는 전자 장치의 우측 베젤 방향으로 적외선을 방출하며, 전자 장치의 좌측 베젤에 구비된 적외선 수신기(rx)가 이를 수신할 수 있다. 그리고, 전자 장치의 상측 베젤에 구비된 적외선 송신기(tx)는 전자 장치의 하측 베젤 방향으로 적외선을 방출하며, 전자 장치의 하측 베젤에 구비된 적외선 수신기(rx)가 이를 수신할 수 있다.
이때, 오브젝트가 전자 장치의 표면을 위치하는 경우, 일부 적외선 수신기(rx)는 적외선을 수신하지 못하며, 적외선을 수신하지 못한 적외선 수신기(rx)의 베젤에서의 위치에 따라 오브젝트의 x, y 좌표가 결정될 수도 있다.
한편, 터치 디스플레이(110)는 펜 인식 패널을 더 포함할 수도 있다. 펜 인식 패널은 사용자의 터치용 펜(예컨대, 스타일러스 펜(stylus pen), 디지타이저 펜(digitizer pen))의 운용에 따른 사용자의 펜 제스처 입력을 감지하고, 펜 근접 이벤트 값 또는 펜 터치 이벤트 값을 출력할 수 있다. 펜 인식 패널은 터치 디스플레이(110)의 아래에 실장될 수 있다.
펜 인식 패널은, 예로, EMR 방식으로 구현될 수 있으며, 펜의 근접 또는 터치에 의한 전자기장의 세기 변화에 따라 터치 또는 근접 입력을 감지할 수 있다. 상세하게는 펜 인식 패널은 그리드 구조를 가지는 전자 유도 코일 센서와 전자 유도 코일 센서의 각 루프 코일에 순차적으로 소정의 주파수를 가지는 교류 신호를 제공하는 전자 신호 처리부를 포함하여 구성될 수 있다. 이러한 펜 인식 패널의 루프 코일 근방에 공진회로를 내장하는 펜이 존재하면, 해당 루프 코일로부터 송신되는 자계가 펜 내의 공진회로에 상호 전자 유도에 기초한 전류를 발생시킨다. 이 전류를 기초로 하여, 펜 내의 공진 회로를 구성하는 코일로부터 유도 자계가 발생하게 되고, 펜 인식 패널은 이 유도 자계를 신호 수신 상태에 있는 루프 코일에서 검출하게 되어 펜의 접근 위치 또는 터치 위치가 감지될 수 있다.
프로세서(120)는 전자 장치(100)의 동작을 전반적으로 제어한다. 구체적으로, 프로세서(120)는 전자 장치(100)의 각 구성과 연결되어 전자 장치(100)의 동작을 전반적으로 제어할 수 있다. 예를 들어, 프로세서(120)는 터치 디스플레이(110), 메모리(미도시) 등과 같은 구성과 연결되어 전자 장치(100)의 동작을 제어할 수 있다.
일 실시 예에 따라 프로세서(120)는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), TCON(Time controller)으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)), ARM 프로세서 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(120)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다.
프로세서(120)는 터치 디스플레이(110)를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 예를 들어, 프로세서(120)는 터치 디스플레이(110)를 통해 스트로크 입력이 수신되면, 스트로크 입력에 대응되는 제1 터치 좌표 정보에 기초하여 제1 관심 영역을 식별하고, 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 즉, 프로세서(120)는 전체 화면을 렌더링하지 않으므로 프로세싱 파워 및 전력 소모를 줄일 수 있다.
프로세서(120)는 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득할 수 있다. 예를 들어, 프로세서(120)는 현재 시점의 터치 지점에 대한 정보 및 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 터치 입력의 속도 및 가속도를 획득하고, 속도 및 가속도에 기초하여 제2 터치 좌표 정보를 획득할 수 있다. 가령, 프로세서(120)는 복수의 터치 지점 중 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고, 터치 지점들에 대한 정보에 기초하여 터치 지점들에 대응되는 복수의 가속도를 획득하고, 현재 시점의 터치 지점에 대한 정보 및 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 현재 시점의 속도를 획득하고, 속도 및 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득할 수 있다. 여기서, 기설정된 시간 간격은 터치 디스플레이(110)를 통해 디스플레이되는 화면의 샘플링 간격일 수 있다. 프로세서(120)는 가장 큰 가속도를 이용함에 따라 가장 큰 마진을 적용하여 제2 터치 좌표 정보를 획득할 수 있다.
프로세서(120)는 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 예를 들어, 프로세서(120)는 제2 터치 좌표 정보가 제1 관심 영역의 외부이면 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 터치 좌표 정보가 제1 관심 영역의 내부이면 제1 관심 영역을 유지할 수 있다. 이때, 프로세서(120)는 제2 터치 좌표 정보가 제1 관심 영역의 외부이면 제2 터치 좌표 정보에 추가로 마진을 적용하여 제2 관심 영역을 식별할 수 있다. 또한, 프로세서(120)는 제2 터치 좌표 정보가 제1 관심 영역의 내부이고, 제1 관심 영역보다 작은 영역이면 제1 관심 영역을 유지할 수도 있다. 프로세서(120)는 이러한 동작을 통해 렌더링될 영역에 마진을 적용할 수 있으며, 사용자의 터치 입력을 모두 반영한 영역을 렌더링할 수 있다.
프로세서(120)는 전자 장치(100)가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고, 터치 입력이 수신되면 제1 모드를 제2 모드로 변경하고, 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 예를 들어, 프로세서(120)는 전자 장치(100)가 제1 모드인 경우 전체 영역에 대응되는 화면을 렌더링하고, 터치 입력이 수신되면 제1 모드를 제2 모드로 변경하고, 터치 입력에 대응되는 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 가령, 제1 관심 영역은 터치 지점을 중심으로 하는 기설정된 크기의 직사각형 영역일 수 있다. 그리고, 제1 모드는 유휴 모드(idle mode)이고, 제2 모드는 드로잉 모드(drawing mode)일 수 있다. 프로세서(120)는 드로잉 모드에서만 일부 화면을 렌더링하기 위한 동작을 수행할 수 있다.
한편, 프로세서(120)는 전자 장치(100)가 제1 모드인 상태에서 터치 디스플레이(110)의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 기본 관심 영역을 업데이트하고, 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다. 예를 들어, 전자 장치(100)가 폴더블 장치 또는 롤러블 장치이고, 프로세서(120)는 전자 장치(100)가 제1 모드인 상태에서 터치 디스플레이(110)가 확대되는 경우, 기본 관심 영역을 확대된 영역으로 변경할 수 있다.
프로세서(120)는 오브젝트를 포함하는 화면을 디스플레이하도록 터치 디스플레이(110)를 제어하고, 터치 디스플레이(110)를 통해 오브젝트에 대한 드래그 입력이 수신되면 오브젝트의 크기 및 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 오브젝트의 크기 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 이러한 동작을 통해 프로세서(120)는 오브젝트의 위치 이동을 고려한 관심 영역을 렌더링할 수 있다.
프로세서(120)는 동영상을 포함하는 화면을 디스플레이하도록 터치 디스플레이(110)를 제어하고, 터치 입력이 수신되면 동영상의 디스플레이 위치 및 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 동영상의 디스플레이 위치 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 동영상은 매 프레임마다 영상이 달라질 수 있으며, 이상과 같은 동작을 통해 프로세서(120)는 동영상을 포함하는 관심 영역을 렌더링할 수 있다.
프로세서(120)는 기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보 1에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 제1 터치 좌표 정보 2에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고, 제2 터치 좌표 정보 1 및 제2 터치 좌표 정보 2에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 이때, 프로세서(120)는 두 개의 터치 좌표 정보를 모두 포함하는 직사각형 영역을 제2 관심 영역으로 식별할 수 있다. 이러한 동작을 통해 프로세서(120)는 복수의 터치가 있더라도 복수의 터치에 대응되는 화면 변화가 가능하도록 렌더링할 수 있다.
한편, 프로세서(120)는 운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며, 제1 프로세싱 유닛은 터치 디스플레이(110)를 통해 터치 입력이 수신되면, 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 제2 프로세싱 유닛을 제어하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 제2 프로세싱 유닛을 제어할 수 있다. 여기서, 제1 프로세싱 유닛은 CPU(central processing unit)이고, 제2 프로세싱 유닛은 GPU(graphics processing unit)일 수 있다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치(100)의 세부 구성을 나타내는 블럭도이다. 전자 장치(100)는 터치 디스플레이(110) 및 프로세서(120)를 포함할 수 있다. 또한, 도 3에 따르면, 전자 장치(100)는 메모리(130), 통신 인터페이스(140), 사용자 인터페이스(150)를 더 포함할 수도 있다. 도 3에 도시된 구성 요소들 중 도 2에 도시된 구성 요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
메모리(130)는 프로세서(120) 등이 접근할 수 있도록 데이터 등의 정보를 전기 또는 자기 형태로 저장하는 하드웨어를 지칭할 수 있다. 이를 위해, 메모리(130)는 비휘발성 메모리, 휘발성 메모리, 플래시 메모리(Flash Memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD), RAM, ROM 등 중에서 적어도 하나의 하드웨어로 구현될 수 있다.
메모리(130)에는 전자 장치(100) 또는 프로세서(120)의 동작에 필요한 적어도 하나의 인스트럭션(instruction) 또는 모듈이 저장될 수 있다. 여기서, 인스트럭션은 전자 장치(100) 또는 프로세서(120)의 동작을 지시하는 부호 단위로서, 컴퓨터가 이해할 수 있는 언어인 기계어로 작성된 것일 수 있다. 모듈은 작업 단위의 특정 작업을 수행하는 일련의 인스트럭션의 집합체(instruction set)일 수 있다.
메모리(130)에는 문자, 수, 영상 등을 나타낼 수 있는 비트 또는 바이트 단위의 정보인 데이터가 저장될 수 있다. 예를 들어, 메모리(130)에는 오브젝트 또는 동영상 중 적어도 하나가 저장될 수 있다.
메모리(130)에는 렌더링 모듈, 터치 좌표 예측 모듈, 관심 영역 예측 모듈 등이 저장될 수 있다.
메모리(130)에는 신경망 모델이 저장될 수 있다. 예를 들어, 메모리(130)에는 복수의 터치 지점에 따른 관심 영역을 예측하는 신경망 모델 등이 저장될 수 있다.
메모리(130)는 프로세서(120)에 의해 액세스되며, 프로세서(120)에 의해 인스트럭션, 모듈 또는 데이터에 대한 독취/기록/수정/삭제/갱신 등이 수행될 수 있다.
통신 인터페이스(140)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 장치와 통신을 수행하는 구성이다. 예를 들어, 전자 장치(100)는 통신 인터페이스(140)를 통해 서버와 통신을 수행할 수 있다.
통신 인터페이스(140)는 와이파이 모듈, 블루투스 모듈, 적외선 통신 모듈 및 무선 통신 모듈 등을 포함할 수 있다. 여기서, 각 통신 모듈은 적어도 하나의 하드웨어 칩 형태로 구현될 수 있다.
와이파이 모듈, 블루투스 모듈은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 모듈이나 블루투스 모듈을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 적외선 통신 모듈은 시 광선과 밀리미터파 사이에 있는 적외선을 이용하여 근거리에 무선으로 데이터를 전송하는 적외선 통신(IrDA, infrared Data Association)기술에 따라 통신을 수행한다.
무선 통신 모듈은 상술한 통신 방식 이외에 지그비(zigbee), 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), LTE-A(LTE Advanced), 4G(4th Generation), 5G(5th Generation)등과 같은 다양한 무선 통신 규격에 따라 통신을 수행하는 적어도 하나의 통신 칩을 포함할 수 있다.
또는, 통신 인터페이스(140)는 HDMI, DP, 썬더볼트, USB, RGB, D-SUB, DVI 등과 같은 유선 통신 인터페이스를 포함할 수 있다.
그 밖에 통신 인터페이스(140)는 LAN(Local Area Network) 모듈, 이더넷 모듈, 또는 페어 케이블, 동축 케이블 또는 광섬유 케이블 등을 이용하여 통신을 수행하는 유선 통신 모듈 중 적어도 하나를 포함할 수도 있다.
사용자 인터페이스(150)는 버튼, 터치 패드, 마우스 및 키보드 등으로 구현되거나, 디스플레이 기능 및 조작 입력 기능도 함께 수행 가능한 터치 스크린으로도 구현될 수 있다. 여기서, 버튼은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
도 4는 본 개시의 일 실시 예에 따른 터치 디스플레이(110)의 구조를 설명하기 위한 도면이다.
터치 디스플레이(110)는 게이트 라인들(GL1 내지 GLn)과 데이터 라인들(DL1 내지 DLm)이 상호 교차하도록 형성되고, 그 교차로 마련되는 영역에 R, G, B 서브 픽셀(PR, PG, PB)이 형성될 수 있다. 인접한 R, G, B 서브 픽셀(PR, PG, PB)은 하나의 픽셀을 이룬다. 즉, 각 픽셀은 적색(R)을 표시하는 R 서브 픽셀(PR), 녹색(G)을 표시하는 G 서브 픽셀(PG) 및 청색(B)을 표시하는 B 서브 픽셀(PB)을 포함하여 적색(R), 녹색(G), 청색(B)의 3원색으로 피사체의 색을 재현할 수 있다.
터치 디스플레이(110)가 LCD 패널로 구현되는 경우, 각 서브 픽셀(PR, PG, PB)은 픽셀 전극 및 공통 전극을 포함하고, 양 전극 간 전위차로 형성되는 전계로 액정 배열이 바뀌면서 광 투과율이 변화하게 된다. 게이트 라인들(GL1 내지 GLn)과 데이터 라인들(DL1 내지 DLm)의 교차부에 형성되는 TFT들은 각각 게이트 라인(GL1 내지 GLn)으로부터의 스캔 펄스에 응답하여 데이터 라인(DL1 내지 DLm)으로부터의 비디오 데이터, 즉 적색(R), 녹색(G), 청색(B) 데이터를 각 서브 픽셀(PR, PG, PB)의 픽셀 전극에 공급할 수 있다.
터치 디스플레이(110)는 백라이트 유닛(111), 백라이트 구동부(112), 패널 구동부(113)를 더 포함할 수 있다.
백라이트 구동부(112)는 백라이트 유닛(111)을 구동하기 위한 드라이버 IC를 포함하는 형태로 구현될 수 있다. 일 예에 따라, 드라이버 IC는 프로세서(120)와 별도의 하드웨어로 구현될 수 있다. 예를 들어, 백라이트 유닛(111)에 포함된 광원들이 LED 소자로 구현되는 경우, 드라이버 IC는 LED 소자에 인가되는 전류를 제어하는 적어도 하나의 LED 드라이버로 구현될 수 있다. 일 실시 예에 따라, LED 드라이버는 파워 서플라이(power supply)(예를 들어, SMPS(Switching Mode Power Supply)) 후단에 배치되어 파워 서플라이로부터 전압을 인가받을 수 있다. 다만, 다른 실시 예에 따르면, 별도의 전원 장치로부터 전압을 인가받을 수도 있다. 또는, SMPS 및 LED 드라이버가 하나로 통합된 모듈 형태로 구현되는 것도 가능하다.
패널 구동부(113)는 터치 디스플레이(110)를 구동하기 위한 드라이버 IC를 포함하는 형태로 구현될 수 있다. 일 예에 따라, 드라이버 IC는 프로세서(120)와 별도의 하드웨어로 구현될 수 있다. 예를 들어, 패널 구동부(113)는 데이터 라인들에 비디오 데이터를 공급하는 데이터 구동부(113-1) 및 게이트 라인들에 스캔 펄스를 공급하는 게이트 구동부(113-2)를 포함할 수 있다.
데이터 구동부(113-1)는 데이터 신호를 생성하는 수단으로, 프로세서(120) 또는 타이밍 컨트롤러로부터 R/G/B 성분의 영상 데이터를 전달받아 데이터 신호를 생성한다. 또한, 데이터 구동부(113-1)는 터치 디스플레이(110)의 데이터 선(DL1, DL2, DL3,..., DLm)과 연결되어 생성된 데이터 신호를 터치 디스플레이(110)에 인가한다.
게이트 구동부(113-2)(또는 스캔 구동부)는 게이트 신호(또는 스캔 신호)를 생성하는 수단으로, 게이트 라인(GL1, GL2, GL3,..., GLn)에 연결되어 게이트 신호를 터치 디스플레이(110)의 특정한 행에 전달한다. 게이트 신호가 전달된 픽셀에는 데이터 구동부(113-1)에서 출력된 데이터 신호가 전달되게 된다.
프로세서(120)는 일부 게이트 라인만을 구동하도록 게이트 구동부(113-2)를 제어할 수 있다. 즉, 프로세서(120)는 일부 게이트 라인만을 구동하여 전체 화면이 아닌 일부 화면만을 렌더링할 수도 있다. 이러한 동작을 통해 프로세싱 파워 및 전력 소모를 줄일 수 있다.
이상과 같이 프로세서(120)는 터치 디스플레이(110)의 전체 영역이 아닌 일부 영역만을 렌더링함에 따라 작업 부하를 줄여 전력 소모를 줄일 수 있다.
이하에서는 도 5 내지 도 23을 통해 전자 장치(100)의 동작을 좀더 구체적으로 설명한다. 도 5 내지 도 23에서는 설명의 편의를 위해 개별적인 실시 예에 대하여 설명한다. 다만, 도 5 내지 도 23의 개별적인 실시 예는 얼마든지 조합된 상태로 실시될 수도 있다.
도 5 및 도 6은 본 개시의 다양한 실시 예에 따른 기본 관심 영역의 업데이트를 설명하기 위한 도면들이다.
프로세서(120)는 전자 장치(100)가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다. 예를 들어, 프로세서(120)는 전자 장치(100)가 유휴 모드이면 터치 디스플레이(110)의 전체 영역을 렌더링할 수 있다. 다만, 이에 한정되는 것은 아니며, 프로세서(120)는 전자 장치(100)가 제1 모드인 경우에도 터치 디스플레이(110)의 일부 영역을 렌더링할 수도 있다. 가령, 프로세서(120)는 전자 장치(100)가 제1 모드인 경우 디스플레이 중인 객체에 기초하여 터치 디스플레이(110)의 일부 영역을 렌더링할 수도 있다. 여기서, 객체는 형태 변화하거나 위치가 이동하는 객체를 포함할 수 있다.
프로세서(120)는 전자 장치(100)가 제1 모드인 상태에서 터치 디스플레이(110)의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 기본 관심 영역을 업데이트하고, 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다. 예를 들어, 전자 장치(100)가 도 5에 도시된 바와 같이, 폴더블 장치라고 가정하면, 전자 장치(100)의 폴딩 여부에 따라 터치 디스플레이(110)의 형태가 변경될 수 있으며, 프로세서(120)는 전자 장치(100)의 폴딩 여부에 따라 기본 관심 영역을 업데이트하고, 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다. 또는, 전자 장치(100)가 도 6에 도시된 바와 같이, 롤러블 장치라고 가정하면, 프로세서(120)는 전자 장치(100)의 화면 크기에 따라 기본 관심 영역을 업데이트하고, 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다.
이후, 프로세서(120)는 터치 입력이 수신되면 제1 모드를 제2 모드로 변경하고, 터치 입력에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 여기서, 제2 모드는 드로잉 모드일 수 있다.
도 7은 본 개시의 일 실시 예에 따른 관심 영역을 식별하는 방법을 설명하기 위한 도면이다.
프로세서(120)는 터치 디스플레이(110)를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력을 수신할 수 있다. 예를 들어, 프로세서(120)는 도 7에 도시된 바와 같은 터치 입력을 수신할 수 있다.
프로세서(120)는 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 예를 들어, 도 7에서 좌측부터 우측으로 터치 입력이 수신된 경우, 프로세서(120)는 좌측 첫 번째 터치 지점에 기초하여 식별된 관심 영역에 대응되는 일부 화면을 렌더링하고, 좌측 두 번째 터치 지점에 기초하여 식별된 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 프로세서(120)는 이러한 방식으로 순차적으로 관심 영역을 변경할 수 있으며, 관심 영역은 점점 우측으로 이동할 수 있다.
또한, 프로세서(120)는 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하고, 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다. 상술한 예에서, 프로세서(120)는 좌측 첫 번째 터치 지점 및 좌측 두 번째 터치 지점에 기초하여 이후의 터치 좌표 정보를 예측하고, 예측된 터치 좌표 정보에 기초하여 제2 관심 영역을 식별할 수 있다. 터치 입력이 좌측에서 우측을 향하므로 제2 관심 영역은 점점 우측으로 이동할 수 있다.
이때, 프로세서(120)는 일정 마진을 추가하여 제2 관심 영역을 식별할 수 있다. 가령, 프로세서(120)는 도 7의 좌측 첫 번째 터치 지점 및 좌측 두 번째 터치 지점에 기초하여 이후의 터치 좌표 정보를 예측하고, 예측된 터치 좌표 정보를 포함하는 직사각형 형태의 영역을 제2 관심 영역으로 식별할 수 있다. 특히, 프로세서(120)는 예측된 터치 좌표 정보를 중심으로 상하좌우로 기설정된 거리 이상 이격된 지점을 포함하는 영역을 제2 관심 영역으로 식별할 수 있다.
프로세서(120)는 제2 터치 좌표 정보가 제1 관심 영역의 외부이면 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 터치 좌표 정보가 제1 관심 영역의 내부이면 제1 관심 영역을 유지할 수 있다. 이 경우에도, 프로세서(120)는 마진을 고려할 수 있다. 가령, 프로세서(120)는 제2 터치 좌표 정보가 제1 관심 영역의 각 모서리로부터 기설정된 거리 이상 이격된 경우에만 제1 관심 영역을 유지할 수도 있다.
도 8 내지 도 10은 본 개시의 일 실시 예에 따른 제2 터치 좌표 정보를 획득하는 방법을 설명하기 도면들이다.
먼저, 터치 디스플레이(110)의 터치 인식 주기와 샘플링 주기는 상이하고, 샘플링 주기가 터치 인식 주기보다 긴 것으로 가정한다.
도 8에 도시된 인덱스의 의미는 하기와 같다.
Ti : sampling duration signal (Ti==ti,0)
ti,j : touch screen sensor sampling
Si : distance of drew stroke between 2 sampling duration signal from Ti-1 to Ti
Si,j : distance of drew stroke between 2 touch screen sensing
Vi, vi : drawing speed at Ti and ti,j
Ai, ai,j : acceleration at Ti and ti,j
tframe : time between 2 sampling duration signal
tsample : time between 2 touch screen sensing
k : number of sampling points in sampling duration
At T0 : - ROI = full size of layer
- V0 = v0,0 = 0
이상과 같이 인덱스를 정의할 때, 프로세서(120)는 도 9의 Ti-1, Ti에 기초하여 하기와 같이 가속도 및 속도를 획득할 수 있다.
At ti,j :
vi-1,j = si-1,j/tsample
ai-1,j = (vi-1,j-vi-1,j-1)/tsample
Figure pat00001
Ai = max(ai-1,j)
Vi = Vi-1 + Ai*tframe
프로세서(120)는 획득된 가속도 및 속도에 기초하여 Ti+1의 기초하여 하기와 같이 제2 터치 좌표 정보를 획득할 수 있다.
vi,0 = Vi
vi,j = vi,j-1 + Ai*tsample
si,j = vi,j-1*tsample + Ai*tsample^2/2
Figure pat00002
프로세서(120)는 제2 터치 좌표 정보에 기초하여 하기와 같이 제2 관심 영역의 크기를 식별할 수 있다.
P = α*Si + △
If P < ROImin, then P = ROImin
α : parameter of predict partial update region (ex α = 2)
△ : thickness of stroke + deviation
프로세서(120)는 이상과 같은 방법을 통해 제2 터치 좌표 정보 및 제2 관심 영역을 획득할 수 있다. 또한, 프로세서(120)는 도 10에 도시된 바와 같이, X 성분과 Y 성분을 구분하여 제2 터치 좌표 정보 및 제2 관심 영역을 획득할 수도 있으며, 이는 단순한 수학적 기법에 불과하여 구체적인 설명은 생략한다.
도 11은 본 개시의 일 실시 예에 따른 렌더링 동작을 전반적으로 설명하기 위한 흐름도이다.
전자 장치(100)가 유휴 모드(idle mode)인 경우, 프로세서(120)는 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다(S1110).
프로세서(120)는 전자 장치(100)의 모드가 드로잉 모드(drawing mode)인지 식별하고(S1120), 드로잉 모드가 아닌 경우 유휴 모드 상태가 유지되며, 드로잉 모드로 변경된 경우, 복수의 터치 지점을 식별할 수 있다(S1130).
그리고, 프로세서(120)는 복수의 터치 지점에 기초하여 예측된 현재 시점 이후에 터치될 터치 지점이 제1 관심 영역 외부인지 식별할 수 있다(S1140).
프로세서(120)는 제1 관심 영역에 대응되는 화면을 렌더링하거나 제1 관심 영역에 대응되는 화면을 렌더링하도록 GPU와 같은 외부 구성을 제어할 수 있다(S1150).
프로세서(120)는 예측된 터치 지점에 기초하여 제2 관심 영역을 식별할 수 있다(S1160). 프로세서(120)는 드로잉 모드의 종료 여부를 식별하고(S1170), 드로잉 모드가 종료되면 예측 동작을 종료하고, 드로잉 모드가 유지되는 경우 S1120의 동작을 수행할 수 있다.
도 12는 본 개시의 일 실시 예에 따른 모드 변경을 설명하기 위한 흐름도이다.
먼저, 드로잉/편집 어플리케이션이 실행된다(S1210). 이 경우, 전자 장치(100)는 유휴 모드로 동작하고(S1220), 프로세서(120)는 기본 관심 영역을 렌더링할 수 있다. 여기서, 기본 관심 영역은 터치 디스플레이(110)의 전체 영역일 수도 있으나, 오브젝트의 변화가 있는 일부 영역일 수도 있다.
프로세서(120)는 터치 디스플레이(110)의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되었는지 식별하고(S1230), 변경된 경우 기본 관심 영역을 업데이트하고(S1240), 변경되지 않은 경우 터치 입력이 있는지 식별할 수 있다(S1250).
프로세서(120)는 터치 입력이 수신되지 않은 경우 S1220의 동작을 수행하고, 터치 입력이 수신된 경우 유휴 모드를 드로잉 모드로 변경할 수 있다(S1260).
도 13은 본 개시의 일 실시 예에 따른 제2 관심 영역의 식별 방법을 설명하기 위한 흐름도이다.
프로세서(120)는 샘플링을 수행하고(S1310), 샘플링된 지점이 관심 영역 외부인지 식별할 수 있다(S1320). 프로세서(120)는 샘플링된 지점이 관심 영역 외부이면 샘플링된 지점에 기초하여 관심 영역을 변경하고(S1330), 샘플링된 지점이 관심 영역 내부이면 샘플링이 지속되는지 식별한다(S1340).
프로세서(120)는 샘플링이 지속되면 S1310의 동작을 수행하고, 샘플링이 지속되지 않으면 관심 영역에 대응되는 화면을 렌더링할 수 있다(S1350).
도 14 내지 도 16은 본 개시의 일 실시 예에 따른 효과를 설명하기 위한 도면들이다.
터치 입력에 따른 동작은 도 14에 도시된 바와 같이 4단계로 설명할 수 있다. 또한, 각 단계는 도 15의 각 단계에 대응된다.
먼저, 사용자가 화면에 그림을 그릴 때 프로세서(120)는 터치 지점을 식별할 수 있다(단계 1). 그리고, 어플리케이션은 Vsync 지속 시간에 터치 지점을 획득하고, 앱 렌더링 프레임이 완료된 후 이미지를 요청하며, 버퍼로부터 SurfaceFlinger로 전송된다(단계 2). SurfaceFlinger는 프레임을 처리하고(단계 3), 터치 디스플레이를 통해 화면이 출력된다(단계 4). 일반적으로 터치에서 디스플레이까지 3 Vsync가 걸린다.
여기서, 단계 2 및 단계 3에서 종래에는 전체 화면에 대한 렌더링이 수행되었으나, 본 개시에 의하면 일부 영역에 대하여만 렌더링이 수행될 수 있다.
도 16에 도시된 바와 같이, 종래에는 프로세서(120)는 전체 화면을 렌더링하며, 버퍼에 저장된 데이터는 삭제된다.
반면, 본 개시에 의하면, 프로세서(120)는 버퍼에 저장된 이전 데이터가 이용되며, 일부 영역에 대한 렌더링 결과가 업데이트될 수 있다. 이러한 동작을 통해 전력 소모가 감소할 수 있다.
도 17은 본 개시의 일 실시 예에 따른 제2 관심 영역을 설명하기 위한 도면이다.
프로세서(120)는 터치 입력이 수신되면, 이전 터치 지점에 기초하여 현재 시점 이후에 터치될 터치 지점을 식별하고, 식별된 터치 지점에 기초하여 제2 관심 영역을 식별하며, 제2 관심 영역에 대하여만 렌더링을 수행할 수 있다.
가령, 도 17에 도시된 바와 같이, 좌측 하단으로부터 우측 상단으로의 터치 입력이 수신되면, 종래 전체 영역(1710)을 렌더링하였던 것과는 달리, 본 개시에 따르면, 프로세서(120)는 일부 영역(1720)만을 렌더링할 수 있다.
여기서, 일부 영역(1720)은 터치 샘플링 속도에 따라 크기가 결정될 수 있다. 예를 들어, 터치 샘플링 속도가 상대적으로 큰 경우에는 터치 샘플링 속도가 상대적으로 작은 경우보다 일부 영역(1720)의 크기가 작을 수 있다.
도 18 및 도 19는 본 개시의 다른 실시 예에 따른 오브젝트가 디스플레이되는 경우를 설명하기 위한 도면들이다.
프로세서(120)는 오브젝트를 포함하는 화면을 디스플레이하도록 터치 디스플레이(110)를 제어하고, 터치 디스플레이를 통해 오브젝트에 대한 드래그 입력이 수신되면 오브젝트의 크기 및 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 오브젝트의 크기 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
예를 들어, 프로세서(120)는 도 18에 도시된 바와 같이, 강아지를 포함하는 화면을 디스플레이하도록 터치 디스플레이(110)를 제어하고, 터치 디스플레이를 통해 강아지에 대한 드래그 입력이 수신되면 강아지의 크기 및 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 강아지의 크기 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
여기서, 프로세서(120)는 오브젝트의 크기 뿐만 아니라 오브젝트의 형태를 더 고려하여 제1 관심 영역 및 제2 관심 영역을 식별할 수도 있다. 특히, 프로세서(120)는 오브젝트에 대응되는 영역을 모두 포함하도록 제1 관심 영역 및 제2 관심 영역을 식별할 수도 있다.
도 19의 상단에 도시된 바와 같이, 종래에는 오브젝트의 디스플레이 위치와는 무관하게 전체 화면(1910-1, 1910-2)이 렌더링 대상이었다.
반면, 도 19의 하단에 도시된 바와 같이, 프로세서(120)는 오브젝트를 포함하는 일부 영역(1920-1, 1920-2)만을 렌더링함으로써 전력 소모를 줄일 수 있다.
도 20 및 도 21은 본 개시의 다른 실시 예에 따른 동영상이 디스플레이되는 경우를 설명하기 위한 도면들이다.
프로세서(120)는 도 20에 도시된 바와 같이 동영상을 포함하는 화면을 디스플레이하도록 터치 디스플레이(110)를 제어하고, 터치 입력이 수신되면 동영상의 디스플레이 위치 및 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 동영상의 디스플레이 위치 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
프로세서(120)는 동영상을 고려하지 않는 경우, 2010 영역만을 제2 관심 영역으로 식별할 수 있다. 다만, 프로세서(120)는 동영상을 고려하는 경우, 2010 영역 및 동영상의 디스플레이 영역을 고려하여 2020 영역을 제2 관심 영역으로 식별할 수 있다.
도 21의 좌측에 도시된 바와 같이, 종래에는 동영상의 디스플레이 위치와는 무관하게 전체 화면(2110)이 렌더링 대상이었다.
반면, 도 21의 우측에 도시된 바와 같이, 프로세서(120)는 동영상의 디스플레이 위치를 포함하는 일부 영역(2120)만을 렌더링함으로써 전력 소모를 줄일 수 있다.
도 22 및 도 23은 본 개시의 다른 실시 예에 따른 복수의 터치 입력이 수신되는 경우를 설명하기 위한 도면들이다.
프로세서(120)는 도 22에 도시된 바와 같이, 기설정된 타입의 제1 터치 입력(Stroke 1) 및 기설정된 타입의 제2 터치 입력(Stroke 2)이 수신되면 제1 터치 입력(Stroke 1)에 대응되는 제1 터치 좌표 정보 1 및 제2 터치 입력(Stroke 2)에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 제1 터치 좌표 정보 1에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 제1 터치 좌표 정보 2에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고, 제2 터치 좌표 정보 1 및 제2 터치 좌표 정보 2에 기초하여 제2 관심 영역(2220)을 식별하고, 제2 관심 영역(2220)에 대응되는 일부 화면을 렌더링할 수 있다.
프로세서(120)는 복수의 터치 입력을 개별적으로 고려하는 경우, 2210-1 영역 및 2210-2 영역 각각을 제2 관심 영역으로 식별할 수 있다. 다만, 프로세서(120)는 복수의 터치 입력을 종합적으로 고려하는 경우, 2210-1 영역 및 2210-2 영역을 모두 포함하는 2220 영역을 제2 관심 영역으로 식별할 수 있다.
도 23의 좌측에 도시된 바와 같이, 종래에는 터치 입력의 수와는 무관하게 전체 화면(2310)이 렌더링 대상이었다.
반면, 도 23의 우측에 도시된 바와 같이, 프로세서(120)는 복수의 터치 입력을 모두 고려하여, 일부 영역(2320)만을 렌더링함으로써 전력 소모를 줄일 수 있다.
도 24는 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 전자 장치의 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링한다(S2410). 그리고, 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득한다(S2420). 그리고, 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별한다(S2430). 그리고, 제2 관심 영역에 대응되는 일부 화면을 렌더링한다(S2440).
여기서, 식별하는 단계(S2430)는 제2 터치 좌표 정보가 제1 관심 영역의 외부이면 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 터치 좌표 정보가 제1 관심 영역의 내부이면 제1 관심 영역을 유지할 수 있다.
한편, 획득하는 단계(S2420)는 현재 시점의 터치 지점에 대한 정보 및 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 터치 입력의 속도 및 가속도를 획득하고, 속도 및 가속도에 기초하여 제2 터치 좌표 정보를 획득할 수 있다.
여기서, 획득하는 단계(S2420)는 복수의 터치 지점 중 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고, 터치 지점들에 대한 정보에 기초하여 터치 지점들에 대응되는 복수의 가속도를 획득하고, 현재 시점의 터치 지점에 대한 정보 및 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 현재 시점의 속도를 획득하고, 속도 및 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득하고, 기설정된 시간 간격은 터치 디스플레이를 통해 디스플레이되는 화면의 샘플링 간격일 수 있다.
한편, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 전자 장치가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고, 터치 입력이 수신되면 제1 모드를 제2 모드로 변경하고, 제1 관심 영역에 대응되는 일부 화면을 렌더링할 수 있다.
여기서, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 전자 장치가 제1 모드인 상태에서 터치 디스플레이의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 기본 관심 영역을 업데이트하고, 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링할 수 있다.
한편, 오브젝트를 포함하는 화면을 디스플레이하도록 터치 디스플레이를 제어하는 단계를 더 포함하고, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 터치 디스플레이를 통해 오브젝트에 대한 드래그 입력이 수신되면 오브젝트의 크기 및 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 식별하는 단계(S2430)는 오브젝트의 크기 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별할 수 있다.
또는, 동영상을 포함하는 화면을 디스플레이하도록 터치 디스플레이를 제어하는 단계를 더 포함하고, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 터치 입력이 수신되면 동영상의 디스플레이 위치 및 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 식별하는 단계(S2430)는 동영상의 디스플레이 위치 및 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별할 수 있다.
또는, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고, 획득하는 단계(S2420)는 제1 터치 좌표 정보 1에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 제1 터치 좌표 정보 2에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고, 식별하는 단계(S2430)는 제2 터치 좌표 정보 1 및 제2 터치 좌표 정보 2에 기초하여 제2 관심 영역을 식별할 수 있다.
한편, 전자 장치는 운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며, 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2410)는 터치 디스플레이를 통해 터치 입력이 수신되면, 제1 프로세싱 유닛이 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 제2 프로세싱 유닛을 제어하고, 획득하는 단계(S2420)는 제1 프로세싱 유닛이 제1 터치 좌표 정보에 기초하여 제2 터치 좌표 정보를 획득하고, 식별하는 단계(S2430)는 제1 프로세싱 유닛이 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고, 제2 관심 영역에 대응되는 일부 화면을 렌더링하는 단계(S2440)는 제1 프로세싱 유닛이 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 제2 프로세싱 유닛을 제어할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치는 디스플레이의 전체 영역이 아닌 일부 영역만을 렌더링함에 따라 작업 부하를 줄여 전력 소모를 줄일 수 있다.
한편, 본 개시의 일시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(A))를 포함할 수 있다. 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 프로세서의 제어 하에 다른 구성요소들을 이용하여 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 일부 경우에 있어 본 명세서에서 설명되는 실시 예들이 프로세서 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 기기의 프로세싱 동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 특정 기기의 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 기기에서의 처리 동작을 특정 기기가 수행하도록 한다. 비일시적 컴퓨터 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 비일시적 컴퓨터 판독 가능 매체의 구체적인 예로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 있을 수 있다.
또한, 상술한 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 전자 장치 110 : 터치 디스플레이
120 : 프로세서 130 : 메모리
140 : 통신 인터페이스 150 : 사용자 인터페이스

Claims (20)

  1. 전자 장치에 있어서,
    터치 디스플레이; 및
    상기 터치 디스플레이와 연결되어 상기 전자 장치를 제어하는 프로세서;를 포함하며,
    상기 프로세서는,
    상기 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 상기 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하고,
    상기 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는, 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 외부이면 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 내부이면 상기 제1 관심 영역을 유지하는, 전자 장치.
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 터치 입력의 속도 및 가속도를 획득하고,
    상기 속도 및 상기 가속도에 기초하여 상기 제2 터치 좌표 정보를 획득하는, 전자 장치.
  4. 제3항에 있어서,
    상기 프로세서는,
    상기 복수의 터치 지점 중 상기 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고,
    상기 터치 지점들에 대한 정보에 기초하여 상기 터치 지점들에 대응되는 복수의 가속도를 획득하고,
    상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 현재 시점의 속도를 획득하고,
    상기 속도 및 상기 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득하고,
    상기 기설정된 시간 간격은, 상기 터치 디스플레이를 통해 디스플레이되는 화면의 샘플링 간격인, 전자 장치.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 전자 장치가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고,
    상기 터치 입력이 수신되면 상기 제1 모드를 제2 모드로 변경하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는, 전자 장치.
  6. 제5항에 있어서,
    상기 프로세서는,
    상기 전자 장치가 상기 제1 모드인 상태에서 상기 터치 디스플레이의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 상기 기본 관심 영역을 업데이트하고,
    상기 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링하는, 전자 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    오브젝트를 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하고,
    상기 터치 디스플레이를 통해 상기 오브젝트에 대한 드래그 입력이 수신되면 상기 오브젝트의 크기 및 상기 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고,
    상기 오브젝트의 크기 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    동영상을 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하고,
    상기 터치 입력이 수신되면 상기 동영상의 디스플레이 위치 및 상기 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고,
    상기 동영상의 디스플레이 위치 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는, 전자 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 상기 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 상기 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 제1 터치 좌표 정보 1에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 상기 제1 터치 좌표 정보 2에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고,
    상기 제2 터치 좌표 정보 1 및 상기 제2 터치 좌표 정보 2에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는, 전자 장치.
  10. 제1항에 있어서,
    상기 프로세서는,
    운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며,
    상기 제1 프로세싱 유닛은,
    상기 터치 디스플레이를 통해 상기 터치 입력이 수신되면, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하고,
    상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고,
    상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    상기 전자 장치의 터치 디스플레이를 통해 복수의 터치 지점이 연속적으로 터치되는 기 설정된 타입의 터치 입력이 수신되면, 상기 복수의 터치 지점에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계;
    상기 제1 터치 좌표 정보에 기초하여 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보를 획득하는 단계;
    상기 제2 터치 좌표 정보에 기초하여 제2 관심 영역을 식별하는 단계; 및
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는 단계;를 포함하는, 제어 방법.
  12. 제11항에 있어서,
    상기 식별하는 단계는,
    상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 외부이면 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 터치 좌표 정보가 상기 제1 관심 영역의 내부이면 상기 제1 관심 영역을 유지하는, 제어 방법.
  13. 제11항에 있어서,
    상기 획득하는 단계는,
    상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 터치 입력의 속도 및 가속도를 획득하고,
    상기 속도 및 상기 가속도에 기초하여 상기 제2 터치 좌표 정보를 획득하는, 제어 방법.
  14. 제13항에 있어서,
    상기 획득하는 단계는,
    상기 복수의 터치 지점 중 상기 현재 시점 이전의 기설정된 시간 간격 동안의 터치 지점들에 대한 정보를 획득하고,
    상기 터치 지점들에 대한 정보에 기초하여 상기 터치 지점들에 대응되는 복수의 가속도를 획득하고,
    상기 현재 시점의 터치 지점에 대한 정보 및 상기 현재 시점의 직전에 획득된 터치 지점에 대한 정보에 기초하여 상기 현재 시점의 속도를 획득하고,
    상기 속도 및 상기 복수의 가속도 중 가장 큰 가속도에 기초하여 제2 터치 좌표 정보를 획득하고,
    상기 기설정된 시간 간격은, 상기 터치 디스플레이를 통해 디스플레이되는 화면의 샘플링 간격인, 제어 방법.
  15. 제11항에 있어서,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 전자 장치가 제1 모드인 경우 기본 관심 영역에 대응되는 화면을 렌더링하고,
    상기 터치 입력이 수신되면 상기 제1 모드를 제2 모드로 변경하고, 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는, 제어 방법.
  16. 제15항에 있어서,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 전자 장치가 상기 제1 모드인 상태에서 상기 터치 디스플레이의 형태, 해상도, dpi(dots per inch) 또는 레이아웃 중 적어도 하나가 변경되면, 상기 기본 관심 영역을 업데이트하고,
    상기 업데이트된 기본 관심 영역에 대응되는 화면을 렌더링하는, 제어 방법.
  17. 제11항에 있어서,
    오브젝트를 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하는 단계;를 더 포함하고,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 터치 디스플레이를 통해 상기 오브젝트에 대한 드래그 입력이 수신되면 상기 오브젝트의 크기 및 상기 드래그 입력에 대응되는 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 식별하는 단계는,
    상기 오브젝트의 크기 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하는, 제어 방법.
  18. 제11항에 있어서,
    동영상을 포함하는 화면을 디스플레이하도록 상기 터치 디스플레이를 제어하는 단계;를 더 포함하고,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 터치 입력이 수신되면 상기 동영상의 디스플레이 위치 및 상기 제1 터치 좌표 정보에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 식별하는 단계는,
    상기 동영상의 디스플레이 위치 및 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하는, 제어 방법.
  19. 제11항에 있어서,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    기설정된 타입의 제1 터치 입력 및 기설정된 타입의 제2 터치 입력이 수신되면 상기 제1 터치 입력에 대응되는 제1 터치 좌표 정보 1 및 상기 제2 터치 입력에 대응되는 제1 터치 좌표 정보 2에 기초하여 식별된 제1 관심 영역에 대응되는 일부 화면을 렌더링하고,
    상기 획득하는 단계는,
    상기 제1 터치 좌표 정보 1에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 1을 획득하고, 상기 제1 터치 좌표 정보 2에 기초하여 상기 현재 시점 이후에 터치될 터치 지점에 대응되는 제2 터치 좌표 정보 2를 획득하고,
    상기 식별하는 단계는,
    상기 제2 터치 좌표 정보 1 및 상기 제2 터치 좌표 정보 2에 기초하여 상기 제2 관심 영역을 식별하는, 제어 방법.
  20. 제11항에 있어서,
    상기 전자 장치는,
    운영 체제(Operating System)에 기초하여 동작하는 제1 프로세싱 유닛 및 기 설정된 동작을 수행하는 제2 프로세싱 유닛을 포함하며,
    상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 터치 디스플레이를 통해 상기 터치 입력이 수신되면, 상기 제1 프로세싱 유닛이 상기 제1 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하고,
    상기 획득하는 단계는,
    상기 제1 프로세싱 유닛이 상기 제1 터치 좌표 정보에 기초하여 상기 제2 터치 좌표 정보를 획득하고,
    상기 식별하는 단계는,
    상기 제1 프로세싱 유닛이 상기 제2 터치 좌표 정보에 기초하여 상기 제2 관심 영역을 식별하고,
    상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하는 단계는,
    상기 제1 프로세싱 유닛이 상기 제2 관심 영역에 대응되는 일부 화면을 렌더링하도록 상기 제2 프로세싱 유닛을 제어하는, 제어 방법.
KR1020220028366A 2022-03-04 2022-03-04 전자 장치 및 그 제어 방법 KR20230131020A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020220028366A KR20230131020A (ko) 2022-03-04 2022-03-04 전자 장치 및 그 제어 방법
PCT/KR2022/020004 WO2023167396A1 (ko) 2022-03-04 2022-12-09 전자 장치 및 그 제어 방법
US18/117,771 US20230280858A1 (en) 2022-03-04 2023-03-06 Electronic apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220028366A KR20230131020A (ko) 2022-03-04 2022-03-04 전자 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20230131020A true KR20230131020A (ko) 2023-09-12

Family

ID=87883936

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220028366A KR20230131020A (ko) 2022-03-04 2022-03-04 전자 장치 및 그 제어 방법

Country Status (2)

Country Link
KR (1) KR20230131020A (ko)
WO (1) WO2023167396A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100122383A (ko) * 2009-05-12 2010-11-22 삼성전자주식회사 좌표 예측을 통한 이미지의 출력 속도 향상 방법 및 장치
KR101661931B1 (ko) * 2010-02-12 2016-10-10 삼성전자주식회사 3차원 그래픽스 랜더링 장치 및 그 방법
US9354804B2 (en) * 2010-12-29 2016-05-31 Microsoft Technology Licensing, Llc Touch event anticipation in a computing device
KR102161745B1 (ko) * 2014-07-01 2020-10-06 삼성디스플레이 주식회사 터치 입력에 시각적 피드백을 제공하는 가속기, 터치 입력에 시각적 피드백을 제공하는 터치 입력 프로세싱 디바이스 및 방법
KR20170022333A (ko) * 2015-08-20 2017-03-02 엘지전자 주식회사 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법

Also Published As

Publication number Publication date
WO2023167396A1 (ko) 2023-09-07

Similar Documents

Publication Publication Date Title
KR102664717B1 (ko) 표시 영역에 의해 둘러싸인 홀 영역을 우회하는 복수의 배선들을 포함하는 디스플레이 및 이를 포함하는 전자 장치
KR102653262B1 (ko) 개구부가 형성된 터치 레이어를 포함하는 전자 장치
US9575581B2 (en) Display device having a touch screen and method of driving the same
KR101637174B1 (ko) 터치스크린 일체형 표시장치
JP6084186B2 (ja) 表示装置及びその駆動方法
KR20160046620A (ko) 디스플레이 구동 회로 및 디스플레이 시스템
US20140049508A1 (en) Display device having a touch screen and method of driving the same
KR102549692B1 (ko) 표시 영역에 의해 둘러싸인 공백 영역이 형성된 디스플레이 패널을 구동하는 주사 구동 회로를 포함하는 디스플레이 장치
KR102008512B1 (ko) 터치 센싱 시스템의 에지부 좌표 보상 방법
TWI514218B (zh) 具有整合型觸控螢幕的顯示裝置及其驅動方法
US9721365B2 (en) Low latency modification of display frames
US11314411B2 (en) Virtual keyboard animation
KR102374160B1 (ko) 스케일링을 사용하여 디스플레이 지연을 감소시키는 방법 및 장치
CN111095350B (zh) 图像处理设备、用于处理图像的方法和计算机可读记录介质
KR102665605B1 (ko) 듀얼 소스 드라이버, 그것을 포함하는 디스플레이 장치, 및 그것의 동작 방법
CN104571712B (zh) 触控显示装置及触摸屏画线显示方法
KR102235497B1 (ko) 표시장치
KR20190047985A (ko) 포스 센서 및 지문 센서가 표시패널에 결합된 표시장치 및 이를 구동하는 방법
KR101992849B1 (ko) 터치 좌표 전송 제어방법과 이를 이용한 터치 스크린 장치
KR102202871B1 (ko) 액정표시장치
KR20230131020A (ko) 전자 장치 및 그 제어 방법
US20230280858A1 (en) Electronic apparatus and control method thereof
CN115016671A (zh) 触控显示控制装置、触控显示装置、设备和方法
US10417515B2 (en) Capturing annotations on an electronic display
US20180260933A1 (en) Display apparatus and control method thereof