KR20160019369A - 정보 처리 장치, 표시 제어 방법 및 저장 매체 - Google Patents

정보 처리 장치, 표시 제어 방법 및 저장 매체 Download PDF

Info

Publication number
KR20160019369A
KR20160019369A KR1020150109313A KR20150109313A KR20160019369A KR 20160019369 A KR20160019369 A KR 20160019369A KR 1020150109313 A KR1020150109313 A KR 1020150109313A KR 20150109313 A KR20150109313 A KR 20150109313A KR 20160019369 A KR20160019369 A KR 20160019369A
Authority
KR
South Korea
Prior art keywords
image
control unit
display
enlarged
enlargement
Prior art date
Application number
KR1020150109313A
Other languages
English (en)
Other versions
KR102113072B1 (ko
Inventor
히데시 이치미
마사유키 야마다
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20160019369A publication Critical patent/KR20160019369A/ko
Application granted granted Critical
Publication of KR102113072B1 publication Critical patent/KR102113072B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Abstract

시스템 레벨의 주문제작을 행하지 않고, 확대 기능을 실현하는 정보 처리 장치가 제공된다. 정보 처리 장치는, 애플리케이션 유닛, 확대 제어 유닛 및 화면 제어 유닛을 포함한다. 애플리케이션 유닛은 화상을 생성하여 통상 표시 영역에 묘화한다. 확대 제어 유닛은, 통상 표시 영역에 묘화된 화상을 확대하고, 확대된 화상의 일부를 포함하는 확대 화상을 생성하여 확장 표시 영역에 묘화한다. 화면 제어 유닛은, 확장 기능이 무효인 경우에는 통상 표시 영역에 묘화된 화상을 디스플레이에 표시하고, 확장 기능이 유효한 경우에는 확장 표시 영역에 묘화된 확대 화상을 디스플레이에 표시한다.

Description

정보 처리 장치, 표시 제어 방법 및 저장 매체{INFORMATION PROCESSING APPARATUS, DISPLAY CONTROL METHOD, AND STORAGE MEDIUM}
본 발명은, 표시 장치의 표시 화면에 표시된 화상을 확대하여 표시하는 확대 기능을 갖는 정보 처리 장치에 관한 것이다.
표시 장치를 포함하는 일부 정보 처리 장치는, 표시 장치에 표시되는 화상을 원하는 확대율로 확대하여 표시하는 확대 기능을 포함한다. 정보 처리 장치는, 사진 및 문자를 위한 애플리케이션 소프트웨어(AP: application software)에 의존하는 콘텐츠뿐만 아니라 표시 화면에 표시된 전체 화상을 확대할 수 있다. 따라서, 정보 처리 장치는, 아이콘 등의 객체(object)를 포함하여 표시 화면에 표시되는 모든 화상을 사용자를 위해 적절한 크기로 표시할 수 있다. 사용자는 확대된 화상에 기초하여 조작할 수 있다. 그러므로, 접근성이 향상되고, 시력이 약한 사용자도 장치의 조작에 지장 없이 장치를 조작할 수 있다. 일본특허출원공개 제2012-252370호는, 캡처된 표시 화면의 일부를 확대할 수 있는 이러한 정보 처리 장치를 개시하고 있다.
확대 기능은, 통상적으로 표시 화면을 지속적으로 갱신하면서 전체 화상을 확대할 필요가 있고, 운영 시스템(OS:operating system) 또는 윈도우 시스템 등의 시스템 레벨에서 통합된다. 그러므로, 확대 기능을 갖는 OS 또는 윈도우 시스템을 채용하지 않는 정보 처리 장치의 경우에는, 표시 화면에 표시되는 전체 화상을 확대하여 표시할 수 없다. 또한, 라이선스 문제로 인해 OS 또는 윈도우 시스템에 나중에 확대 기능을 부가하는 것은 곤란하다.
또한, 현재 시장에는, AP 실행 화면을 확대 기능에 의해 확대하여 표시하는 경우 확대된 화상의 조작에 의해 AP를 조작할 수 있는 정보 처리 장치는 제공되어 있지 않다. 특히, 드래그 조작 및 핀치 조작(pinch operation)과 같은 확대 기능 처리에 사용되는 조작에 의해 AP를 조작할 수 있는 정보 처리 장치가 최근 요구되고 있다.
본 발명은 주로 시스템 레벨의 주문제작(customization)을 행하지 않고 확대 기능을 실현하는 정보 처리 장치에 관한 것이다.
정보 처리 장치는, 제1 화상을 생성하도록 구성되는 애플리케이션 유닛, 제1 화상을 확대하고 확대된 제1 화상의 일부를 포함하는 제2 화상을 생성하도록 구성되는 확대 제어 유닛, 및 제1 화상 및 제2 화상 중 어느 하나를 미리 정해진 표시 장치에 표시하도록 구성되는 화면 표시 유닛을 포함한다.
본 발명의 추가의 특징은 첨부된 도면과 관련한 예시적인 실시형태에 대한 이하의 설명으로부터 명확해질 것이다.
도 1은 정보 처리 장치의 하드웨어 구성도이다.
도 2는 제어 유닛의 기능 블록도이다.
도 3은 표시 영역 전환 처리의 설명도이다.
도 4는 확대경 프레임의 설명도이다.
도 5는 전체 확대 표시의 설명도이다.
도 6은 화상 전환 처리의 흐름도이다.
도 7a 내지 도 7c는 이벤트 처리의 흐름도이다.
도 8은 캡처 화상 묘화 처리의 흐름도이다.
도 9a 및 도 9b는 확대 화상 묘화 처리의 흐름도이다.
도 10은 제2 예시적인 실시형태에 따른 확대경의 이벤트 처리의 흐름도이다.
도 11은 제2 예시적인 실시형태에 따른 전체 확대의 이벤트 처리의 흐름도이다.
도 12는 제3 예시적인 실시형태에 따른 제어 유닛의 기능 블록도이다.
도 13은 제3 예시적인 실시형태에 따른 확대경의 이벤트 처리의 흐름도이다.
도 14는 제3 예시적인 실시형태에 따른 전체 확대의 이벤트 처리의 흐름도이다.
도 15는 일반적인 애플리케이션에 의해 표시되는 예시적인 화면을 도시하는 도면이다.
도 16은 객체가 제4 예시적인 실시형태에 따라 표시되는 예시적인 화상을 도시하는 도면이다.
도 17은 제4 예시적인 실시형태에 따른 이벤트 처리의 흐름도이다.
도 18은 제4 예시적인 실시형태에 따른 전체 확대의 묘화 처리의 흐름도이다.
도 19는 제5 예시적인 실시형태에 따른 오토 클리어(auto-clear)에 의해 화상을 원래의 크기로 복귀시키는 처리의 흐름도이다.
도 20은 제6 예시적인 실시형태에 따른 확대 화상 표시 방법의 설명도이다.
이하 도면을 참조하여 예시적인 실시형태를 상세하게 설명한다.
<구성>
도 1은 본 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성도이다. 정보 처리 장치(101)는, 화상 형성 장치 또는 스마트폰과 같은 디스플레이(119)(표시 장치)를 포함하는 컴퓨터이다. 정보 처리 장치(101)는, OS 또는 윈도우 시스템 등의 시스템 레벨의 확대 기능을 갖지 않는다. 정보 처리 장치(101)는, 디스플레이(119) 이외에, 제어 유닛(110), 터치 패널(118) 및 외부 메모리(120)를 포함한다. 제어 유닛(110)은, 중앙 처리 유닛(CPU)(111), 랜덤 액세스 메모리(RAM)(112) 및 읽기 전용 메모리(ROM)(113)을 포함하고, 전체 정보 처리 장치(101)의 동작을 제어한다. 그러므로, 제어 유닛(110)은, 터치 패널(118)에 접속되는 입력 제어 유닛(114), 디스플레이(119)에 접속되는 표시 제어 유닛(115), 및 외부 메모리(120)에 접속되는 외부 메모리 인터페이스(I/F)(116)를 포함한다. 또한, 제어 유닛(110)은, 근거리 지역 통신망(LAN) 등의 네트워크(102)와의 통신을 제어하도록 구성되는 통신 I/F 컨트롤러(117)를 포함한다. CPU(111), RAM(112), ROM(113), 입력 제어 유닛(114), 표시 제어 유닛(115), 외부 메모리 I/F(116) 및 통신 I/F 컨트롤러(117)는, 통신가능한 방식으로 시스템 버스(B)를 통해 서로 접속된다.
CPU(111)는, ROM(113) 또는 외부 메모리(120)에 저장되는 컴퓨터 프로그램을 판독하고, 작업 영역으로서의 램(112)의 사용에 의해 프로그램을 행하여 정보 처리 장치(101)의 각 유닛의 동작을 제어한다. ROM(113)은 비휘발성 메모리이며, 컴퓨터 프로그램의 이외에, 처리에 필요한 다양한 데이터 항목을 유지하도록 구성되는 기억 매체이다. 램(112)은 휘발성 메모리이며, 처리 동안의 일시 기억 영역을 제공한다.
입력 제어 유닛(114)은, 입력 디바이스의 사용에 의해 사용자의 조작을 수신하고, 수신된 조작에 따른 제어 신호를 CPU(111)에 송신한다. 도 1에서는, 입력 디바이스로서 터치 패널(118)을 사용한다. 입력 디바이스는, 터치 패널(118) 이외에, 키보드 등의 문자 입력 디바이스나 마우스 등의 포인팅 디바이스를 채용할 수 있다. 터치 패널(118)은, 사용자의 손가락이나 스타일러스 펜에 의해 터치된 위치를 검출하도록 구성되는 포인팅 디바이스이다. 터치 패널(118)은, 저항막 방식, 정전 용량 방식, 표면 탄성파 방식, 적외선 방식, 전자기 유도 방식, 화상 인식 방식, 및 광 센서 방식과 같은 다양한 방식을 채용할 수 있다. 입력 제어 유닛(114)은, 터치 패널(118)에 의해 검출된 위치에 따른 제어 신호를 CPU(111)에 송신한다. CPU(111)는 제어 신호에 기초하여 처리를 실행한다. CPU(111)는 정보 처리 장치(101)에 대하여 사용자의 조작에 대응하는 처리를 행한다.
표시 제어 유닛(115)은 CPU(111)의 제어 하에 디스플레이(119)에 화상을 표시한다. 표시 제어 유닛(115)은, 예를 들어 처리에 관련된 객체를 포함하는 화상을 디스플레이(119)에 표시한다. 본 실시형태에 따른 표시 제어 유닛(115)은, 디스플레이(119)에 100%의 확대율로 화상을 표시할 수 있고, 확대된 화상을 미리 정해진 확대율로 표시할 수 있다.
디스플레이(119)의 표시 화면에는 터치 패널(118)이 일체로 제공된다. 터치 패널(118)은, 디스플레이(119)의 표시를 방해하지 않는 투과율로 구성된다. CPU(111)는, 디스플레이(119)에 표시되는 객체의 위치 및 터치 패널(118)에서 검출된 터치 위치에 기초하여 사용자에 의해 조작된(터치된) 객체를 식별하고, 객체와 관련된 처리를 실행한다. 이렇게 하여, 입력을 위해 사용자가 디스플레이(119)에 표시된 화상을 직관적으로 조작하는 그래픽 사용자 인터페이스(GUI:graphical user interface)가 터치 패널(118) 및 디스플레이(119)로 구성될 수 있다.
외부 메모리 I/F(116)에는, 하드 디스크, 플렉시블 디스크, 콤팩트 디스크(CD), 디지털 다용도 디스크(DVD), 또는 메모리 카드와 같은 외부 메모리(120)가 장착가능하다. 외부 메모리 I/F(116)는, CPU(111)의 제어 하에, 장착된 외부 메모리(120)로부터 데이터를 판독하고, 외부 메모리(120)에 데이터를 기입한다. 통신 I/F 컨트롤러(117)는, 네트워크(102)를 통해 네트워크(102)에 접속된 다른 장치와의 통신을 제어한다.
CPU(111)는 터치 패널(118) 상의 이하의 조작이나 상태를 검출할 수 있다.
터치 다운(touch-down): 손가락 등의 지시체가 터치 패널(118)에 접촉한 것(터치 개시)
무브(move): 지시체가 터치 패널(118)에 접촉된 상태로 유지되는 것(터치 지속).
터치 업(touch-up): 터치 패널(118)에 접촉하고 있던 지시체가 이격되는 것(터치 종료).
터치 패널(118) 상의 사용자에 의해 터치된 위치를 나타내는 위치 좌표 또는 조작에 대한 정보는, 입력 제어 유닛(114) 및 시스템 버스(B)를 통해서 CPU(111)에 통지된다. CPU(111)는 통지된 정보에 기초하여 터치 패널(118) 위에서 어떤 조작이 행해지는지를 판정한다. CPU(111)는, 위치 좌표의 변화에 기초하여, 터치 패널(118) 상의 수직 성분 및 수평 성분마다 무브 시의 손가락 또는 스타일러스 펜의 이동 방향을 판정한다. 예를 들어, 사용자가 터치 패널(118)에 손가락을 터치하고 손가락을 슬라이드시킴으로써 드래그 조작을 행한 것을 상정한다. 이 경우, CPU(111)는, 먼저 터치 다운 및 그 위치 좌표를 검출하고, 그 후 미리 정해진 주기로 무브 및 그 위치 좌표를 검출한다. 이동 거리가 미리 정해진 값 이상이면, CPU(111)는 드래그 조작이 행해졌다고 판단한다.
터치 패널(118)은, 터치 다운 및 무브의 복수의 위치를 동시에 검출하는 멀티 터치를 행할 수 있다. 사용자는, 2개의 손가락 또는 스타일러스 펜이 터치 패널에 접촉하고 있는 상태로부터, 그 2점을 연결하는 선분의 방향으로 2점 사이의 거리를 단축 또는 확대하도록 손가락을 이동시킬 수 있다. 사용자가 2개의 손가락을 서로 접근시키거나 이격시키는 조작은, 손가락에 의해 물체를 집거나 잡아 늘리는 행위와 닮아 있으며, "핀치 조작"이라 불린다. 통상적으로, 많은 경우에, 핀치 조작은 사용자의 엄지 손가락과 집게 손가락에 의해 행해진다. 2점이 동시에 터치되고 터치 위치 중 하나 또는 양자 모두가 이동될 때, 즉 2점 무브가 동시에 검출되고 그 무브의 위치 좌표가 변화될 때, CPU(111)는 핀치 조작이 행해진다고 판단한다. 또한, CPU(111)는, 핀치 조작을 위한 2점을 연결하는 선분의 중심점 좌표, 및 2점 사이의 거리를 산출할 수 있다. 2점 사이의 거리가 증가하는 경우 CPU(111)는 핀치 아웃(pinch-out) 조작이 행해졌다고 판단하고, 2점 사이의 거리가 감소하는 경우 CPU(111)는 핀치 인(pinch-in) 조작이 행해졌다고 판단한다.
도 2는, 정보 처리 장치(101)의 제어 유닛(110)에 의해 실현되는 표시 제어를 위한 기능을 나타내는 기능 블록도이다. CPU(111)가 ROM(113) 또는 외부 메모리(120)와 같은 기억 매체로부터 컴퓨터 프로그램을 판독 및 실행함으로써, 각각의 기능이 형성되지만, 각각의 기능은 하드웨어 장치로 구성될 수 있다. 정보 처리 장치(101)에는, 화면 제어 유닛(201), 확대 제어 유닛(301), 애플리케이션 유닛(401), 및 디바이스 제어 유닛(501)이 형성되어 있다. 이러한 기능을 사용함으로써, 정보 처리 장치(101)는 디스플레이(119) 상의 화상 표시를 확대하는 확대 기능을 실현한다. 정보 처리 장치(101)의 확대 기능은, 2개의 기능, 즉 "전체 확대 기능" 및 "확대경 기능"을 포함한다. 전체 확대 기능은 디스플레이(119)의 전체 표시 화면에 확대된 화상을 표시한다. 확대경 기능은, 디스플레이(119)의 일부에, 확대되지 않은 화상에 중첩되는 확대된 화상을 표시하는 기능이다. 확대된 화상은, 확대경에 의해 기인하는 것처럼, 디스플레이(119)의 표시 크기보다 더 작은 프레임에 표시된다. 이하에서, 전체 확대 기능을 간단히 "전체 확대"라 칭하고, 확대경 기능을 간단히 "확대경"이라 칭한다.
화면 제어 유닛(201)은, 확대 기능을 포함하는 AP을 관리하고, 표시될 화상에 대한 화상 정보를 디스플레이(119)에 전송하는 처리, 터치 패널(118)에 대한 사용자의 터치 조작에 대응하는 이벤트를 AP에 통지하는 처리 등을 행한다. 화면 제어 유닛(201)은, 화면 정보 제어 유닛(202), 화면 정보 저장 유닛(203), 화면 표시 유닛(204), 입력 정보 제어 유닛(205) 및 입력 정보 통지 유닛(206)을 포함한다.
화면 정보 제어 유닛(202)은, 디바이스 제어 유닛(501)으로부터 확대 모드(확대 기능)가 전환된다는 확대 모드 통지를 수신하고, 화면 정보 저장 유닛(203)에 확대 모드 통지를 저장한다. 확대 모드 통지는, 확대 기능이 유효한지의 여부에 대한 정보, 확대율에 대한 정보, 및 전체 확대 또는 확대경 중 어느 것이 채용되는지에 대한 정보를 포함한다. 동시에, 화면 정보 제어 유닛(202)은, 확대 제어 유닛(301)에 대하여 확대 모드 통지를 송신하고, 확대 제어 유닛(301)으로부터의 지시에 응답하여 표시 영역을 전환할 것을 화면 표시 유닛(204)에 지시한다.
화면 표시 유닛(204)은 디스플레이(119)에 표시될 화상을 표시 영역에 묘화한다. 표시 영역은, 각각 화상이 묘화되는 동일한 표시 크기를 갖는 2개의 표시 영역을 포함한다. 화면 표시 유닛(204)은, 화면 정보 제어 유닛(202)으로부터 표시 영역을 전환하라는 지시를 수신하고, 디스플레이(119)에 표시될 표시 영역을 전환하는 처리를 행한다.
도 3은 표시 영역 전환 처리의 설명도이다. 도 3은, 최종적인 화상 전송처로서의 디스플레이(119), 및 디스플레이(119)에 전송될 화상이 묘화되는 가상 디스플레이 영역(601)을 나타내고 있다. 가상 디스플레이 영역(601)은 예를 들어 RAM(112)에 제공된다. 가상 디스플레이 영역(601)은, 동일한 표시 크기(예를 들어, 1024 픽셀의 폭 및 600 픽셀의 높이)를 갖는 통상 표시 영역(602) 및 확장 표시 영역(603)으로 구성된다. 표시 크기는, 디스플레이(119)의 표시 크기(예를 들어, 1024 픽셀의 폭 및 600 픽셀의 높이)에 따라서 결정된다. 디스플레이(119)는, 가상 디스플레이 영역(601)의, 통상 표시 영역(602)에 묘화되는 화상 및 확장 표시 영역(603)에 묘화되는 화상 중 어느 하나를 표시한다.
화면 표시 유닛(204)은, 개시 좌표(604)의 X 좌표 "0" 및 Y 좌표 "0"을 시점으로 하는 화상을 통상 표시 영역(602)에 묘화한다. 통상 표시 영역(602)에 묘화되는 화상은 애플리케이션 유닛(401)에 의해 생성된다. 화면 표시 유닛(204)은, 개시 좌표(605)의 X 좌표 "1024" 및 Y 좌표 "0"을 시점으로 하는 화상을 확장 표시 영역(603)에 묘화한다. 확장 표시 영역(603)에 묘화되는 화상은 확대 표시 제어 유닛(307)에서 생성된다. 즉, 애플리케이션 유닛(401)에서 AP를 실행함으로써 생성되는 AP 실행 화상이 통상 표시 영역(602)에 묘화되고, 확대 제어 유닛(301)에서 생성되는 실행 화상의 확대된 화상이 확장 표시 영역(603)에 묘화된다. 도 3의 예에서는, 카피 애플리케이션에 의해 생성되는 카피 설정 화면이 통상 표시 영역(602)에 묘화된다. 카피 설정 화면의 일부를 확대한 확대 화상이 확장 표시 영역(603)에 표시된다.
화면 표시 유닛(204)은, 화면 정보 제어 유닛(202)으로부터의 표시 영역 전환 지시에 응답하여, 통상 표시 영역(602)에 묘화된 화상 및 확장 표시 영역(603)에 묘화된 화상 중 어느 하나를 디스플레이(119)에 전송한다. 도 3은, 확대 기능이 유효하고, 확장 표시 영역(603)의 화상이 디스플레이(119)에 전송 및 표시되는 것을 나타내고 있다.
입력 정보 제어 유닛(205)은, 터치 패널(118)에 대한 사용자의 조작에 따른 제어 신호를 분석하고, 제어 신호를 AP에서 처리가능한 이벤트 정보의 형식으로 변환하며, 이벤트 정보를 입력 정보 통지 유닛(206)에 송신한다. 이벤트 정보는, 터치 패널(118)에서의 조작 또는 상태를 나타내고, 터치 위치에 대한 좌표 정보를 포함한다.
입력 정보 통지 유닛(206)은 입력 정보 제어 유닛(205)으로부터 이벤트 정보를 수신한다. 입력 정보 통지 유닛(206)은, 화면 정보 저장 유닛(203)에 저장되어 있는 확대 모드 통지를 참조하여, 확대 기능이 무효이면 애플리케이션 유닛(401)에 이벤트 정보를 송신하거나, 확대 기능이 유효하면 확대 제어 유닛(301)에 이벤트 정보를 송신한다. 또한, 입력 정보 통지 유닛(206)은, 이벤트 정보가 수신될 때 터치 패널(118)이 조작된다고 판단하고, 아래에 기재된 타이머 제어 유닛(503)에 타이머를 리셋할 것을 지시한다.
확대 제어 유닛(301)은, 애플리케이션 유닛(401)에 의해 통상 표시 영역(602)에 묘화된 화상을 캡처하고, 그 캡처 화상을 확대하고 확장 표시 영역(603)에 묘화한다. 확대 제어 유닛(301)은, 확대 정보 제어 유닛(302), 화상 캡처 유닛(303), 캡처 화상 저장 유닛(304), 확대 입력 제어 유닛(305), 확대 입력 정보 저장 유닛(306), 확대 표시 제어 유닛(307) 및 확대 표시 정보 저장 유닛(308)을 포함한다.
확대 정보 제어 유닛(302)은, 화면 정보 제어 유닛(202)으로부터 확대 모드 통지를 수신하고, 수신한 확대 모드 통지를 확대 표시 제어 유닛(307)에 송신한다. 확대 정보 제어 유닛(302)은, 확대 모드 통지에 기초하여 확대 기능이 유효한지의 여부를 판단하며, 판단 결과에 따라, 화면 정보 제어 유닛(202)에 표시 영역을 전환할 것을 지시한다.
화상 캡처 유닛(303)은, 확대 표시 제어 유닛(307)으로부터의 지시에 응답하여, 화면 표시 유닛(204)에 의해 통상 표시 영역(602)에 묘화된 화상을 캡처하고, 캡처 화상 저장 유닛(304)에 캡처 화상을 저장한다.
확대 입력 제어 유닛(305)은, 입력 정보 통지 유닛(206)으로부터 이벤트 정보를 수신하고, 수신한 이벤트 정보를 확대 입력 정보 저장 유닛(306)에 저장하며, 확대 표시 제어 유닛(307)에 이벤트 정보의 수신을 통지한다. 확대 입력 정보 저장 유닛(306)에 저장되는 이벤트 정보는, 터치 다운, 터치 업 또는 무브와 같은 이벤트 유형 및 터치된 위치를 나타내는 위치 좌표를 포함한다. 이벤트 정보에 대해서는, 복수의 터치 위치에 기초한 이벤트 정보의 항목이 1개의 이벤트 정보로서 저장될 수 있다.
확대 표시 제어 유닛(307)은 주로 이하의 3개의 처리를 행한다.
확대 입력 제어 유닛(305)으로부터 통지가 수신되면, 확대 표시 제어 유닛(307)은, 확대 입력 정보 저장 유닛(306)에 저장되어 있는 이벤트 정보 및 확대 표시 정보 저장 유닛(308)에 저장되어 있는 정보를 취득한다. 확대 표시 정보 저장 유닛(308)은, 전체 확대 기능의 확대율, 전체 화상에 대한 표시 위치 좌표 정보, 확대경의 확대율, 및 확대경에 대한 표시 위치 좌표 정보와 같은 확대 표시 정보를 내부에 저장한다. 확대 표시 제어 유닛(307)은, 취득한 확대 표시 정보를 사용하여 새롭게 확대율 또는 표시 위치 좌표를 산출하고, 확대 표시 정보 저장 유닛(308)의 내용을 갱신한다. 확대경 및 전체 확대의 표시 위치 좌표에 대해서는 후술한다.
확대 표시 제어 유닛(307)은 항상 확대 표시 정보 저장 유닛(308)을 감시한다. 확대 기능이 유효하면, 확대 표시 제어 유닛(307)은 화상 캡처 유닛(303)에 화상을 캡처할 것을 지시하고, 캡처 화상 저장 유닛(304)에 저장되어 있는 캡처 화상을 취득한다. 확대 표시 제어 유닛(307)은, 취득한 캡처 화상을 확대 표시 정보 저장 유닛(308)에 저장되어 있는 확대율에 기초하여 확대 또는 축소하고, 확대경에 대한 표시 위치 좌표 정보에 따라 화면 표시 유닛(204)에 묘화 지시를 행한다. 확대 기능이 무효이면, 확대 표시 제어 유닛(307)은 화면 표시 제어를 행하지 않는다.
확대 표시 제어 유닛(307)은, 확대 정보 제어 유닛(302)으로부터 확대 모드 통지를 수신하고, 확대 기능이 유효한지의 여부에 따라 확대 정보 제어 유닛(302)에 표시 영역을 전환할 것을 지시한다. 확대 기능이 무효라고 판단된 경우에는, 확대 표시 제어 유닛(307)은 확대 정보 제어 유닛(302)에 통상 표시 영역(602)으로 전환할 것을 지시한다. 확대 기능이 유효하다고 판단되는 경우에는, 확대 표시 제어 유닛(307)은 확대 정보 제어 유닛(302)에 확장 표시 영역(603)으로 전환한 것을 지시한다.
애플리케이션 유닛(401)은, 디스플레이(119)에 표시되고 터치 패널(118)에서 조작될 화상을 생성하도록 구성되는 애플리케이션의 그룹이다. 애플리케이션 유닛(401)은, 디바이스 설정 애플리케이션(402) 및 일반 애플리케이션(403)을 포함한다. 애플리케이션 유닛(401)이 화면 표시 유닛(204)에 묘화 지시를 송신함으로써, 통상 표시 영역(602)에 화상이 묘화된다.
디바이스 설정 애플리케이션(402)은, 주로 사용자로서의 관리자에 의해 사용 환경에 따라 정보 처리 장치(101) 본체의 다양한 설정값을 설정하도록 구성되는 AP이다. 예를 들어, 디바이스 설정 애플리케이션(402)은, 언어 설정, 전력 절약 설정, 네트워크 설정, 및 확대 기능 설정과 같은 설정에 사용된다. 설정값에 따라서 정보 처리 장치(101)의 동작이 결정된다. 본 실시형태에 따르면, 전체 확대 기능이 유효/무효인지의 여부, 및 확대경 기능이 유효/무효인지의 여부가 확대 기능 설정으로서 설정된다. 전체 확대 기능 및 확대경 기능은 배타적인 관계에 있고, 그들 중 하나만 유효하게 설정될 수 있다. 예를 들어, 전체 확대 기능이 유효한 것으로서 설정되는 경우에는, 확대경 기능은 무효가 된다. 디바이스 설정 애플리케이션(402)에 의한 확대 기능 설정에 따라서 확대 모드 통지에 포함되는 정보가 설정된다. 일반 애플리케이션(403)은, 일반 사용자에 의해 사용되며, 정보 처리 장치(101)의 기능에 대응하는 AP이다. 설명을 간략화하기 위해서 하나의 일반 애플리케이션(403)만이 도시되어 있지만, 복수의 일반 애플리케이션(403)이 존재할 수 있다. 일반 애플리케이션(403)은, 카피, 스캔, 스캔된 데이터의 송신, 스캔된 데이터의 저장(박스), 및 프린트와 같은 다양한 AP를 채용할 수 있다.
디바이스 제어 유닛(501)은, 정보 처리 장치(101)의 상태를 감시 및 관리한다. 디바이스 제어 유닛(501)은, 디바이스 정보 제어 유닛(502), 타이머 제어 유닛(503) 및 디바이스 정보 저장 유닛(504)을 포함한다.
디바이스 정보 제어 유닛(502)은, 항상, 디바이스 정보 저장 유닛(504)을 감시하고, 디바이스 설정 애플리케이션(402)에 의해 설정값이 갱신되는 것이 검출되면, 화면 정보 제어 유닛(202)에 갱신 내용을 송신한다. 예를 들어, 디바이스 설정 애플리케이션(402)에 의해 전체 확대 기능 또는 확대경 기능이 유효한 것으로서 설정되면, 디바이스 정보 제어 유닛(502)은 확대 모드 통지를 생성하여 화면 정보 제어 유닛(202)에 송신한다. 디바이스 정보 저장 유닛(504)은, 디바이스 설정 애플리케이션(402)에 의해 설정된 설정값을 저장하고, 추가적으로 전력 절약 모드로의 이행 시간 또는 오토 클리어 시간을 저장한다.
타이머 제어 유닛(503)은, 정보 처리 장치(101)가 소정 시간 동안 조작 되지 않았을 때 이행하는 전력 절약 모드를 관리하거나, 사용자에 의해 조작되고 있던 도중의 화상을 디폴트 화상으로 복귀시키는 오토 클리어를 관리한다. 구체적으로는, 타이머 제어 유닛(503)은 시간을 카운트 업(count up)하고, 그것을 디바이스 정보 저장 유닛(504)에 저장되어 있는 전력 절약 모드로의 이행 시간 또는 오토 클리어 시간과 비교한다. 비교의 결과, 이행 시간 또는 오토 클리어 시간이 경과한 경우에, 타이머 제어 유닛(503)은, 디바이스 정보 제어 유닛(502)에 대하여, 전력 절약 모드 또는 오토 클리어의 요구를 행한다. 타이머 제어 유닛(503)으로부터 통지 요구를 받으면, 디바이스 정보 제어 유닛(502)은, 처리가 오토 클리어 또는 전력 절약 모드에 들어간 것을 화면 정보 제어 유닛(202)에 통지한다. 입력 정보 통지 유닛(206)으로부터 타이머를 리셋하라는 지시가 있으면, 타이머 제어 유닛(503)은, 자신의 타이머를 리셋하고, 전력 절약 모드 또는 오토 클리어 등의 처리를 지연시킨다.
<확대경>
도 4는, 확대경 기능이 유효하게 설정되었을 때에 디스플레이(119)에 표시되는 확대경 프레임의 설명도이다. 디스플레이(119)에는, 확장 표시 영역(603)의 화상이 표시된다. 확대경 프레임(705)은, 확장 표시 영역(603)보다 더 작고, 확장 표시 영역(603) 내에 표시되며, 그 표시 위치가 중심 좌표 701(x1, y1)로 표현된다. 확대경 프레임(705)은, 사용자의 드래그 조작에 따라서 확장 표시 영역(603) 내로 이동가능하다. 도 4에서는, 확대경 프레임(705)이 이동하여 중심 좌표 702(x2, y2)를 갖는 확대경 프레임(706)이 된다.
확장 표시 영역(603)의 화상은, 확장 표시 영역(603)의 좌상측 좌표(1024, 0)를 원점으로 하여 묘화된다. 이 화상은, 통상 표시 영역(602)에 묘화되는 화상과 동일하고, 확대되어 있지 않다. 확대경 프레임(705) 내의 확대경 화상은, 확대경 프레임(705)의 좌상측 좌표(0, 0)를 원점으로 하여 묘화된다. 확대경 프레임(705)의 중심 좌표(701)는, 확장 표시 영역(603)의 좌상측 좌표(1024, 0)를 원점으로 하여 표현된다. 확대경 프레임(705)에 묘화되는 확대경 화상은, 확대경 프레임(705)의 중심 좌표(701)와 동일한 좌표의 확장 표시 영역(603)에 묘화되는 화상이며, 상기 화상은 확대경의 확대율에 따라서 확대되고, 그 확대 화상의 일부가 클립(clip)된다. 확대경 프레임(705)의 중심 좌표(701), 폭(707), 및 높이(708)는, 확대경 프레임(705)에 대한 표시 위치 좌표 정보로서 확대 표시 정보 저장 유닛(308)에 저장된다.
사용자는, 디스플레이(119) 위에서 확대경 프레임(705)을 확대경 프레임(706)으로 이동시키기 위해서, 이동 개시점(703)(xx1, yy1)에서 터치다운하고, 무브를 행하며, 이동 종료점(704)(xx2, yy2)에서 터치 업 한다. 터치 다운, 무브, 및 터치 업과 같은 일련의 조작에서의 이벤트의 좌표는, 통상 표시 영역(602)의 폭을 포함하는 가상 디스플레이 영역(601)의 좌표로서 터치 패널(118)로부터 화면 제어 유닛(201)에 통지된다.
이동 후의 확대경 프레임(706)의 중심 좌표(702)를 구함으로써, 확대경 프레임(706)은, 중심 좌표(702)와 동일한 좌표의 확장 표시 영역(603)에 묘화되는 화상이 확대되고, 확대 화상의 일부가 클립된 확대경 화상을 표시한다. 이동 후의 확대경 프레임(706)의 중심 좌표(702)(x2, y2)는 예를 들어 이하와 같이 구해질 수 있다. 새롭게 구해진 표시 위치 좌표 정보는 확대 표시 정보 저장 유닛(308)에 저장된다.
x2=x1+(xx2-xx1)
y2=y1+(yy2-yy1)
도 4는, 이동 개시점의 확대경 프레임(705) 및 이동 종료점의 확대경 프레임(706)만을 나타내고 있지만, 실제로는 이동 개시점과 이동 종료점과의 사이의 무브 이벤트 동안에도 복수의 이동 점이 존재한다. 이 무브 이벤트 동안의 이동 점에 대해서도 마찬가지로 좌표 계산 및 확대경 표시가 행하여진다. 확대경의 좌표 계산 및 확대경의 표시에 관한 처리는 확대 표시 제어 유닛(307)에 의해 행해진다.
<전체 확대>
도 5는 전체 확대 표시의 설명도이다. 전체 확대 화상은, 확장 표시 영역(603)에 묘화되며 디스플레이(119)에 표시된다.
통상 표시 영역(602)에 표시되는 화상을 특정한 확대율로 확대한 확대 화상(801)은, 디스플레이(119)에 표시가능한 크기로 클립되고, 확장 표시 영역(603)에 묘화된다. 예를 들어, 통상 표시 영역(602)의 화상이 디스플레이(119)에 표시된 상태에서 핀치 아웃 조작됨으로써, 확대 화상(801)이 얻어진다.
도 5의 예에서는, 확대 화상(801)의 원점(809)은 원래의 화상의 원점에 대해 (-50, -30)이다. 확대 화상(801)의 원점(809)에 대해 위치(50, 30)로부터 확장 표시 영역(603)의 1024 픽셀의 폭 및 600 픽셀의 높이까지의 범위의 화상이 클립된다. 클립된 화상은 확장 표시 영역(603)에 묘화된다.
핀치 아웃 조작에 의해 화상을 확대하는 경우에 확대율 및 확대 화상(801)의 원점(809)은 이하와 같이 구해진다. 핀치 아웃 조작에서는, 터치 패널(118) 상의 2점이 터치된다. 제1 점의 터치 위치는, 핀치 조작 개시 시의 핀치 개시 좌표(802)로부터 핀치 조작 종료 시의 핀치 종료 좌표(803)까지 이동한다. 제2 점의 터치 위치는, 핀치 조작 개시 시의 핀치 개시 좌표(804)로부터 핀치 조작 종료 시의 핀치 종료 좌표(805)까지 이동한다. 이 좌표는, 도 3의 통상 표시 영역(602)의 폭을 포함하는 정보로서 터치 패널(118)로부터 제어 유닛(110)에 입력된다.
핀치 아웃 조작에서는, 핀치 종료 좌표(803)와 핀치 종료 좌표(805)와의 사이의 거리(D2)는 핀치 개시 좌표(802)와 핀치 개시 좌표(804)와의 사이의 거리(D1)보다 더 길다. 그러므로, 제어 유닛(110)은, 핀치 아웃 조작이 화상의 확대를 지시하고 있다고 판단한다. 거리 D1과 D2는 이하의 식으로 표현된다. 핀치 개시 좌표(802)를 (xx11, yy11), 핀치 개시 좌표(804)를(xx21, yy21), 핀치 종료 좌표(803)를 (xx12, yy12), 핀치 종료 좌표(805)를 (xx22, yy22)로 하면,
D1=√((xx21-xx11)2+ (yy21-yy11)2)
D2=√((xx22-xx12)2+ (yy22-yy12)2)
통상 표시 영역(602)에 표시되는 화상의 현재 확대율(R1)(통상은 100%) 및 거리(D1 및 D2)를 상정하면, 핀치 조작에 의한 화상의 확대율 R2는 이하의 식으로 표현된다. 확대 표시 제어 유닛(307)은 이 새로운 확대율 R2로 화상을 확대한다.
R2=R1×D2/D1
확대 화상(801)의 원점(809)의 좌표(x01, y01)는 새로운 확대율(R2)을 사용하여 구해진다. 본 경우에서는, 핀치 조작을 위한 2점의 중심점 좌표를 기점으로 하여 화상이 확대된다. 핀치 개시 시의 중심점(806) 및 핀치 종료 시의 중심점(807)이 동일한 위치에 있는 경우, 중심점의 좌표(x1, y1)는 통상 표시 영역(602)의 폭을 감산하는 이하의 식으로 표현된다.
x1=(xx11-1024+xx21-1024)/2
y1=(yy11+yy21)/2
확대 전의 화상의 원점(808)의 좌표(x00, y00)와 중심점과의 사이의 거리는 이하의 식으로 표현된다.
(확대 화상의 원점과 중심점과의 사이의 거리)=x1-x00
(확대 화상의 원점과 중심점과의 사이의 거리)=y1-y00
이 식에 기초하여, 확대 화상(801)의 원점(809)의 좌표(x01, y01)는 이하의 식으로 표현된다.
x01=x1-(x1-x00)×R2
y01=y1-(y1-y00)×R2
핀치 개시 시의 중심점은 핀치 종료 시의 중심점과 좀처럼 동일하지 않고, 실제로는 그 사이에서 약간의 어긋남이 발생한다. 그러므로, 중심점 좌표의 이동량을 산출하고, 이동량을 고려하여 확대 화상(801)의 원점(809)의 위치를 구한다. 핀치 개시 시의 중심점(806) 및 핀치 종료 시의 중심점(807)의 중심점 좌표(x1, y1) 및 (x2, y2)은 각각 이하의 식으로 표현된다.
x1=(xx11-1024+xx21-1024)/2
y1=(yy11+yy21)/2
x2=(xx12-1024+xx22-1024)/2
y2=(yy12+yy22)/2
중심점(806)으로부터 중심점(807)까지의 이동량(Xd, Yd)은 이하의 식으로 표현된다.
Xd=x2-x1
Yd=y2-y1
이상으로부터, 확대 화상(801)의 원점(809)의 좌표(x01, y01)는 이하의 식으로 표현된다.
x01=x1-(x1-x00)×R2+Xd
y01=y1-(y1-y00)×R2+Yd
핀치 조작뿐만 아니라 무브 조작에 의해서도 화상을 확대할 수 있다. 이 경우, 예를 들어 무브 조작에 대해 중심점(806)이 개시점이고 중심점(807)이 종료점이다. 중심점(806 및 807)사이의 이동량(Xd, Yd)이 무브 조작에 의해 유발되는 이동량이므로, 확대 화상(801)의 원점(809)의 좌표를 산출할 수 있고, 확장 표시 영역(603)에 표시되는 화상의 영역을 결정할 수 있다.
핀치 조작 및 무브 조작의 양자 모두의 동안에, 조작의 개시 위치로부터 그 종료 위치까지의 위치를 나타내는 좌표는 터치 패널(118)로부터 제어 유닛(110)에 연속적으로 입력된다. 제어 유닛(110)은, 그 시간 동안 연속적으로 좌표 계산을 행하고 전체 확대 화상을 표시한다. 확대 표시 제어 유닛(307)이, 좌표 위치 정보를 계산하고 전체 확대 화상을 표시하고, 확대율, 확대 화상의 원점 좌표, 확대 화상의 폭, 및 확대 화상의 높이를 포함하는 확대 표시 정보를 확대 표시 정보 저장 유닛(308)에 저장한다.
본 실시형태에서는 확장 표시 영역(603)이 통상 표시 영역(602)의 우측에 제공되지만, 통상 표시 영역(602)의 아래에 제공되어도 된다. 이 경우, 확장 표시 영역(603)은 좌표(0, 600)에 제공된다. 터치 이벤트에서의 조작에 관해서도, Y 방향으로 600 픽셀이 추가된 값이 조작 위치를 나타내는 좌표로서 터치 패널(118)로부터 제어 유닛(110)에 입력된다. 유사한 방식으로 좌표를 구할 수 있는 임의의 다른 계산식이 본 실시형태에서 채용될 수 있다.
상기 구성의 정보 처리 장치(101)에 의해 실행되는, 디스플레이(119) 상의 화상 표시 처리에 대해서 설명한다.
<확대 기능에 의한 화상의 전환>
이하에서는 제1 예시적인 실시형태에 대해 설명한다.
도 6은, 확대 기능(전체 확대 또는 확대경)이 유효한지의 여부에 따라, 디스플레이(119)에 표시되는 화상을 전환하는 처리를 나타내는 흐름도이다.
단계 S101에서 디바이스 정보 제어 유닛(502)으로부터 확대 모드 통지를 수신하면, 단계 S102에서, 화면 정보 제어 유닛(202)은 수신된 확대 모드 통지를 화면 정보 저장 유닛(203)에 저장한다. 단계 S103에서, 화면 정보 제어 유닛(202)은 수신된 확대 모드 통지를 확대 정보 제어 유닛(302)에 송신한다.
단계 S104에서, 확대 정보 제어 유닛(302)은, 화면 정보 제어 유닛(202)으로부터 송신된 확대 모드 통지를 수신하고, 수신된 확대 모드 통지를 확대 표시 제어 유닛(307)에 송신한다. 단계 S105에서, 확대 표시 제어 유닛(307)은, 확대 정보 제어 유닛(302)으로부터 송신된 확대 모드 통지를 수신하고, 수신된 확대 모드 통지를 확대 표시 정보 저장 유닛(308)에 저장한다.
단계 S106에서, 확대 표시 제어 유닛(307)은, 확대 모드 통지에 의해 확대 기능이 유효하게 되었는지의 여부를 판단한다. 확대 기능이 무효이면(단계 S106에서 아니오), 단계 S107에서, 확대 표시 제어 유닛(307)은, 확대 정보 제어 유닛(302)을 통해 화면 정보 제어 유닛(202)에 디스플레이(119)에 표시되는 화상을 통상 표시 영역(602)의 화상으로 전환할 것을 요구한다. 확대 기능이 유효하면(단계 S106에서 예), 단계 S108에서, 확대 표시 제어 유닛(307)은, 확대 정보 제어 유닛(302)을 통해 화면 정보 제어 유닛(202)에 디스플레이(119)에 표시되는 화상을 확장 표시 영역(603)의 화상으로 전환할 것을 요구한다.
화면 정보 제어 유닛(202)은, 단계 S109에서 확대 정보 제어 유닛(302)으로부터 화상 전환 요구를 수신하고, 단계 S110에서 통상 표시 영역(602)의 화상으로의 전환이 요구되는지의 여부를 판단한다. 요구가 통상 표시 영역(602)의 화상으로 전환하는 것이면(단계 S110에서 예), 단계 S111에서, 화면 정보 제어 유닛(202)은 화면 표시 유닛(204)을 통해 디스플레이(119)에 표시되는 화상을 통상 표시 영역(602)의 화상으로 전환한다. 요구가 확장 표시 영역(603)의 화상으로 전환하는 것이면(단계 S110에서 예), 단계 S111에서, 화면 정보 제어 유닛(202)은 디스플레이(119)에 표시되는 화상을 화면 표시 유닛(204)을 통해 확장 표시 영역(603)의 화상으로 전환한다.
상기와 같이, 확대 기능이 전환되는 것을 나타내는 확대 모드 통지를 디바이스 제어 유닛(501)으로부터 수신한 것에 응답하여, 디스플레이(119)에 표시될 화상을 결정하기 위해 통상 표시 영역(602)의 화상 및 확장 표시 영역(603)의 화상이 전환된다.
<확대 기능으로의 이벤트의 송신>
도 7a내지 도 7c는, 사용자의 조작에 의한 터치 패널(118)로부터의 입력에 따른 이벤트 처리를 나타내는 흐름도이다.
입력 정보 제어 유닛(205)은, 단계 S201에서 사용자의 터치 패널(118)에의 조작에 따른 제어 신호를 수신하고, 단계 S202에서, 수신한 제어 신호를 이벤트 정보로 변환하고 이벤트 정보를 입력 정보 통지 유닛(206)에 입력한다. 입력 정보 통지 유닛(206)은, 단계 S203에서 화면 정보 저장 유닛(203)에 저장되어 있는 확대 모드 통지를 취득하고, 단계 S204에서, 확대 모드 통지에 따라, 확대 기능이 유효한지의 여부를 판단한다. 확대 기능이 무효이면(단계 S204에서 아니오), 단계 S205에서 입력 정보 통지 유닛(206)은 애플리케이션 유닛(401)에 이벤트 정보를 송신한다. 애플리케이션 유닛(401)은 이벤트 정보에 따른 처리를 실행하고 처리를 종료한다. 예를 들어, 카피 애플리케이션의 카피 설정 화면에서 용지 선택 버튼이 선택된 것을 나타내는 이벤트 정보를 수신하면, 카피 애플리케이션은 용지 선택 화면(도시하지 않음)으로 화면을 전환한다. 확대 기능이 유효하면(단계 S204에서 예), 단계 S206에서, 입력 정보 통지 유닛(206)은 확대 입력 제어 유닛(305)에 이벤트 정보를 송신한다.
단계 S207에서, 확대 입력 제어 유닛(305)은 입력 정보 통지 유닛(206)으로부터 이벤트 정보를 수신한다. 확대 입력 제어 유닛(305)은, 단계 S208에서, 수신한 이벤트 정보를 확대 입력 정보 저장 유닛(306)에 저장하고, 단계 S209에서, 확대 표시 제어 유닛(307)에 이벤트 정보가 입력된 것을 통지한다.
단계 S210에서, 확대 표시 제어 유닛(307)은, 확대 입력 제어 유닛(305)으로부터의 통지에 응답하여, 확대 입력 정보 저장 유닛(306)으로부터 이벤트 정보를 취득한다. 단계 S211에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)에 저장되어 있는 확대 모드 통지에 기초하여, 전체 확대 기능 또는 확대경 기능 중 어느 것이 유효한지를 판단한다. 확대경 기능이 유효할 경우(단계 S211에서 확대경), 확대 표시 제어 유닛(307)은 확대경의 이벤트 처리를 실행한다(도 7b 참조). 전체 확대 기능이 유효한 경우(단계 S211에서 전체 확대), 확대 표시 제어 유닛(307)은 화상의 전체 확대의 이벤트 처리를 실행한다(도 7c 참조).
도 7b는 확대경의 이벤트 처리를 나타내는 흐름도이다. 여기에서는, 사용자의 드래그 조작에 의해 확대경 프레임을 미리 정해진 위치로 이동시키는 처리에 대해서 설명한다. 단계 S301에서, 확대 표시 제어 유닛(307)은 확대 표시 정보 저장 유닛(308)으로부터 확대경에 대한 표시 위치 좌표 정보를 취득한다. 단계 S302에서, 확대 표시 제어 유닛(307)은, 이벤트 정보로부터 얻어지는 터치 위치가, 취득한 표시 위치 좌표 정보로부터 얻어지는 확대경 프레임의 표시 영역 내에 있는지의 여부를 판단한다. 터치 위치가 확대경 프레임의 표시 영역 내에 있지 않으면(단계 S302에서 아니오), 확대 제어 유닛(301)은 확대경의 이벤트 처리를 종료한다.
터치 위치가 확대경 프레임의 표시 영역 내에 있으면(단계 S302에서 예), 단계 S303에서 확대 표시 제어 유닛(307)은 이벤트 정보가 무브를 나타내는지의 여부를 판단한다. 이벤트 정보가 무브를 나타내면(단계 S303에서 예), 단계 S304에서 확대 표시 제어 유닛(307)은 이벤트 플래그가 온(ON)인지의 여부를 판단한다. 이벤트 플래그는, 터치 패널(118)에 터치 다운이 실행되고 있을 때에 온이고, 터치 패널(118)에 터치 업이 실행되고 있을 때에 오프(OFF)이다. 즉, 이벤트 플래그는 터치 패널(118)의 터치 상태를 나타낸다. 초기 상태에서는, 이벤트 플래그는 오프로 설정되어 있다. 이벤트 플래그가 오프이면(단계 S304에서 아니오), 확대 제어 유닛(301)은 확대경의 이벤트 처리를 종료한다. 이벤트 플래그가 온이면(단계 S304에서 예), 단계 S305 및 S306에서, 확대 표시 제어 유닛(307)은, 확대경 프레임의 표시 위치 좌표를 산출하고, 산출 결과에 따라서 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다.
이벤트 정보가 무브를 나타내지 않으면(단계 S303에서 아니오), 단계 S307에서 확대 표시 제어 유닛(307)은 이벤트 정보가 터치 업을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내면(단계 S307에서 예), 단계 S308에서, 확대 표시 제어 유닛(307)은 이벤트 플래그를 오프로 설정한다. 이벤트 정보가 터치 업을 나타내지 않으면(단계 S307에서 아니오), 단계 S309에서, 확대 표시 제어 유닛(307)은 이벤트 정보가 터치 다운을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 다운을 나타내면(단계 S309에서 예), 단계 S310에서, 확대 표시 제어 유닛(307)은 이벤트 플래그를 온으로 설정한다. 이벤트 정보가 터치 다운을 나타내지 않으면(단계 S309에서 아니오), 확대 제어 유닛(301)은 확대경의 이벤트 처리를 종료한다.
도 7b의 흐름도에 대해서 구체적인 예에 의해 설명한다. 사용자가 확대경 프레임에 대해 드래그 조작을 행하는 경우, 처음에 확대경 프레임에 접촉하는 것에 의해 터치 다운이 검출되고(단계 S309에서 예), 단계 S310에서 이벤트 플래그가 온으로 설정된다. 후속하여, 무브가 검출되고(단계 S303에서 예), 이벤트 플래그가 온으로 설정되기 때문에(단계 S304에서 예), 단계 S305 및 S306에서 확대경 프레임의 표시 위치 좌표가 산출되고, 확대 표시 정보가 갱신된다. 그 후, 사용자가 확대경 프레임으로부터 손가락을 이격하면, 터치 업이 검출되고(단계 S307에서 예), 단계 S308에서 이벤트 플래그가 오프로 설정된다.
도 7c는 전체 확대의 이벤트 처리를 나타내는 흐름도이다. 본 경우에서는, 사용자의 핀치 조작에 의해 디스플레이(119)에 표시되는 화상을 확대하고, 후속 드래그 조작에 의해 표시 위치를 이동시킨다. 단계 S401에서는, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 전체 확대에 대한 표시 위치 좌표 정보를 취득한다. 단계 S402에서는, 표시 위치 좌표 정보를 취득한 확대 표시 제어 유닛(307)이, 이벤트 정보가 1점에 대한 좌표 정보만을 포함하고 있는지의 여부를 판단한다.
이벤트 정보가 1점에 대한 것이 아니면(단계 S402에서 아니오), 단계 S403에서, 확대 표시 제어 유닛(307)은, 2 이상의 점에 대해 터치 조작이 행해졌다고 판단하고, 이벤트 정보에 따라서 복수의 좌표 정보를 사용하여 전체 확대율을 산출한다. 단계 S404에서, 확대 표시 제어 유닛(307)은 복수의 좌표 정보를 사용하여 표시 위치 좌표를 산출한다. 단계 S405에서, 확대 표시 제어 유닛(307)은, 산출한 확대율 및 표시 위치 좌표에 기초하여, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다.
이벤트 정보가 1점에 대한 것이면(단계 S402에서 예), 단계 S406에서, 확대 표시 제어 유닛(307)은 이벤트 정보가 무브를 나타내는지의 여부를 판단한다. 이벤트 정보가 무브를 나타내면(단계 S406에서 예), 단계 S407에서, 확대 표시 제어 유닛(307)은, 이벤트 플래그가 온인지의 여부를 판단한다. 이벤트 플래그가 오프이면(단계 S407에서 아니오), 확대 제어 유닛(301)은 확대경의 이벤트 처리를 종료한다. 이벤트 플래그가 온이면(단계 S407에서 예), 단계 S408에서, 확대 표시 제어 유닛(307)은 전체 확대의 표시 위치 좌표를 산출한다. 단계 S409에서, 확대 표시 제어 유닛(307)은, 산출한 표시 위치 좌표에 기초하여, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다.
이벤트 정보가 무브를 나타내지 않으면(단계 S406에서 아니오), 단계 S410에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 업을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내면(단계 S410에서 예), 단계 S411에서, 확대 표시 제어 유닛(307)은 이벤트 플래그를 오프로 설정한다. 이벤트 정보가 터치 업을 나타내지 않으면(단계 S410에서 아니오), 단계 S412에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 업을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 다운을 나타내면(단계 S412에서 예), 단계 S413에서, 확대 표시 제어 유닛(307)은 이벤트 플래그를 온으로 설정한다. 이벤트 정보가 터치 다운을 나타내지 않으면(단계 S412에서 아니오), 확대 제어 유닛(301)은 전체 확대의 이벤트 처리를 종료한다.
도 7c의 흐름도를 구체적인 예에 의해 설명한다. 전체 확대를 행하기 위해 사용자는 먼저 핀치 아웃 조작을 행하기 때문에, 2 점에 대한 좌표 정보를 포함하는 이벤트 정보가 검출된다(단계 S402에서 아니오). 그리고, 단계 S403에서 전체 확대의 확대율이 산출되고, 단계 S404에서 표시 위치 좌표가 산출되며, 단계 S405에서 확대 표시 정보가 갱신된다. 후속하여, 표시 위치를 이동시키기 위해서 사용자가 확대된 화면에 드래그 조작을 행하면, 먼저 터치 다운이 검출되고(단계 S412에서 예), 단계 S413에서 이벤트 플래그가 온으로 설정된다. 후속하여, 무브가 검출되고(단계 S406에서 예), 이벤트 플래그가 온으로 설정되기 때문에(단계 S407에서 예), 단계 S408 및 S409에서, 전체 확대의 표시 위치 좌표가 산출되고, 확대 표시 정보가 갱신된다. 그 후, 사용자가 터치 패널(118)로부터 손가락을 이격하면, 터치 업이 검출되고(단계 S307에서 예), 단계 S308에서 이벤트 플래그가 오프로 설정된다.
<캡처 화상 처리>
도 8은, 확대 기능이 유효할 경우에, 캡처 화상을 취득하여 확장 표시 영역(603)에 묘화하는 처리를 나타내는 흐름도이다. 이 처리는, 확대 기능이 유효하면 개시되고, 정보 처리 장치(101)가 정지될 때까지 일정한 시간 간격으로 행해진다.
단계 S501에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)에 저장되어 있는 확대 모드 통지를 취득한다. 단계 S502에서, 확대 표시 제어 유닛(307)은, 확대 모드 통지에 기초하여 확대 기능이 유효한지의 여부를 판단한다. 확대 기능이 무효이면(단계 S502에서 아니오), 확대 표시 제어 유닛(307)은 다시 확대 모드 통지를 취득한다. 확대 표시 제어 유닛(307)은, 확대 기능이 유효해질 때까지 이 처리를 반복적으로 행한다.
확대 기능이 유효하면(단계 S502에서 예), 확대 표시 제어 유닛(307)은, 화상 캡처 유닛(303)이 통상 표시 영역(602)에 묘화된 화상을 캡처하게 한다. 단계 S503에서, 화상 캡처 유닛(303)은, 캡처한 화상을 캡처 화상 저장 유닛(304)에 저장한다.
단계 S504에서, 확대 표시 제어 유닛(307)은, 확대 모드 통지에 기초하여, 전체 확대 기능 또는 확대경 기능 중 어느 것이 유효한지를 판단한다. 확대경 기능이 유효할 경우(단계 S504에서 예), 단계 S505에서, 확대 표시 제어 유닛(307)은 확대경의 묘화 처리를 행한다. 전체 확대 기능이 유효할 경우(단계 S504에서 아니오), 단계 S506에서, 확대 표시 제어 유닛(307)은 전체 확대의 묘화 처리를 행한다.
<확대경의 묘화 처리 및 전체 확대의 묘화 처리>
도 9a는 확대경의 묘화 처리를 나타내는 흐름도이다.
단계 S601에서, 확대 표시 제어 유닛(307)은, 캡처 화상 저장 유닛(304)에 저장되어 있는 캡처 화상을 취득하고 복제한다. 단계 S602에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)에 저장되어 있는 확대경의 확대율 및 표시 위치 좌표 정보를 취득한다. 단계 S603에서, 확대 표시 제어 유닛(307)은, 복제한 캡처 화상을 취득한 확대율로 확대한다. 단계 S604에서, 확대 표시 제어 유닛(307)은, 확대한 캡처 화상을, 표시 위치 좌표 정보에 기초하여, 확대경 프레임의 크기로 클립한다.
단계 S605에서, 확대 표시 제어 유닛(307)은, 확대되지 않은 캡처 화상의 표시 위치 좌표 정보에 의해 나타내어 지는 위치에, 클립되고 확대된 캡처 화상을 합성한다. 단계 S606에서, 확대 표시 제어 유닛(307)은, 화면 표시 유닛(204)을 통해 확장 표시 영역(603)에 합성된 화상을 묘화한다. 그리고, 도 6에서 나타낸 처리에서 화면 제어 유닛(201)이 확장 표시 영역(603)으로 표시를 전환함으로써, 디스플레이(119)에는, 캡처 화상에 확대된 캡처 화상의 클립된 부분이 중첩된 화상이 표시된다.
도 9b는 전체 확대의 묘화 처리를 나타내는 흐름도이다.
단계 S701에서, 확대 표시 제어 유닛(307)은, 캡처 화상 저장 유닛(304)에 저장되어 있는 캡처 화상을 취득한다. 단계 S702에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)에 저장되어 있는 전체 확대의 확대율 및 표시 위치 좌표 정보를 취득한다. 단계 S703에서, 확대 표시 제어 유닛(307)은 취득한 확대율에 따라서 캡처 화상을 확대한다. 단계 S704에서, 확대 표시 제어 유닛(307)은, 확대한 캡처 화상을, 표시 위치 좌표 정보에 기초하여 디스플레이(119)의 크기로 클립한다. 단계 S705에서, 확대 표시 제어 유닛(307)은, 화면 표시 유닛(204)을 통해 확장 표시 영역(603)에 클립된 화상을 묘화한다. 도 6에서 나타낸 처리에서 화면 제어 유닛(201)이 확장 표시 영역(603)으로 표시를 전환함으로써, 디스플레이(119)에는, 확대된 캡처 화상의 클립된 부분이 표시된다.
이상과 같이, 본 실시형태에 따른 정보 처리 장치(101)는, OS 또는 시스템을 주문 제작하지 않고, 애플리케이션에 의해 생성된 전체 화상을 확대하여 표시할 수 있다. 또한, 정보 처리 장치(101)는 애플리케이션에 의해 생성된 화상의 일부를 확대하여 표시하는 확대경 표시를 가능하게 한다. 전체 확대 기능이 유효한 경우, 사용자는, 핀치 조작에 의해 전체 화면을 확대 및 축소할 수 있고, 드래그 조작에 의해 확대 화상의 표시 위치를 임의의 위치로 변경할 수 있다. 또한, 확대경 기능이 유효한 경우, 사용자는 드래그 조작에 의해 확대경 프레임을 임의의 위치로 이동시킬 수 있다. 이에 의해, 시력이 약한 사용자도 조작에 지장 없이 장치를 조작할 수 있고, 접근성이 향상된다.
상기 설명에서는, 디바이스 설정 애플리케이션(402)에 의해 확대 기능 설정이 변경되었을 때, 디바이스 제어 유닛(501)이 확대 모드 통지를 생성한다. 생성된 확대 모드 통지는, 화면 제어 유닛(201)을 통해 확대 제어 유닛(301)에 송신된다(도 2 및 도 6 참조). 확대 모드 통지에 기초하여 확대 기능이 유효하다고 판단될 때, 확대 제어 유닛(301)은, 통상 표시 영역의 화상 캡처 처리를 행하고 확장 표시 영역에 화상을 묘화하며(도 8 및 도 9a 및 9b), 확장 표시 영역으로 표시를 전환한다(도 6). 그러므로, 전체 확대 기능이 무효로부터 유효로 변경되는 경우, 사용자가 핀치 아웃 조작을 행하기 전이라도, 통상 표시 영역의 화상 캡처 처리, 확장 표시 영역에서의 화상 묘화 처리, 및 확장 표시 영역으로의 전환 처리가 행해질 수 있다. 결과적으로, 확대 전의 화상이 캡처될 수 있고, 캡처된 화상이 디스플레이(119)에 표시된다.
변경예로서, 전체 확대 기능이 유효한 시점에서는 화상 캡처 이후의 처리를 행하지 않고, 핀치 아웃 조작이 행하여졌을 때 또는 핀치 아웃 조작에 의해 확대율이 미리 정해진 값(예를 들어 100%)을 초과했을 때에 화상 캡처 이후의 처리를 행해도 된다. 본 경우에는, 핀치 아웃 조작에 의해 확대율이 100%을 초과하는 것을 상정하여 화상 캡처 이후의 처리를 행한다.
이 경우, 확대 제어 유닛(301)은, 도 8의 단계 S502에서 확대 기능이 유효한 것으로서 판단될 때, 단계 S503의 처리를 행하지 않는다. 확대 제어 유닛(301)은, 전체 확대 기능 또는 확대경 기능 중 어느 것이 유효한지를 판정하고, 확대경 기능이 유효할 경우에 단계 S503 이후의 처리를 행한다. 전체 확대 기능이 유효한 경우에는, 확대 제어 유닛(301)은 핀치 조작에 의해 확대율이 100%를 초과하는지의 여부를 판정하고, 확대율이 100%를 초과한 것으로 판정되는 경우에는 단계 S503 이후의 처리를 행한다. 확대 제어 유닛(301)은, 도 6의 단계 S106에서 확대 기능이 유효한 것으로서 판단될 때, 단계 S108의 처리를 행하지 않는다. 확대 제어 유닛(301)은, 전체 확대 기능 또는 확대경 기능 중 어느 것이 유효한지를 판정하고, 확대경 기능이 유효한 경우에는 단계 S108의 처리를 행한다. 전체 확대 기능이 유효한 경우에는, 확대 제어 유닛(301)은 핀치 조작에 의해 확대율이 100%를 초과하는지의 여부를 판정한다. 확대 제어 유닛(301)은, 확대율이 100%를 초과한다고 판정되는 경우에 단계 S108의 처리를 행하고, 확장 표시 영역의 화상으로 전환할 것을 화면 제어 유닛(201)에 요구한다. 확대율은, 도 7c의 단계 S403에서 화면 제어 유닛(201)의 입력 정보 통지 유닛(206)으로부터 통지된 이벤트 정보에 기초하여 확대 제어 유닛(301)에 의해 산출된 값을 채용할 수 있다. 본 변형예에 따르면, 전체 확대 기능이 유효할 때가 아니라 핀치 아웃 조작이 행해질 때에 화상 캡처 이후의 처리가 행해진다. 그러므로, 화면 확대를 위한 조작이 행하여지지 않더라도 화상 캡처로 인해 유발되는 처리 부하가 억제될 수 있다.
이하에서는 제2 예시적인 실시형태를 설명한다. 제1 예시적인 실시형태는 애플리케이션에 의해 생성된 화면의 전체 확대 표시 및 확대경 표시의 메커니즘을 설명했다. 그러나, 제1 예시적인 실시형태는, 확장 표시 영역(603)에 묘화되어 있는 화상이 디스플레이(119)에 표시되어 있는 동안, 사용자가 화면 상의 버튼 또는 리스트 등의 객체를 조작할 수 있는 경우에 대해서는 고려하지 않는다. 따라서, 예를 들어, 전체 확대 기능이 유효하고 전체 화면이 확대되어 표시되어 있는 상태에서 사용자가 확대된 버튼을 선택하는 터치 조작을 행하는 경우에도, 애플리케이션은 거기에 반응하지 않는다. 제2 예시적인 실시형태에서는, 확대 화상 상에 표시되어 있는 버튼 또는 리스트 등의 객체를 통상의 경우에서와 같이 조작할 수 있다.
제1 예시적인 실시형태에서 기재된 바와 같이, 확대경 기능이 유효할 경우, 드래그 조작에 의해 확대경 프레임을 이동시킬 수 있고, 전체 확대 기능이 유효할 경우, 드래그 조작에 의해 확대 화상의 표시 위치를 이동시킬 수 있다. 또한, 확대경 프레임 내에 표시되고 있는 버튼을 선택하기 위한 터치 조작, 및 전체 확대 기능에 의해 확대되어 표시되어 있는 화상에 포함되는 리스트를 스크롤하기 위한 드래그 조작을 행할 수 있다는 것을 생각할 수 있다. 따라서, 예를 들어, 전체 확대 기능이 유효할 때에 드래그 조작이 행해지는 경우, 확대 화상의 표시 위치를 이동시키거나 확대 화상에 포함되는 리스트를 스크롤하기 위해 드래그 조작이 실행되는지의 여부를 적절하게 판단할 필요가 있다. 본 예시적인 실시형태는, 터치 패널(118)의 동일한 위치를 미리 정해진 시간 동안 계속해서 터치하는 길게 누름 조작이 행해지는지의 여부에 따라, 드래그 조작의 의도가 판단되는 예를 설명한다. 제2 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성 및 기능 블록은, 제1 예시적인 실시형태에 따른 정보 처리 장치의 것과 동일하다(도 1 및 도 2 참조). 이하에서는 제1 예시적인 실시형태와의 차이점에 대해서 설명한다.
도 10은 확대경의 이벤트 처리를 나타내는 흐름도이다. 도 7b의 처리 대신에 도 10의 처리가 행하여진다.
단계 S800에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 확대경에 대한 표시 위치 좌표 정보를 취득한다. 단계 S801에서, 확대 표시 제어 유닛(307)은, 이벤트 정보로부터 얻어지는 터치 위치가, 취득한 표시 위치 좌표 정보로부터 얻어지는 확대경 프레임의 표시 영역 내에 있는지의 여부를 판단한다.
터치 위치가 확대경 프레임의 표시 영역 내에 있으면(단계 S801에서 예), 단계 S802에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 1점에 대한 좌표 정보만을 포함하고 있는지의 여부를 판단한다. 좌표 정보가 1점에 대한 정보이면(단계 S802에서 예), 단계 S803에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 무브를 나타내는지의 여부를 판단한다. 이벤트 정보가 무브를 나타내면(단계 S803에서 예), 단계 S804에서, 확대 표시 제어 유닛(307)은, AP 이벤트 송신 플래그가 온인지의 여부를 판단한다. AP 이벤트 송신 플래그는, 애플리케이션 유닛(401)에 터치 이벤트가 송신되고 있을 때 온이 된다. 즉, AP 이벤트 송신 플래그가 온일 경우, 터치 패널(118)로부터 확대 표시 제어 유닛(307)에 의해 수신된 모든 이벤트가 통상 표시 영역의 AP에 송신되고, 따라서 확대 화상은 이동되지 않는다. 한편, AP 이벤트 송신 플래그가 오프일 경우에는, 통상 표시 영역의 AP에는 터치 패널로부터 이벤트가 송신되지 않고, 확대 화상을 움직이게 하는 등의 확대 화상을 조작하는 처리가 행해진다. 초기 상태에서는, AP 이벤트 송신 플래그는 오프로 설정되어 있다.
AP 이벤트 송신 플래그가 온이면(단계 S804에서 아니오), 단계 S805에서, 확대 표시 제어 유닛(307)은, 처리가 터치 다운 후의 이벤트를 대기하고 있는 중인지의 여부를 판단한다. 단계 S814 및 S815에서 아래에 기재된 바와 같이, 처음에 터치 다운을 검출했을 때, 길게 누름이 행해졌는지의 여부를 판단하기 위해서, AP로의 이벤트 송신 또는 확대 화상의 조작을 바로 행하지 않고 처리는 소정 시간을 대기한다. 단계 S805의 처리에서는, 이 대기 시간 동안 무브 이벤트가 수신되는지의 여부에 대한 판단이 이루어진다. 처리가 대기 상태에 있을 때(단계 S805에서 예), 단계 S806에서, 확대 표시 제어 유닛(307)은, 무브 이벤트에서 수신된 좌표를 터치 이벤트에서 수신된 좌표와 비교하고, 터치 위치가 임계치 이상으로 이동했는지이 여부를 판단한다.
임계치 이상으로 터치 위치가 이동되는 경우(단계 S806에서 예), 확대 표시 제어 유닛(307)은, 길게 누름이 행해지지 않는다고 판단하고, 단계 S807에서 대기 상태를 종료하며, 단계 S809에서 마찬가지로 길게 누름 플래그를 오프로 설정한다. 터치 위치가 임계치 이상으로 이동되지 않는다고 판단되는 경우(단계 S806에서 아니오), 단계 S808에서 확대 표시 제어 유닛(307)은 길게 누름 플래그를 온으로 설정하고, 처리를 종료한다. 길게 누름 플래그는, 사용자의 터치 조작이 동일한 위치를 미리 정해진 시간 동안 계속해서 터치하는 길게 누름 조작인지의 여부를 판단하기 위한 플래그이다. 터치 다운이 검출된 후의 대기 상태 동안에 터치 위치가 거의 움직이지 않는 경우, 길게 누름 플래그는 온이 된다. 터치 위치가 미리 정해진 양 이상으로 이동하는 경우에는, 길게 누름 플래그는 오프가 된다.
처리가 대기 상태에 있을 않을 때(단계 S805에서 아니오) 또는 단계 S809에서 길게 누름 플래그가 오프로 설정되어 있을 때, 단계 S810에서, 확대 표시 제어 유닛(307)은 확대경 프레임의 표시 위치 좌표를 산출한다. 단계 S811에서, 확대 표시 제어 유닛(307)은, 산출 결과에 따라서 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다. 단계 S810 및 S811의 처리는, 도 7b의 단계 S305 및 S306의 처리와 동일하다.
이벤트 정보가 무브를 나타내고 있지 않을 때(단계 S803에서 아니오), 단계 S812에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 업을 나타내고 있는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내고 있는 경우(단계 S812에서 예), 단계 S813에서, 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그가 온인지의 여부를 판단한다. AP 이벤트 송신 플래그가 오프인 경우(단계 S813에서 아니오), 확대 표시 제어 유닛(307)은 처리를 종료한다. 이벤트 정보가 터치 업을 나타내고 있지 않으면(단계 S812에서 아니오), 단계 S814에서, 확대 표시 제어 유닛(307)은 이벤트 정보가 터치 다운을 나타내는지의 여부를 판단한다.
이벤트 정보가 터치 다운을 나타내고 있는 경우(단계 S814에서 예), 단계 S815에서, 확대 표시 제어 유닛(307)은 미리 정해진 시간을 대기한다. 미리 정해진 시간이 경과하면, 단계 S816에서, 확대 표시 제어 유닛(307)은, 길게 누름 플래그가 온인지의 여부를 판단한다. 길게 누름 플래그가 오프라면(단계 S816에서 아니오), 확대 표시 제어 유닛(307)은 처리를 종료한다. 이벤트 정보가 터치 다운을 나타내고 있지 않은 경우(단계 S814에서 아니오), 확대 표시 제어 유닛(307)은 처리를 종료한다.
길게 누름 플래그가 온인 경우(단계 S816에서 예) 및 AP 이벤트 송신 플래그가 온인 경우(단계 S804에서 예 또는 또는 단계 S813에서 예), 확대 표시 제어 유닛(307)은 AP로의 이벤트 송신이 개시되는 것으로 판단한다. 단계 S817에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 즉, 모든 터치 이벤트를 애플리케이션 유닛(401)으로 보내기 위해서, 확대 표시 제어 유닛(307)은, 확장 표시 영역(603)의 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 도 4를 참고하여 좌표 변환에 대해서 설명한다.
도 4의 중심 좌표 701(x1, y1)가 확대경 프레임(705)의 중심 위치를 나타내고, 이동 개시점(703)(xx1, yy1)이 이벤트 정보에 포함되는 터치 위치를 나타낸다. 확대경의 확대율은 R이다. 좌표 변환 후의 통상 표시 영역(602)의 좌표(x, y)는, 확장 표시 영역(603)의 좌상측 좌표(1024, 0)를 사용해서 이하의 식으로 표현된다.
x=((xx1-1024)-x1)/R+x1
y=(yy1-y1)/R+y1
단계 S818에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 기초하여 이벤트 정보를 갱신하고, 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다. 이와 같이, 사용자가 확대경 프레임 내에 확대되어 표시된 화상을 터치하고, 따라서 터치 조작에 의한 이벤트 정보가 통상 표시 영역(602)의 화상에 대하여 행해진 이벤트 정보로 변환된다. 변환된 이벤트 정보는 통상 표시 영역(602)에 화상을 표시하는 AP에 통지된다. AP는 통지된 이벤트 정보에 기초하여 미리 정해진 동작을 행한다. 따라서, 사용자는 확대경 프레임 내에 확대되어 표시된 화상을 보면서 AP를 조작할 수 있다.
이벤트 정보를 송신한 후, 확대 표시 제어 유닛(307)은 이벤트 정보가 터치 업을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내면(단계 S819에서 예), 단계 S802에서, 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그를 오프로 설정한다. 이벤트 정보가 터치 업 이외의 것이면(단계 S819에서 아니오), 단계 S821에서, 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그를 온으로 설정한다. 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그를 설정하고, 그 후 확대경의 이벤트 처리를 종료한다.
터치 위치가 확대경 프레임의 표시 영역 외에 있으면(단계 S801에서 아니오), 단계 S822에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 마찬가지로, 이벤트 정보가 1점에 대한 좌표 정보가 아니면(단계 S802에서 아니오), 확대 표시 제어 유닛(307)은 2이상의 점에 터치 조작이 행해진다고 판단한다. 단계 S822에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 도 4를 참고하면, 좌표 변환 후의 통상 표시 영역(602)의 좌표(x, y)는, 확장 표시 영역(603)의 좌상측 좌표(1024, 0)를 사용해서 이하의 식으로 표현된다.
x=xx1-1024
y=yy1
단계 S823에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 의해 이벤트 정보를 갱신하고, 갱신된 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다. 이와 같이, 사용자가 확대경 프레임 외측에 표시된 화상에 대하여 터치 조작을 행하거나 확대경 프레임 내의 화상에 대하여 핀치 조작을 행하는 경우, 터치 조작에 의한 이벤트 정보는 통상 표시 영역(602)의 화상에 대하여 행하여진 이벤트 정보로 변환된다. 변환된 이벤트 정보는, 통상 표시 영역(602)에 화상을 표시하는 AP에 통지된다. AP는, 통지된 이벤트 정보에 기초하여 미리 정해진 동작을 행한다. 사용자는, 확대경 프레임의 외측 또는 내측에 관계없이 표시된 바와 같이 AP 조작을 정확하게 행할 수 있다.
도 10의 흐름도를 구체적인 예에 의해 설명한다. 정보 처리 장치(101)에서는 스캔된 데이터를 송신하기 위한 송신 애플리케이션(send application)이 활성화되어 있는 것으로 상정한다. 추가적으로, 송신 애플리케이션에서 데이터 송신처를 선택하기 위한 주소록 화면이 표시되어 있는 것으로 상정한다. 여기서, 확대경 기능이 유효한 것으로서 설정되어 있고, 확대경이 주소록의 일부를 확대하여 표시하고 있는 것으로 상정한다.
먼저, 사용자가, 확대경 프레임 내에 표시된 주소록의 리스트 부분을 스크롤하기 위해서, 확대경 프레임 내의 주소록의 리스트를 길게 누르고 나서 드래그 조작을 행한다. 이 경우, 단계 S814에서 먼저 터치 다운이 검출되고, 단계 S815에서 처리는 대기 상태로 들어간다. 후속하여, 단계 S803에서, 이 대기 상태 동안 무브가 검출된다. 그러나, 이 시점에서는, AP 이벤트 송신 플래그가 오프이며, 손가락은 움직이지 않고, 따라서 처리는 단계 S804로부터 단계 S805를 거쳐 단계 S806로 진행되고, 단계 S808에서 길게 누름 플래그가 온이 된다. 대기 시간이 경과할 때까지 무브 이벤트가 주기적으로 계속 검출되고, 따라서 단계 S803 내지 단계 S808의 처리가 반복적으로 행해진다. 대기 시간이 경과하면, 처리는 S816로 진행된다. 이 시점에서는, 길게 누름 플래그가 온이고, 따라서 단계 S817 및 S818에서, 좌표 변환 처리, 및 좌표 변환이 행해진 후의 송신 애플리케이션으로의 이벤트 송신 처리가 행해진다. 이벤트 정보가 터치 업을 나타내고 있지 않고(단계 S819에서 아니오), 따라서 처리는 단계 S821로 진행하고, AP 이벤트 송신 플래그는 온이다.
사용자가 길게 누름 후에 드래그 조작을 행하면, 단계 S803에서 무브가 다시 검출된다. 이 시점에서는, AP 이벤트 송신 플래그는 온이고(단계 S804에서 예), 따라서 단계 S817 및 S818에서, 좌표 변환 처리, 및 좌표 변환이 행해진 후의 송신 애플리케이션으로의 이벤트 송신 처리가 행해진다.. 이렇게 해서, 길게 누름 후에 사용자가 드래그 조작을 하고 있는 동안에, 터치 위치에 기초하여 좌표 변환된 이벤트 정보가 송신 애플리케이션에 송신되고, 송신 애플리케이션에서는 이벤트 정보에 기초하여 주소록의 리스트가 스크롤된다. 송신 애플리케이션에 의해 스크롤되고 있는 화상은, 도 8의 처리에서 확대 제어 유닛(301)에 의해 캡처되고, 도 9b의 처리에서 디스플레이(119)에 표시된다.
후속하여, 사용자가, 확대경 프레임을 이동시키기 위해서, 확대경 프레임에 대해 드래그 조작을 행한다. 이 경우, 단계 S814에서 터치 다운이 검출되고, 단계 S815에서 처리는 대기 상태에 들어가며, 그 후 단계 S803에서 무브가 검출된다. 이 시점에서는, AP 이벤트 송신 플래그가 오프이고(단계 S804에서 아니오), 단계 S805에서, 처리는 대기 상태에 있고, 따라서 단계 S806에서, 확대 표시 제어 유닛(307)은 터치 다운 이벤트에서 수신된 좌표 및 무브 이벤트에서 수신된 좌표에 기초하여 터치 위치가 임계치 이상으로 이동되는지의 여부를 판단한다. 본 경우에서는, 터치 위치가 임계치 이상으로 이동되기 때문에(단계 S806에서 예), 단계 S807에서, 대기 상태가 종료가 되고, 단계 S809에서, 길게 누름 플래그는 오프이다. 단계 S810 및 S811에서, 확대경 프레임의 표시 위치 좌표가 산출되고, 확대 표시 정보가 갱신된다.
상기와 같이, 사용자가 확대경 프레임 내에서 터치 다운을 실행한 직후에 드래그 조작을 개시하는 경우, 확대 제어 유닛은 이벤트를 처리하여 확대경 프레임을 이동시킨다. 한편, 사용자가 확대경 프레임 외측에서 드래그 조작을 행하는 경우, 및 사용자가 확대경 프레임 내에서 터치 다운을 행한 후, 손가락을 움직이지 않고 미리 정해진 시간 동안 대기한 후, 드래그 조작을 행하는 경우, 확대 제어 유닛(301)은 확대율을 고려하여 좌표 변환을 행하고 AP에 이벤트를 통지한다. 그러므로, 사용자는 예를 들어 AP에 의해 표시된 리스트를 스크롤시키는 등의 드래그 조작에 의한 AP 조작을 행할 수 있다. 핀치 이벤트와 같은 확대경 표시 동안, 확대 제어 유닛(301)에 의해 처리되지 않는 이벤트는, 확대율을 고려하여 좌표 변환이 행해지고, AP에 통지된다. 따라서, 사용자는 예를 들어 AP에 의해 표시된 화상을 확대 또는 축소시키는 등의 AP 조작을 행할 수 있다.
도 11은, 전체 확대의 이벤트 처리를 나타내는 흐름도이다. 도 7c의 처리 대신에 도 11의 처리가 행해진다.
단계 S900에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 전체 확대에 대한 표시 위치 좌표 정보를 취득한다. 단계 S901에서, 표시 위치 좌표 정보를 취득한 확대 표시 제어 유닛(307)은, 이벤트 정보가 1점에 대한 좌표 정보만을 포함하고 있는지의 여부를 판단한다.
좌표 정보가 1점에 대한 것이 아니면(단계 S901에서 아니오), 확대 표시 제어 유닛(307)은, 2 이상의 점에 대해 터치 조작이 행해진다고 판단하고, 단계 S902에서 AP 이벤트 송신 플래그가 온인지의 여부를 판단한다. 전술한 바와 같이, AP 이벤트 송신 플래그는, 애플리케이션 유닛(401)에 터치 이벤트가 송신되고 있는 동안 온이 된다. AP 이벤트 송신 플래그가 오프이면(단계 S902에서 아니오), 단계 S903에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 따라서 복수의 좌표 정보를 사용하여 전체 확대율을 산출한다. 단계 S904에서, 확대 표시 제어 유닛(307)은, 복수의 좌표 정보를 사용하여 표시 위치 좌표를 산출한다. 단계 S905에서, 확대 표시 제어 유닛(307)은, 산출한 확대율 및 표시 위치 좌표에 기초하여, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다. 단계 S903 내지 S905의 처리는, 도 7c의 단계 S403 내지 S405의 처리와 동일하다.
이벤트 정보가 1점에 대한 좌표 정보만을 포함하고 있는 경우(단계 S901에서 예), 단계 S906에서 확대 표시 제어 유닛(307)은 이벤트 정보가 무브를 나타내는지의 여부를 판단한다. 이벤트 정보가 무브를 나타내고 있으면(단계 S906에서 예), 단계 S907에서, 확대 표시 제어 유닛(307)은, AP 이벤트 송신 플래그가 온인지의 여부를 판단한다. AP 이벤트 송신 플래그가 오프이면(단계 S907에서 아니오), 단계 S908에서, 확대 표시 제어 유닛(307)은, 처리가 터치 다운 후의 이벤트를 대기하고 있는지의 여부를 판단한다. 단계 S917 및 S918의 처리에서 후술하는 바와 같이, 처음에 터치 다운을 검출했을 때, 터치 다운이 길게 누름인지의 여부를 판단하기 위해서, AP에의 이벤트 송신 또는 확대 화상의 조작을 바로 행하지 않고, 처리는 소정 시간을 대기한다. 단계 S908에서, 확대 표시 제어 유닛(307)은, 이 대기 시간 동안 무브 이벤트가 수신되는지의 여부를 판단한다.
처리가 대기 상태에 있으면(단계 S908에서 예), 단계 S909에서, 확대 표시 제어 유닛(307)은, 무브 이벤트에서 수신된 좌표를 터치 이벤트에서 수신된 좌표와 비교하고, 터치 위치가 임계치 이상으로 이동했는지의 여부를 판단한다. 터치 위치가 임계치 이상으로 이동되는 경우(단계 S909에서 예), 단계 S910에서, 확대 표시 제어 유닛(307)은, 터치 다운이 길게 누름이 아니라고 판단하고, 대기 상태를 종료하며, 단계 S911에서 길게 누름 플래그를 온으로 설정한다. 단계 S911의 처리 후, 또는 처리가 단계 S908에서 대기 상태에 있지 않은 경우(단계 S908에서 아니오), 단계 S912에서, 확대 표시 제어 유닛(307)은 전체 확대의 표시 위치 좌표를 산출한다. 단계 S913에서, 확대 표시 제어 유닛(307)은, 산출 결과에 따라서 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다. 단계 S912 및 S913의 처리는 도 7c의 단계 S408 및 S409의 처리와 동일하다.
터치 위치가 임계치 이상으로 이동되어 있지 않다고 판단되면(단계 S909에서 아니오), 단계 S914에서, 확대 표시 제어 유닛(307)은, 길게 누름 플래그를 온으로 설정하고, 처리를 종료한다. 전술한 바와 같이, 길게 누름 플래그는, 사용자의 터치 조작이 미리 정해진 시간 동안 동일한 위치를 계속해서 터치하는 길게 누름 조작인지의 여부를 판단하기 위한 플래그이다.
이벤트 정보가 단계 S906에서 무브를 나타내고 있지 않으면(단계 S906에서 아니오), 단계 S915에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 업을 나타내는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내고 있으면(단계 S915에서 예), 단계 S916에서, 확대 표시 제어 유닛(307)은, AP 이벤트 송신 플래그가 온인지의 여부를 판단한다.
이벤트 정보가 터치 업을 나타내고 있지 않으면(단계 S915에서 아니오), 단계 S917에서, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 다운을 나타내고 있는지의 여부를 판단한다. 이벤트 정보가 터치 다운을 나타내고 있으면(단계 S917에서 예), 단계 S918에서, 확대 표시 제어 유닛(307)은 미리 정해진 시간을 대기한다. 미리 정해진 시간이 경과하면, 단계 S919에서, 확대 표시 제어 유닛(307)은, 길게 누름 플래그가 온인지의 여부를 판단한다. 길게 누름 플래그가 온이면(단계 S919에서 예), 확대 표시 제어 유닛(307)은, AP에의 이벤트 송신이 개시되었다고 판단하고, 단계 S920 이후의 처리를 행한다. 길게 누름 플래그가 오프이면(단계 S919에서 아니오), 확대 표시 제어 유닛(307)은 처리를 종료한다. 이벤트 정보가 터치 다운을 나타내고 있지 않으면(단계 S917에서 아니오), 확대 표시 제어 유닛(307)은 처리를 종료한다.
길게 누름 플래그가 온인 경우(단계 S919에서 예), 단계 S920에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. AP 이벤트 송신 플래그가 온인 경우(단계 S902에서 예, 단계 S907에서 예, 또는 단계 S916에서 예)에도 역시, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 즉, 모든 터치 이벤트를 애플리케이션 유닛(401)에 보내기 위해서, 확대 표시 제어 유닛(307)은, 확장 표시 영역(603)의 좌표를 통상 표시 영역(602)의 좌표로 변환한다.
좌표 변환은 이하와 같이 행해진다. 예를 들어, 확대 화상의 원점이 (x01, y01)인 경우, 확대율은 R이고, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표는 (xx1, yy1)이며, 좌표 변환 후의 통상 표시 영역(602)의 좌표(x, y)는, 확장 표시 영역(603)의 좌상측 좌표(1024, 0)를 사용하여 이하의 식으로 표현된다.
x=((xx1-1024)-x01)/R
y=(yy1-y01)/R
단계 S921에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 의해 이벤트 정보를 갱신하고, 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다. 이와 같이, 사용자가 확대 화상에 대하여 터치 조작을 행하면, 터치 조작에 의한 이벤트 정보는 통상 표시 영역(602)의 화상에 대하여 행해지는 이벤트 정보로 변환된다. 변환된 이벤트 정보는, 통상 표시 영역(602)에 화상을 표시하고 있는 AP에 통지되고, AP는 통지된 이벤트 정보에 기초하여 미리 정해진 동작을 행한다. 그러므로, 사용자는 확대 화상을 보면서 AP를 조작할 수 있다.
이벤트 정보의 송신 후, 확대 표시 제어 유닛(307)은, 이벤트 정보가 터치 업을 나타내고 있는지의 여부를 판단한다. 이벤트 정보가 터치 업을 나타내고 있으면(단계 S922에서 예), 단계 S923에서, 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그를 오프로 설정한다. 이벤트 정보가 터치 업 이외의 것을 나타내고 있으면(단계 S922에서 아니오), 단계 S924에서, 확대 표시 제어 유닛(307)은 AP 이벤트 송신 플래그를 온으로 설정한다. 확대 표시 제어 유닛(307)은, AP 이벤트 송신 플래그를 설정한 후, 전체 확대의 이벤트 처리를 종료한다.
도 11의 흐름도를 구체적인 예에 의해 설명한다. 정보 처리 장치(101)에서는, 송신 애플리케이션이 활성화되어 있고, 데이터 송신처를 선택하기 위한 주소록 화면이 표시되어 있는 것으로 상정한다. 여기서, 전체 확대 기능이 유효하게 설정되고, 주소록의 리스트 부분이 확대되어 표시되어 있다.
사용자가, 먼저 주소록의 확대된 리스트 부분을 스크롤하기 위해서, 확대 화상 상의 주소록의 리스트를 최초에 길게 누르고, 그 후 드래그 조작을 행하는 것으로 상정한다. 이 경우, 단계 S901에서 터치 다운이 먼저 검출되고, 그 후 단계 S918에서, 처리는 대기 상태로 들어간다. 후속하여, 단계 S906에서, 대기 상태 동안에 무브가 검출된다. 이 시점에서는 AP 이벤트 송신 플래그가 오프이며, 사용자는 손가락을 움직이지 않고 있기 때문에, 단계 S907로부터 단계 S908를 거처 단계 S909까지의 처리가 행해지고, 단계 S914에서 길게 누름 플래그는 온으로 설정된다.. 대기 시간이 경과할 때까지 무브 이벤트가 주기적으로 계속 검출되기 때문에, 단계 S906 내지 S914의 처리는 반복적으로 행해진다. 대기 시간이 경과하면, 단계 S919의 처리가 행해진다. 이 시점에서는, 길게 누름 플래그가 온이고, 따라서 단계 S920 및 S921에서, 좌표의 변환 처리, 및 좌표 변환 후의 송신 애플리케이션으로의 이벤트 송신 처리가 행해진다. 이벤트 정보가 터치 업을 나타내지 않고(단계 S922에서 아니오), 따라서 단계 S924의 처리가 행해지고AP 이벤트 송신 플래그가 온으로 설정된다.
사용자가 길게 누름 후에 드래그 조작을 행하면, 단계 S906에서, 무브가 다시 검출된다. 이 시점에서는 AP 이벤트 송신 플래그는 온이고(단계 S907에서 예), 따라서 단계 S920 및 S921에서, 좌표 변환 처리, 및 좌표 변환 후의 송신 애플리케이션으로의 이벤트 송신 처리가 행해진다. 이렇게 하여, 사용자가 길게 누름 후에 드래그 조작을 하고 있는 동안, 터치 위치에 기초하여 좌표 변환된 이벤트 정보가 송신 애플리케이션에 송신되고, 송신 애플리케이션에서는 이벤트 정보에 기초하여 주소록의 리스트 부분이 스크롤된다. 송신 애플리케이션에 의해 스크롤되고 있는 화상은, 도 8의 처리에서 캡처되고, 도 9b의 처리에서 디스플레이(119)에 표시된다.
후속하여, 사용자가 전체 확대 화상의 표시 위치를 이동시키기 위해서 확대 화상에 대해 드래그 조작을 행하는 것으로 상정한다. 이 경우, 단계 S917에서 터치 다운이 검출되고, 처리는 단계 S918에서 대기 상태로 들어가며, 그 후 단계 S906에서 무브가 검출된다. 이 시점에서는 AP 이벤트 송신 플래그가 오프이며(단계 S907에서 아니오), 단계 S908에서 처리는 대기 상태에 있다. 따라서, 단계 S909에서, 확대 표시 제어 유닛(307)은, 터치 다운 이벤트에서 수신된 좌표 및 무브 이벤트에서 수신된 좌표에 기초하여 터치 위치가 임계치 이상으로 이동되었는지의 여부를 판단한다. 본 경우에는, 터치 위치가 임계치 이상으로 이동되고(단계 S909에서 예), 따라서 단계 S910에서 대기 상태는 종료되며, 단계 S911에서 길게 누름 플래그는 오프로 설정된다. 단계 S912 및 S913에서, 전체 확대의 표시 위치 좌표가 산출되고, 확대 표시 정보가 갱신된다.
상기와 같이, 사용자가 터치 다운 직후에 드래그 조작을 행하는 경우, 확대 제어 유닛(301)은 이벤트를 처리하고 확대 표시 위치를 이동시킨다. 한편, 사용자가 터치 다운 후 미리 정해진 시간 동안 손가락을 움직이지 않고 대기한 후에 드래그 조작을 행하는 경우, 확대 제어 유닛(301)은 확대 표시 위치를 이동시키는 처리를 행하지 않고, 확대율을 고려해서 좌표 변환을 행하며, AP에 이벤트를 통지한다. 그러므로, 사용자는 AP에 의해 표시된 리스트를 스크롤하는 등의 드래그 조작에 의한 AP 조작을 행할 수 있다.
사용자가 터치 다운 직후 핀치 조작을 행하는 경우, 확대 제어 유닛(301)은 이벤트를 처리하고 전체 확대의 확대율을 변경한다. 한편, 사용자가 터치 다운 후 미리 정해진 시간 동안 손가락을 움직이지 않고 대기한 후에 핀치 조작을 행한 경우, 확대 제어 유닛(301)은 전체 확대의 확대율을 변경하지 않고, 확대율을 고려해서 좌표 변환을 행하며, 좌표를 AP에 통지한다. 그러므로, 사용자는 AP에 의해 표시된 화상을 확대 또는 축소시키는 등의 드래그 조작에 의한 AP 조작을 행할 수 있다.
상기 예에서는, 길게 누름 조작이 처음에 행해졌는지의 여부에 따라, AP에 이벤트를 송신할 것인지 또는 확대 화상에 대해 조작을 행할 것인지가 전환된다. 그러나, 전환은 다른 방법에 의해 행해질 수 있다. 예를 들어, 사용자가 미리 정해진 짧은 간격으로 터치 다운을 두 번(더블 탭) 행하는 경우, 이벤트가 AP에 송신될 수 있다. 대안적으로, AP에 이벤트를 송신할 것을 지시하기 위한 전용 버튼을 표시할 수 있고, 버튼이 눌리는 경우, 그 후에 행해진 터치 이벤트를 AP에 송신할 수 있다.
이하에서 제3 실시형태에 대해서 설명한다. 제2 예시적인 실시형태는, 확대 화면이 표시되고 있는 동안 사용자가 터치 다운 또는 무브 등의 터치 조작을 행하면, 확대율 또는 표시 위치를 고려하여 좌표 변환이 행해지고, 그 후 이벤트 정보가 실행 중인 AP에 통지되는 예에 대해서 설명했다. 본 예시적인 실시형태에 따르면, 실행 중인 AP로부터, AP에서 이벤트가 처리되는 좌표 범위를 통지 받는 것에 응답하여, 이벤트의 좌표가 이 좌표 범위 내에 포함되어 있는지의 여부에 따라 AP에 이벤트 정보를 통지할 지의 여부가 판단된다. 제3 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성은, 제1 예시적인 실시형태에 따른 정보 처리 장치의 것과 유사하다(도 1 참조). 제2 예시적인 실시형태와의 차이점을 주로 설명한다.
도 12는 제3 예시적인 실시형태에 따른 정보 처리 장치(101)의 기능 블록도이다. 정보 처리 장치(101)는, 도 2에 도시한 제1 예시적인 실시형태에 따른 구성요소 이외에, 확대 제어 유닛(301) 내에 AP 이벤트 송신 의뢰 수신 유닛(309)을 포함한다. 다른 구성요소는 동일하다.
AP 이벤트 송신 의뢰 수신 유닛(309)은, 애플리케이션 유닛(401)으로부터 AP이벤트 송신 의뢰를 수신하고, 확대 표시 정보 저장 유닛(308)에 AP 이벤트 송신 의뢰를 저장한다. AP 이벤트 송신 의뢰는, AP에 이벤트를 송신할 것을 요구하는 영역 범위에 대한 정보를 포함한다. 애플리케이션 유닛(401)의 애플리케이션[디바이스 설정 애플리케이션(402) 또는 일반 애플리케이션(403)]은 화면 표시 유닛(204)에 묘화 지시를 송신한다. 또한, 애플리케이션 유닛(401)의 애플리케이션[디바이스 설정 애플리케이션(402) 또는 일반 애플리케이션(403)]은 표시 화면에 따라서 AP 이벤트 송신 의뢰 수신 유닛(309)에 AP 이벤트 송신 의뢰를 행한다.
이벤트 정보가 수신되면, 확대 표시 제어 유닛(307)은 확대 표시 정보 저장 유닛(308)으로부터 AP 이벤트 송신 의뢰 정보를 취득한다. 그리고, 확대 표시 제어 유닛(307)은, 이벤트 정보로부터 얻어지는 터치 위치가, AP 이벤트 송신 의뢰 정보로부터 얻어지는 영역 범위 내에 있는지의 여부를 판단한다. 터치 위치가 영역 범위 내에 있는 경우, 확대 표시 제어 유닛(307)은, 판단 결과에 따라, 좌표 변환을 행하고, 이벤트를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신하는 처리를 행한다. 처리에 대해서는 아래에서 상세하게 설명한다.
도 13 및 도 14는, 사용자의 조작에 의한 터치 패널(118)로부터의 입력에 따른 이벤트 처리를 나타내는 흐름도이다. 사용자의 조작에 의한 터치 패널(118)로부터의 입력에 따른 이벤트가 있는 경우, 먼저 도 7a의 처리를 행한다. 단계 S211의 판단 처리에서, 확대경 기능이 유효한 경우(단계 S211에서 확대경), 확대 표시 제어 유닛(307)은 도 13에 나타내는 확대경의 이벤트 처리를 행한다. 전체 확대 기능이 유효한 경우(단계 S211에서 전체 확대), 확대 표시 제어 유닛(307)은 도 14에 도시하는 전체 확대의 이벤트 처리를 행한다.
도 13은, 확대경의 이벤트 처리를 나타내는 흐름도이다.
확대경의 이벤트 처리를 실행하는 경우, 단계 S1000에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 확대경에 대한 표시 위치 좌표 정보를 취득한다. 단계 S1001에서, 확대 표시 제어 유닛(307)은, 이벤트 정보로부터 얻어지는 터치 위치가, 취득한 표시 위치 좌표 정보로부터 얻어지는 확대경 프레임의 표시 영역 내에 있는지의 여부를 판단한다.
터치 위치가 확대경 프레임의 표시 영역 내에 있으면(단계 S1001에서 예), 단계 S1002에서, 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 이 좌표 변환은 도 10에서의 단계 S817의 처리와 동일하다. 후속하여, 단계 S1003에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 AP 이벤트 송신 의뢰 정보를 취득한다. 그리고 단계 S1004에서, 확대 표시 제어 유닛(307)은, 단계 S1002에서 변환된 좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 내에 있는지의 여부를 판단한다. 좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 내에 있으면(단계 S1004에서 예), 단계 S1006에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 의해 이벤트 정보를 갱신하고, 갱신된 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다.
좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 외에 있으면(단계 S1004에서 아니오), 단계 S1005에서, 확대 제어 유닛(301)은 이벤트 처리를 행한다. 즉, 도 10의 단계 S810 및 S811에서 설명한 것과 동일한 방식으로 확대경 표시 위치를 갱신하는 처리를 행한다. 확대 제어 유닛(301)에 의한 처리 후에, 확대 표시 제어 유닛(307)은 확대경의 이벤트 처리를 종료한다.
터치 위치가 확대경 프레임의 표시 영역 외에 있으면(단계 S1001에서 아니오), 단계 S1007에서, 확대 제어 유닛(301)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 이 좌표 변환은 도 10의 단계 S822의 처리와 동일하다. 단계 S1006에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 의해 이벤트 정보를 갱신하고, 갱신된 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다. 이벤트 정보의 송신 후에, 확대 표시 제어 유닛(307)은 확대경의 이벤트 처리를 종료한다.
도 14는 전체 확대의 이벤트 처리를 나타내는 흐름도이다. 단계 S1100에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 전체 확대에 대한 표시 위치 좌표 정보를 취득한다. 단계 S1101에서, 표시 위치 좌표 정보를 취득한 확대 표시 제어 유닛(307)은, 이벤트 정보에 포함되는 터치 위치를 나타내는 좌표를 통상 표시 영역(602)의 좌표로 변환한다. 이 좌표 변환은 도 11의 단계 S920의 처리와 동일한 것이다. 후속하여, 단계 S1102에서, 확대 표시 제어 유닛(307)은, 확대 표시 정보 저장 유닛(308)으로부터 AP 이벤트 송신 의뢰 정보를 취득한다. 그리고 단계 S1103에서, 확대 표시 제어 유닛(307)은, 단계 S1101에서 변환된 좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 내에 있는지의 여부를 판단한다. 좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 내에 있으면(단계 S1103에서 예), 단계 S1105에서, 확대 표시 제어 유닛(307)은, 좌표 변환에 의해 산출된 좌표에 의해 이벤트 정보를 갱신하고, 갱신된 이벤트 정보를 화면 제어 유닛(201)을 통해 애플리케이션 유닛(401)에 송신한다.
좌표가 AP 이벤트 송신 의뢰 정보에 포함되는 영역 범위 외에 있으면(단계 S1103에서 아니오), 단계 S1104에서, 확대 제어 유닛(301)은 이벤트 처리를 행한다. 즉, 도 11의 단계 S903, S904, S905, S912 및 S913에 기재된 바와 같이 확대율이 변경되거나 표시 위치 좌표 갱신 처리 또는 묘화 처리가 행해진다. 확대 제어 유닛이 이벤트 처리를 행한 후, 확대 표시 제어 유닛(307)은 확대경 의 이벤트 처리를 종료한다.
도 15는, 일반 애플리케이션(403)에 의해 표시되는 예시적인 화면을 도시하는 도면이다. 영역(900)은, 정보 처리 장치(101)에 저장되어 있는 주소록의 리스트 부분을 표시한다. 영역(900) 내에서 드래그 조작이 행해지는 것이 검출되면, 일반 애플리케이션(403)은 리스트에 대해 스크롤 처리를 행한다. 확대경 기능에 의한 확대 표시의 경우에서도, 영역(900) 내에서 드래그 조작이 행해지는 경우, 일반 애플리케이션(403)은, 확대 표시 위치 좌표를 갱신하는 것이 아니라, 일반 애플리케이션(403)의 처리인 리스트 스크롤을 행한다. 이 경우, 일반 애플리케이션(403)은, 화면 표시 유닛(204)에 화면 정보를 묘화하라는 지시를 송신하는 동시에, AP 이벤트 송신 의뢰 수신 유닛(309)에 대하여 영역(900)을 특정하는 좌표(901, 902)에 대한 좌표 정보를 포함한 AP 이벤트 송신 의뢰를 행할 수 있다. 이에 의해, 확대 표시 동안에도, 영역(900) 내에서 행해진 조작은, 좌표 변환되고 일반 애플리케이션(403)에 통지된다. 그러므로, 영역(900) 내에서 드래그 조작이 행해지는 경우에는, 리스트 스크롤 처리가 행해진다. 한편, 영역(900) 외에서 드래그 조작이 행해지는 경우에는, 확대 표시 위치가 변경된다. AP 이벤트 송신 의뢰에 포함되는 영역은 전체 통상 표시 영역일 수 있다. 이 경우, 모든 이벤트가 애플리케이션 유닛(401)에 통지된다.
상기와 같이, 본 예시적인 실시형태에 따른 정보 처리 장치(101)는, 미리 정해진 영역 내의 이벤트를 AP에 송신하도록 AP로부터 지시함으로써, 확대 표시 동안에도, AP가 요구하는 조작을 사용자에게 제공할 수 있다.
이하에서는 제4 예시적인 실시형태에 대해 설명한다. 제4 예시적인 실시형태에서는, 확대 화상을 그 원래 크기로 복귀시키도록 구성되는 객체 및 확대 화상의 숨겨진 부분을 표시하도록 구성되는 객체가 확대 화상에 중첩되도록 표시된다. 도 16은 객체를 표시하는 예시적인 화상을 도시하는 도면이다. 제4 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성 및 기능 블록은, 제1 예시적인 실시형태에 따른 정보 처리 장치의 것과 동일하다(도 1 및 도 2 참조).
도 16에서는, 화상을 그 원래의 크기로 복귀시키기 위한 객체로서 종료 버튼(1001)이 제공된다. 종료 버튼(1001)이 터치되면, 제어 유닛(110)은, 확대 기능을 종료하고 원래 크기의 화상을 디스플레이(119)에 표시한다. 확대 화상의 숨겨진 부분을 표시하기 위한 객체로서의 4개의 화살표 버튼(1002)이 제공된다. 화살표 버튼(1002)은 디스플레이(119)의 4개의 변에 제공된다. 화살표 버튼(1002)이 터치되면, 제어 유닛(110)은 터치된 화살표 버튼(1002)에 의해 나타내어지는 방향으로 화상을 스크롤한다. 화살표 버튼(1002)의 터치는 무브와 유사한 조작성을 제공한다. 화면 표시 유닛(204)은, 확장 표시 영역(603)에 묘화된 화상에 종료 버튼(1001) 및 화살표 버튼(1002)을 중첩시키고 중첩된 화상을 디스플레이(119)에 표시한다.
화살표 버튼(1002)은 스크롤 방향에 숨겨진 화상이 없으면 표시되지 않는다. 제어 유닛(110)은, 확대 표시 제어 유닛(307)으로부터의 지시에 응답하여 화살표 버튼(1002)을 표시할지 또는 숨길지를 결정한다. 확대 표시 제어 유닛(307)은, 표시 위치 좌표 정보를 취득하고, 확대 화상의 원점 좌표, 폭 및 높이, 그리고 확장 표시 영역(603)의 폭 및 높이에 기초하여, 상방, 하방, 좌측 및 우측 방향에서 숨겨진 화상의 존재를 판단하고, 이에 의해 화살표 버튼(1002)을 표시할지 또는 숨길지를 결정한다.
<종료 버튼 및 화살표 버튼의 이벤트 처리>
도 17은, 도 7c의 흐름도의 변형예를 나타내며, 종료 버튼(1001) 및 화살표 버튼(1002)이 터치되는 경우의 처리를 나타내는 흐름도이다. 도 17의 단계 S1201 내지 S1212의 처리는 도 7c의 단계 S401 내지 S412의 처리와 동일하고, 따라서 그 설명은 생략한다.
이벤트 정보가 터치 다운을 나타내고, 이벤트 플래그가 온으로 설정되면, 단계 S1214에서 확대 표시 제어 유닛(307)은 이벤트 정보에 기초하여 터치 다운이 화살표 버튼(1002)에 대해 행해지는지의 여부를 판단한다. 이 시점에서는, 확대 표시 제어 유닛(307)은 터치되는 화살표 버튼(1002)을 판단한다. 터치 다운이 화살표 버튼(1002)에 대해 행해지면(단계 S1214에서 예), 단계 S1215에서, 확대 표시 제어 유닛(307)은, 화살표 버튼(1002)에 의해 나타내어 지는 방향으로 화상이 소정 좌표만큼 이동한 것으로 간주하고, 표시 위치 좌표 정보를 산출한다. 단계 S1216에서, 확대 표시 제어 유닛(307)은, 산출된 표시 위치 좌표에 기초하여, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다.
터치 다운이 화살표 버튼(1002)에 대해 행해지지 않는 경우(단계 S1214에서 아니오), 단계 S1217에서, 확대 표시 제어 유닛(307)은 이벤트 정보에 기초하여 터치 다운이 종료 버튼(1001)에 대해 행해지는지의 여부를 판단한다. 터치 다운이 종료 버튼(1001)에 대해 행해지면(단계 S1217에서 예), 확대 표시 제어 유닛(307)은 전체 확대의 확대율을 원래의 비율로 복귀시킨다. 여기에서는, 단계 S1218에서, 확대율이 100%로 복귀된다. 단계 S1219에서, 확대 표시 제어 유닛(307)은, 확대율에 기초하여, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다. 터치 다운이 종료 버튼(1001)에 대해 행해지지 않은 경우(단계 S1217에서 아니오), 또는 확대 표시 제어 유닛(307)이 확대 표시 정보 저장 유닛(308)의 갱신을 종료하는 경우, 확대 표시 제어 유닛(307)은 처리를 종료한다.
도 18은 전체 확대의 묘화 처리를 나타내는 흐름도이다. 도 18의 처리는 도 9b의 처리의 변형예이며, 도 18의 단계 S1301 내지 S1304의 처리는 도 9b의 단계 S701 내지 S704의 처리와 동일하고, 따라서 그 설명은 생략한다.
단계 S1305에서, 캡처 화상을 디스플레이(119)의 크기로 클립하는 확대 표시 제어 유닛(307)은 확대율이 100%보다 더 큰지의 여부를 판단한다. 확대율이 100%보다 더 크면(단계 S1305에서 예), 단계 S1306에서 확대 표시 제어 유닛(307)은 종료 버튼(1001)의 표시를 결정한다. 또한, 단계 S1307에서, 확대 표시 제어 유닛(307)은, 전체 확대 화상에 대한 표시 위치 좌표 정보에 기초하여, 상방, 하방, 우측 및 좌측 버튼(1002)의 표시를 결정한다. 확대율이 100% 이하이면(단계 S1305에서 아니오), 단계 S1308 및 S1309에서 확대 표시 제어 유닛(307)은 종료 버튼(1001) 및 화살표 버튼(1002)이 숨겨져 있다고 판단한다. 이렇게 하여, 종료 버튼(1001) 및 화살표 버튼(1002)이 표시되거나 숨겨지는 것을 결정한 후에, 단계 S1310에서 확대 표시 제어 유닛(307)은 확장 표시 영역(603)에 화상을 묘화한다. 종료 버튼(1001) 및 화살표 버튼(1002)을 표시하는 경우, 화면 표시 유닛(204)은 확장 표시 영역(603)에 묘화된 화상을 디스플레이(119)에 표시한다. 종료 버튼(1001) 및 화살표 버튼(1002)이 표시되지 않는 경우에는, 화면 표시 유닛(204)은, 통상 표시 영역(602) 또는 확장 표시 영역(603) 중 어느 것에 묘화된 화상을 디스플레이(119)에 표시할 수 있다.
상기 종료 버튼(1001) 및 화살표 버튼(1002)을 표시함으로써, 스마트폰과 같은 숙련이 필요한 정보 처리 장치(101)도 용이하게 조작할 수 있다.
이하에서는 제5 예시적인 실시형태에 대해 설명한다. 정보 처리 장치(101)는, 미리 정해진 시간 동안 조작되지 않으면, 전력 절약 모드 또는 화면을 리셋하는 오토 클리어와 같은 처리를 행할 수 있다. 제5 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성 및 기능 블록은 제1 예시적인 실시형태에 따른 정보 처리 장치의 것과 동일하다(도 1 및 도 2 참조).
정보 처리 장치(101)는 타이머 제어 유닛(503)에 의해 사용자의 조작 간격을 측정한다. 전회의 조작으로부터 미리 정해진 시간이 경과하면, 타이머 제어 유닛(503)은, 전력 절약 모드 또는 오토 클리어를 요구하는 리셋 통지를 디바이스 정보 제어 유닛(502)에 송신한다. 디바이스 정보 제어 유닛(502)은, 타이머 제어 유닛(503)으로부터의 리셋 통지에 응답하여 화면 제어 유닛(201)에 전력 절약 모드 또는 오토 클리어를 통지한다. 화면 제어 유닛(201)은, 전력 절약 모드 또는 오토 클리어 통지를 수신하고, 예를 들어 확대 기능에 의해 확대되어 표시되는 화상을 그 원래의 크기로 복귀시킨다. 도 19는, 오토 클리어의 처리에 의해 화상을 그 원래의 크기로 복귀시키는 처리를 나타내는 흐름도이다. 이 흐름도의 처리는, 화면 제어 유닛(201)이 전력 절약 모드 또는 오토 클리어 통지를 수신할 때 행해진다. 동일한 처리가 전력 절약 모드 등의 다른 처리에서 행해진다.
단계 S1401에서 디바이스 정보 제어 유닛(502)으로부터 오토 클리어 통지를 수신하면, 단계 S1402에서 화면 정보 제어 유닛(202)은 애플리케이션 유닛(401)에 오토 클리어 통지를 행한다. 단계 S1403에서, 화면 정보 제어 유닛(202)은 화면 정보 저장 유닛(203)에 저장되어 있는 확대 모드 통지에 기초하여 확대 기능이 유효한지의 여부를 판단한다. 확대 기능이 무효이면(단계 S1403에서 아니오), 화면 정보 제어 유닛(202)은 처리를 종료한다. 확대 기능이 유효하면(단계 S1403에서 예), 단계 S1404에서 화면 정보 제어 유닛(202)은 확대 정보 제어 유닛(302)에 오토 클리어 통지를 행한다.
화면 정보 제어 유닛(202)로부터 오토 클리어 통지를 수신하면, 단계 S1405에서 확대 정보 제어 유닛(302)은 확대 표시 제어 유닛(307)에 확대 모드 통지를 송신한다. 단계 S1406에서, 확대 표시 제어 유닛(307)은, 확대 모드 통지를 수신하고, 확대 기능이 확대경인지의 여부를 판단한다. 확대 기능이 확대경이면(단계 S1406에서 예), 단계 S1407에서 확대 표시 제어 유닛(307)은 확대경을 디폴트 좌표로 설정한다. 확대 기능이 전체 확대이면(단계 S1406에서 아니오), 단계 S1408 및 S1409에서, 확대 표시 제어 유닛(307)은, 전체 확대의 확대율을 100%로 설정하고, 확대 표시 정보 저장 유닛(308)의 확대 표시 정보를 갱신한다.
상기와 같이, 정보 처리 장치(101)가 미리 정해진 시간 동안 조작되지 않고 전력 절약 모드 또는 오토 클리어와 같은 이벤트가 발생할 때, 전체 확대된 화상을 그 원래 크기로 복귀시킨다. 그러므로, 다음 사용자에 의해 행해지는 조작의 개시 시에, 확대된 화상이 표시되지 않는다.
이하에서는 제6 예시적인 실시형태에 대해 설명한다. 제1 예시적인 실시형태에 따르면, 도 3에서는 가상 디스플레이 영역(601)에 통상 표시 영역(602) 및 확장 표시 영역(603)이 제공되고, 표시 영역 중 하나의 화상이 디스플레이(119)에 표시된다. 이에 반해, 확장 표시 영역(603)을 사용하지 않고 확대 화상을 표시할 수 있다. 도 20은 확대 화상을 표시하는 방법의 설명도이다. 제6 예시적인 실시형태에 따른 정보 처리 장치의 하드웨어 구성 및 기능 블록은 제1 예시적인 실시형태에 따른 정보 처리 장치의 것과 동일하다(도 1 및 도 2 참조).
전형적인 윈도우 시스템에서는, 가장 높은 순위의 루트 윈도우(Root Window)는, 디스플레이에 즉시 출력될 상태에 있으며, 동일한 크기의 복수의 합성된 윈도우로 구성된다. 예를 들어, 도 20에서는, 루트 윈도우(1101)가, 확대 화상을 표시하기 위한 확대 기능 윈도우(1102), 베이스 윈도우(1103) 및 애플리케이션 윈도우(1104)로 구성된다. 베이스 윈도우(1103) 및 애플리케이션 윈도우(1104)를 서로 합성하여, 도 3의 통상 표시 영역(602)의 것과 유사한 화상을 형성한다.
통상 표시 영역(602)에만 확대 화상을 표시하는 경우, 캡처 화상을 취득하기 위해서 루트 윈도우(1101)의 화상을 취득하면, 확대 화상 자신이 캡처된다. 확장 표시 영역(603)이 존재하는 경우에는, 루트 윈도우가 취득될 때, 확대 화상만을 캡처하지 않고, 통상 표시 영역(602)의 화상을 그대로 다룰 수 있다. 통상 표시 영역(602)에서만 원래 화상을 캡처하기 위해서, 베이스 윈도우(1103)의 화상 및 애플리케이션 윈도우(1104)의 화상을 캡처하여 서로 합성한다. 도 20에서는, 애플리케이션 윈도우(1104)의 캡처 화상의 좌상측 원점(1105) 및 베이스 윈도우(1103)의 캡처 화상의 좌표(1106)를 서로 합성하여, 최종적으로 원래 화상의 캡처 화상을 생성한다. 합성에 의해 얻어진 캡처 화상이 확대 기능 윈도우(1102)에 확대되어 표시되고, 따라서 제1 예시적인 실시형태의 것과 동등한 조작이 가능해진다.
상기와 같이, 통상 표시 영역 이외에, 확장 표시 영역을 제공할 수 없는 시스템에서도, 개개의 윈도우를 취득하여 캡처 화상을 생성함으로써, 유사한 효과를 얻는다.
정보 처리 장치(101)는 다양한 장치를 포함한다. 예를 들어, 정보 처리 장치(101)는, 개인용 컴퓨터, PDA, 및 휴대 전화로 제한되지 않고, 프린터, 스캐너, 팩시밀리(FAX), 복사기, 복합기, 카메라, 비디오 카메라, 및 다른 화상 뷰어를 포함한다.
상기와 같이, 각각의 예시적인 실시형태에 따르면, 확대되지 않은 제1 화상과 제1 화상을 확대한 제2 화상 중 어느 하나를 표시 장치에 표시함으로써, 시스템 레벨의 주문제작을 행하지 않고 확대 기능을 실현한다.
다른 실시형태
본 발명의 실시형태(들)은 또한, 상기 실시형태(들) 중 하나 이상의 기능을 행하기 위해 저장 매체(보다 구체적으로는 '비일시적 컴퓨터 판독가능 저장 매체'라 칭할 수도 있음)에 기록된 컴퓨터 실행가능 지시(예를 들어, 하나 이상의 프로그램)를 판독 및 실행하며, 그리고/또는 상기 실시형태(들) 중 하나 이상의 기능을 행하기 위한 하나 이상의 회로[예를 들어, 애플리케이션 특정 집적 회로(ASIC)]를 포함하는 시스템 또는 장치의 컴퓨터에 의해, 그리고 예를 들어 상기 실시형태(들) 중 하나 이상의 기능을 행하기 위해 저장 매체로부터의 컴퓨터 실행가능 지시를 판독 및 실행하며, 그리고/또는 상기 실시형태(들) 중 하나 이상의 기능을 실행하기 위해 하나 이상의 회로를 제어함으로써 상기 시스템 또는 장치의 컴퓨터에 의에 행해지는 방법에 의해 실현될 수 있다. 컴퓨터는 하나 이상의 프로세서[예를 들어, 중앙 처리 유닛(CPU), 마이크로 처리 유닛(MPU)]를 포함할 수 있고 컴퓨터 실행가능 지시를 판독 및 실행하기 위한 개별 컴퓨터 또는 개별 프로세서의 네트워크를 포함할 수 있다. 컴퓨터 실행가능 지시는 예를 들어 네트워크 또는 저장 매체로부터 컴퓨터에 제공될 수 있다. 저장 매체는, 예를 들어 하드 디스크, 랜덤 액세스 메모리(RAM), 읽기 전용 메모리(ROM), 분배형 연산 시스템의 저장장치, 광 디스크[예를 들어, 콤팩트 디스크(CD), 디지털 다기능 디스크(DVD), 또는 블루레이 디스크(BD)TM], 플래시 메모리 장치, 메모리 카드 등 중 하나 이상을 포함할 수 있다.
(기타의 실시예)
본 발명은, 상기의 실시형태의 1개 이상의 기능을 실현하는 프로그램을, 네트워크 또는 기억 매체를 개입하여 시스템 혹은 장치에 공급하고, 그 시스템 혹은 장치의 컴퓨터에 있어서 1개 이상의 프로세서가 프로그램을 읽어 실행하는 처리에서도 실현가능하다. 또한, 1개 이상의 기능을 실현하는 회로(예를 들어,ASIC)에 의해서도 실행가능하다.
본 발명을 예시적인 실시형태를 참고하여 설명하였지만, 본 발명은 개시된 예시적인 실시형태로 제한되지 않는다는 것을 이해해야 한다. 이하의 청구항의 범위는 이러한 변형 및 동등한 구조 및 기능을 모두 포함하도록 가장 넓게 해석되어야 한다.

Claims (12)

  1. 제1 화상을 생성하도록 구성되는 애플리케이션 유닛,
    상기 제1 화상을 확대하고 확대된 제1 화상의 일부를 포함하는 제2 화상을 생성하도록 구성되는 확대 제어 유닛, 및
    상기 제1 화상 및 상기 제2 화상 중 어느 하나를 표시 장치에 표시하도록 제어를 행하도록 구성되는 표시 제어 유닛을 포함하는, 정보 처리 장치.
  2. 제1항에 있어서,
    상기 제1 화상이 묘화되는 제1 표시 영역, 및 상기 제2 화상이 묘화되는, 상기 제1 표시 영역과 동일한 표시 크기의 제2 표시 영역을 포함하는 기억 유닛을 포함하고,
    상기 애플리케이션 유닛은, 생성된 상기 제1 화상을 상기 제1 표시 영역에 묘화하고,
    상기 확대 제어 유닛은, 생성된 상기 제2 화상을 상기 제2 표시 영역에 묘화하며,
    상기 표시 제어 유닛은, 상기 기억 유닛에 묘화되는 상기 제1 화상 및 상기 제2 화상 중 어느 하나를 상기 표시 장치에 표시하도록 제어를 행하는, 정보 처리 장치.
  3. 제2항에 있어서,
    확대 기능이 유효한지의 여부를 판단하도록 구성되는 판단 유닛을 포함하고,
    상기 표시 제어 유닛이, 상기 판단 유닛에 의해 이루어진 판단 결과에 기초하여, 상기 확대 기능이 무효이면 상기 제1 표시 영역에 묘화된 상기 제1 화상을 상기 표시 장치에 표시하고, 상기 확대 기능이 유효하면 상기 제2 표시 영역에 묘화된 상기 제2 화상을 상기 표시 장치에 표시하도록 제어를 행하는, 정보 처리 장치.
  4. 제3항에 있어서,
    사용자의 설정에 따라, 상기 확대 기능이 유효한지의 여부를 나타내는 확대 모드 통지를 생성하고, 생성된 상기 확대 모드 통지를 상기 판단 유닛에 송신하도록 구성되는 디바이스 제어 유닛을 포함하는, 정보 처리 장치.
  5. 제1항에 있어서,
    상기 확대 제어 유닛은, 캡처된 제1 화상을 미리 정해진 확대율로 확대하고, 확대된 상기 캡처 화상의 일부를 확대되지 않은 캡처 화상에 중첩시켜 상기 제2 화상을 생성하는, 정보 처리 장치.
  6. 제5항에 있어서,
    상기 확대 제어 유닛은, 확대된 캡처 화상을 상기 표시 크기보다 작은 크기로 클립하고, 클립된 상기 화상을 상기 확대되지 않은 캡처 화상에 중첩시켜 상기 제2 화상을 생성하는, 정보 처리 장치.
  7. 제1항에 있어서,
    상기 확대 제어 유닛은, 갭처된 제1 화상을 미리 정해진 확대율로 확대하고, 확대된 상기 캡처 화상을 상기 표시 크기로 클립하여 상기 제2 화상을 생성하는, 정보 처리 장치.
  8. 제3항에 있어서,
    상기 판단 유닛은, 확대된 화상을 상기 표시 장치 전체에 표시할지 또는 확대된 화상을 상기 표시 장치의 일부에 표시할지를 판단하고,
    상기 확대 제어 유닛은, 캡처된 제1 화상을 미리 정해진 확대율로 확대하고,
    확대된 화상을 상기 표시 장치 전체에 표시하는 경우에는, 상기 확대 제어 유닛은 확대된 캡처 화상을 상기 표시 크기로 클립하여 상기 제2 화상을 생성하고,
    확대된 화상을 상기 표시 장치의 일부에 표시하는 경우에는, 상기 확대 제어 유닛은 확대된 캡처 화상의 일부를 상기 표시 크기보다 작은 크기로 클립하고, 클립된 화상을 확대되지 않은 캡처 화상에 중첩시켜 상기 제2 화상을 생성하는, 정보 처리 장치.
  9. 제8항에 있어서,
    확대된 화상을 상기 표시 장치 전체에 표시하는 경우에는, 상기 표시 제어 유닛은, 상기 제2 화상에, 상기 표시 장치에 표시되는 확대된 화상을 원래 크기로 복귀시키도록 구성되는 제1 객체 및 확대된 화상의 숨겨진 부분을 상기 표시 장치에 표시하도록 구성되는 제2 객체를 표시하는, 정보 처리 장치.
  10. 제9항에 있어서,
    상기 제1 객체가 조작되면, 상기 화면 표시 유닛은 상기 제1 화상을 상기 표시 장치에 표시하는, 정보 처리 장치.
  11. 제1 화상이 묘화되는 제1 표시 영역, 및 제2 화상이 묘화되는, 상기 제1 표시 영역과 동일한 표시 크기의 제2 표시 영역을 포함하는 기억 유닛을 포함하는 정보 처리 장치에 의해 실행되는 표시 제어 방법이며, 상기 방법은,
    상기 제1 화상을 생성하여 상기 제1 표시 영역에 묘화하고, 상기 제1 화상을 확대하고, 확대된 상기 제1 화상의 일부를 포함하는 상기 제2 화상을 생성하여 상기 제2 표시 영역에 묘화하는 단계, 및
    상기 제1 화상 및 상기 제2 화상 중 어느 하나를 표시 장치에 표시하는 단계를 포함하는, 표시 제어 방법.
  12. 내부에 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능 기억 매체이며,
    상기 컴퓨터 프로그램은, 컴퓨터를,
    제1 화상을 생성하도록 구성되는 애플리케이션 유닛,
    상기 제1 화상을 확대하고, 상기 확대된 제1 화상의 일부를 포함하는 제2 화상을 생성하도록 구성되는 확대 제어 유닛, 및
    상기 제1 화상 및 상기 제2 화상 중 어느 하나를 미리 정해진 표시 장치에 표시하도록 구성되는 화면 표시 유닛
    으로서 기능시키는, 컴퓨터 판독가능 기억 매체.
KR1020150109313A 2014-08-11 2015-08-03 정보 처리 장치, 표시 제어 방법 및 저장 매체 KR102113072B1 (ko)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2014163723 2014-08-11
JPJP-P-2014-163723 2014-08-11
JP2014163720 2014-08-11
JPJP-P-2014-163720 2014-08-11
JPJP-P-2015-118437 2015-06-11
JP2015118437A JP6659090B2 (ja) 2014-08-11 2015-06-11 情報処理装置、情報処理装置の制御方法、及びコンピュータプログラム

Publications (2)

Publication Number Publication Date
KR20160019369A true KR20160019369A (ko) 2016-02-19
KR102113072B1 KR102113072B1 (ko) 2020-05-20

Family

ID=55267770

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150109313A KR102113072B1 (ko) 2014-08-11 2015-08-03 정보 처리 장치, 표시 제어 방법 및 저장 매체

Country Status (4)

Country Link
US (2) US20160042496A1 (ko)
JP (1) JP6659090B2 (ko)
KR (1) KR102113072B1 (ko)
CN (1) CN105373331A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018034555A1 (ko) * 2016-08-19 2018-02-22 삼성전자 주식회사 디스플레이를 제어하는 전자 장치 및 방법

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015013685A1 (en) 2013-07-25 2015-01-29 Convida Wireless, Llc End-to-end m2m service layer sessions
JP2015200975A (ja) * 2014-04-04 2015-11-12 キヤノン株式会社 情報処理装置、コンピュータプログラムおよび記録媒体
WO2017218785A1 (en) 2016-06-15 2017-12-21 Convida Wireless, Llc Grant-less uplink transmission for new radio
EP3482566B1 (en) 2016-07-08 2024-02-28 InterDigital Madison Patent Holdings, SAS Systems and methods for region-of-interest tone remapping
JP6500863B2 (ja) * 2016-09-02 2019-04-17 京セラドキュメントソリューションズ株式会社 画像形成装置
WO2018097947A2 (en) 2016-11-03 2018-05-31 Convida Wireless, Llc Reference signals and control channels in nr
US11765406B2 (en) 2017-02-17 2023-09-19 Interdigital Madison Patent Holdings, Sas Systems and methods for selective object-of-interest zooming in streaming video
WO2018164911A1 (en) 2017-03-07 2018-09-13 Pcms Holdings, Inc. Tailored video streaming for multi-device presentations
WO2018179979A1 (ja) * 2017-03-29 2018-10-04 ソニー・オリンパスメディカルソリューションズ株式会社 制御装置、外部機器、医療用観察システム、制御方法、表示方法およびプログラム
US11494986B2 (en) * 2017-04-20 2022-11-08 Samsung Electronics Co., Ltd. System and method for two dimensional application usage in three dimensional virtual reality environment
JP6991754B2 (ja) * 2017-07-03 2022-01-13 株式会社ミツトヨ 端末装置およびプログラム
JP7195794B2 (ja) * 2018-07-12 2022-12-26 キヤノン株式会社 画像処理装置、画像処理装置の制御方法、及びプログラム
EP3858023A1 (en) 2018-09-27 2021-08-04 Convida Wireless, Llc Sub-band operations in unlicensed spectrums of new radio
JP2020093503A (ja) * 2018-12-14 2020-06-18 シャープ株式会社 画像形成装置および画像形成装置システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06301757A (ja) * 1993-04-14 1994-10-28 Matsushita Electric Ind Co Ltd 画像処理装置
US20020109687A1 (en) * 2000-12-27 2002-08-15 International Business Machines Corporation Visibility and usability of displayed images
JP2009169452A (ja) * 2008-01-10 2009-07-30 Panasonic Corp 表示制御装置、電子機器、表示制御方法、およびプログラム
US20100287493A1 (en) * 2009-05-06 2010-11-11 Cadence Design Systems, Inc. Method and system for viewing and editing an image in a magnified view

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6037939A (en) * 1995-09-27 2000-03-14 Sharp Kabushiki Kaisha Method for enabling interactive manipulation of data retained in computer system, and a computer system for implementing the method
JPH10312460A (ja) * 1997-05-12 1998-11-24 Japan Aviation Electron Ind Ltd 画像処理方法及び高精度画像処理装置
JP2004110719A (ja) * 2002-09-20 2004-04-08 Cresys:Kk 画像表示システム及びコンピュータプログラム
JP2004258476A (ja) 2003-02-27 2004-09-16 Canon Inc 画像表示装置
JP4144555B2 (ja) 2003-06-09 2008-09-03 カシオ計算機株式会社 電子機器、表示制御方法及びプログラム
US7774712B2 (en) * 2004-12-31 2010-08-10 A Far Site Better, Llc Methods and systems for displaying an enlarged image
US7900158B2 (en) * 2005-08-04 2011-03-01 Microsoft Corporation Virtual magnifying glass with intuitive use enhancements
JP4931686B2 (ja) 2007-05-07 2012-05-16 アルパイン株式会社 ナビゲーション装置
US8468469B1 (en) * 2008-04-15 2013-06-18 Google Inc. Zooming user interface interactions
JP2011154555A (ja) * 2010-01-27 2011-08-11 Fujitsu Toshiba Mobile Communications Ltd 電子機器
JP2012033058A (ja) * 2010-07-30 2012-02-16 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
JP2012084040A (ja) * 2010-10-14 2012-04-26 Nec Casio Mobile Communications Ltd 携帯端末装置、拡大表示方法、及びプログラム
US9058098B2 (en) 2011-02-14 2015-06-16 Sony Corporation Display control device
JP2012226182A (ja) * 2011-04-20 2012-11-15 Sony Corp 画像表示制御装置、画像表示システム、画像表示制御方法、並びにコンピューター・プログラム
JP5726706B2 (ja) 2011-10-14 2015-06-03 クラリオン株式会社 ナビゲーション装置
JP2013089175A (ja) * 2011-10-21 2013-05-13 Furuno Electric Co Ltd 画像表示装置、画像表示プログラム、及び画像表示方法
CN103019537B (zh) * 2012-11-19 2016-04-13 广东欧珀移动通信有限公司 一种图像预览方法及装置
US10409366B2 (en) * 2014-04-28 2019-09-10 Adobe Inc. Method and apparatus for controlling display of digital content using eye movement

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06301757A (ja) * 1993-04-14 1994-10-28 Matsushita Electric Ind Co Ltd 画像処理装置
US20020109687A1 (en) * 2000-12-27 2002-08-15 International Business Machines Corporation Visibility and usability of displayed images
JP2009169452A (ja) * 2008-01-10 2009-07-30 Panasonic Corp 表示制御装置、電子機器、表示制御方法、およびプログラム
US20100287493A1 (en) * 2009-05-06 2010-11-11 Cadence Design Systems, Inc. Method and system for viewing and editing an image in a magnified view

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018034555A1 (ko) * 2016-08-19 2018-02-22 삼성전자 주식회사 디스플레이를 제어하는 전자 장치 및 방법
KR20180020669A (ko) * 2016-08-19 2018-02-28 삼성전자주식회사 디스플레이를 제어하는 전자 장치 및 방법
US11036257B2 (en) 2016-08-19 2021-06-15 Samsung Electronics Co., Ltd. Electronic device and method for controlling display

Also Published As

Publication number Publication date
US20160042496A1 (en) 2016-02-11
US20200090302A1 (en) 2020-03-19
US11276144B2 (en) 2022-03-15
CN105373331A (zh) 2016-03-02
KR102113072B1 (ko) 2020-05-20
JP2016040709A (ja) 2016-03-24
JP6659090B2 (ja) 2020-03-04

Similar Documents

Publication Publication Date Title
KR102113072B1 (ko) 정보 처리 장치, 표시 제어 방법 및 저장 매체
JP7328182B2 (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
US11057532B2 (en) Image processing apparatus, control method for image processing apparatus, and storage medium
JP6757140B2 (ja) 表示制御装置及びその制御方法、プログラム、並びに記憶媒体
JP2013142751A (ja) 表示制御装置、その制御方法及びプログラム
JP2013105461A (ja) 情報処理装置及びその制御方法
JP6366262B2 (ja) 情報処理装置、及び情報処理装置の制御方法、並びにプログラム
JP6187546B2 (ja) 操作表示システム、操作表示装置および操作表示プログラム
JP6700749B2 (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP7130686B2 (ja) 情報処理装置、コンピュータプログラム、情報処理装置の制御方法
JP2017123125A (ja) 表示制御装置及びその制御方法、プログラム、並びに記憶媒体
JP6176284B2 (ja) 操作表示システム、操作表示装置および操作表示プログラム
WO2015052902A1 (en) Information processing apparatus, control method, and storage medium
JP2017041016A (ja) 情報処理装置、制御方法、及びプログラム
JP2019020932A (ja) 情報処理装置、入力制御方法、及びコンピュータプログラム
JP2018124631A (ja) 情報処理装置、制御方法、及びプログラム
JP7030529B2 (ja) 電子機器、情報処理方法、プログラム及び記憶媒体
JP2015200979A (ja) 情報処理装置およびコンピュータプログラム
JP2021028851A (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP2016053888A (ja) 情報処理装置、表示制御方法、及びコンピュータプログラム
JP2019145183A (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP2019121312A (ja) 電子機器、情報処理方法、プログラム及び記憶媒体
JP2016062209A (ja) 情報処理装置、表示制御方法、及びコンピュータプログラム
TW201502953A (zh) 操作使用者介面之放大區塊的方法與電子裝置

Legal Events

Date Code Title Description
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
E801 Decision on dismissal of amendment
X091 Application refused [patent]
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant