KR101976071B1 - 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법 - Google Patents

정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법 Download PDF

Info

Publication number
KR101976071B1
KR101976071B1 KR1020180035187A KR20180035187A KR101976071B1 KR 101976071 B1 KR101976071 B1 KR 101976071B1 KR 1020180035187 A KR1020180035187 A KR 1020180035187A KR 20180035187 A KR20180035187 A KR 20180035187A KR 101976071 B1 KR101976071 B1 KR 101976071B1
Authority
KR
South Korea
Prior art keywords
image
displayed
screen
case
icon
Prior art date
Application number
KR1020180035187A
Other languages
English (en)
Other versions
KR20180034372A (ko
Inventor
세이지 스즈끼
유스께 미야자와
야스시 오꾸무라
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20180034372A publication Critical patent/KR20180034372A/ko
Application granted granted Critical
Publication of KR101976071B1 publication Critical patent/KR101976071B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

정보 처리 장치는 표시부, 터치 패널, 센서 및 제어부를 포함한다. 표시부는 화면을 가진다. 터치 패널은 접촉을 검출하도록 구성된다. 센서는 기울기를 검출하도록 구성된다. 제어부는 터치 패널에 의해 접촉이 검출되었는지를 판정하고, 터치 패널에 의한 접촉의 검출부터 접촉의 해제까지의 시간 동안에 센서에 의해 검출된 기울기에 기초하여 화면상에 표시되는 화상의 표시를 제어하도록 구성된다.

Description

정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법{INFORMATION PROCESSING APPARATUS, COMPUTER READABLE RECORDING MEDIUM, AND CONTROL METHOD}
본 발명은, 표시부 및 터치 패널을 갖춘 정보 처리 장치, 프로그램, 및 제어 방법에 관한 것이다.
종래부터, LCD(Liquid Crystal Display)와 같은 표시부와, 표시부의 화면상에서의 접촉 위치를 검출하는 터치 패널을 갖춘 정보 처리 장치가 널리 알려져 있다(예를 들어, 일본 공개 특허출원 제2005-09441호 참조).
표시부 및 터치 패널을 갖춘 정보 처리 장치에서 입력 조작을 실시하는 경우, 유저는, 손가락이나 스타일러스 등으로 표시부의 화면을 터치하거나, 손가락이나 스타일러스 등을 슬라이드시킴으로써, 정보 처리 장치에 대해 입력 조작을 실시할 수 있다.
종래에 없는 새로운 입력 시스템으로서, 터치 패널을 통해 이루어지는 입력 조작과 정보 처리 장치를 기울임으로써 이루어지는 입력 조작과의 조합을 이용한 입력 시스템을 채용한 정보 처리 장치를 제공하는 것이 바람직하다.
본 발명의 한 양태에 따르면, 표시부와, 터치 패널과, 센서와, 제어부를 포함하는 정보 처리 장치가 제공된다.
표시부는 화면을 가진다.
터치 패널은 접촉을 검출하도록 구성된다.
센서는 기울기를 검출하도록 구성된다.
제어부는, 터치 패널에 의해 접촉이 검출되었는지를 판정하고, 터치 패널에 의한 접촉의 검출부터 접촉의 해제까지의 시간 동안에 센서에 의해 검출된 기울기에 기초하여 화면상에 표시되는 화상의 표시를 제어하도록 구성된다.
이 정보 처리 장치에서, 터치 패널에 의한 접촉의 검출부터 접촉의 해제까지의 시간 동안에 검출된 정보 처리 장치의 기울기에 기초하여, 화면상에 표시되는 화상의 표시가 제어된다. 따라서, 손가락 등을 터치 패널에 접촉시킨 상태로 정보 처리 장치를 기울임으로써, 유저는, 화면상에 표시된 화상을 회전시키는 등의 조작을 할 수 있다.
이 정보 처리 장치에서, 제어부는, 선택 항목을 포함한 제1 화상이 화면상에 표시되는 제1 표시 모드와, 선택 항목과 연관된 제2 화상이, 접촉이 검출된 후에 얻어진 기울기가 커짐에 따라 화면상에 서서히 출현하는 제2 표시 모드를 포함할 수 있으며, 제1 표시 모드에서 접촉이 검출되는 경우 제1 표시 모드를 제2 표시 모드로 전환하도록 구성될 수 있다.
따라서, 선택 항목을 포함한 제1 화상이 화면상에 표시되고 있는 상태에서 터치 패널에 접촉하고 터치 패널에 접촉한 채로 정보 처리 장치를 기울임으로써, 유저는, 제2 화상을 화면상에 출현시킬 수 있다. 이 경우, 유저는, 선택 항목과 연관된 제2 화상을 확인할 수 있다.
이 정보 처리 장치에서, 제어부는, 제2 화상이 화면상에 표시되는 제3 표시 모드를 더 포함할 수 있으며, 제2 표시 모드를 제3 표시 모드로 전환할 수 있도록 구성될 수 있다.
따라서, 유저는, 제2 표시 모드를 제3 표시 모드로 전환할 수 있다.
이 정보 처리 장치에서, 제어부는, 제2 표시 모드에서 접촉이 해제되는지를 판정하고, 접촉이 해제될 때의 기울기의 각도가 임계치 이상인지를 판정하며, 기울기의 각도가 임계치 이상인 경우 제2 표시 모드를 제3 표시 모드로 전환할 수 있다.
유저는, 터치 패널에 손가락 등을 접촉시킨 상태로 정보 처리 장치를 기울이고, 터치 패널에 접촉한 손가락 등을 터치 패널로부터 떼어 놓는다. 유저가 터치 패널로부터 손가락 등을 떼어 놓은 시점에서의 기울기의 각도가 임계치 이상인 경우, 제2 표시 모드가 제3 표시 모드로 전환된다. 따라서, 정보 처리 장치를 일정한 각도 이상 기울이고 나서 손가락 등을 터치 패널로부터 떼어 놓음으로써, 유저는, 화면에 제2 화상을 표시시킬 수 있다.
이 정보 처리 장치에서, 접촉이 해제된 시점에서의 기울기의 각도가 임계치보다 작은 경우, 제어부는, 제2 표시 모드를 제1 표시 모드로 전환할 수 있다.
이 정보 처리 장치에서, 정보 처리 장치의 기울기의 각도가 일정한 각도 미만의 상태에서 손가락 등을 터치 패널로부터 떼어 놓음으로써, 유저는, 제2 표시 모드로부터 제1 표시 모드로 모드를 되돌릴 수 있다.
이 정보 처리 장치에서, 선택 항목은 콘텐츠의 선택 항목일 수 있다.
이 경우, 제1 화상은, 콘텐츠의 선택 항목을 포함한 콘텐츠 선택 화상일 수 있다.
이 경우, 제2 화상은, 콘텐츠의 재생 화상일 수 있다.
이 정보 처리 장치에서, 제어부는, 제2 표시 모드에서 접촉이 검출된 후에 얻어진 기울기에 따라, 콘텐츠의 재생을 개시할 수 있다.
따라서, 콘텐츠의 세부사항이 용이하게 파악될 수 있다.
이 정보 처리 장치에서, 선택 항목은, 문자 정보의 선택 항목일 수 있다.
이 경우, 제1 화상은, 문자 정보의 선택 항목을 포함한 화상일 수 있다.
제2 화상은, 문자 정보와 연관된 정보를 포함한 화상일 수 있다.
이 정보 처리 장치에서, 문자 정보의 선택 항목을 포함한 화상이 화면상에 표시되고 있는 상태에서 터치 패널에 접촉하고 터치 패널에 접촉한 채로 정보 처리 장치를 기울임으로써, 유저는, 문자 정보와 연관된 정보를 포함하는 화상을 화면상에 출현시킬 수 있다. 이 경우, 유저는, 문자 정보와 연관된 정보를 확인할 수 있다.
문자 정보와 연관된 정보란, 예를 들어, 문자 정보가 외국어 등인 경우에는 번역 정보를 말하며, 문자 정보가 검색어(search word)인 경우에는 검색어를 이용하여 검색된 검색 결과의 정보를 말한다.
이 정보 처리 장치에서, 제어부는, 접촉이 검출된 후에 얻어진 기울기에 따라 입체 표시물(three-dimensional display object)이 회전 방식으로 표시되도록 표시를 제어할 수 있다.
이 정보 처리 장치에서, 손가락 등을 터치 패널에 접촉시킨 채로 정보 처리 장치를 기울임으로써, 유저는, 화면상에 표시된 입체 표시물을 회전시킬 수 있다.
이 정보 처리 장치에서, 입체 표시물은, 복수의 면을 가지며, 복수의 면 중 적어도 2개의 면에 상이한 아이콘을 포함할 수 있다.
이 정보 처리 장치에서, 터치 패널에 손가락 등을 접촉시킨 채로 정보 처리 장치를 기울여 입체 표시물을 회전시킴으로써, 유저는, 선택을 위해 임의의 아이콘을 화면상에 표시시킬 수 있다.
이 정보 처리 장치에서, 제어부는, 터치 패널에 의해 검출된 접촉 위치의 변위에 관한 정보에 기초하여, 입체 표시물이 회전 방식으로 표시되도록 표시를 제어할 수 있다.
이 정보 처리 장치에서, 터치 패널에 손가락 등을 접촉하여 슬라이드시킴으로써, 유저는 입체 표시물을 회전시킬 수 있다.
본 발명의 또 다른 실시예에 따르면, 정보 처리 장치에 터치 패널에 의해 접촉이 검출되었는지를 판정하는 단계를 실행시키는 프로그램이 제공된다.
또한, 이 프로그램은, 정보 처리 장치에, 터치 패널에 의한 접촉의 검출부터 접촉의 해제까지의 시간 동안에 센서에 의해 검출된 기울기에 기초하여 화면상에 표시되는 화상의 표시를 제어하는 단계를 실행시킨다.
본 발명의 또 다른 실시예에 따르면, 터치 패널에 의해 접촉이 검출되었는지를 판정하는 단계를 포함하는 제어 방법이 제공된다.
터치 패널에 의한 접촉의 검출부터 접촉의 해제까지의 시간 동안에 센서에 의해 검출된 기울기에 기초하여 화면상에 표시되는 화상의 표시가 제어된다.
전술된 바와 같이, 본 발명의 실시예들 중 하나에 따르면, 종래에 없는 새로운 입력 시스템으로서, 터치 패널을 통해 이루어지는 입력 조작과 정보 처리 장치를 기울임으로써 이루어지는 입력 조작과의 조합을 이용한 입력 시스템을 채용한 정보 처리 장치를 제공하는 것이 가능하다.
본 발명의 이들 및 다른 목적들, 특징들, 및 이점들은, 첨부된 도면에 예시된 바와 같이, 그 실시예의 최상의 모드에 대한 이하의 상세한 설명에 비추어 더욱 명백해질 것이다.
도 1은 본 발명의 한 실시예에 따른 정보 처리 장치를 도시하는 정면도이다.
도 2는 정보 처리 장치의 전기적인 구성을 나타내는 블록도이다.
도 3은 정보 처리 장치의 처리를 나타내는 플로우차트(flow chart)이다.
도 4는 도 3에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 5는 도 3에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 도시하는 도면이다.
도 6은 입체 표시물의 각 면을 구성하는 오브젝트, 또는, 앨범 타이틀 및 아티스트명과 같은 오브젝트를 회전 방식으로 표시하기 위해 이용되는 원리를 설명하기 위한 도면이다.
도 7은 제어부가, 케이스(casing)의 회전각에 기초하여 유저 인터페이스(UI) 오브젝트의 오브젝트 회전각을 산출할 때의 처리를 나타내는 플로우차트이다.
도 8은 의도하지 않은 손 움직임 제거 처리 및 한계각에서의 임계치 처리를 달성하기 위해 이용되는 식(expression)을 도시하는 그래프이며, 케이스의 회전각과 UI 오브젝트의 오브젝트 회전각과의 관계를 도시한다.
도 9는 입체 표시물의 배경 화상이 기준점으로부터의 케이스의 회전각에 따라 변화하는 경우의 일례를 도시하는 도면이다.
도 10은 본 발명의 또 다른 실시예에 따른 정보 처리 장치의 처리를 나타내는 플로우차트이다.
도 11은 도 10에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 12는 평면 표시물(two-dimensional display object)이나, 숨은 아이콘과 같은 UI 오브젝트의 이동 처리를 설명하기 위한 도면이다.
도 13은 본 발명의 또 다른 실시예에 따른 정보 처리 장치의 처리를 나타내는 플로우차트이다.
도 14는 도 13에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 15는 케이스가 임계각 이상 회전될 때, 메일 삭제용 아이콘이 화면상에 표시되는 경우의 일례를 나타내는 도면이다.
도 16은 케이스가 임계각 이상 회전될 때, 음악 콘텐츠와 같은 콘텐츠의 재생 위치를 조작하기 위한 아이콘이 표시되는 경우의 일례를 나타내는 도면이다.
도 17은 본 발명의 또 다른 실시예에 따른 정보 처리 장치의 처리를 나타내는 플로우차트이다.
도 18은 도 17에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 19는 본 발명의 또 다른 실시예에 따른 정보 처리 장치의 처리를 나타내는 플로우차트이다.
도 20은 도 19에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 21은 본 발명의 또 다른 실시예에 따른 정보 처리 장치의 처리를 나타내는 플로우차트이다.
도 22는 도 21에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 23은 유저가, 입체 표시물이 표시되고 있는 화면상의 위치에서 손가락 등을 슬라이드시킬 때 입체 표시물이 회전하는 경우의 일례를 나타내는 도면이다.
도 24는 정보 처리 장치가 표시부를 포함하지 않고, 표시부가 별도로 제공되는 경우의 일례를 나타내는 도면이다.
이하에서부터, 본 발명의 실시예들이 첨부된 도면들을 참조하여 설명될 것이다.
<제1 실시예>
도 1은, 본 발명의 제1 실시예에 따른 정보 처리 장치(100)를 도시하는 정면도이다.
도 1에 도시된 바와 같이, 정보 처리 장치(100)는, z축 방향으로 얇은 평판 모양의 케이스(10)를 포함한다. 케이스(10) 내부에는, 화면(1)을 포함하는 표시부(11)가 배치된다. 표시부(11) 상에는, 유저의 손가락이나 스타일러스의 접촉 위치를 검출하는 터치 패널(12)이 배치된다. 케이스(10)의 정면측의 상단부 근방에는, (도시되지 않은) 수화구(receiver)가 제공된다. 케이스(10)의 정면측의 하단부 근방에는, (도시되지 않은) 통화구(mouthpiece)가 제공된다.
표시부(11)는, 예를 들어, 액정 디스플레이나, EL(Electro-Luminescence) 디스플레이로 구성된다. 터치 패널(12)의 예로서, 저항식 터치 패널(12), 정전용량식 터치 패널(12)이 포함되지만, 터치 패널(12)은 임의의 터치 패널 시스템을 가질 수 있다.
도 2는, 정보 처리 장치(100)의 전기적인 구성을 나타내는 블록도이다.
도 2에 도시된 바와 같이, 정보 처리 장치(100)는, 전술된 표시부(11) 및 터치 패널(12) 외에도, 센서(13), 제어부(14), 통신부(15), 안테나(16), 스피커(17), 마이크로폰(18), RAM(19), 플래쉬 메모리(20)를 포함한다.
센서(13)는, 정보 처리 장치(케이스)의 기울기를 검출하는 센서이다. 센서(13)의 예로서는, 각속도 센서(예를 들어, 진동형 자이로 센서, 회전 팽이 자이로 센서), 가속도 센서(예를 들어, 피에조-저항형, 압전형, 정전 용량형), 및 각도 센서(예를 들어, 지자기 센서)와 같은 모션 센서(motion sensor)가 포함된다. 센서(13)는, 각속도 센서, 가속도 센서, 및 각도 센서와 같은 적어도 2개 이상의 모션 센서들의 조합일 수 있다.
모션 센서로서, 1축, 2축 또는 3축에 의해 케이스(10)의 회전각이 검출되는 구성이 사용된다. 모션 센서는 임의의 구성을 가질 수 있지만, 적어도 모션 센서는, 후술되는 입체 표시물(2)(도 4 및 5 참조)의 회전 방향과 동일한 회전 방향(본 실시예에서는, y축에 관한)으로의 회전을 검출하도록 구성된다.
제1 실시예의 설명에서는, 편의적으로, 센서(13)는, 3축 검출을 위한 모션 센서로서 설명될 것임에 주목해야 한다.
통신부(15)는, 안테나(16)에 의해 송수신 되는 전파의 주파수 변환, 변조 및 복조와 같은 처리를 실행한다. 안테나(16)는, 통화용의 전파나, 전자 메일, Web 데이터 등의 패킷 통신용의 전파를 송수신한다.
스피커(17)는, D/A(디지털/아날로그) 변환기, 증폭기 등을 포함한다. 스피커(17)는, 제어부(14)로부터 입력된 통화용의 음성 데이터에 대해서 D/A 변환 처리 및 증폭 처리를 실행하고, 수화구(미도시)를 통해 음성을 출력한다.
마이크로폰(18)은, A/D(아날로그/디지털) 변환기 등을 포함한다. 마이크로폰(18)은, 통화구를 통해 유저로부터 입력된 아날로그 음성 데이터를 디지털 음성 데이터로 변환하고, 디지털 음성 데이터를 제어부(14)에 출력한다. 제어부(14)에 출력된 디지털 음성 데이터는 인코드된 다음, 통신부(15) 및 안테나(16)를 통해 송신된다.
RAM(19)(Random Access Memory)는, 제어부(14)의 작업 영역으로서 이용되는 휘발성의 메모리이다. RAM(19)는, 제어부(14)의 처리에 이용되는 다양한 타입의 데이터나 다양한 프로그램을 일시적으로 기억한다.
플래쉬 메모리(20)는, 제어부(14)의 처리에 필요한 다양한 타입의 데이터나 다양한 프로그램이 기억되는 비휘발성의 메모리이다.
제어부(14)는, CPU(Central Processing Unit) 등으로 구성된다. 제어부(14)는, 정보 처리 장치(100)의 유닛들을 총괄적으로 제어하고, 다양한 프로그램에 기초하여 다양한 연산을 실행한다.
[동작 설명］
다음으로, 제1 실시예에 따른 정보 처리 장치(100)의 처리가 설명된다. 도 3은, 정보 처리 장치(100)의 처리를 나타내는 플로우차트(flow chart)이다. 도 4 및 도 5는 각각, 도 3에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 4는, 유저의 시점에서 보았을 경우의 화면상의 표시 상태를 도시하고 있고, 도 5는, 화면(1)을 정면측에서 보았을 때의 화면상의 표시 상태를 도시하고 있다.
도 4와 도 5의 중앙 및 우측 부분에 도시된 바와 같이, 화면(1)의 좌측 영역에는, 입방체 형상(cubic shape)을 갖는 입체 표시물(2)이 표시된다. 입체 표시물(2)은 케이스(10)의 회전각에 따라 회전되는 방식으로 표시된다. 복수의 입체 표시물(2)이 y-축 방향을 따라 위치해 있다. 입체 표시물(2)은, 각각, 정면(제1 면)에 정면아이콘(2a)(제1 오브젝트)을 가지고 있고, 측면(제2 면)에 측면 아이콘(2b)( 제2 오브젝트)을 가지고 있다.
제1 실시예에서, 정면 아이콘(2a)은 앨범의 아이콘이고, 측면 아이콘(2b)은 그 앨범에 포함된 곡(track)의 동영상의 아이콘이다. 정면 아이콘은, 앨범의 자켓 등의 화상을 가지고 있다. 측면 아이콘은, 동영상의 정지 화면과 같은 화상을 가지고 있다.
각각의 입체 표시물(2)의 우측에는, 각각, 앨범 타이틀과 아티스트명이 표시된다(도 5 참조).
도 3을 참조하면, 제어부(14)는, 화면상에 표시되는 화상이 다른 화상으로 이동되었는지를 판정한다(단계 101). 예를 들어, 그림 4의 좌측 부분에 도시된 바와 같이, 화면상에 홈 화상이 표시되고 있는 상태에서, 유저가 화면상의 특정의 아이콘이 표시되고 있는 위치를 터치한다. 그러면, 제어부(14)는, 화면상의 표시를, 홈 화상으로부터 도 4의 중앙 및 도 5의 좌측 부분에 도시된 화상으로 이동시킨다.
화상이 이동했을 때(단계 101의 예), 제어부(14)는, 그때의 케이스(10)의 각도를 기준으로서 기준점을 갱신한다(단계 105). 기준점이란, 케이스(10)의 회전각의 기준 각도이다.
기준점이 갱신되는 경우, 그때의 케이스(10)의 위치가 기준점이 되므로, 그 때의 케이스(10)의 회전각은 제로이다. 기준점으로부터의 회전각이 제로인 때에 화면상에 표시되는 화상을, 이후에서는, 기준 화상이라고 부른다(도 4의 중앙 및 도 5의 좌측 부분 참조).
기준 화상에서, 제어부(14)는, 입방체 형상을 갖는 입체 표시물(2)의 정면이 화면(1)의 정면측을 향하도록 화면상의 표시를 제어한다. 즉, 기준점으로부터의 회전각이 제로인 경우에는, 제어부(14)는, 입체 표시물(2)의 정면 측에 배치된 정면 아이콘(2a)(앨범의 아이콘)이 화면(1)의 정면을 향하도록 화면의 표시를 제어한다. 회전각이 제로인 경우, 제어부(14)는 또한, 입체 표시물(2)의 우측에 표시되고 있는 앨범 타이틀 및 아티스트명과 같은 문자에 대해서도, 화면(1)의 정면에 대해서 평행이 되도록 표시한다는 점에 주목해야 한다.
단계(101)의 판정이 부정적인 경우(단계 101의 아니오), 제어부(14)는, 다음 단계(102)로 진행된다. 단계(102)에서, 제어부(14)는, 기준점으로부터의 회전각이 소정 임계치(예를 들어, y축, x축, z축 주변으로 약 ±90도 정도) 이상 변화했는지를 판정한다.
기준점으로부터의 회전각이 임계치 이상인 경우(단계 102의 예), 제어부(14)는, 기준점을 갱신하고(단계 105), 기준 화상을 화면에 표시한다(도 4의 중앙 및 도 5의 좌측 부분 참조).
전술된 바와 같이, 기준점으로부터의 회전각이 소정 임계치 이상인 경우에, 기준점이 갱신된다. 그 결과, 예를 들어, 유저가 드러누울 때와 같이, 정보 처리 장치(100)의 조작 위치가 크게 변화했을 경우에, 그 조작 위치의 변화를 적절히 지원할 수 있다.
기준점으로부터의 회전각이 임계치 미만인 경우(단계 102의 아니오), 제어부(14)는, 다음 단계(103)로 진행된다. 단계(103)에서, 제어부(14)는, 터치 패널(12)로부터의 출력에 기초하여 소정 시간(예를 들어, 약 2초 내지 3초) 이상 동안 터치 패널(12)의 이용에 관한 조작이 없었는지를 판정한다.
소정 시간 이상 동안 터치 패널(12)의 이용에 관한 조작이 없었던 경우(단계 103의 예), 그 때의 케이스(10)의 위치를 이용하여 기준점이 갱신된다(단계 105). 따라서, 정보 처리 장치(100)의 조작 위치가 변할 때, 그 조작 위치의 변화를 적절히 지원할 수 있다.
소정 시간 동안 터치 패널(12)의 이용에 관한 조작이 있었을 경우(단계 103의 아니오), 제어부(14)는, 다음 단계(104)로 진행된다. 단계(104)에서, 제어부(14)는, 회전각의 변화량이 소정의 시간(예를 들어, 약 2초 내지 3초)에서 임계치(예를 들어, y축, x축, 및 z축에 관해 약 ±5도) 미만인지를 판정한다.
소정 시간 내의 회전각의 변화량이 임계치 미만인 경우(단계 104의 예), 제어부(14)는, 그 때의 케이스(10)의 위치를 이용하여 기준점을 갱신하고, 화면상에 기준 화상을 표시한다. 따라서, 정보 처리 장치(100)의 조작 위치가 변할 때, 그 조작 위치의 변화를 적절히 지원할 수 있다.
소정 시간 내의 회전각의 변화량이, 임계치 이상인 경우(단계 104의 아니오), 제어부(14)는, 다음 단계(106)로 진행된다. 단계(106)에서, 제어부(14)는, 센서(13)(모션 센서)로부터의 출력에 기초하여 기준점으로부터의 케이스(10)의 회전각을 산출한다. 이 경우, 제어부(14)는, y축에 관한 케이스(10)의 회전각을 산출한다.
다음으로, 제어부(14)는, 케이스(10)의 회전각이 한계각(예를 들어, 약 20도 내지 45도) 이상인지를 판정한다(단계 107). 회전각이 한계각 미만인 경우(단계 107의 아니오), 제어부(14)는, 입체 표시물(2)이 회전각에 따라 회전하도록 표시를 제어한다(단계 108)(도 4 및 도 5 참조). 제어부(14)는 또한, 앨범 타이틀 및 아티스트명과 같은 문자를 회전각에 따라 회전 방식으로 표시할 수도 있다.
도 6은, 입체 표시물(2)의 각 면(2 a 및 2 b)을 구성하는 오브젝트나, 앨범 타이틀 및 아티스트명과 같은 오브젝트를 회전 방식으로 표시하기 위해 이용되는 원리를 설명하기 위한 도면이다. 이하의 설명에서, 입체 표시물(2)의 각 면(2 a 및 2 b)을 구성하는 오브젝트, 또는 케이스(10)의 회전 조작에 따라 회전하거나 이동되는 앨범 타이틀 및 아티스트명과 같은 오브젝트는, 이후에서는, UI 오브젝트(4)(UI：User Interface)(4)라고 한다는 점에 주목해야 한다.
단계(108)에서, 케이스(10)의 회전각에 기초하여, 제어부(14)는, 입체 표시물(2)의 각 면(2a 및 2b)을 구성하는 UI 오브젝트(4), 또는 앨범명과 같은 UI 오브젝트(4)의 회전각(이하, 오브젝트 회전각이라 함)을 산출한다. 그 다음, 제어부(14)는, 산출된 오브젝트 회전각에 기초하여 각 UI 오브젝트(4)를 각각의 축에 관해 회전 방식으로 표시한다. 따라서, 입체 표시물(2), 앨범 타이틀 등이 회전각에 따라 화면상에서 회전한다.
입체 표시물(2)이 회전 방식으로 표시될 때, 기준 화상에 숨어 있던 측면 아이콘(2b)(앨범에 포함된 곡의 동영상의 아이콘)이, 기준점으로부터의 회전각이 커짐에 따라, 화면 상에 서서히 출현한다.
입체 표시물(2)을 회전 방식으로 표시할 때, 제어부(14)는 다음으로, 터치 패널(12)에 의해 유저의 손가락 등의 접촉이 검출되었는지를 판정한다(단계 109). 터치 패널(12)에 의해 접촉이 검출되지 않은 경우(단계 109의 아니오), 제어부(14)는 단계(101)로 복귀한다.
반면, 터치 패널(12)에 의해 접촉이 검출되었을 경우(단계 109의 예), 제어부(14)는, 그 접촉 위치가 각 앨범마다 구분된 직사각형의 구분 영역(3)(도 5의 파선 참조) 중에서 어디에 위치하는지를 판정한다. 그 다음, 그 구분 영역(3)에 대응하는 위치에 표시된 정면 아이콘(2a)(앨범의 아이콘)에 대한 커맨드가 발행된다(단계 110).
즉, 케이스(10)의 회전각이 한계각 미만인 경우, 정면 아이콘(2a)이 선택되고 결정될 수 있는 상태(제1 상태)가 설정된다. 만일 이때 터치 패널(12)에 의해 접촉이 검출되었을 경우, 정면 아이콘(2a)에 대한 커맨드가 발행된다.
정면 아이콘(2a)(앨범의 아이콘)에 대한 커맨드가 발행되면, 예를 들어, 앨범에 포함된 곡들의 선택 화상으로 화면상의 표시가 이동된다.
단계(107)에서 회전각이 한계각 이상인 경우(단계 107의 예), 제어부(14)는 입체 표시물(2)의 회전을 정지한다(단계 111). 이런 식으로, 회전각이 한계각 이상인 경우, 입체 표시물(2)의 회전이 정지되므로, 유저는 입체 표시물(2)을 안정적으로 조작할 수 있다. 입체 표시물(2)의 회전이 정지되면, 앨범 타이틀 및 아티스트명과 같은 문자들의 회전도 역시 정지된다는 점에 주목해야 한다.
다음으로, 제어부(14)는 터치 패널(12)에 의해 유저의 손가락 등의 접촉이 검출되었는지를 판정한다(단계 112). 터치 패널(12)에 의해 접촉이 검출되지 않는 경우(단계 112의 아니오), 제어부(14)는 단계(101)로 복귀한다.
반면, 터치 패널(12)에 의해 접촉이 검출되었을 경우(단계 112의 예), 제어부(14)는, 그 접촉 위치가 각 앨범마다 구분된 직사각형의 구분 영역(3)(도 5의 파선 참조) 중에서 어디에 위치하는지를 판정한다). 그 다음, 그 구분 영역(3)에 대응하는 위치에 표시된 측면 아이콘(2b)(동영상의 아이콘)에 대한 커맨드가 발행된다(단계 113).
즉, 케이스(10)의 회전각이 한계각 이상인 경우, 측면 아이콘(2b)이 선택되고 결정될 수 있는 상태(제2 상태)가 설정된다. 만일 이때 터치 패널(12)에 의해 접촉이 검출되었을 경우, 측면 아이콘(2b)에 대한 커맨드가 실행된다.
본 실시예에서, 제어부(14)는, 한계각을 경계로서 이용하여, 정면 아이콘(2a)이 선택되고 결정될 수 있는 상태(제1 상태)와 측면 아이콘(2b)이 선택되고 결정될 수 있는 상태(제2 상태) 사이에서 전환한다.
단계(113)에서, 측면 아이콘(2b)(동영상 아이콘)에 대한 커맨드가 발행되면, 예를 들어, 동영상(앨범에 포함된 곡의 동영상)의 재생 화상으로 화면상의 표시가 이동된다.
［작용 등］
이 정보 처리 장치(100)에서, 화면상의 동일한 표시 영역 내에서 터치 패널(12)을 이용하여 터치 및 탭(tap)과 같은 입력 조작을 했을 경우, 회전각에 따라 선택되고 결정되는 아이콘을 다르게 할 수 있으며, 이것은 동일한 표시 영역에 상이한 아이콘들이 배치될 수 있다는 것을 의미한다. 따라서, 제한된 화면 영역이 효율적으로 사용될 수 있다.
또한, 본 실시예에서, 입체 표시물(2)의 정면에 앨범의 아이콘이 배치되고, 그 측면에 동영상의 아이콘이 표시되고 있다. 따라서, 유저는, 케이스(10)의 회전 조작과 터치 패널(12)로의 입력 조작에 의해, 임의의 앨범이나 임의의 동영상을 선택할 수 있다.
여기서, 종래에는, 앨범의 선택 화상과 동영상의 선택 화상은 통상 분리된다. 따라서, 예를 들어, 앨범 선택 화상으로부터 동영상 선택 화상 등으로 표시가 이동하는 경우, 앨범 선택 화상으로부터 홈 화상과 같은 다른 화상으로 한번 이동하고 나서, 동영상 선택 화상으로 이동할 필요가 있었다. 따라서, 종래에는, 앨범 선택시와 동영상 선택시, 많은 터치 조작이나, 많은 화면 이동이 필요했다.
한편, 본 실시예에서는, 전술된 바와 같이, 유저는, 케이스(10)의 회전 조작과 터치 패널(12)로의 입력 조작에 의해, 임의의 앨범 또는 임의의 동영상을 선택할 수 있다. 이런 식으로, 본 실시예에서는, 예를 들어, 앨범 선택시와 동영상 선택시, 많은 터치 조작, 화면 이동 등이 필요하지 않다. 따라서, 유저에 대한 부담이 경감될 수 있다.
또한, 본 실시예에서는, 정면 아이콘(2a)과 측면 아이콘(2b)은, 공통의 앨범에 관련된 음악 아이콘 및 동영상 아이콘인 것으로 가정된다. 구체적으로, 정면 아이콘(2a)과 측면 아이콘(2b)은, 상호 연관을 갖는 아이콘인 것으로 가정된다. 따라서, 유저는 서로 연관된 콘텐츠를 용이하게 선택할 수 있다.
［제1 실시 형태의 각종 변형예］
전술된 바와 같이, 제어부(14)는, 케이스(10)의 회전각에 기초하여 UI 오브젝트(4)(입체 표시물(2)의 각 면(2a 및 2b)를 구성하는 오브젝트 등)의 오브젝트 회전각을 산출한다(도 3의 단계 108, 및 도 6 참조). 그 다음, 제어부(14)는, 산출된 오브젝트 회전각에 기초하여 각 UI 오브젝트(4)를 회전 방식으로 표시함으로써, 입체 표시물(2) 등을 회전 방식으로 표시한다.
이하에서는, 케이스(10)의 회전각에 기초하여 UI 오브젝트(4)의 오브젝트 회전각을 산출하는 방법의 일례가 설명될 것이다.
도 7은, 제어부(14)가 케이스(10)의 회전각에 기초하여 UI 오브젝트(4)의 오브젝트 회전각을 산출할 때의 처리를 나타내는 플로우차트이다.
도 7에 도시된 바와 같이, 제어부(14)는, 센서(13)로부터 케이스(10)의 회전각을 취득하고, 케이스(10)의 회전각(센서(13)의 출력)으로부터 센서 노이즈를 제거하는 처리를 실행한다(단계 201). 이 경우, 제어부(14)는, 전회의 케이스(10)의 회전각과 이번의 케이스(10)의 회전각과의 평균을 취하는 처리(저역 통과 필터)를 실행하여, 센서 노이즈를 제거하는 처리를 실행한다.
그 다음, 제어부(14)는, 의도하지 않은 손 움직임 제거 처리를 실행하고, 한계각에서의 임계치 처리를 실행한다(단계 203, 단계 204).
도 8은, 의도하지 않은 손 움직임 제거 처리 및 한계각에서의 임계치 처리를 달성하기 위해 이용되는 식을 도시하는 그래프이며, 케이스(10)의 회전각과 UI 오브젝트(4)의 오브젝트 회전각 간의 관계를 도시한다.
도 8에서는, 이하의 식(1)이 이용되고 있다.
<식 1>
θi=atan(bθd)
θd：케이스(10)의 회전각(센서 노이즈 제거)
θi: 오브젝트 회전각
a, b：임의의 정수
케이스(10)의 회전각이 한계각 이상의 경우, 오브젝트 회전각은 임계치 처리에 의해 일정하게 설정된다는 점에 주목해야 한다.
도 8에 도시된 바와 같이, 케이스(10)의 회전각이 소정의 값 미만인 경우에는, 상기 식(1)에 의해, UI 오브젝트(4)는 거의 회전하지 않는다. 따라서, 의도하지 않은 손 움직임 등에 의해 입체 표시물(2) 등이 회전되는 것이 방지될 수 있다.
또한, 도 8에 도시된 바와 같이, 케이스(10)의 회전각이 소정의 값 이상인 경우에는, 회전각이 커짐에 따라 오브젝트 회전각이 커진다. 이 경우, 케이스(10)의 회전각과 오브젝트 회전각이 서로 동일한 경우(도 8의 파선 참조)에 비해, 그래프의 기울기가 급하다. 따라서, 유저가 입체 표시물(2) 등을 회전시키고자 하는 자신의 의도를 표시하여 케이스(10)를 회전시키는 경우, 유저의 회전 의도에 따라 입체 표시물(2)은 적절하게 회전될 수 있다.
또한, 케이스(10)의 회전각이 한계각 이상인 경우에는, 오브젝트 회전각은 일정하게 설정되고 입체 표시물(2) 등은 회전이 정지된다. 따라서, 전술된 바와 같이, 유저는 입체 표시물(2) 등을 안정적으로 조작할 수 있다.
여기서, 입체 표시물(2)의 배경 화상이 기준점으로부터의 케이스(10)의 회전각에 따라 변화하도록 구성하는 것도 가능하다.
도 9는, 입체 표시물(2)의 배경 화상이 기준점으로부터의 케이스(10)의 회전각에 따라 변화하는 경우의 일례를 도시하는 도면이다.
도 9에 도시된 예에서, 입체 표시물(2)의 배경 화상은 천구(sphere)이다. 도 9에서는, 도면을 보기 쉽게 표시하기 위해서, 입체 표시물(2)이 투명하다는 점에 주목해야 한다.
이 경우, 제어부(14)는, 기준점으로부터의 케이스(10)의 회전각에 기초하여 가상 카메라의 위치를 판정한다(도 3의 단계 108 참조). 그 다음, 제어부(14)는, 입체 표시물(2)의 배경 화상(천구)이 가상 카메라의 위치에 따라 변화하도록 표시를 제어하기만 하면 된다.
이 경우, 입체 표시물(2)의 배경 화상이 회전각에 따라 변화하므로, 입체 표시물(2)을 회전시키는 느낌이 향상될 수 있다.
전술된 예에서는, 정면 아이콘(2a)은 음악 아이콘이고, 측면 아이콘(2b)은 동영상 아이콘이다. 그러나, 정면 아이콘(2a)과 측면 아이콘(2b)의 조합은 전술된 예에 한정되지 않는다. 예를 들어, 정면 아이콘(2a)과 측면 아이콘(2b) 양쪽 모두가 음악 아이콘이거나, 동영상 아이콘일 수 있다. 대안으로서, 정면 아이콘(2a)이 동영상 아이콘이고, 측면 아이콘(2b)이 음악 아이콘일 수 있다. 대안으로서, 정면 아이콘(2a)과 측면 아이콘(2b) 중 적어도 하나가 정지 화상(사진 등)의 아이콘일 수 있다.
이러한 경우, 정면 아이콘(2a)과 측면 아이콘(2b)은 서로 연관성을 가질 수 있다.
정면 아이콘(2a)과 측면 아이콘(2b)이 서로 연관된 경우의 예가 설명될 것이다. 예를 들어, 정면 아이콘(2a)과 측면 아이콘(2b) 양쪽 모두가 음악 아이콘인 경우, 정면 아이콘(2a)과 측면 아이콘(2b)은, 공통 아티스트 또는 공통의 분야(팝스, 재즈 등)의 음악 아이콘이다.
또한, 예를 들어, 정면 아이콘(2a)과 측면 아이콘(2b) 양쪽 모두가 동영상 아이콘인 경우, 정면 아이콘(2a)과 측면 아이콘(2b)은, 공통의 시리즈의 영화, TV프로그램 등의 동영상 아이콘이다. 또한, 예를 들어, 정면 아이콘(2a)이 동영상 아이콘이고, 측면 아이콘(2b)이 음악 아이콘인 경우, 정면 아이콘(2a)은 영화 또는 TV 프로그램의 동영상의 아이콘이고, 측면 아이콘(2b)은 그 영화 또는 TV 프로그램에서 이용되고 있는 음악(사운드 트랙)의 아이콘이다.
정면 아이콘(2a)과 측면 아이콘(2b)이 상호 연관되는 예는, 측면 아이콘(2b)이 정면 아이콘(2a)의 컨텍스트 메뉴인 경우를 포함한다.
전술된 예에서는, 측면 아이콘(2b)이 입체 표시물(2)의 우측면에 배치되지만, 입체 표시물(2)의 좌측면, 상부면, 하부면과 같은 다른 면에 배치될 수도 있다.
전술된 예에서는, 복수의 입체 표시물(2)이 화면상에 표시되지만, 하나의 입체 표시물(2)이 제공될 수도 있다.
전술된 예에서는, 입방체 형상을 갖는 입체 표시물(2)이 입체 표시물(2)의 예로서 설명되었다. 그러나, 입체 표시물(2)의 형상은, 입방체 형상으로 한정되지 않는다. 예를 들어, 입체 표시물(2)은, 한 방향으로 긴 직방체 형상(rectangular parallelepiped shape)을 가질 수도 있다.
입체 표시물(2)은 6면체가 아닐 수도 있다. 전형적으로는, 입체 표시물(2)은, 4면체보다 많은 면을 갖는 다면체라면, 어떠한 구성이라도 가질 수도 있다. 입체 표시물(2)은 복수의 면으로 분할되기만 하면 구체일 수도 있다는 점에 주목해야 한다. 또한 이들 경우에, 정면 아이콘(2a)은 임의의 형상을 갖는 입체 표시물(2)의 정면(제1 면)에 배치되고, 또 다른 아이콘은 정면이 아닌 다른 면(제2 면)에 배치된다는 점에 주목해야 한다.
전술된 예에서, 입체 표시물(2)은 y축에 관한 케이스(10)의 회전각에 따라 y축에 관해 회전된다. 그러나, 입체 표시물(2)이 x축에 관한 케이스(10)의 회전각에 따라 x축에 관해 회전하도록 구성하는 것도 물론 가능하다. 그 조합도 역시 가능하다는 점에 주목해야 한다. 케이스(10)가 회전되는 방향은 특별히 제한되는 것은 아니며, 이것은 후술될 실시예에도 역시 적용된다.
<제2 실시예>
다음으로, 본 발명의 제2 실시예가 설명될 것이다. 제2 실시예와 그 이후의 설명에서는, 제1 실시예와 동일한 구성 및 기능을 갖는 부재 등은 간략하게 설명되거나 설명되지 않을 것이며, 제1 실시예와 상이한 점을 중심으로 설명될 것임에 주목해야 한다.
도 10은, 제2 실시예에 따른 정보 처리 장치(100)의 처리를 나타내는 플로우차트이다. 도 11은, 도 10에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 10에 도시된 단계(301 내지 305)에서는, 도 3에 도시된 단계(101 내지 105)와 동일한 처리가 실행된다.
단계(301 내지 304)에서 판정이 긍정적인 경우에는(단계 301 내지 304에서 예), 제어기(14)는 기준점을 갱신한다(단계 305). 기준점이 갱신되는 경우, 그 때의 케이스(10)의 회전각이 기준이 되고, 케이스(10)의 회전각은 0이다.
케이스(10)의 회전각이 0인 경우에, 제어부(14)는 화면상에 기준 화상을 표시한다. 제2 실시예에서, 기준 화상은, 도 11의 좌측 부분에 도시된 화상이다.
도 11의 좌측 부분에서, 기준 화상은 음악 재생 화상인 것으로 가정된다. 유저는, 되감기, 일시정지, 빨리감기 아이콘이 표시되어 있는 화면(1)의 아래쪽 영역의 위치를 손가락 등으로 터치 및 탭 조작함으로써, 음악의 재생, 정지 등을 제어한다.
기준 화상의 중앙에는, 케이스(10)의 회전에 따라 화면상에서 이동되는 평면적인 표시물(이하, 평면 표시물(5))이 표시되어 있다. 이 평면 표시물(5)(제1 오브젝트)은, 재생될 곡의 자켓의 화상을 가지고 있다.
단계(306)에서, 제어부(14)는, 센서(13)의 출력에 기초하여 기준점으로부터의 케이스(10)의 (y축에 관한) 회전각을 산출한다. 다음으로, 제어부(14)는, 케이스(10)의 회전각이 한계각(예를 들어, 약 20도 내지 45도) 이상인지를 판정한다(단계 307).
회전각이 한계각 미만인 경우(단계 307의 아니오), 제어부(14)는, 평면 표시물(5)이 회전각에 따라 화면상에서 이동하도록 표시를 제어한다(단계 308). 이 경우, 제어부(14)는, 평면 표시물(5)이 회전하면서 이동하도록 표시를 제어한다(도 11의 우측 부분의 파선 참조)는 점에 주목해야 한다.
따라서, 도 11의 우측 부분에 도시된 바와 같이, 평면 표시물(5)의 뒤측에 숨겨진 숨은 아이콘(6)(제2 오브젝트)이, 기준점으로부터의 회전각이 커짐에 따라 서서히 화면상에 출현한다.
또한, 이 경우, 제어부(14)는, 평면 표시물(5)과 유사하게, 케이스(10)의 회전각에 따라 숨은 아이콘(6)도 화면상에서 이동하도록 표시를 제어한다. 이 경우, 숨은 아이콘(6)은, 평면 표시물(5)의 이동 방향과는 반대 방향으로 이동된다.
도 12는, 평면 표시물(5)이나, 숨은 아이콘(6)과 같은 UI 오브젝트(4)에 대한 이동 처리를 설명하기 위한 도면이다.
도 12에 도시된 바와 같이, 2개의 UI 오브젝트(4)는 케이스(10)의 회전각에 따라 서로 반대 방향으로 병진 이동되고, 그에 따라, 유저가 변경된 시점을 인식하는 것이 가능하다.
숨은 아이콘(6)은, 전형적으로는, 기준 화상에서 재생될 곡과 연관성을 갖는 아이콘이다. 예를 들어, 숨은 아이콘(6)은 재생될 곡과 아티스트가 동일한 곡의 아이콘이거나, 재생될 곡과 분야(팝스, 재즈 등)가 동일한 곡의 아이콘이다. 대안으로서, 숨은 아이콘(6)은 재생될 곡과 연관된 동영상 또는 정지 화상 등의 아이콘일 수 있다.
제어부(14)는, 단계(308)에서 케이스(10)의 회전각에 기초하여, 평면 표시물(5) 및 숨은 아이콘(6)의 이동량을 산출한다. 그 다음, 제어부(14)는, 산출된 이동량에 기초하여, 평면 표시물(5) 및 숨은 아이콘(6)을 화면상에서 이동시키기만 하면 된다.
케이스(10)의 회전각이 한계각 이상인 경우(단계 307의 예), 제어부(14)는, 평면 표시물(5)의 이동을 정지시킨다. 이 경우, 숨은 아이콘(6)의 이동은, 정지되거나 정지되지 않을 수 있다.
다음으로, 제어부(14)는, 숨은 아이콘(6)이 터치 패널(12)에 의해 선택되었는지를 판정한다(단계 310). 숨은 아이콘(6)이 선택되지 않은 경우(단계 310의 아니오), 제어부(14)는 단계(301)로 복귀한다. 반면, 숨은 아이콘(6)이 선택되었을 경우(단계 310의 예), 그 숨은 아이콘(6)에 대한 커맨드가 발행된다(단계 311).
［작용 등］
제2 실시예에서는, 유저가 케이스(10)를 회전시킬 때, 그 회전 조작에 따라 평면 표시물(5)이 화면상에서 이동한다. 그 다음, 평면 표시물의 뒤측에 숨겨진 숨은 아이콘(6)이, 회전 조작에 따라 화면상에 출현하거나, 평면 표시물(5)의 뒤측에 숨는다. 따라서, 유저는, 케이스(10)의 회전시에, 문(평면 표시물(5))을 개폐하는 느낌으로, 숨은 아이콘(6)을 화면상에 출현시키거나 평면 표시물(5)의 뒤측에 숨기거나 할 수 있다.
또한, 본 실시예에서는, 평면 표시물(5)은, 이동 시에, 회전하면서 이동된다. 따라서, 문(평면 표시물(5))을 개폐하는 느낌이 한층 더 직감적으로 된다.
또한, 본 실시예에서는, 유저는, 곡의 재생시 또 다른 화상으로 이동하지 않고 아이콘(숨은 아이콘(6))을 선택할 수 있다. 따라서, 유저의 부담이 경감될 수 있다.
［제2 실시예의 변형예］
전술된 설명에서, 기준 화상은 음악 재생 화상이고, 평면 표시물(5)은 재생될 곡의 자켓의 화상이다. 그러나, 기준 화상은 동영상 재생 화상일 수 있다. 이 경우, 평면 표시물(5)은 동영상 재생 화상에서 재생되는 동영상이다.
이 경우, 숨은 아이콘(6)은, 전형적으로는, 그 동영상과 연관성을 갖는 아이콘이다. 예를 들어, 동영상이 영화 또는 TV 프로그램의 동영상인 경우, 숨은 아이콘(6)은 공통된 시리즈의 또 다른 영화 또는 TV 프로그램 등의 동영상의 아이콘이다. 대안으로서, 이 경우, 숨은 아이콘(6)은 공통된 시리즈의 또 다른 영화 또는 TV 프로그램 등에 이용되는 음악(사운드 트랙)의 아이콘일 수 있다.
<제3 실시예>
다음으로, 본 발명의 제3 실시예가 설명될 것이다. 제3 실시예에 따른 정보 처리 장치에서, 제어부는, 복수의 애플리케이션 프로그램을 동시에 실행(멀티태스크)할 수 있다는 점에 주목해야 한다. 애플리케이션 프로그램의 예로서는, 메일 프로그램, 브라우징 프로그램, 음악 재생 프로그램, 동영상 재생 프로그램, 및 전화번호부 관리 프로그램이 포함되지만, 애플리케이션 프로그램은 이에 한정되는 것은 아니다.
도 13은, 제3 실시예에 따른 정보 처리 장치(100)의 처리를 나타내는 플로우차트이다.
도 14는, 도 13에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 13에 도시된 단계(401 내지 405)에서, 도 3에 도시된 단계(101 내지 105)와 동일한 처리가 실행된다.
단계(401 내지 404)에서 판정이 긍정적인 경우에는(단계 401 내지 404에서 예), 제어부(14)는 기준점을 갱신한다(단계 405). 이 경우, 화면상에는 기준 화상이 표시된다(도 14의 좌측 부분 참조). 제3 실시예에서는, 기준 화상(제1 오브젝트)은 임의의 구성을 가질 수 있다. 기준 화상은, 예를 들어, 복수의 애플리케이션 프로그램 중 하나에 의해 표시되는 화상이다.
단계(406)에서, 제어부(14)는, 센서(13)의 출력에 기초하여 기준점으로부터의 케이스(10)의 (y축에 관한) 회전각을 산출한다. 다음으로, 제어부(14)는, 케이스(10)의 회전각이 임계각(예를 들어, 약 20도 내지 45도) 미만인지를 판정한다.
회전각이 임계각 미만인 경우에는(단계 407의 아니오), 제어부(14)는 단계(401)로 복귀한다. 제3 실시예에서, 전술된 실시예들과는 달리, 회전각이 임계각 미만인 때에는, 화면상의 표시는 변화되지 않고, 표시는 기준 화상에 머문다.
반면, 회전각이 임계각 이상인 경우(단계 407의 예), 제어부(14)는, 복수의 애플리케이션 프로그램 중에서 하나의 애플리케이션 프로그램을 선택하기 위한 화상(제2 오브젝트)을 표시한다(단계 408)(도 14의 우측 부분 참조). 이 화상은 애플리케이션 프로그램의 페이지군(8)을 포함한다.
페이지군(8)에 포함된 페이지(7)는, 메일 프로그램, 브라우징 프로그램, 음악 재생 프로그램, 동영상 재생 프로그램, 및 전화번호부 관리 프로그램과 같은 애플리케이션 프로그램에 대응한다. 페이지(7)는, 현재 열려 있는 윈도우의 화상을 포함할 수 있다.
페이지군(8)의 표시시에, 제어부(14)는 터치 패널(12)에 의해 페이지(7)가 선택되었는지를 판정한다(단계 409). 페이지(7)를 선택하는 방법은, 예를 들어, 유저가 손가락을 터치 패널(12) 상에서 슬라이드시켜 포커스를 이동시키고, 손가락을 떼어 놓음으로써 임의의 페이지를 선택함으로써 수행되는 방법을 포함한다. 페이지(7)에 대한 임의의 선택 방법이 사용될 수 있다는 점에 주목해야 한다.
페이지(7)가 터치 패널(12)에 의해 선택되었다고 판정되었을 때(단계 409의 예), 제어부(14)는, 선택된 페이지(7)에 대응하는 애플리케이션을 실행한다(단계 410).
제3 실시예에서는, 유저는, 케이스(10)를 회전시켜 애플리케이션 프로그램의 페이지군(8)을 화면상에 출현시켜, 임의의 애플리케이션 프로그램을 선택할 수 있다. 따라서, 유저는, 또 다른 애플리케이션을 실행시키기 위해서 화면 이동 등을 반복할 필요가 없다. 따라서, 유저의 부담이 경감될 수 있다.
<제4 실시예>
다음으로, 본 발명의 제4 실시예가 설명될 것이다.
제4 실시예에서는, 케이스(10)가 임계각 이상 회전되는 경우에, 메일 삭제용 아이콘(9)이 화면상에 표시된다.
도 15는, 케이스(10)가 임계각 이상 회전될 때, 메일 삭제용 아이콘(9)이 화면상에 표시되는 경우의 일례를 나타내는 도면이다.
제4 실시예에서는, 기준 화상이, 받은 편지함(제1 오브젝트)의 화상인 경우로 가정되고 있다(도 15의 좌측 부분 참조).
제어부(14)는, 기준점으로부터의 케이스(10)의 (y축에 관한) 회전각이, 임계각(약 20도 내지 45도) 이상인지를 판정한다. 회전각이 임계각 미만인 경우에는, 메일 삭제용 아이콘(9)(제2 오브젝트)은 화면상에 표시되지 않는다(도 15의 좌측 부분 참조). 한편, 회전각이 임계각 이상인 경우에는, 제어부(14)는, 화면상에 메일 삭제용 아이콘(9)을 표시한다. 메일 삭제용 아이콘(9)이 표시되면, 메일 삭제용 아이콘(9)이 선택가능한 상태가 된다. 터치 패널(12)을 통해 유저에 의해 행해진 입력이 검출될 때, 제어부(14)는 접촉 위치에 대응하는 위치에 표시된 메일 삭제용 아이콘(9)의 커맨드를 실행하고, 그에 대응하는 메일을 삭제한다.
여기서, 메일 삭제용 아이콘(9)과 같은 콘텐츠 삭제용의 아이콘이 잘못 선택되어 돌이킬 수 없는 경우도 있다. 한편, 제4 실시예에 따른 정보 처리 장치(100)에서, 콘텐츠 삭제용의 아이콘(9)은 케이스(10)가 임계각 이상 회전된 경우에 처음으로 화면상에 표시되어, 조작 가능한 상태가 된다. 따라서, 유저가 콘텐츠를 삭제할 의사가 없을 때, 유저가 실수로 콘텐츠를 삭제해 버리는 것을 방지하는 것이 가능하다.
전술된 설명에서, 케이스(10)가 임계각 이상 회전되었을 때, 메일 삭제용 아이콘(9)이 처음으로 화면상에 출현하지만, 그 구성은 이것으로만 한정되지 않는다는 점에 주목해야 한다. 예를 들어, 메일 삭제용 아이콘(9)이 회전각에 따라 회전하면서(예를 들어, 1회전) 화면상에 출현하는 구성도 생각할 수 있다. 대안으로서, 메일 삭제용 아이콘(9)의 색이 회전각에 따라 서서히 진해지도록 표시되면서 화면상에 출현하는 경우도 생각할 수 있다.
전술된 설명에서는, 콘텐츠 삭제용의 아이콘으로서 메일 삭제용 아이콘(9)이 설명되었지만, 콘텐츠 삭제용의 아이콘은, 음악 콘텐츠, 동영상 콘텐츠, 정지 화상 콘텐트 등을 삭제하기 위한 아이콘일 수도 있다.
<제5 실시예>
다음으로, 본 발명의 제5 실시예가 설명될 것이다. 제5 실시예에서, 케이스(10)가 임계각 이상으로 회전되는 경우, 음악 콘텐츠와 같은 콘텐츠의 재생 위치를 조작하기 위한 아이콘(21)이 표시된다.
도 16은, 케이스(10)가 임계각 이상 회전되는 경우, 음악 콘텐츠와 같은 콘텐츠의 재생 위치를 조작하기 위한 아이콘(21)(이하에서는, 재생 위치 제어용 아이콘(21))이 표시되는 경우의 일례를 나타내는 도면이다.
제5 실시예에서는, 기준 화상이 음악 재생 화상(제1 오브젝트)인 것으로 가정되고 있다(도 16의 좌측 부분 참조). 유저는, 되감기, 일시정지, 빨리감기 아이콘이 표시되어 있는 화면 1의 아래쪽 영역의 위치에서 손가락 등으로 터치 및 탭 조작함으로써, 음악의 재생, 정지 등을 제어한다.
제어부(14)는, 기준점으로부터의 케이스(10)의 (x축에 관한) 회전각이 임계각(약 20도 내지 45도) 이상인지를 판정한다. 회전각이 임계각 이상인 경우에는, 제어부(14)는, 화면(1)의 상부에 재생 위치 제어용 아이콘(21)(제2 오브젝트)을 표시한다(도 16의 중앙 및 우측 부분 참조). 화면상에 재생 위치 제어용 아이콘(21)이 표시되면, 재생 위치 제어용 아이콘(21)이 조작 가능한 상태가 된다. 재생 위치 제어용 아이콘(21)이 터치 패널(12)에 의해 조작되었을 경우에, 제어부(14)는 터치 패널(12) 상의 접촉 위치의 변화량에 따라 곡의 재생 위치를 변화시킨다. 유저는, 재생 위치 제어용 아이콘(21)이 표시되고 있는 위치에 접촉하여 옆 방향으로 손가락을 슬라이드시킴으로써, 곡의 재생 위치를 임의로 선택할 수 있다.
또한, 회전각이 임계각 이상인 경우, 제어부(14)는 회전각에 따라 터치 패널(12) 상의 접촉 위치의 변화량에 대한, 곡의 재생 위치의 변화량의 비율을 변화시킨다(도 16의 중앙 및 우측 부분 참조). 예를 들어, 회전각이 작은 경우에는 제어부(14)는 상기 비율을 줄이고(도 16의 중앙), 회전각이 큰 경우에는 상기 비율을 증가시킨다(도 16의 우측 부분). 따라서, 유저가 터치 패널(12) 상에서, 동일한 속도로 손가락을 옆 방향으로 슬라이드시키는 경우에도, 도 16의 중앙에서는 재생 위치의 변화량이 작고(저속), 그림 16의 우측 부분에서는 재생 위치의 변화량이 커진다(고속).
도 16에 도시된 예에서, 케이스(10)를 회전시킴으로써, 유저는, 터치 패널(12) 상의 접촉 위치의 변화량에 대한, 곡의 재생 위치의 변화량의 비율(속도)을 임의로 변경할 수 있다.
전술된 설명에서는, 재생 위치 제어용 아이콘(21)이 음악 콘텐츠의 재생 위치를 조작하기 위한 아이콘으로서 설명되지만, 재생 위치 제어용 아이콘(21)은 동영상 콘텐츠의 재생 위치를 조작하기 위한 아이콘일 수도 있다.
<제6 실시예>
다음으로, 본 발명의 제6 실시예가 설명될 것이다.
제6 실시예는, 유저가 터치 패널(12)에 손가락 등을 접촉한 채로 케이스(10)를 회전시킬 때 화면상의 표시 등이 변화한다는 점에서, 전술된 실시예들과는 상이하다. 따라서, 그 점을 중심으로 설명한다.
도 17은, 제6 실시예에 따른 정보 처리 장치(100)의 처리를 나타내는 플로우차트이다. 도 18은, 도 17에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
제어부(14)는, 터치 패널(12)에 의해 유저의 손가락 등의 접촉이 검출되었는지를 판정한다(단계 501). 접촉이 검출되지 않는 경우, 제어부(14)는 단계(501)로 복귀하고, 터치 패널(12)에 의해 유저의 손가락 등의 접촉이 검출되었는지를 다시 판정한다.
접촉이 검출되지 않는 경우, 화면상의 표시 상태 등은 변화되지 않고, 도 18의 최좌측 부분에 도시된 바와 같이 화상이 화면상에 표시된다.
도 18의 최좌측 부분에서, 복수의 곡 타이틀(선택 항목)을 포함한 곡 선택 화상(22)(제1 화상)이 표시되고 있다. 곡 타이틀과 같은 선택 항목을 포함한 화상(제1 화상)이 화면 전체에 표시되고 있는 상태를, 이후에서는 제1 표시 모드라고 한다는 점에 주목해야 한다.
터치 패널(12)에 의해 접촉이 검출되는 경우(단계 501의 예), 제어부(14)는 다음 단계(502)로 진행한다. 단계(502)에서는, 제어부(14)는 터치 패널(12)의 접촉 위치에 대응하는 화면상의 위치에 곡 타이틀과 같은 회전가능한 선택 항목이 표시되어 있는지를 판정한다.
회전가능한 선택 항목(곡 타이틀)이 접촉 위치에 표시되어 있지 않은 경우(단계 502의 아니오), 제어부(14)는 단계(501)로 복귀한다.
한편, 회전가능한 선택 항목(곡 타이틀)이 접촉 위치에 표시되어 있는 경우(단계 502의 예), 접촉이 검출되었을 때의 케이스(10)의 위치가 기준점으로서 기록된다(단계 503).
다음으로, 제어부(14)는, 센서(13)(모션 센서)로부터의 출력에 기초하여 기준점으로부터의 케이스(10)의 (y축에 관한) 회전각을 산출한다(단계 504).
케이스(10)의 회전각을 산출하면, 곡 선택 화상(22)이 산출된 회전각에 따라 회전 방식으로 표시된다(단계 505)(도 18의 중앙 좌측 부분 및 중앙 우측 부분 참조). 또한, 이 경우, 제어부(14)는, 산출된 회전각에 따라 곡 재생 화상(23)(제2 화상)을 회전 방식으로 표시한다(도 18의 중앙 좌측 부분 및 중앙 우측 부분 참조). 곡 재생 화상(23)은, 곡 선택 화상(22)에서 선택된 곡의 곡 재생 화상(23)이며, 그 곡의 자켓 등의 화상을 가진다(도 18의 최우측 부분 참조).
단계(505)에서, 제어부(14)는, 케이스(10)의 회전각에 기초하여 곡 선택 화상(22)과 곡 재생 화상(23)(UI 오브젝트(4))의 회전각을 산출하고, 각각의 화상을 각 축에 관하여 회전 방식으로 표시한다(도 6 참조). 곡 선택 화상(22)은, 화면(1)의 좌단을 회전의 중심 축으로 하여 회전 방식으로 표시된다. 한편, 곡 재생 화상(23)은 화면(1)의 우단을 회전의 중심 축으로 하여 회전 방식으로 표시된다.
이후의 설명에서는, 곡 선택 화상(22) 및 곡 재생 화상(23)과 같은 UI 오브젝트(4)가, 케이스(10)의 회전각에 따라 회전 방식으로 표시(이동 표시일 수 있음)되는 상태를, 제2 표시 모드라고 한다는 점에 주목해야 한다. 제2 표시 모드에서는, 케이스(10)의 회전각이 커짐에 따라, 곡 재생 화상(23)이 화면상에 서서히 출현하고 곡 선택 화상(22)이 화면으로부터 서서히 사라져 간다.
곡 선택 화상(22) 및 곡 재생 화상(23)을 회전 방식으로 표시할 때, 제어부(14)는, 케이스(10)의 회전각이 제1 각도(약 0도 내지 10도) 이상인지를 판정한다(단계 506). 케이스(10)의 회전각이 제1 각도 이상인 경우(단계 506의 예), 제어부(14)는 선택된 곡을 재생하고(단계 507), 단계(508)로 진행한다. 한편, 케이스(10)의 회전각이 제1 각도 미만인 경우에는(단계 506의 아니오), 제어부(14)는 곡을 재생하지 않고, 다음 단계(508)로 진행한다.
단계(508)에서, 제어부(14)는, 터치 패널(12)로부터의 출력에 기초하여 터치 패널(12)에의 접촉이 해제되었는지를 판정한다. 터치 패널(12)에의 접촉이 해제되지 않은 경우(단계 508의 아니오), 제어부(14)는, 케이스(10)의 회전각을 다시 산출하고(단계 504), 산출된 회전각에 따라 각 화상(22 및 23)을 회전 방식으로 표시한다(단계 505). 즉, 터치 패널(12)과의 접촉의 검출부터 터치 패널(12)과의 접촉의 해제까지의 시간 동안, 제어부(14)는 케이스(10)의 회전각에 기초하여 각 화상(22 및 23)을 회전 방식으로 표시한다.
한편, 터치 패널(12)에의 접촉이 해제되었을 경우(단계 508의 예), 제어부(14)는, 접촉이 해제된 시점에서 케이스(10)의 회전각이 제2 각도(약 20도 내지 45도) 이상인지를 판정한다(단계 509).
접촉이 해제된 시점에서 케이스(10)의 회전각이 제2 각도 미만의 경우(단계 509의 아니오), 제어부(14)는, 곡 선택 화상(22)을 화면상에 표시한다(단계 510)(도 18의 중앙 좌측 부분 -> 도 18의 최좌측 부분)(제2 표시 모드 -> 제1 표시 모드). 즉, 접촉이 해제된 시점에서 케이스(10)의 회전각이 제2 각도 미만인 경우, 곡 선택 화상(22)에서 선택된 곡의 선택 및 결정이 취소되고 곡 선택 화상(22)이 화면상에 다시 표시된다. 곡 선택 화상(22)을 화면상에 표시하면, 제어부(14)는 다시 단계(501)로 복귀하고, 터치 패널(12)이 접촉되었는지를 판정한다.
한편, 접촉이 해제된 시점에서 케이스(10)의 회전각이 제2 각도 이상인 경우(단계 509의 예), 제어부(14)는, 곡 재생 화상(23)을 화면상에 표시한다(단계 511)(도 18의 중앙 우측 부분 -> 도 18의 최우측 부분)(제2 표시 모드 -> 제3 표시 모드). 즉, 접촉이 해제된 시점에서 케이스(10)의 회전각이 제2 각도 이상인 경우, 곡 선택 화상(22)에서 선택된 곡이 결정되고, 그 곡의 곡 재생 화상(23)이 화면상에 표시된다. 곡 재생 화상(23)(선택 및 결정 후의 화상)이 화면(1) 전체에 표시되는 상태를, 이후에는, 제3 표시 모드라고 한다는 점에 주목해야 한다.
곡 재생 화상(23)이 표시되고 있는 상태(제3 표시 모드)에서, 유저는, 되감기, 일시정지, 빨리감기 아이콘이 표시되고 있는 화면(1) 아래쪽 영역의 위치에서 손가락 등으로 터치 및 탭 조작함으로써, 음악의 재생, 정지 등을 제어한다. 본 실시예에서는, 제2 표시 모드가 제3 표시 모드로 전환될 때(도 18의 중앙 우측 부분 -> 도 18의 최우측 부분), 곡의 재생이 개시되었다(단계 507 참조)는 점에 주목해야 한다.
［작용 등］
도 17에 도시된 처리에 의해, 유저는, 임의의 선택 항목(곡 타이틀)이 표시되고 있는 곡 선택 화상(22)의 영역을 손가락으로 접촉하여, 손가락을 그 영역에 접촉한 채로 케이스(10)를 회전시키고, 그에 따라, 그 곡의 곡 재생 화상(23)을 서서히 화면상에 출현시킬 수 있다. 유저는, (그 곡의 자켓 등의 화상을 포함하는) 곡 재생 화상(23)을 시각적으로 인식하고, 그에 따라, 곡의 세부사항 등을 파악할 수 있다. 본 실시예에서는, 케이스(10)의 회전각이 제1 각도 이상인 경우, 곡의 재생이 개시되어, 곡 선택 화상(22)에서 선택된 곡의 세부사항의 파악이 한층 더 용이하게 된다는 점에 주목해야 한다.
또한, 만일 유저가, 케이스(10)의 회전각이 제2 각도 미만인 상태에서 터치 패널(12)로부터 손가락을 떼어 놓는다면, 곡 선택 화상(22)에서 선택된 선택 항목(곡 타이틀)을 취소하고 화면상에 다시 곡 선택 화상(22)을 표시하는 것이 가능하다(도 18의 중앙 좌측 부분 -> 도 18의 중앙 우측 부분). 따라서, 곡 선택 화상(22)에서 선택된 곡이 원하는 곡이 아닌 경우에, 유저는 터치 패널(12)로부터 손가락을 떼어 놓아 화면상에 곡 선택 화상(22)을 다시 표시시켜, 원하는 곡을 신속하게 찾을 수 있다.
한편, 선택 화상에서 선택된 곡이 원하는 곡인 경우에는, 유저는, 케이스(10)를 크게 회전시키고(제2 각도 이상), 손가락을 터치 패널(12)로부터 떼어 놓음으로써, 그 곡을 선택 및 결정하고, 화면상에 곡 재생 화상(23)을 표시시킬 수 있다(도 18의 중앙 우측 부분 -> 도 18의 최우측 부분).
［제6 실시예의 변형예］
곡 재생 화상(23)의 특정의 위치가 제3 표시 모드(도 18의 최우측 부분)에서 접촉되는 경우, 제3 표시 모드는, 제2 표시 모드(도 18의 중앙 좌측 부분 및 중앙 우측 부분)로 전환될 수 있다.
전술된 설명에서, 제2 표시 모드에서, 곡 선택 화상(22) 및 곡 재생 화상(23)이 회전각에 따라 회전 방식으로 표시된다. 그러나, 곡 선택 화상(22) 및 곡 재생 화상(23)은, 제2 표시 모드에서 회전각에 따라 서로 반대 방향으로 병진 이동될 수도 있다(도 12 참조). 대안으로서, 회전각이 커짐에 따라, 곡 선택 화상(22)의 색이 옅어지고, 곡 재생 화상(23)의 색이 진해지는 경우도 생각할 수 있다.
전술된 설명에서, 제2 표시 모드에서, 곡 선택 화상(22) 및 곡 재생 화상(23)이 y축에 관한 케이스(10)의 회전각에 따라 y축 방향의 축을 중심축으로 하여 회전 방식으로 표시된다. 한편, 곡 선택 화상(22) 및 곡 재생 화상(23)은, x축에 관한 케이스(10)의 회전각에 따라 x축 방향의 축을 중심축으로 하여 회전 방식으로 표시되도록 구성될 수 있다. 대안으로서, 상기의 조합도 역시 가능하다. 이 경우, 선택 및 결정 후의 화상(제2 화상)이 회전 방향에 따라 달라질 수도 있다.
전술된 설명에서, 제1 화상(선택 항목을 포함한 화상)이 곡 선택 화상(22)이고, 제2 화상(선택 및 결정 후의 화상)이 곡 재생 화상(23)이다. 그러나, 제1 화상과 제2 화상의 조합은 이에 한정되지 않는다. 예를 들어, 제1 화상이 동영상 선택 화상이고 제2 화상이 동영상 재생 화상일 수 있다. 이 경우, 동영상의 재생은, 케이스(10)의 제1 각도 이상의 경우에 개시될 수도 있다. 대안으로서, 제1 화상과 제2 화상의 조합의 예로는, 제1 화상이 애플리케이션 프로그램의 선택 화상이고, 제2 화상이 그 애플리케이션 프로그램에 의해 표시된 윈도우의 화상인 경우가 포함된다. 통상적으로는, 만일 제1 화상이 선택 항목을 포함하는 화상이고, 제2 화상이 그 선택 항목이 선택 및 결정된 후에 얻어진 화상이라면, 본 발명의 실시예는 어떠한 경우에도 적용될 수 있다.
<제7 실시예>
다음으로, 본 발명의 제7 실시예가 설명될 것이다.
도 19는, 제7 실시예에 따른 정보 처리 장치(100)의 처리를 나타내는 플로우차트이다. 도 20은, 도 19에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
도 20에 도시된 바와 같이, 제7 실시예에서, 제1 화상은, 영어와 같은 외국어의 텍스트 화상(24)(문자 정보의 선택 항목을 포함한 화상)인 것으로 가정된다(도 20의 최좌측 부분 참조). 외국어의 텍스트 화상(24)은, 단어 및 숙어와 같은 선택 항목(문자 정보의 선택 항목)을 포함한다.
또한, 제7 실시예에서, 제2 화상은, 선택된 단어, 숙어 등의 번역 화상(25)(문자 정보에 관한 정보를 포함한 화상)인 것으로 가정된다(도 20의 최우측 부분 참조).
도 20에서, 선택 항목으로서 "optimization"이라는 단어가 선택되고, 제2 화상으로서 "optimization"의 번역 화상(25)이 회전각에 따라 화면상에 출현하는 경우가 가정되고 있다는 점에 주목해야 한다.
제어부(14)는, 터치 패널(12)이 접촉되었는지를 판정하고(단계 601), 만일 접촉이 검출되었을 경우(단계 601의 예), 제어부(14)는, 단어와 같은 선택 항목이 터치 패널(12)의 접촉 위치에 표시되고 있는지를 판정한다(단계 602).
단어와 같은 선택 항목이 선택되었을 경우에(단계 602의 예), 그 때의 케이스(10)의 위치가 기준점으로서 기록되고(단계 603), 케이스(10)의 회전각이 산출된다(단계 604). 다음으로, 제어부(14)는, 외국어 텍스트 화상(24) 및 번역 화상(25)을, 케이스(10)의 회전각에 따라 회전 방식으로 표시한다(단계 605).
터치 패널(12)에의 접촉의 검출부터 접촉의 해제까지의 시간 동안에, 제어부(14)는, 케이스(10)의 회전각에 따라 외국어 텍스트 화상(24) 및 번역 화상(25)을 회전 방식으로 표시한다(단계 604 내지 단계 606의 아니오의 루프)(도 20의 중앙 좌측 부분 및 중앙 우측 부분)(제2 표시 모드).
터치 패널(12)에의 접촉이 해제되었을 경우(단계 606의 예), 제어부(14)는, 접촉이 해제된 시점에서 케이스(10)의 회전각이 소정의 각도(예를 들어, 약 20도 내지 45도) 이상인지를 판정한다(단계 607). 회전각이 상술한 각도 미만인 경우에는, 제어부(14)는, 화면 상에 외국어 텍스트 화상(24)을 표시한다(단계 608)(도 20의 중앙 좌측 부분 -> 도 20의 최좌측 부분)(제2 표시 모드 -> 제1 표시 모드). 한편, 회전각이 상술한 각도 이상인 경우는, 제어부(14)는, 화면 상에 번역 화상(25)을 표시한다(단계 609)(도 20의 중앙 우측 부분 -> 도 20의 최우측 부분)(제2 표시 모드 -> 제3 표시 모드).
제7 실시예에서, 유저는, 유저가 알지 못하는 단어가 표시되고 있는 외국어 텍스트 화상(24)의 영역에 손가락을 접촉하고, 그 영역에 손가락을 접촉한 채로 케이스(10)를 회전시킨다. 따라서, 유저는 단어의 번역 화상(25)을 화면상에 출현시킬 수 있다. 유저는, 번역 화상(25)을 시각적으로 인식하고, 그에 따라, 그 단어의 의미를 확인할 수 있다. 확인을 종료했을 때, 유저는, 케이스(10)의 회전각이 상술한 각도보다 작은 상태로, 터치 패널(12)로부터 손가락을 떼어 놓기만 하면 된다. 따라서, 다시 외국어 텍스트 화상(24)이 표시될 수 있다. 한편, 유저가 그 단어의 의미를 자세하게 확인하고 싶은 경우에는, 유저는 케이스(10)를 크게 회전시킨 상태로(상술한 각도 이상), 터치 패널(12)로부터 손가락을 떼어 놓기만 하면 된다. 따라서, 번역 화상(25)이 화면상에 표시되고, 그 단어의 의미가 자세하게 확인될 수 있다.
제3 표시 모드(도 20의 최우측 부분)에서, 번역 화상(25)의 특정 위치가 접촉되었을 경우, 제3 표시 모드는 제2 표시 모드로 전환될 수 있다.
전술된 설명에서, 제1 화상은 외국어 텍스트 화상(24)이고, 제2 화상은 번역 화상(25)이다. 그러나, 제1 화상은 웹상의 검색 화상(검색어를 포함한 화상)이고, 제2 화상은 검색 결과의 화상(검색어에 관한 정보를 포함한 화상)일 수 있다.
<제8 실시예>
다음으로, 본 발명의 제8 실시예가 설명될 것이다.
도 21은, 제8 실시예에 따른 정보 처리 장치(100)의 처리를 나타내는 플로우차트이다. 도 22는, 도 21에 도시된 처리가 실행되는 경우 화면상의 표시 상태를 나타내는 도면이다.
제어부(14)는, 터치 패널(12)이 접촉되었는지를 판정한다(단계 701). 접촉이 검출되었을 경우(단계 701의 예), 제어부(14)는 접촉 위치에 대응하는 화면상의 위치에 입체 표시물(26)이 표시되고 있는지를 판정한다(단계 702).
입체 표시물(26)이 표시되고 있는 경우(단계 702의 예), 제어부(14)는 접촉이 검출된 시점에서의 케이스(10)의 위치를 기준점으로서 기록한다(단계 703). 그 다음, 제어부(14)는 접촉의 검출 후 케이스(10)의 회전각을 산출하고(단계 704), 케이스(10)의 회전각에 따라 입체 표시물(26)을 회전 방식으로 표시한다(단계 705).
터치 패널(12)에의 접촉의 검출부터 접촉의 해제까지의 시간 동안에, 제어부(14)는 케이스(10)의 회전각에 따라 입체 표시물(26)을 회전 방식으로 표시한다(단계 704 내지 단계 706의 아니오의 루프).
터치 패널(12)에의 접촉이 해제되었을 경우(단계 706의 예), 제어부(14)는 다시 단계(701)로 복귀하고, 터치 패널(12)의 접촉이 검출되었는지를 판정한다.
도 21에 도시된 처리에 의해, 도 22에 도시된 바와 같이, 유저는, 터치 패널(12)에 접촉한 채로 케이스(10)를 회전시키는 동작과, 터치 패널(12)에 접촉하지 않고 케이스(10)를 반대 방향으로 회전시키는 동작을 반복함으로써, 입체 표시물(26)의 측면이나 이면 등을 표시한다.
도 22에서는, y축에 관해 케이스(10)가 회전되는 때에 입체 표시물(26)이 y축에 관해 회전되는 예가 도시되어 있음에 주목해야 한다. 그러나, x축에 관해 케이스(10)가 회전될 때에 입체 표시물(26)이 x축에 관해 회전될 수도 있다. 입체 표시물(26)은 x축 및 y축 모두에 관해 회전 방식으로 표시될 수도 있다는 점에 주목해야 한다.
도 22에서, 입체 표시물(26)은 6면체이다. 그러나, 입체 표시물(26)의 형상은 4면체와 같은 다른 다면체, 구체 등일 수 있다. 입체 표시물(26)의 형상은 특별히 한정되지는 않는다.
입체 표시물(26)이 복수의 면을 가지는 경우, 각 면에 아이콘이 할당될 수 있다. 이 경우, 케이스(10)의 각도에 따라 선택가능한 아이콘이 전환된다(전술된 제1 실시예 참조). 따라서, 유저는, 터치 패널(12)에 손가락 등을 접촉시킨 채로 케이스(10)를 회전시켜 입체 표시물(26)을 회전시킴으로써, 선택을 위해 임의의 아이콘을 화면상에 표시시킬 수 있다.
입체 표시물(26)이 복수의 아이콘을 포함하는 경우, 이들 아이콘은 상호 연관성을 가질 수 있다.
각 면에 아이콘이 할당될 때, 탭 조작과 같은 조작시에 임의의 아이콘이 선택 및 결정된다는 점에 주목해야 한다. 따라서, 유저가 입체 표시물(26)을 회전시키기 위해 입체 표시물(26)의 표시 위치에 접촉할 때, 아이콘이 유저에 의해 선택 및 결정되는 것이 방지될 수 있다.
유저가 입체 표시물(26)이 표시되고 있는 화면상의 위치에서 손가락 등을 슬라이드시키는 경우, 입체 표시물(26)이 회전하도록 구성될 수 있다.
도 23은, 유저가, 입체 표시물(26)이 표시되고 있는 화면상의 위치에서 손가락 등을 슬라이드할 때 입체 표시물(26)이 회전하는 경우의 일례를 나타내는 도면이다.
도 23의 최좌측 부분 및 중앙 좌측 부분에 도시된 바와 같이, 유저는, 입체 표시물(26)이 표시되고 있는 위치를 손가락 등으로 접촉하여 이 상태를 유지한 채로 케이스(10)를 회전시킨다. 그러면, 화면상에서 입체 표시물(26)이 회전 방식으로 표시된다(단계 701 내지 단계 706).
또한, 도 23의 중앙 우측 부분 및 최우측 부분에 도시된 바와 같이, 유저가, 입체 표시물(26)이 표시되어 있는 화면상의 위치에서 손가락 등을 슬라이드시켰을 때, 입체 표시물(26)이 회전한다. 이 경우, 제어부(14)는, 터치 패널(12)로부터의 접촉 위치의 변화량의 정보에 기초하여 입체 표시물(26)을 회전 방식으로 표시하기만 하면 된다. 따라서, 유저는, 터치 패널(12)에 접촉한 채로 케이스(10)를 회전시킴으로써 입체 표시물(26)을 회전시킬 수도 있고, 또는 입체 표시물(26)이 표시되고 있는 위치에서 손가락을 슬라이드시킴으로써 입체 표시물(26)을 회전시킬 수도 있다. 따라서, 입체 표시물(26)의 배면(rear surface)과 같은 면이 용이하게 화면상에 표시될 수 있다.
도 23의 설명에서, 유저가 입체 표시물(26)이 표시되고 있는 위치를 터치한 채로 케이스(10)를 회전시킬 때 입체 표시물(26)이 회전 방식으로 표시되지만, 본 발명은 이에 한정되지 않는다. 도 22에 도시된 예는, 제1 실시예 내지 제5 실시예에서 설명되었던, 기준점이 자동적으로 갱신되는 구성에도 적용될 수 있다.
＜각종 변형예＞
전술된 실시예들에서, 정보 처리 장치의 기울기를 검출하는 센서(13)로서 모션 센서가 예시되었다. 그러나, 정보 처리 장치의 기울기를 검출하는 센서(13)는, 모션 센서에만 한정되지 않는다. 예를 들어, 센서(13)로는, CCD(Charge Coupled Device) 센서 및 CMOS(Complementary Metal Oxide Semiconductor) 센서와 같은 이미지 센서가 이용될 수 있다. 이 경우, 이미지 센서는 케이스(10)의 정면 측에 제공된다.
이 경우, 제어부(14)는 이미지 센서에 의해 촬상된 화상에 기초하여 유저의 얼굴의 위치나 각도를 판정한다. 제어부(14)는 화상 내에서의 얼굴의 위치의 변화나 얼굴의 각도의 변화에 기초하여, 유저의 얼굴에 대한 정보 처리 장치의 기울기를 검출할 수 있다.
제1 내지 제5 실시예에서, 센서(13)로서 이미지 센서가 이용되는 경우에, 기준점은 유저의 얼굴이 케이스(10)의 정면에 위치할 때 얻어진다는 점에 주목해야 한다.
최근에, 화상 채팅 등의 목적으로 케이스(10)의 정면 측에 CCD 센서(13)와 같은 이미지 센서(13)가 배치되는 경우가 있다. 이미지 센서(13)는 회전각을 산출하기 위한 센서(13)로서 효과적으로 사용될 수 있다. 이 경우, 비용 절감이 달성된다.
대안으로서, 센서(13)는 모션 센서와 이미지 센서의 조합일 수 있다. 이 경우, 기준점의 위치 정확도나 회전각의 산출 정확도 등이 향상될 수 있다.
정보 처리 장치가 표시부를 포함하지 않고, 표시부가 별도로 제공되는 경우도 생각할 수 있다.
도 24는, 정보 처리 장치(101)가 표시부(11)를 포함하지 않고, 표시부가 별도로 제공되는 경우의 일례를 나타내는 도면이다.
도 24에 도시된 정보 처리 장치(101)는 표시부(11)를 포함하지 않는다. 입체 표시물(27)과 같은 UI는, 액정 표시 장치 또는 텔레비젼 장치와 같은 표시 장치(102)의 화면상에 표시된다. 이 경우, 유저가 터치 패널(12)에 접촉한 채로 케이스(10)를 회전시킬 때, 화면상에서 입체 표시물 (27)이 회전 방식으로 표시된다.
본 출원은, 2010년 9월 7일 일본 특허청에 출원된 일본 우선권 특허 출원 JP 2010-199835호에 개시된 내용에 관련된 내용을 포함하며, 그 전체 내용이 본 명세서에서 참조용으로 원용된다.
첨부된 특허청구범위 또는 그 등가물의 범위 내에 있는 한, 설계 요건 및 기타의 요인들에 따라 다양한 수정, 조합, 부조합 및 변형이 이루어질 수 있다는 것을 당업자라면 이해해야 한다.
11 : 표시부
12 : 터치 패널
13 : 센서
14 : 제어부
15 : 통신부
16 : 스피커
18 : 마이크로폰
19 : RAM
20 : 플래쉬 메모리

Claims (10)

  1. 정보 처리 장치로서,
    화면을 갖는 표시부; 및
    상기 화면상에 제1 오브젝트를 표시하고, 모션 센서로부터의 입력 신호에 따라, 상기 화면상에 상기 제1 오브젝트와 연관된 제2 오브젝트를 표시하며, 터치 센서로부터의 입력 신호에 응답하여 상기 제2 오브젝트를 동작시키도록 구성된 제어부
    를 포함하고,
    상기 제어부는, 상기 모션 센서로부터의 입력 신호에 따라, 상기 제1 오브젝트 및 상기 제2 오브젝트를 포함하지 않는 화상이 표시되어 있는 상태에서, 상기 터치 센서로부터의 입력 신호에 기초하여, 상기 제1 오브젝트 및 상기 제2 오브젝트를 제어하기 위한 기준점을 갱신함과 함께, 상기 화상이 표시되어 있는 상태에서 상기 제1 오브젝트 및 상기 제2 오브젝트가 표시되어 있는 상태로 전이시키고,
    상기 제어부는, 상기 모션 센서로부터의 입력 신호에 기초하여, 상기 표시부의 화면상에 표시된 상기 제1 오브젝트의 표시 상태 및 상기 제2 오브젝트의 표시 상태를 연속적으로 변화시키고,
    상기 모션 센서로부터의 입력 신호의 값이 미리 결정된 임계치보다 작은 경우, 상기 제1 오브젝트의 선택과 연관된 기능이 활성화됨과 함께, 상기 제2 오브젝트의 선택과 연관된 기능이 비활성화되고,
    상기 모션 센서로부터의 입력 신호의 값이 미리 결정된 임계치보다 큰 경우, 상기 제1 오브젝트의 선택과 연관된 기능이 비활성화됨과 함께, 상기 제2 오브젝트의 선택과 연관된 기능이 활성화되고,
    상기 표시부의 화면상에 상기 오브젝트들과 함께 표시된 배경 화상의 회전 시점은, 상기 모션 센서로부터의 입력 신호의 값에 따라 상기 오브젝트들과 함께 변경되는, 정보 처리 장치.
  2. 제1항에 있어서,
    상기 제1 오브젝트는, 상기 터치 센서로부터의 입력 신호에 따라 동작 가능한 오브젝트인, 정보 처리 장치.
  3. 제1항에 있어서,
    상기 표시부의 화면상에 표시된 상기 제1 오브젝트 및 상기 제2 오브젝트를 포함하는 오브젝트들의 회전 시점(rotational perspective)은, 상기 모션 센서로부터의 입력 신호의 값에 따라 상기 제2 오브젝트가 표시되도록 변경되는, 정보 처리 장치.
  4. 제3항에 있어서,
    상기 표시부의 화면상에 표시된 상기 제1 오브젝트 및 상기 제2 오브젝트를 포함하는 오브젝트들의 상기 회전 시점은, 상기 모션 센서로부터의 입력 신호의 값이 증가함에 따라 출현 상태로부터 숨겨지도록 표시되는, 정보 처리 장치.
  5. 제3항에 있어서,
    상기 표시부의 화면상에 표시된 상기 제1 오브젝트 및 상기 제2 오브젝트를 포함하는 오브젝트들의 상기 회전 시점은, 상기 모션 센서로부터의 입력 신호의 값이 증가함에 따라 숨겨진 상태로부터 출현하도록 표시되는, 정보 처리 장치.
  6. 제1항에 있어서,
    상기 모션 센서는 가속도 센서, 각속도 센서 및 각도 센서 중 적어도 하나를 포함하고,
    상기 모션 센서로부터의 입력 신호의 값은, 정보 처리 장치의 기울기인, 정보 처리 장치.
  7. 제1항에 있어서,
    상기 제2 오브젝트의 선택과 연관된 기능은, 상기 모션 센서로부터의 입력 신호의 값이 미리 결정된 임계치보다 크고, 상기 제2 오브젝트가, 상기 제2 오브젝트가 표시되어 출현하는 지점을 미리 결정된 만큼 통과하여 출현하게 될 때까지 계속 비활성화되어 있는, 정보 처리 장치.
  8. 제3항에 있어서,
    상기 변경되는 회전 시점을 갖는 상기 제1 오브젝트는, 상기 제2 오브젝트의 선택과 연관된 기능이 활성화되는 시점에 상기 표시부의 화면상에 계속해서 표시되는, 정보 처리 장치.
  9. 삭제
  10. 제1항에 있어서,
    상기 제어부는, 상기 모션 센서로부터의 입력 신호와 상기 터치 센서로부터의 입력 신호에 기초하여 상기 기준점을 갱신함과 함께, 상기 화상이 표시되어 있는 상태로부터 상기 제1 오브젝트가 표시됨과 함께 상기 제2 오브젝트가 표시되지 않은 상태로 전이시키고, 이후에 상기 모션 센서로부터의 입력 신호에 따라 상기 제1 오브젝트 및 상기 제2 오브젝트가 표시되어 있는 상태로 전이시키는, 정보 처리 장치.
KR1020180035187A 2010-09-07 2018-03-27 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법 KR101976071B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010199835A JP5621422B2 (ja) 2010-09-07 2010-09-07 情報処理装置、プログラム及び制御方法
JPJP-P-2010-199835 2010-09-07

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020110087061A Division KR101844464B1 (ko) 2010-09-07 2011-08-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020190050749A Division KR102117444B1 (ko) 2010-09-07 2019-04-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법

Publications (2)

Publication Number Publication Date
KR20180034372A KR20180034372A (ko) 2018-04-04
KR101976071B1 true KR101976071B1 (ko) 2019-05-09

Family

ID=44533851

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020110087061A KR101844464B1 (ko) 2010-09-07 2011-08-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법
KR1020180035187A KR101976071B1 (ko) 2010-09-07 2018-03-27 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법
KR1020190050749A KR102117444B1 (ko) 2010-09-07 2019-04-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020110087061A KR101844464B1 (ko) 2010-09-07 2011-08-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020190050749A KR102117444B1 (ko) 2010-09-07 2019-04-30 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법

Country Status (6)

Country Link
US (2) US9098248B2 (ko)
EP (1) EP2426572A3 (ko)
JP (1) JP5621422B2 (ko)
KR (3) KR101844464B1 (ko)
CN (2) CN202281996U (ko)
RU (1) RU2586015C2 (ko)

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8730267B2 (en) * 2010-06-21 2014-05-20 Celsia, Llc Viewpoint change on a display device based on movement of the device
JP5684621B2 (ja) 2011-03-28 2015-03-18 京セラ株式会社 電子機器、表示制御方法及び表示制御プログラム
US9733712B2 (en) * 2011-08-29 2017-08-15 Kyocera Corporation Device, method, and storage medium storing program
KR20130030406A (ko) * 2011-09-19 2013-03-27 엘지전자 주식회사 이동 단말기
KR101873056B1 (ko) * 2011-09-20 2018-07-02 삼성전자주식회사 휴대단말기의 어플리케이션 수행 장치 및 방법
US9880640B2 (en) * 2011-10-06 2018-01-30 Amazon Technologies, Inc. Multi-dimensional interface
US9405435B2 (en) * 2011-11-02 2016-08-02 Hendricks Investment Holdings, Llc Device navigation icon and system, and method of use thereof
EP2648086A3 (en) * 2012-04-07 2018-04-11 Samsung Electronics Co., Ltd Object control method performed in device including transparent display, the device, and computer readable recording medium thereof
JP5973788B2 (ja) * 2012-05-28 2016-08-23 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム及び情報処理方法
JP5966665B2 (ja) * 2012-06-26 2016-08-10 ソニー株式会社 情報処理装置、情報処理方法および記録媒体
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
US10275117B2 (en) 2012-12-29 2019-04-30 Apple Inc. User interface object manipulations in a user interface
EP2994822A4 (en) * 2013-05-09 2016-12-07 Amazon Tech Inc INTERFACES OF MOBILE DEVICES
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
KR101923118B1 (ko) 2013-09-03 2019-02-27 애플 인크. 자기 특성을 갖는 사용자 인터페이스 객체를 조작하는 사용자 인터페이스
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
JP5942978B2 (ja) * 2013-12-26 2016-06-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
CN104765727A (zh) * 2014-01-06 2015-07-08 中兴通讯股份有限公司 文本翻译方法及装置
JP6024725B2 (ja) 2014-01-17 2016-11-16 カシオ計算機株式会社 システム
EP2913738A1 (en) 2014-02-27 2015-09-02 Nokia Technologies OY Performance of an operation based at least in part on tilt of a wrist worn apparatus
US9502002B2 (en) * 2014-03-26 2016-11-22 Lenovo (Singapore) Pte. Ltd. Proximity-based display scaling
US9423901B2 (en) * 2014-03-26 2016-08-23 Intel Corporation System and method to control screen capture
US10691324B2 (en) * 2014-06-03 2020-06-23 Flow Labs, Inc. Dynamically populating a display and entering a selection interaction mode based on movement of a pointer along a navigation path
CN118192869A (zh) 2014-06-27 2024-06-14 苹果公司 尺寸减小的用户界面
EP3176675B1 (en) * 2014-07-30 2021-08-25 Sony Group Corporation Information processing device, information processing method and program
CN105446419A (zh) * 2014-08-12 2016-03-30 富泰华工业（深圳）有限公司 电子装置及屏幕翻转方法
TWI676127B (zh) 2014-09-02 2019-11-01 美商蘋果公司 關於電子郵件使用者介面之方法、系統、電子器件及電腦可讀儲存媒體
WO2016036510A1 (en) 2014-09-02 2016-03-10 Apple Inc. Music user interface
US9684394B2 (en) 2014-09-02 2017-06-20 Apple Inc. Button functionality
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
CN105808091B (zh) * 2014-12-31 2022-06-24 创新先进技术有限公司 调整界面操作图标分布范围的装置、方法及触摸屏设备
CN105988563A (zh) * 2015-02-09 2016-10-05 富泰华工业（深圳）有限公司 电子装置的显示界面控制系统及其控制方法
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
JP6529332B2 (ja) * 2015-05-13 2019-06-12 キヤノン株式会社 電子機器およびその制御方法
CN105094619B (zh) * 2015-08-27 2017-08-08 广东欧珀移动通信有限公司 一种图片翻转控制方法及移动终端
RU2632131C2 (ru) 2015-08-28 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и устройство для создания рекомендуемого списка содержимого
RU2632100C2 (ru) 2015-09-28 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и сервер создания рекомендованного набора элементов
RU2629638C2 (ru) 2015-09-28 2017-08-30 Общество С Ограниченной Ответственностью "Яндекс" Способ и сервер создания рекомендуемого набора элементов для пользователя
RU2635065C2 (ru) * 2015-09-29 2017-11-08 Общество С Ограниченной Ответственностью "Яндекс" Способ (варианты) и электронное устройство (варианты) взаимодействия с элементом потока содержимого
US9817570B2 (en) 2015-11-17 2017-11-14 International Business Machines Corporation Three dimensional keyboard with rotatable keys
US10176786B2 (en) * 2015-12-01 2019-01-08 Lenovo (Singapore) Pte. Ltd. Preventing screen rotation during use
JP6508122B2 (ja) * 2016-05-11 2019-05-08 京セラドキュメントソリューションズ株式会社 操作入力装置、携帯端末及び操作入力方法
RU2632144C1 (ru) 2016-05-12 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Компьютерный способ создания интерфейса рекомендации контента
AU2017100670C4 (en) 2016-06-12 2019-11-21 Apple Inc. User interfaces for retrieving contextually relevant media content
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
RU2636702C1 (ru) 2016-07-07 2017-11-27 Общество С Ограниченной Ответственностью "Яндекс" Способ и устройство для выбора сетевого ресурса в качестве источника содержимого для системы рекомендаций
RU2632132C1 (ru) 2016-07-07 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и устройство для создания рекомендаций содержимого в системе рекомендаций
USD882600S1 (en) 2017-01-13 2020-04-28 Yandex Europe Ag Display screen with graphical user interface
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
KR102373510B1 (ko) * 2017-08-11 2022-03-11 삼성전자주식회사 디스플레이를 회전함에 따라 컨텐츠를 시각화 하는 디스플레이 장치 및 이의 제어 방법
US11402981B2 (en) 2017-08-11 2022-08-02 Samsung Electronics Co., Ltd. Display device for visualizing contents as the display is rotated and control method thereof
US10582181B2 (en) * 2018-03-27 2020-03-03 Honeywell International Inc. Panoramic vision system with parallax mitigation
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
DK179896B1 (en) 2018-09-11 2019-08-30 Apple Inc. CONTENT-BASED TACTILE OUTPUTS
RU2720952C2 (ru) 2018-09-14 2020-05-15 Общество С Ограниченной Ответственностью "Яндекс" Способ и система для создания рекомендации цифрового содержимого
RU2714594C1 (ru) 2018-09-14 2020-02-18 Общество С Ограниченной Ответственностью "Яндекс" Способ и система определения параметра релевантность для элементов содержимого
RU2720899C2 (ru) 2018-09-14 2020-05-14 Общество С Ограниченной Ответственностью "Яндекс" Способ и система для определения зависящих от пользователя пропорций содержимого для рекомендации
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
RU2725659C2 (ru) 2018-10-08 2020-07-03 Общество С Ограниченной Ответственностью "Яндекс" Способ и система для оценивания данных о взаимодействиях пользователь-элемент
RU2731335C2 (ru) 2018-10-09 2020-09-01 Общество С Ограниченной Ответственностью "Яндекс" Способ и система для формирования рекомендаций цифрового контента
DK201970535A1 (en) 2019-05-06 2020-12-21 Apple Inc Media browsing user interface with intelligently selected representative media items
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
RU2757406C1 (ru) 2019-09-09 2021-10-15 Общество С Ограниченной Ответственностью «Яндекс» Способ и система для обеспечения уровня сервиса при рекламе элемента контента
US12008216B1 (en) * 2020-06-29 2024-06-11 Apple Inc. Displaying a volumetric representation within a tab
CN112619142B (zh) * 2020-12-29 2022-09-02 珠海金山数字网络科技有限公司 目标对象控制方法及装置
CN112784143B (zh) * 2020-12-29 2023-12-29 金蝶软件（中国）有限公司 基于可视化计算引擎的数据处理方法、系统和计算机设备
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US20220382443A1 (en) * 2021-06-01 2022-12-01 Apple Inc. Aggregated content item user interfaces

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147770A (ja) * 1999-11-19 2001-05-29 Nec Corp 無線通信を利用した店舗向け情報処理システム及び携帯情報端末
EP1600914A4 (en) * 2003-02-20 2007-07-25 Shimane Prefecture IMAGE DISPLAY DEVICE EQUIPPED WITH PROTECTION
JP3977780B2 (ja) 2003-06-20 2007-09-19 株式会社日立製作所 ガスタービン
US7669177B2 (en) * 2003-10-24 2010-02-23 Microsoft Corporation System and method for preference application installation and execution
JP2005221816A (ja) * 2004-02-06 2005-08-18 Sharp Corp 電子装置
KR101002807B1 (ko) * 2005-02-23 2010-12-21 삼성전자주식회사 메뉴 화면을 표시하는 단말기에서 메뉴 네비게이션을 제어하는 장치 및 방법
EP1903425A4 (en) * 2005-07-08 2010-12-22 Mitsubishi Electric Corp SENSITIVE PANEL DISPLAY DEVICE AND PORTABLE APPARATUS
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US8462109B2 (en) * 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
TWI394848B (zh) * 2007-10-10 2013-05-01 Nippon Steel & Sumikin Sst 雙相不銹鋼線材、鋼線及螺釘以及其製造方法
US20090187862A1 (en) * 2008-01-22 2009-07-23 Sony Corporation Method and apparatus for the intuitive browsing of content
JP5537044B2 (ja) * 2008-05-30 2014-07-02 キヤノン株式会社 画像表示装置及びその制御方法、コンピュータプログラム
KR101505198B1 (ko) * 2008-08-18 2015-03-23 엘지전자 주식회사 휴대 단말기 및 그 구동 방법
US8788977B2 (en) * 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism
US8558803B2 (en) * 2008-11-28 2013-10-15 Samsung Electronics Co., Ltd. Input device for portable terminal and method thereof
KR101530546B1 (ko) 2008-11-28 2015-06-23 삼성전자주식회사 휴대 단말기의 입력 장치 및 방법
US20100156907A1 (en) * 2008-12-23 2010-06-24 Microsoft Corporation Display surface tracking
US8132120B2 (en) * 2008-12-29 2012-03-06 Verizon Patent And Licensing Inc. Interface cube for mobile device
JP2010181956A (ja) * 2009-02-03 2010-08-19 Ricoh Co Ltd 電子機器、画像記録再生装置及びヘルプ情報の表示制御方法
JP5168186B2 (ja) 2009-02-24 2013-03-21 日産自動車株式会社 画像処理装置
KR20110036463A (ko) * 2009-10-01 2011-04-07 엘지전자 주식회사 이동단말기 및 그의 브라우징 방법
TW201140420A (en) * 2010-06-15 2011-11-16 Wistron Neweb Corp User interface and electronic device

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
국제공개특허 제2010-059956호(2010.05.27.) 1부.*
한국공개특허 제10-2010-0061259호(2010.06.07.) 1부.*

Also Published As

Publication number Publication date
CN102402328B (zh) 2016-01-06
RU2586015C2 (ru) 2016-06-10
RU2011136330A (ru) 2013-03-10
KR101844464B1 (ko) 2018-04-03
US9958971B2 (en) 2018-05-01
JP2012058901A (ja) 2012-03-22
KR20180034372A (ko) 2018-04-04
KR20190049670A (ko) 2019-05-09
CN202281996U (zh) 2012-06-20
US9098248B2 (en) 2015-08-04
CN102402328A (zh) 2012-04-04
JP5621422B2 (ja) 2014-11-12
EP2426572A3 (en) 2013-07-10
US20120056830A1 (en) 2012-03-08
KR20120025976A (ko) 2012-03-16
US20150338948A1 (en) 2015-11-26
KR102117444B1 (ko) 2020-06-09
EP2426572A2 (en) 2012-03-07

Similar Documents

Publication Publication Date Title
KR101976071B1 (ko) 정보 처리 장치, 컴퓨터 판독가능 기록 매체, 및 제어 방법
US10635191B2 (en) Information processing apparatus, program, and control method
EP2224321B1 (en) Information processing apparatus and display control method
KR101191574B1 (ko) 이미지 기반 브라우징을 이용하는 미디어 재생기
US9280265B2 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
US20130100051A1 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
US20120284668A1 (en) Systems and methods for interface management
US20130100050A1 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
KR20100061259A (ko) 휴대 단말기의 입력 장치 및 방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant