WO2017183652A1 - 携帯端末装置 - Google Patents
携帯端末装置 Download PDFInfo
- Publication number
- WO2017183652A1 WO2017183652A1 PCT/JP2017/015661 JP2017015661W WO2017183652A1 WO 2017183652 A1 WO2017183652 A1 WO 2017183652A1 JP 2017015661 W JP2017015661 W JP 2017015661W WO 2017183652 A1 WO2017183652 A1 WO 2017183652A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- display
- terminal device
- mobile terminal
- control unit
- display control
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Definitions
- the present invention relates to a technology of a mobile terminal device.
- the present invention also relates to a user interface technique for a display screen.
- Mobile terminal devices such as smartphones that enable input operations by touching a display screen of a touch panel with a user's finger or the like are widespread.
- the mobile terminal device controls display of content and the like in the display screen according to the touch input operation.
- the mobile terminal device acquires content information from, for example, the Internet in response to an input operation and displays it on the display screen. At that time, if the entire content cannot be displayed in the display screen, the mobile terminal device displays a part of the display information of the content.
- the mobile terminal device accepts various operations such as tap, swipe, flick, and pinch as touch input operations in the display screen. For example, in the case of a swipe operation, the user touches the display screen with a finger, moves the touched state, and then releases the finger.
- the user touches the display screen with a finger and then quickly moves the finger and then releases the finger.
- the mobile terminal device scrolls the display range of the content in the display screen according to the touch input operation. Accordingly, the user can browse other part or the whole of the content on the display screen.
- the mobile terminal device is provided with a screen called a basic operation screen or a home screen.
- a screen For example, on the home screen, icons of a plurality of applications such as mail and browser are arranged.
- a plurality of home screens may be provided.
- an icon is selected by an input operation on the home screen, an application associated with the icon is executed and an application screen is displayed.
- a plurality of applications are executed, a plurality of application screens are provided.
- On the application screen all or part of the content or the like is displayed. The user can switch a display range such as a home screen displayed in the display screen by a touch input operation.
- Patent Document 1 JP, 2011-76349, A (patent documents 1) is mentioned as a prior art example about the user interface of the above portable terminal devices.
- Patent Document 1 describes the following as a portable information terminal or the like.
- the portable information terminal detects the tilt of the device, generates tilt information indicating the direction and size of the tilt, and based on the tilt information about the tilt detected in a state where the touch operation on the screen is maintained. To change the displayed image.
- touch sensors In recent years, not only touch sensors but also touch sensors that can detect a pressed state have been realized as touch panels and portable terminal devices.
- the size of the display screen of the mobile terminal device is limited, and when the size of the content display information is large or there are a large number of home screens, a part of the content or a plurality of screens in the display screen Only a part of is the display range.
- a touch input operation such as swipe for scrolling the display range. Repeating touch input operations many times takes time and puts a burden on the body.
- the finger may not reach when the user searches for a desired icon or the like and touches the location. In this case, it is necessary to take measures such as changing the state of the terminal handle or operating with both hands for the desired operation.
- An object of the present invention relates to a user interface technology for a mobile terminal device and a display screen, a technology capable of realizing a change in the display range of content or the like with less effort corresponding to various states of the user, and realizing a more suitable usability. Is to provide.
- a representative embodiment of the present invention is a mobile terminal device, and has the following configuration.
- a mobile terminal device includes a display unit that displays information on a display screen, a press detection unit that detects a press on the display screen, and a control that changes a display range of the information displayed on the display screen.
- a display control unit that performs display on the display screen in a state where the press is held when the press detection unit detects a press of a predetermined magnitude or more. The display range of the information to be changed is changed.
- a mobile terminal device includes a display unit that displays information on a display screen, a press detection unit that detects a press on the display screen, and a control that changes a display range of the information displayed on the display screen.
- a display control unit that performs the display, and the display control unit is configured to display the display in a state where the first press is not held after the first detection of a predetermined magnitude or more is detected by the press detection unit. Change the range.
- the user interface technology for the mobile terminal device and the display screen it is possible to change the display range of content or the like with less effort corresponding to various states of the user, More convenient usability can be realized.
- FIG. 3 is a diagram illustrating a functional block configuration of the mobile terminal device according to the first embodiment.
- FIG. FIG. 3 is a diagram illustrating a configuration of software or the like of the mobile terminal device according to the first embodiment.
- FIG. 6 is a diagram showing content display on an application screen in the mobile terminal device according to the first embodiment.
- FIG. 3 is a diagram illustrating detection of a touch press sensor in the mobile terminal device according to the first embodiment.
- FIG. 3 is a diagram showing a usage state, an inclination angle, an operation of tilting, and the like by a user as viewed from the side in the mobile terminal device of the first embodiment. It is a figure which shows the operation etc.
- FIG. 10 is a diagram showing content scroll display as display range change control in the mobile terminal device of the first embodiment.
- FIG. 5 is a diagram illustrating a flow of control processing in the mobile terminal device according to the first embodiment. It is a figure which shows the relationship between a press and scroll speed in the portable terminal device of Embodiment 1.
- FIG. It is a figure shown about the switching display of a display screen and several home screens in the portable terminal device of Embodiment 2 of this invention.
- FIG. 11 is a diagram illustrating operations on a home screen and screen switching as display control in the mobile terminal device according to the second embodiment.
- FIG. 10 is a diagram illustrating a flow of control processing in the mobile terminal device according to the second embodiment.
- FIG. 10 is a diagram showing a flow of a first direction screen switching process in the mobile terminal device of the second embodiment.
- FIG. 10 is a diagram illustrating a flow of second direction screen switching processing in the mobile terminal device according to the second embodiment.
- FIG. 10 is a diagram showing a display state of a display screen in a mobile terminal device according to a modification of the second embodiment. It is a figure which shows the historical information of a content with the portable terminal device of the modification of Embodiment 2.
- FIG. FIG. 10 is a diagram illustrating a plurality of page information of content in the mobile terminal device according to the second embodiment.
- FIG. 10 is a diagram illustrating a flow of control processing in the mobile terminal device according to the third embodiment.
- FIG. 10 is a diagram illustrating a relationship between a press and a time interval in the mobile terminal device according to the third embodiment. It is a figure which shows operation according to the right and left hand in the portable terminal device of Embodiment 3.
- FIG. 10 is a figure which shows display control in the portable terminal device of Embodiment 4 of this invention.
- FIG. 10 is a diagram illustrating a flow of control processing in the mobile terminal device according to the fourth embodiment.
- FIG. 10 is a diagram illustrating a flow of an icon arrangement change process in the mobile terminal device according to the fourth embodiment.
- FIG. 10 is a diagram illustrating a flow of control processing in the mobile terminal device according to the fifth embodiment. It is a figure which shows the structure outline
- FIG. 20 is a diagram illustrating a flow of control processing in the mobile terminal device according to the sixth embodiment. It is a figure which shows the case where it applies to a smart watch with the portable terminal device of Embodiment 6.
- FIG. It is a figure which shows operation and display control as a structure outline
- FIG. 25 is a diagram illustrating a flow of control processing in the mobile terminal device according to the seventh embodiment.
- FIG. 38 is a diagram illustrating display control of a mobile terminal device according to a first modification of the seventh embodiment.
- FIG. 38 is a diagram illustrating display control of a mobile terminal device according to a second modification of the seventh embodiment.
- FIG. 38 is a diagram illustrating display control of a mobile terminal device according to a third modification of the seventh embodiment. It is a figure which shows the 1st state of operation and display control as a structure outline
- FIG. 25 is a diagram illustrating a second state of operation and display control in the mobile terminal device according to the eighth embodiment.
- FIG. 25 is a diagram showing a change in display range in the mobile terminal device according to the eighth embodiment.
- FIG. 25 is a diagram illustrating a flow of control processing in the mobile terminal device according to the eighth embodiment. It is a figure which shows display control with the portable terminal device of Embodiment 9 of this invention. It is a figure shown about distinction of the position of touch press, and the number in the portable terminal device of the modification of Embodiment 9.
- FIG. It is a figure shown about the display control of arrangement
- Embodiment 1 A mobile terminal device according to Embodiment 1 of the present invention will be described with reference to FIGS.
- FIG. 1 shows a schematic configuration of the mobile terminal device according to the first embodiment.
- FIG. 1 shows a state in which the user holds the casing 1 of the mobile terminal device with the left hand and touches and presses a location in the display screen 2 with the thumb.
- the mobile terminal device is tilted with an angle of absolute tilt ⁇ with respect to the horizontal plane and the horizontal direction.
- On the display screen 2 a part of the entire display information 3 such as content is displayed as a display range 4.
- the X direction, the Y direction, and the Z direction are shown.
- the X direction and the Y direction are directions that form a plane of the housing 1, the display screen 2, the display information 3 of the content, and the like.
- the X direction is the horizontal direction in the screen, the horizontal direction, and the left-right direction.
- the Y direction is the vertical direction in the screen, the vertical direction, and the vertical direction.
- the Z direction is a direction perpendicular to the X direction and the Y direction, and is a thickness direction of the housing 1 or the like.
- the mobile terminal device includes a display unit, a touch detection unit, a press detection unit, an inclination angle detection unit, a display control unit, and the like.
- the display unit displays display information 3 such as content on the display screen 2.
- the touch detection unit detects the presence / absence of a touch on the display screen 2 and position coordinates.
- the pressure detection unit detects the strength of the pressure on the display screen 2 and the like.
- the inclination angle detection unit detects an angle ⁇ , an angle ⁇ n, and the like as the inclination angle of the mobile terminal device.
- the display control unit controls the scrolls 5, 6 and the like as control for changing the display range 4 of the display information 3 based on the state of the pressure and the tilt angle.
- the pressure detection unit detects a pressure greater than a predetermined size.
- the tilt angle detection unit detects the tilt angle of the housing 1 at that time.
- the display control unit sets the tilt angle ⁇ detected at that time as the reference angle ⁇ 0.
- the user performs an operation of tilting the housing 1 while touching and pressing the display screen 2.
- the housing 1 is rotated with a predetermined rotation axis and direction.
- the tilt angle detector similarly detects the tilt angle ⁇ n associated with the tilt operation and rotation.
- the display control unit performs control to change the display range 4 on the display screen 2 according to the magnitude of the difference between the tilt angle ⁇ n detected in the state where the touch and the press are held and the reference angle ⁇ 0. .
- the display control unit controls display operations such as scrolls 5 and 6 and screen switching.
- the scrolls 5 and 6 are operations for continuously moving the display range 4 displayed on the display screen 2 up and down in the Y direction.
- the screen switching is an operation for moving the display range 4 so as to be switched in units of a partial area of the content or a screen described later.
- the user lifts his / her finger from the display screen 2 in a state where the desired content or screen portion is displayed by the operation of scrolling 5, 6 or the like.
- a press detection part detects the state which does not have the press beyond the predetermined magnitude
- the display control unit stops the scrolls 5, 6 and the like based on the detection of the state where there is no press.
- the lower side of FIG. 1 shows the above control on the time axis.
- the mobile terminal device first enters a specific control mode when a touch pressing operation with a pressure of a predetermined size or more is performed on the display screen 2 from the normal mode.
- the control mode the reference angle ⁇ 0 is set, and change control of the display range 4 is performed in accordance with an operation of tilting while the pressure is maintained.
- the control mode is canceled, and the normal mode is restored. In this way, the user can quickly browse a desired location by changing the display range 4 of the content or the like by a simple operation.
- FIG. 2 shows a functional block configuration of the mobile terminal device according to the first embodiment.
- the portable terminal device of Embodiment 1 is a smartphone.
- As the mobile terminal device a mobile phone, a tablet PC, a PDA, and other various portable digital devices can be applied.
- the mobile terminal device includes a main control unit 101, a system bus 102, a ROM 103, a RAM 104, a storage unit 105, an operation unit 106, a vibration generation unit 107, an expansion interface unit 108, a sensor unit 110, a video processing unit 120, The audio processing unit 130, the communication processing unit 140, and the like are included.
- the main control unit 101 is constituted by a microprocessor unit or the like, and controls the entire portable terminal device according to program processing.
- the system bus 102 is a data communication path for performing data transmission / reception between the main control unit 101 and each unit.
- the ROM 103 is a memory that stores basic operation programs such as an OS, application programs, and the like.
- a rewritable ROM such as an EEPROM or a flash ROM is used.
- the RAM 104 serves as a work area when executing a basic operation program or an application program.
- the storage unit 105 stores application programs and the like.
- the operation unit 106 includes an input device that enables an input operation by the user, and includes operation keys.
- the operation keys include operation keys that enable power on / off and standby of the mobile terminal device, operation keys for displaying a basic operation screen, and the like.
- the vibration generating unit 107 vibrates the mobile terminal device with an eccentric motor or the like. Thereby, a state can be conveyed to a user.
- the extension interface unit 108 is an interface group for extending the functions of the mobile terminal device.
- the extension interface unit 108 is configured with, for example, a USB interface, a memory interface, and the like.
- the USB interface connects a keyboard and other USB devices.
- the memory interface connects a memory card and other memory media and performs data transmission / reception.
- the sensor unit 110 is a sensor group for detecting a state related to the mobile terminal device.
- the sensor unit 110 includes a GPS receiving unit 111, an acceleration sensor 112, a gyro sensor 113, a geomagnetic sensor 114, an illuminance sensor 115, a proximity sensor 116, and a touch press sensor 117.
- the sensor unit 110 may include other sensors.
- the position of the mobile terminal device can be detected as, for example, latitude and longitude.
- the acceleration sensor 112 and the gyro sensor 113 the movement and inclination of the mobile terminal device can be detected.
- the angle of the inclination with respect to the horizontal plane can be detected as at least an absolute inclination.
- the direction of the mobile terminal device can be detected using the geomagnetic sensor 114.
- the illuminance sensor 115 the brightness around the portable terminal device can be detected.
- the proximity sensor 116 it is possible to detect the proximity state of the portable terminal device with the surrounding objects.
- the touch pressure sensor 117 it is possible to detect the state of touch and press of the finger on the display screen 2 of the display unit 121. For example, presence / absence of touch and touch position coordinates can be detected as the touch state. For example, the presence or absence of pressing and the strength of pressing can be detected as the pressing state.
- the touch pressure sensor 117 is not limited to an integrated type of the touch sensor and the pressure sensor, and the touch sensor and the pressure sensor may be provided as separate devices.
- the video processing unit 120 includes a display unit 121, a video signal processing unit 122, a first video input unit 123, and a second video input unit 124.
- the display unit 121 constitutes the display screen 2 and includes a display device such as a liquid crystal panel.
- the display unit 121 displays the video data processed by the video signal processing unit 122 on the display screen 2.
- the display unit 121 corresponds to the function of the touch pressure sensor 117, and may include a touch panel of a type that incorporates the touch pressure sensor 117.
- the video signal processing unit 122 includes a video RAM and the like, and drives the display unit 121 based on video data input to the video RAM.
- the video signal processing unit 122 performs video data format conversion, menu and other OSD signal superimposition processing, and the like as necessary.
- the first video input unit 123 and the second video input unit 124 are configured by, for example, a camera unit.
- the camera unit obtains video data of surroundings and objects by converting light input from a lens into an electrical signal using an element such as a CCD or a CMOS sensor.
- the audio processing unit 130 includes an audio output unit 131, an audio signal processing unit 132, and an audio input unit 133.
- the audio output unit 131 includes a speaker and outputs the audio signal processed by the audio signal processing unit 132 as audio.
- the voice input unit 133 includes a microphone, and converts ambient voice into voice data for input.
- the communication processing unit 140 includes a LAN communication unit 141, a telephone network communication unit 142, and a short-range communication unit 143.
- the LAN communication unit 141 performs wireless communication connection and data transmission / reception with a wireless communication access point.
- the telephone network communication unit 142 performs wireless communication connection, telephone communication, and data transmission / reception with a base station of the mobile telephone communication network.
- the short-range communication unit 143 corresponds to a communication interface such as BlueTooth (registered trademark), for example, and performs short-range wireless communication with a corresponding device.
- Each unit of the communication processing unit 140 includes a coding circuit, a decoding circuit, an antenna, and the like.
- the communication processing unit 140 may include an infrared communication unit.
- FIG. 3 particularly shows the configuration of programs and data in the ROM 103, the RAM 104, and the storage unit 105 as the software configuration of the mobile terminal device according to the first embodiment.
- the ROM 103 stores a basic operation program 103a and other programs 103b.
- the RAM 104 includes a basic operation execution unit 104a, an application execution unit 104b, a temporary storage area 104c, and the like. When the basic operation program or the like is executed, data is held in the temporary storage area 104c as necessary.
- the storage unit 105 includes an application program 105a, various information / data storage areas 105b, and the like.
- the application program 105a is a program for realizing various functions such as mail, a browser, a map, a game, and an electronic book reader.
- the various information / data storage area 105b stores various information and data such as setting information of the mobile terminal device and setting information for each application.
- the storage unit 105 includes a nonvolatile storage device such as a flash ROM, SSD, or HDD, and holds stored information even when power is not supplied to the mobile terminal device.
- ROM 103 and RAM 104 may be integrated with the main control unit 101. Some or all of the functions of the ROM 103 may alternatively be realized by a partial storage area of the storage unit 105.
- the main control unit 101 implements the basic operation executing unit 104a by reading out the basic operation program 103a from the ROM 103, developing it in the RAM 104, and executing it.
- the main control unit 101 implements the application execution unit 104b by reading the application program 105a from the storage unit 105, developing it in the RAM 104, and executing it.
- the basic operation execution unit 104a includes a touch detection unit 201, a press detection unit 202, an inclination angle detection unit 203, a display control unit 204, and a vibration control unit 205 as each execution unit. Each execution part cooperates.
- the touch detection unit 201 performs a touch detection process using the touch pressure sensor 117.
- the touch detection unit 201 realizes a known function for detecting a touch at a plurality of locations in the display screen 2.
- the touch detection unit 201 realizes a known function for detecting an operation such as a tap, swipe, flick, or pinch.
- the pressure detection unit 202 performs a pressure detection process using the touch pressure sensor 117.
- the press detection unit 202 detects the presence / absence of the press at the touch position and the strength of the press.
- the tilt angle detection unit 203 uses the acceleration sensor 112 and the gyro sensor 113 to perform a tilt angle detection process of the mobile terminal device.
- the display control unit 204 performs processing for controlling the display content of the display screen 2 in accordance with an input operation on the display screen 2 of the display unit 121. This process includes a control process such as a scroll display operation.
- the vibration control unit 205 uses the vibration generation unit 107 to perform processing for causing the mobile terminal device to generate vibration.
- the OS of the mobile terminal device realized by the basic operation program 103a includes a known graphical user interface control unit.
- the graphical user interface control unit realizes a function of obtaining input information through a touch input operation on the display screen 2 and a function of controlling output to the display screen 2 based on a control process corresponding to the input information.
- FIG. 4 shows an example of the appearance of the mobile terminal device and content display on the application screen.
- the left side of FIG. 4 shows the configuration of the front surface of the housing 1 having the display screen 2, and the right side shows the configuration of the back surface.
- a substantially rectangular display screen 2 is provided on the surface of the substantially flat housing 1.
- a content display information 401 in this example, a partial area of a Web page on an application screen by a Web browser is displayed. Note that text, images, and the like in the Web page are simply illustrated with symbols such as ⁇ , ⁇ , ⁇ , and ⁇ .
- an area 402 for displaying information such as a clock and an address is also provided.
- the housing 1 includes a front camera unit 423 corresponding to the first video input unit 123, a rear camera unit 424 corresponding to the second video input unit 124, a speaker 431 of the audio output unit 131, and a microphone of the audio input unit 133. 433, etc. are provided.
- the housing 1 has a power key k1 and a home key k2 as operation keys.
- the power key k1 enables input operations for turning on / off the power of the mobile terminal device and shifting / returning to the standby state.
- the power is turned on / off by pressing the power key k1 for a predetermined time or longer.
- the home key k2 enables an input operation related to display of a home screen which is a basic operation screen described later. When the application key is displayed, the home key k2 is pressed to switch to the home screen display.
- the user performs an input operation of touching the location of an object such as a link 7 of the content in the application screen on the display screen 2 or an icon in the home screen. Accordingly, the mobile terminal device reads and displays the content associated with the link 7, for example. For example, the mobile terminal device executes an application associated with an icon and displays an application screen.
- FIG. 5 shows detection of touch position coordinates and press using the touch press sensor 117.
- An area 500 corresponding to the display screen 2 and the touch pressure sensor 117 is included.
- An area 500 is an area where the touch and press states can be detected.
- the region 500 has position coordinates (X, Y) on the planes in the X direction and the Y direction.
- the position of a point touched or pressed by a finger in the region 500 is indicated as position coordinates (X1, Y1).
- the origin of the area 500 is the upper left position coordinate (0, 0), the horizontal width of the area 500 is Xm, and the vertical width is Ym.
- the touch detection unit 201 uses the touch pressure sensor 117 to detect the position coordinates (X1, Y1) of the touched point in the region 500.
- the pressure detection unit 202 uses the touch pressure sensor 117 to detect the strength of the pressure at the point pressed with the touch. The strength of pressing is Pn.
- the touch detection unit 201 can detect the number of touches, the coordinates of each touch position, and the like when a plurality of fingers are simultaneously touched in the region 500 using the touch pressure sensor 117.
- the touch detection and press detection methods are not particularly limited, and known methods can be applied.
- a capacitive touch press detection method can be applied. In this method, a change in capacitance due to the proximity or pressing of a finger to the display screen is detected as a voltage value, and the touch position coordinates and the strength of pressing are obtained by calculation based on the voltage value.
- FIG. 6 shows a state in which the user uses the portable terminal device with his / her hand, an inclination angle of the portable terminal device, an operation of inclining, and the like when the user and the housing 1 are viewed from the side.
- the plane corresponding to the housing 1 and the display screen 2 is inclined with respect to the horizontal plane or the vertical plane.
- it has an absolute inclination angle ⁇ with respect to the horizontal direction and the horizontal plane.
- the mobile terminal device of the first embodiment detects this angle ⁇ and sets it as the reference angle ⁇ 0.
- the user performs an operation of tilting the housing 1 for scrolling or the like from the state of the reference angle ⁇ 0.
- FIG. 7 shows the tilting operation and the like corresponding to FIG. 6 as viewed from the front of the display screen 2 with the user's line of sight.
- a point near the center of the display screen 2 in the X direction and the Y direction is touched. Further, it is assumed that this point is a reference point 601 for supporting the portable terminal device by hand.
- a rotation axis in the tilting operation is an axis in the X direction and is indicated by a line 701.
- the absolute tilt angle when the operation of further tilting with respect to the reference angle ⁇ 0 is ⁇ n.
- the angle ⁇ n is an inclination angle of the display screen 2 and the content with respect to the Y direction.
- a difference value ( ⁇ n ⁇ 0) between the reference angle ⁇ 0 and the angle ⁇ n is provided.
- the positive direction and the negative direction are shown with respect to the tilting operation and the tilt angle ⁇ n.
- the positive direction is the direction in which the upper side of the display screen 2 is tilted forward when viewed from the user when the support reference point is fixed, and the negative direction is tilted backward when the upper side of the display screen 2 is viewed from the user. The direction of the case.
- FIG. 8 shows a content scroll display operation as the display range change control in the portable terminal device of the first embodiment.
- the application screen in the display screen 2 includes an area 801 where the content 800 can be displayed.
- a part of the display information 3 of the content 800 is displayed as a display range 4 in the area 801.
- the content 800 is an example of a Web page, and actual data is composed of HTML or the like.
- In the display information 3 of the content 800 a case where a link 7 is included between areas such as text and images is shown.
- the display information 3 of the content 800 is changed according to the size of the area 801 by the application.
- the total size of the display information 3 of the content 800 that is, the standard size when there is no enlargement / reduction, etc. is larger than the size of the area 801. For this reason, the entire display information 3 cannot be displayed in the area 801. Therefore, a part of the display information 3 of the content 800 is displayed as the display range 4 in the area 801.
- the display range 4 is a range when the display information 3 of the content 800 is displayed in the area 801 of the display screen 2.
- the display range 4 indicates a case of an intermediate region of the Web page, and includes a part of a region indicated by x and a part of a region indicated by links 7 and ⁇ .
- the user When the user wants to browse other parts of the content 800 that is not displayed from the state of the display range 4 displayed in the area 801, the user conventionally scrolls by swiping or flicking.
- This example shows a case where the display information 3 can be scrolled up or down in the Y direction.
- it is necessary to repeat an operation such as swipe many times, which is troublesome.
- the display range 4 in the region 801 can be scrolled by an operation in which the user presses the region 801 on the display screen 2 and tilts the housing 1.
- the scroll 5 is a first direction scroll, and indicates a head in the content 800 or a relatively upward scroll.
- the display range 4 is moved upward, and a part of the content 800 in the relatively upward direction is displayed in the area 801.
- the scroll 6 is a second direction scroll, and indicates the end in the content 800 or a relatively downward scroll.
- the display range 4 is moved downward, and a relatively lower part of the content 800 is displayed in the area 801.
- the image portion moves in the direction opposite to the scroll direction.
- the display control in the portable terminal device of the first embodiment is as follows.
- the display control unit 204 of the mobile terminal device accepts a specific touch pressing operation and an operation of tilting the housing 1 by the user, and scrolls the display range 4. Perform range change control.
- the user is initially in a handheld state as shown in FIG. 6 and is viewing a part of the content 800 as the display range 4 as shown in FIG.
- the user wants to browse another part of the content 800 from the state, first, the user touches and presses the area 801 of the display screen 2 with a finger. At this time, the user presses with a certain level of strength.
- the portable terminal device shifts to a specific control mode when the strength of the pressing is equal to or greater than a predetermined magnitude.
- the portable terminal device detects the angle ⁇ in FIG. 6 corresponding to the state at that time, and sets it as the reference angle ⁇ 0.
- the reference angle ⁇ 0 is an angle temporarily set for control.
- the user performs an operation of tilting the housing 1 in a desired direction while keeping such a touch and press state. For example, when the user wants to scroll 5 in the upward direction, the user performs an operation of tilting in the negative direction.
- the mobile terminal device detects the angle ⁇ n according to the tilting operation, and detects a difference value ( ⁇ n ⁇ 0) that is the amount of the relative tilt angle.
- the mobile terminal device uses the magnitude of the angle ⁇ n, specifically the difference value ( ⁇ n ⁇ 0), to determine whether or not to scroll, the direction and speed of the scroll, and the like.
- the mobile terminal device controls the scrolling to be different depending on the direction and size of the angle ⁇ n. By this scroll display operation, the display range 4 in the area 801 of the display screen 2 is changed.
- the mobile terminal device performs processing for executing the object, for example, processing for reading and displaying the content of the link 7.
- FIG. 9 shows a flow of control processing for realizing display range change control in the first embodiment.
- the basic operation execution unit 104a particularly the display control unit 204, executes the processing of the flow of FIG.
- the first mode, the second mode, and the third mode are provided as modes that are control states for realizing this flow.
- the management values for each mode are 0, 1, and 2.
- FIG. 9 includes steps S101 to S123. Hereinafter, it demonstrates in order of a step.
- the display control unit 204 reads the content selected by the user.
- the display control unit 204 first displays the top of the content, for example, the area 821 in FIG. Such a display position is determined according to the application and content.
- the mobile terminal device receives an input operation by the user through the operation unit 106 and the touch press sensor 117, and acquires input information corresponding to the input operation.
- the display control unit 204 acquires touch input information through the touch detection unit 201. At that time, the touch detection unit 201 detects the presence / absence of touch and the touch position coordinates (X1, Y1).
- the press detection part 202 detects the presence or absence of a press, and the strength Pn of a press.
- the display control unit 204 branches the process based on the presence / absence of touch based on the input information. If there is a touch (Y), the process proceeds to S105, and if there is no touch (N), the process proceeds to S120.
- the display control unit 204 acquires the touch position coordinates (X1, Y1) from the touch detection unit 201. (S106) In addition, the display control unit 204 acquires the pressure intensity Pn at the touch position from the pressure detection unit 202. (S107) The display control unit 204 compares the pressure intensity Pn acquired in S106 with a predetermined threshold value Pt, determines whether the intensity Pn is greater than or equal to the threshold value Pt, and branches the process. If Pn ⁇ Pt, the process proceeds to S110, and if Pn ⁇ Pt, the process proceeds to S108.
- the display control unit 204 obtains the tilt angle ⁇ n of the mobile terminal device by using the tilt angle detection unit 203.
- the display control unit 204 sets the angle ⁇ n acquired in S110 as the reference angle ⁇ 0.
- the display control unit 204 stores and holds the reference angle ⁇ 0 in the memory.
- the display control unit 204 compares the absolute value
- the display control unit 204 sets the scroll speed Sn to be used for the scroll display operation using the pressure intensity Pn acquired in S106 according to the following equation (1).
- a predetermined reference scroll speed is set to S0.
- the reference scroll speed S0 may be a fixed set value on mounting or a set value that can be variably set by the user.
- the scroll speed Sn is determined so as to increase the reference scroll speed S0 by multiplication according to the magnitude (Pn / Pt) of the pressing strength Pn with respect to the threshold value Pt. That is, the scroll speed Sn can be increased as the user presses stronger.
- the display control unit 204 determines whether the sign of the difference value ( ⁇ n ⁇ 0) between the angle ⁇ n and the reference angle ⁇ 0 is positive or negative, and branches. If it is positive (( ⁇ n ⁇ 0)> 0), the process proceeds to S118. If it is negative (( ⁇ n ⁇ 0) ⁇ 0), the process proceeds to S119. (S118) The display control unit 204 performs a downward scroll process for causing the scroll 6 in FIG. 8 to be performed using the scroll speed Sn set in S116 in response to the forward inclination, and then returns to S103. (S119) The display control unit 204 performs an upward scroll process for causing the scroll 5 of FIG. 8 to be performed using the scroll speed Sn set in S116 in response to the negative inclination, and then returns to S103.
- the display control unit 204 performs processing for acquiring and reading the content specified by the URL of the link 7 from a server on the Internet and displaying the content on the display screen 2.
- the mobile terminal device exits the loop of this flow as indicated by A1, and performs the same processing from the beginning of this flow for new content.
- FIG. 10 shows the relationship between the pressure intensity Pn and the scroll speed Sn regarding the setting of the scroll speed Sn corresponding to step S116 of FIG.
- the horizontal axis represents the pressing strength Pn, and represents, for example, threshold values Pt, 2 ⁇ Pt, and 3 ⁇ Pt.
- the vertical axis represents the scroll speed Sn, for example, the reference scroll speed S0, 2 ⁇ S0, 3 ⁇ S0.
- a straight line 1001 indicates a function corresponding to the expression (1), and the scroll speed Sn increases linearly according to the strength Pn.
- the mobile terminal device of the first embodiment it is possible to change the display range of content and the like with less effort corresponding to various states of the user, and it is possible to realize more convenient usability.
- the mobile terminal device changes the content display range 4 by scroll display control using the pressure Pn and the relative inclination angle ⁇ n.
- the user sets the casing 1 of the mobile terminal device in a handheld state suitable for himself or the situation, for example, a state in which he naturally holds it with one hand.
- the user can set the state as the reference angle ⁇ 0 by pressing at a desired time.
- the user can change the display range 4 by scrolling the display information of the content by directly tilting the housing 1 in a desired direction.
- the user can browse the desired display range 4 quickly with a simple operation without having to repeat the touch operation many times.
- the user can move a desired distance by scrolling with a single operation.
- control angle Since the control angle is entered with a predetermined press as a trigger and the reference angle ⁇ 0 is set, there is no accidental scrolling when a touch occurs unintentionally by the user.
- the user can adjust the scroll speed and the like according to the strength of the press.
- the user can quickly execute a link or the like in conjunction with the scroll operation without requiring a separate touch operation.
- the content that is subject to display range change control is not limited to a Web page, and various types of content such as a photographic image can be applied. For example, when the size of the photographic image is large or enlarged, a part of the photographic image is displayed on the display screen 2. At that time, the scroll control of the first embodiment can be similarly applied. Further, the display range change control is not limited to the scroll display operation, and an enlargement / reduction operation or the like can also be applied. For example, the mobile terminal device displays a photographic image, and when the user performs an operation of tilting while pressing the display screen 2, the display size of the photographic image is enlarged or reduced according to the tilt angle. Thereby, the user can browse a desired part or the whole of the photographic image.
- control correspondence relationship is the downward scroll 6 in the case of a positive inclination and the upward scroll 5 in the case of a negative inclination, but the opposite correspondence relationship may be used.
- the scroll display operation according to the first embodiment is an operation that continuously changes the display range 4, for example, an operation that moves smoothly in units of pixels, but is not limited thereto, and is applicable. For example, an operation of intermittently scrolling at a certain area or distance can be applied.
- step S116 in FIG. 9 the scroll speed Sn is determined to be changed according to the pressing strength Pn, but the present invention is not limited to this.
- the scroll speed Sn may be determined according to the magnitude of the angle ⁇ n using the following equation (2).
- the scroll speed Sn S0 ⁇
- the scroll speed Sn is determined so as to increase the reference scroll speed S0 according to the magnitude of the absolute value
- the relationship in setting the scroll speed Sn is that in FIG. 10, the pressure Pn is replaced with the absolute value
- the scroll speed Sn is determined by a linear function like the straight line 1001, but this is not limited to this.
- it may be determined by a step-like function like a function 1002 in FIG.
- the scroll speed Sn is determined to be a constant value in accordance with the range of the pressure intensity Pn.
- a function including a predetermined upper limit value and lower limit value may be applied, and the scroll speed Sn may be determined within a range from the lower limit value to the upper limit value.
- a linear function but also a non-linear function may be applied.
- the scroll speed Sn may be set to a constant value regardless of the pressing strength Pn and the angle ⁇ n.
- the scroll speed Sn may be set by user setting.
- the user setting means for example, an item for displaying the user setting screen or the like on the display screen 2 and setting the scroll speed Sn or the like may be provided.
- the threshold value Pt related to the pressure intensity Pn in step S107 in FIG. 9 or the threshold value ⁇ t related to the angle ⁇ n in step S115 may be a fixed setting value on mounting or a setting value that can be variably set by user settings. Also good. In the case of a mode in which user setting is possible, the user can set a suitable setting that is easy for the user to operate.
- predetermined information indicating the state of the control mode may be displayed in the display screen 2. This is not limited to the display, and a predetermined sound output or vibration may be generated. Also, when the finger is released and the control mode is released, the display of the predetermined information may be deleted or another predetermined output may be performed.
- the touch duration time may be further determined as a condition.
- the control mode may be shifted to when the touch continuation time at the time of pressing a predetermined size or more is a predetermined threshold value or more.
- FIGS. 1 A portable terminal device according to the second embodiment of the present invention will be described with reference to FIGS.
- the basic configuration of the second embodiment and the like is the same as that of the first embodiment, and hereinafter, components that are different from the first embodiment in the second embodiment will be described.
- FIG. 11 shows switching of the home screen of the display screen 2 and a plurality of home screens in the second embodiment.
- the mobile terminal device switches and displays a plurality of home screens on the display screen 2 in accordance with a specific touch pressing operation.
- the home screen has a plurality of home screens with different contents.
- one home screen is basically displayed.
- One selected home screen among the plurality of home screens corresponds to the display range 4.
- an icon 9 or the like associated with the application is arranged on the background. When the user selects and operates the icon 9, the corresponding application screen is displayed.
- home screens H1 to H5 are provided as a plurality of home screens.
- the home screens H1 to H5 are managed in a virtually layered arrangement as information by the OS of the mobile terminal device. That is, the home screens H1 to H5 are managed as layers L1 to L5.
- the home screen H1 is the top layer L1 and is arranged on the near side.
- the home screen H5 is the bottom layer L5 and is arranged on the back side.
- the number of home screens and layers is increased or decreased as necessary.
- the bottom layer may be connected to the top layer so as to loop.
- the home screens H1 to H5 show a case where they are divided by genre, for example.
- three icons 9 corresponding to applications of communication-related genres such as mail, SNS, and chat are arranged at the bottom.
- icons of genres such as games are arranged on the home screen H2.
- a plurality of home screens can also be set by the user.
- FIG. 12 shows a touch pressing operation on the home screen and a screen switching display operation as the display control of the second embodiment.
- the mobile terminal device receives a specific touch pressing operation by the user, and controls screen switching of a plurality of home screens on the display screen 2 as display range change control.
- the target of display range change control is content display information in the first embodiment, but a plurality of home screens in the second embodiment.
- Embodiment 1 etc. have shown the case where a user can operate a portable terminal device with one hand.
- Embodiment 2 shows a case where the user operates the mobile terminal device with both hands.
- the user holds the portable terminal device with a left hand (not shown) as in FIG.
- the user touches and presses a position in the display screen 2 with a finger of the right hand as shown in FIG.
- one finger and two fingers are selectively used as the touch pressing operation.
- the touch detection unit 201 and the press detection unit 202 use the touch press sensor 117 to distinguish and detect a touch press with one finger and a touch press with two fingers on the display screen 2. That is, a state where a pressure of a predetermined size or more is present at one place in the display screen 2 and a state where a pressure of two places or more in the display screen 2 is simultaneously pressed are detected.
- the display control unit 204 applies two types of screen switching operations according to the use of the two types of touch pressing operations. As shown in FIG. 12, the display control unit 204 controls the first direction and the second direction as the screen switching direction. As a correspondence relationship, in the case of a single finger press, the screen is switched in the first direction, for example, the layer descending direction, and in the case of a two finger press, the screen is switched in the second direction, for example, the layer upward direction. And
- the display control unit 204 displays a plurality of home screens in the layer descending direction, which is the first direction, while a pressure of a predetermined size or more with one finger is detected. , Switch sequentially. In other words, one home screen displayed as the display range 4 on the display screen 2 in a state where the pressure is held is sequentially switched from the front top layer L1 to the back bottom layer L5.
- the display control unit 204 displays the plurality of home screens in the layer ascending direction, which is the second direction, while the pressure of two fingers or more is detected. Then switch sequentially. In other words, one home screen displayed as the display range 4 on the display screen 2 in a state where the pressure is held is sequentially switched from the back bottom layer L5 to the top top layer L1.
- the display control unit 204 stops screen switching.
- FIG. 13 shows a flow of control processing by the display control unit 204 of the mobile terminal device according to the second embodiment.
- FIG. 13 includes steps S201 to S217. Hereinafter, it demonstrates in order of a step.
- the second embodiment there are a first mode, a second mode, a third mode, and a fourth mode as modes.
- the modes are independent and have different meanings.
- a layer of one home screen displayed on the display screen 2 is defined as a layer Ln.
- the display control unit 204 first sets the layer Ln to the top layer L1.
- the display control unit 204 displays the home screen corresponding to the set layer Ln on the display screen 2. Initially, the home screen H1 corresponding to the layer L1 is displayed.
- the display control unit 204 receives a touch press operation through the operation unit 106 and the touch press sensor 117.
- the display control unit 204 performs branching according to presence or absence of touch. If there is a touch, the process proceeds to S206, and if there is no touch, the process proceeds to S214.
- the display control unit 204 acquires touch input information including the touch position coordinates (X1, Y1) detected by the touch detection unit 201. This touch input information includes information for distinguishing between single-finger and two-finger touches.
- the display control unit 204 acquires the strength Pn of the pressure detected by the pressure detection unit 202.
- the display control unit 204 determines whether or not the pressure intensity Pn is greater than or equal to the threshold value Pt, and performs branching. If Pn ⁇ Pt, the process proceeds to S211. If Pn ⁇ Pt, the process proceeds to S209.
- the display control unit 204 stores and holds the touch position coordinates (X1, Y1) in the memory.
- the display control unit 204 determines whether the touch position is one or two based on the touch input information acquired in S206, and performs branching. In the case of one touch, the process proceeds to S212, and in the case of two touches, the process proceeds to S213.
- the display control unit 204 performs a layer lowering process as the first direction screen switching corresponding to one touch. The display control unit 204 updates the setting of the layer Ln as necessary, and returns to S203.
- the display control unit 204 performs layer elevation processing as second direction screen switching corresponding to two touches. The display control unit 204 updates the setting of the layer Ln as necessary, and returns to S203.
- the display control unit 204 determines whether or not the timer value Tn is equal to or greater than a threshold T0 for a predetermined time, and branches. If the value Tn is greater than or equal to the threshold value T0, the process proceeds to S225. If not, the layer descending process in S212 is terminated.
- the display control unit 204 determines whether or not the layer Ln of the home screen displayed on the display screen 2 is the bottom layer (for example, the layer L5), and branches. If it is the bottom layer, the process proceeds to S226, and if not, the process proceeds to S227. (S226) The display control unit 204 uses the vibration control unit 205 to generate a predetermined first vibration pattern. This informs the user that the currently displayed home screen is the home screen H5 corresponding to the bottom layer L5. Then, the layer lowering process in S212 is terminated.
- the display control unit 204 increases the layer Ln displayed on the display screen 2 by 1 so as to lower it. For example, the layer Ln is changed from the first layer L1 to the next layer L2.
- the display control unit 204 uses the vibration control unit 205 to generate a predetermined second vibration pattern. This informs the user that the currently displayed home screen is a home screen corresponding to a layer other than the bottom. For example, when switching to the bottom screen, the display control unit 204 generates a vibration larger than the second vibration as the first vibration. (S229) Thereafter, the display control unit 204 restarts the timer, and ends the layer lowering process in S212.
- FIG. 15 shows details of the layer ascending process in step S213 of FIG. Steps S231 to S239 are included. This process is basically the same concept as the layer descending process of FIG.
- mode 3 (fourth mode).
- the fourth mode represents the layer ascending process.
- the display control unit 204 determines whether or not the layer Ln of the home screen currently displayed on the display screen 2 is the top layer L1, and branches. If it is the top layer L1, the process proceeds to S236, and if not, the process proceeds to S237. In S236, the display control unit 204 uses the vibration control unit 205 to generate a predetermined first vibration pattern. Thus, the user is notified that the currently displayed home screen is the home screen H1 corresponding to the top layer L1. Then, the layer raising process in S213 is terminated.
- the display control unit 204 decreases the layer Ln displayed on the display screen 2 by 1 so as to increase.
- the display control unit 204 uses the vibration control unit 205 to generate a predetermined second vibration pattern. This informs the user that the currently displayed home screen is a home screen corresponding to a layer other than the top layer. For example, when switching to the top screen, the display control unit 204 generates a vibration larger than the second vibration as the first vibration.
- the display control unit 204 starts the timer again, and ends the layer raising process in S213.
- a plurality of home screens are switched and displayed in the first direction or the second direction by pressing the display screen 2 with one or two fingers. can do.
- the user selects a desired home screen from a plurality of home screens, the user does not need to perform an operation such as a swipe many times and can be easily switched by only one operation.
- vibration occurs every time the screen is switched, the user can easily recognize the state of the screen switching.
- Modification (1) The following is possible as a modification of the second embodiment. Not only the simultaneous touch detection of two fingers, but also the simultaneous touch detection of multiple locations by a plurality of fingers may be used. As the correspondence relationship of control, the layer may be raised in the case of one finger, and the layer may be lowered in the case of two fingers. Further, the present invention is not limited to the layered arrangement of a plurality of screens, and can be applied to a case of arranging in parallel in the X direction or the Y direction. Moreover, the form which abbreviate
- FIG. 16 shows a display state of the display screen 2 in the modification.
- a plurality of screens may be displayed in layers or in parallel on the display screen 2.
- the same control as that of the second embodiment can be applied.
- the same control as that of the second embodiment can be applied.
- the home key k2 is pressed twice from the normal home screen state
- a transition is made to a plurality of screen layer display states as shown on the left side of FIG.
- a case where a plurality of application screens G1 to G4 are arranged in layers is shown.
- the application screen G1 is displayed in a state that comes closest to the front as the layer L1.
- the layer display state is switched to the layer display state on the right side of FIG. In this state, the application screen G2 is displayed as the layer L1 closest to the front.
- Modification (3) Information to be subject to display range change control is not limited to a plurality of home screens, but can be similarly applied to a plurality of application screens.
- FIG. 17 shows a case where the content history information in the application screen is used as the target of change control.
- history screens E1 to E3 corresponding to browsing history information of Web pages are shown.
- the latest history screen E1 is the display range 4.
- the history screens E1 to E3, etc. are displayed from the present to the past by the operation of changing the inclination in the Y direction as in the first embodiment, the operation of pressing with one or two fingers as in the second embodiment, etc. Or switch from the past to the current direction to display.
- FIG. 18 shows a case where a plurality of pieces of page information constituting a content in an application screen, for example, an electronic book, is set as a change control target.
- page screens p1 to p3 corresponding to each page are shown.
- the first page screen p1 is the display range 4.
- the page screens p1 to p3 and the like can be switched and displayed in a desired direction by an operation of pressing and changing the tilt in the X direction, an operation of pressing with one or two fingers, and the like.
- FIG. 19 shows display control according to the third embodiment.
- the user uses two types of touch pressing operations properly.
- the mobile terminal device is provided with two types of areas, an upper area R1 and a lower area R2, in the display screen 2, that is, in the area of the home screen.
- the two types of touch pressing operations include a first operation for pressing a location in the upper region R1 and a second operation for pressing a location in the lower region R2.
- the mobile terminal device performs screen switching in the first direction, similarly to the operation on the upper side of FIG. 12 of the second embodiment.
- a boundary line 190 indicated by a one-dot chain line is a boundary line between the upper region R1 and the lower region R2, and is not displayed in the display screen 2.
- FIG. 20 shows a flow of control processing of the display control unit 204 in the third embodiment. Steps S301 to S317 are included. In FIG. 20, the main difference from the flow of FIG. 13 of the second embodiment is the portion of steps S311 to S313. If it is determined in S308 that the pressure Pn is greater than or equal to the threshold value Pt, the process proceeds to S311. For control purposes, the first mode to the fourth mode are provided.
- the display control unit 204 determines whether the touch pressing position indicated by the touch position coordinates (X1, Y1) acquired in S306 is in the upper region R1 or the lower region R2. For example, the display control unit 204 determines that the value Y1 is within the upper region R1 when the value Y1 is smaller than the half value (Ym / 2) of the vertical width Ym, and is within the lower region R2 when larger. .
- the display control unit 204 performs branching according to the distinction between these two types of regions. In the case of the upper region R1, the process proceeds to S312. In the case of the lower region R2, the process proceeds to S313.
- the display control unit 204 performs the layer descending process as the first direction screen switching corresponding to the upper region R1, updates the setting of the layer Ln as necessary, and returns to S303.
- the display control unit 204 performs the layer ascending process as the second direction screen switching corresponding to the lower region R2, updates the setting of the layer Ln as necessary, and returns to S303.
- the display control unit 204 first determines a time interval Kn related to the update of the layer Ln in the screen switching display operation based on the following equation (3).
- the obtained time interval is Kn.
- a predetermined time interval serving as a reference is K0.
- the display control unit 204 uses the pressing strength Pn and the pressing threshold value Pt. In addition, specific values, such as Pt, differ for every embodiment.
- the time interval Kn is calculated such that the time interval K0 is decreased in accordance with the magnitude (Pt / Pn) of the threshold value Pt with respect to the pressing strength Pn. That is, the time interval Kn is determined to be shorter as the pressing strength Pn is larger.
- the display control unit 204 uses the time interval Kn as the threshold value T0 regarding the timer time value Tn.
- the display control unit 204 compares the time value Tn of the timer with the time interval Kn, which is the threshold value T0, and branches. If the value Tn is greater than or equal to the time interval Kn, the process proceeds to S225 or S235, and if not, the process ends.
- the time interval related to layer update at the time of screen switching is variably set according to the pressing strength Pn.
- FIG. 21 shows the relationship between the pressure intensity Pn and the time interval Kn regarding the setting of the time interval Kn.
- the time interval Kn is determined by the curve 2101 according to the equation (3).
- a curve 2101 is a non-linear function.
- a step-like relationship may be applied as in the function 2102, or a linear function may be applied.
- the time interval Kn is determined as a constant value for each range of Pn.
- An upper limit value or a lower limit value may be defined for the time interval Kn.
- the time interval Kn may be a constant value or a user set value regardless of the pressing strength Pn.
- FIG. 22 shows operations according to the left and right hands in the third embodiment.
- A shows 1st operation which presses upper area
- B shows 2nd operation which presses lower area
- C shows 1st operation which presses upper area
- D shows 2nd operation which presses lower area
- the third embodiment has a function capable of handling one-hand operation of both the left hand operation and the right hand operation. The user can select any one-hand operation.
- the first embodiment also has a function that can handle both one-handed operations. In Embodiment 2, both hands and two fingers are used.
- Embodiment 3 the user can switch and display a plurality of home screens by pressing the upper region R1 or the lower region R2 of the display screen 2. Thereby, similarly to the second embodiment, it is possible to easily switch to a desired home screen without performing the touch input operation many times.
- the layer may be raised in the case of the upper region R1, and the layer may be lowered in the case of the lower region R2.
- the positions of the two types of regions, the upper region R1 and the lower region R2, and the boundary line 190 may be fixed setting values on mounting or may be variable setting values that can be set by the user. In the case of user setting, it is possible to set a suitable area that is easy for the user to operate according to the size of the user's finger and the like.
- a boundary line between the upper region R1 and the lower region R2 is displayed on the user setting screen, and the boundary line is moved in accordance with a user input operation and set to a user's desired position. Also good.
- the user touches two desired locations on the user setting screen.
- the mobile terminal device acquires information such as the position and the pressure, and sets a boundary line between the two types of regions in the middle of the positions.
- User settings may be made possible for operations in other embodiments as well.
- the present invention is not limited to the above two types of areas.
- the display screen 2 may be divided into two types of areas, a left area and a right area.
- the screen switching direction or the like is varied.
- a plurality of application screens, a plurality of icons, and the like are arranged in parallel in the X direction.
- the screen is switched or scrolled in the left direction
- the second operation the screen is switched or scrolled in the right direction.
- two types of areas may be set at arbitrary positions in the display screen 2 with arbitrary sizes.
- FIGS. 4 A portable terminal device according to the fourth embodiment of the present invention will be described with reference to FIGS. In the following, constituent parts of the fourth embodiment which are different from the first embodiment will be described.
- a plurality of icons displayed in the home screen are used as the display range change control target, and the arrangement change control of the plurality of icons is performed.
- FIG. 23 shows a display example of the arrangement of a plurality of icons on the home screen as an overview of the display control in the fourth embodiment. Note that the case where the user operates the thumb 1 while holding the housing 1 with the left hand is shown.
- FIG. 23A shows the first arrangement state.
- a plurality of icons 9 are arranged in a matrix in parallel in the X direction and the Y direction.
- eight icons 9 associated with eight applications are arranged in a region near the lower side.
- Eight icons 9 are indicated by “App1” to “App8” for identification.
- FIG. 23B shows the second arrangement state.
- the plurality of icons 9 are arranged in a circular shape and a ring shape, and the plurality of icons 9 move so as to rotate on the circumference in the ring.
- the icons 9 are moved at predetermined time intervals as in the second embodiment.
- a ring is arranged with a predetermined position in the display screen 2 as a center point Q0.
- a pressing operation for pressing a location in the display screen 2 with a predetermined size or more is accepted.
- the pressing position is an arbitrary position in the display screen 2.
- the position of the pressing may be a position on the icon 9 or a position of an area other than the icon 9.
- the mobile terminal device performs control to change the display state of the home screen, that is, the icon arrangement, according to a predetermined pressing operation.
- the mobile terminal device makes a transition from the first arrangement state to the second arrangement state as the change control. Then, in the second arrangement state, the mobile terminal device moves the plurality of icons on the ring so as to rotate in a predetermined direction while the pressure is held.
- the mobile terminal device stops the rotation of the icon in response to a predetermined operation, that is, an operation of releasing the finger to make no pressing, and automatically selects and executes the icon corresponding to the released position.
- a predetermined operation that is, an operation of releasing the finger to make no pressing
- the user may shift the position from the position where the user first presses while maintaining a pressure of a predetermined size or more. For example, the user moves the finger to the position of the desired icon and releases the finger at that position. Thereby, a portable terminal device selects the icon of the position. Alternatively, the user moves a finger to a position where there is no icon and releases the finger at that position. Thereby, a portable terminal device returns to a 1st arrangement state, without selecting an icon.
- FIG. 24 shows a flow of control processing of the display control unit 204 in the fourth embodiment. Steps S401 to S415 are included. For control purposes, the first mode to the third mode are provided. S410 and S415 are mainly included as characteristic processing parts.
- the display control unit 204 displays the home screen on the display screen 2 in the first arrangement state as shown in FIG.
- the display control unit 204 receives a user input operation.
- the display control unit 204 performs branching according to the presence or absence of touch. If there is a touch, the process proceeds to S405, and if there is no touch, the process proceeds to S411.
- the display control unit 204 acquires the touch position coordinates (X1, Y1).
- the display control unit 204 acquires the pressing strength Pn.
- the display control unit 204 determines whether or not the pressure intensity Pn is equal to or greater than the threshold value Pt, and performs branching. If Pn ⁇ Pt, the process proceeds to S410, and if Pn ⁇ Pt, the process proceeds to S408.
- the display control unit 204 stores and holds the touch position coordinates (X1, Y1) in the memory.
- the display control unit 204 performs icon arrangement change processing. That is, the display control unit 204 changes the icon arrangement state of the display screen 2 from the first arrangement state to the second arrangement state. Details of this processing are shown in FIG. After this process, the process returns to S403.
- the display control unit 204 performs icon arrangement return processing. That is, the display control unit 204 changes the icon arrangement state from the second arrangement state to the first arrangement state. Then, the process returns to S403.
- FIG. 25 shows details of the icon arrangement changing process in step S410. Steps S421 to S428 are included. S423 and S427 are included as characteristic processing parts.
- the icon “App1” is arranged at a predetermined position, in this example, at the upper end (12:00 of the clock), and then the icons “App2” and the like are sequentially arranged at regular intervals clockwise from there. To do.
- the equal interval is determined according to the number of icons.
- the display control unit 204 places the icon closest to the pressed position (for example, “App2” in (a)) at the closest position on the ring (for example, the position of “App8” in (b)). May be.
- adjustment may be made such as changing the size of the ring, changing the size of the icon, or displaying a part of the ring in the display screen 2.
- the display control unit 204 starts the timer, measures the time as the value Tn, and ends this flow.
- the display control unit 204 performs icon arrangement movement processing in the second arrangement state.
- the display control unit 204 moves each icon in units of a predetermined equal distance in a predetermined direction (clockwise) as a display of the icon group arranged on the circumference of the ring. For example, the icon “App1” that was initially in the upper end position in FIG. 23B is moved to the position of the icon “App2”. Similarly, each icon is moved to the position of the next icon.
- the display control unit 204 restarts the timer and ends this flow.
- the icon group is rotated to change to the second arrangement state, and the desired icon
- the icon can be selected by releasing the finger when the finger is at the finger position.
- the finger may not reach the desired icon. In that case, the user needs to change the state of the handle or press it with a finger of another hand.
- such a labor is not required, and an icon can be easily and quickly selected with one hand and one finger.
- a desired icon can be quickly moved to a position where the finger can reach.
- the display control of the fourth embodiment is not limited to a plurality of icons arranged in the screen, and can be similarly applied to other objects. Examples of other objects include a plurality of mail items on the mail application screen.
- the movement of the icon group is not limited to the intermittent movement at every time interval, but may be a continuous movement similarly to the scroll according to the first embodiment.
- the movement of the icon group is not limited to ring-shaped rotation.
- a plurality of icons are arranged in parallel in the X direction, the Y direction, or an arbitrary direction, and the leading icon and the terminal icon are connected in a loop. In the arrangement, the icons are moved at time intervals or by continuous scrolling.
- the position of the center point Q0 of the ring of icon arrangement is not limited to a fixed setting value on mounting, and may be a variable position by user setting. For example, it can be set to a suitable position according to the position of the hand and finger used by the user. Further, the position of the center point Q0 may be determined according to the position of the touch press each time. For example, the point of the touch position coordinates (X1, Y1) may be set as the center point Q0, or the center point Q0 may be set near the point.
- the icon arrangement change control of the fourth embodiment may be combined with the control using the two types of operations of the second and third embodiments.
- the rotation direction of the icon can be changed according to the distinction of the pressing operation. For example, it can be clockwise when the first area is pressed, counterclockwise when the second area is pressed, or the like.
- FIGS. 5 A portable terminal device according to the fifth embodiment of the present invention will be described with reference to FIGS. In the following, constituent parts of the fifth embodiment different from the first embodiment will be described.
- a pressing operation with respect to the pressing sensor on the front surface of the housing 1 and a pressing operation with respect to the pressing sensor on the back surface of the housing 1 are selectively used.
- a portable terminal device performs different display range change control according to those operations. As the target and operation of change control, a case of switching a plurality of home screens is shown as in the second embodiment and the like, but scrolling of content display information and the like can be similarly applied.
- FIG. 26 shows the appearance, operation, and the like of the mobile terminal device in the fifth embodiment.
- the left side of FIG. 26 shows the front surface of the mobile terminal device, and shows the state held with the left hand.
- a touch press sensor 117 is arranged in an area corresponding to the display screen 2.
- the right side of FIG. 26 shows the back of the mobile terminal device, and shows a state held with the left hand.
- On the back surface a back surface pressure sensor 118 is disposed at a predetermined position, for example, at the center in the X direction and in the upper region in the Y direction. An operation of pressing the back pressure sensor 118 with one finger of the left hand is shown.
- the portable terminal device includes a back surface pressure sensor 118 in addition to the touch pressure sensor 117 in the sensor unit 110 as a different part from the configuration of FIG. 2 according to the first embodiment.
- the back pressure sensor 118 detects the presence / absence and strength of the pressure. 3 detects not only the pressing state of the touch pressing sensor 117 but also the pressing state of the back surface pressing sensor 118.
- FIG. 27 shows a flow of control processing of the display control unit 204 in the fifth embodiment. Steps S501 to S518 are included. The processing from S501 to S510 is the same as the processing from S201 to S210 of the second embodiment.
- a layer Ln for layer update at the time of screen switching is set. Initially, the layer L1 screen is displayed. In S507, the pressure Pn is detected using the front touch sensor 117. In S508, if the pressure intensity Pn is greater than or equal to the threshold value Pt, the process proceeds to S511. (S511) The display control unit 204 performs layer lowering processing as screen switching in the first direction, updates the layer Ln as necessary, and returns to S503.
- S512 On the other hand, when there is no touch through the touch pressure sensor 117 in S505, the process proceeds to S512.
- the pressing state is detected by the pressing detection unit 202 through the back surface pressing sensor 118.
- the press detection unit 202 acquires the pressing strength Pm as the pressing state.
- the display control unit 204 determines whether or not the pressure intensity Pm is equal to or greater than a predetermined threshold value Ps, and performs branching. If Pm ⁇ Ps, the process proceeds to S514, and if not, the process proceeds to S515.
- S514 The display control unit 204 performs layer ascending processing as screen switching in the second direction, updates the layer Ln as necessary, and returns to S503.
- the processing after S515 is the same as the processing after S214 in FIG.
- the details of the layer descending process in S511 are as follows. Basically, it is the same as the layer descending process of the second and third embodiments.
- the time interval Kn regarding the layer update is set for the pressure Pn acquired in S507, as in S425 of FIG.
- the display control unit 204 determines whether or not the time value Tn of the timer is equal to or greater than the time interval Kn that is the threshold value T0, and performs branching.
- the subsequent processing is the same as described above.
- the time interval Kn regarding the layer update is set in the same manner as in S425 in FIG.
- the time interval Kn is determined based on the following equation (4).
- the display control unit 204 determines whether or not the time value Tn of the timer is equal to or greater than the time interval Kn that is the threshold value T0, and performs branching. The subsequent processing is the same as described above.
- control correspondence relationship is the layer lowering process in the case of pressing on the front surface and the layer raising process in the case of pressing on the rear surface, but the opposite correspondence relationship may be used.
- a pressure sensor may be provided at another position of the housing 1, for example, at a side position.
- the mobile terminal device controls the screen switching direction, speed, time interval, and the like by using the pressing strength and tilt angle.
- the mobile terminal device controls the scrolling direction, the speed, and the like of the content using the strength, position, and number of pressing.
- FIG. 28 shows a schematic configuration of the mobile terminal apparatus according to the sixth embodiment.
- FIG. 28 shows a state in which the user holds the casing 1 of the mobile terminal device with the left hand and touches and presses a location in the display screen 2 with the thumb.
- the mobile terminal device is tilted with an angle of absolute tilt ⁇ with respect to the horizontal plane and the horizontal direction.
- the mobile terminal device includes a display unit, a touch detection unit, a press detection unit, an inclination angle detection unit, a display control unit, and the like.
- the display unit displays display information 3 such as content on the display screen 2.
- the touch detection unit detects the presence / absence of a touch on the display screen 2 and position coordinates.
- the pressure detection unit detects the strength of the pressure on the display screen 2 and the like.
- the inclination angle detection unit detects an inclination angle ⁇ of the mobile terminal device.
- the display control unit controls the scrolls 5, 6 and the like as control for changing the display range 4 of the display information 3 based on the state of the pressure and the tilt angle.
- the user wants to browse other parts of the content displayed on the display screen 2, he / she touches and presses a location in the display screen 2 with, for example, a thumb in a handheld state suitable for him / her.
- This operation is referred to as a first pressing operation.
- the first pressing operation the user presses the finger with a certain degree of strength and then releases the finger.
- the pressure detection unit detects a first pressure greater than a predetermined size.
- the tilt angle detection unit detects the tilt angle ⁇ of the housing 1 at the time of the first press.
- the display control unit shifts from the normal mode to the specific control mode based on the detection of the first press.
- the display control unit sets the inclination angle ⁇ detected at the time of the first pressing as the reference angle ⁇ 0. In the control mode after the first pressing operation, the finger is released from the display screen 2, the first pressing is not held, and there is no touch.
- the user performs an operation of tilting the housing 1 in the control mode.
- the housing 1 is rotated with a predetermined rotation axis and direction.
- the tilt angle detector similarly detects the tilt angle ⁇ n associated with the tilt operation and rotation.
- the display control unit performs control to change the display range 4 on the display screen 2 in accordance with the difference between the tilt angle ⁇ n detected in the control mode and the reference angle ⁇ 0.
- the display control unit controls display operations such as scrolls 5 and 6 as the change control.
- the scrolls 5 and 6 are operations for continuously moving the display range 4 displayed on the display screen 2 up and down in the Y direction.
- the user touches and presses a portion in the display screen 2 again when a part of the desired content is displayed as the display range 4 by the operation of the scrolls 5, 6 and the like.
- This operation is referred to as a second pressing operation.
- the user presses the finger with a certain degree of strength and then releases the finger.
- a press detection part detects the 2nd press more than the predetermined magnitude
- the display control unit ends the operations of the scrolls 5, 6 and the like, cancels the control mode, and returns to the normal mode. Further, the user may tilt the angle ⁇ n so as to return it to a state in the vicinity of the first reference angle ⁇ 0 during the control mode. In that case, the mobile terminal device temporarily stops the scrolls 5 and 6.
- the lower side of FIG. 28 shows the above control on the time axis.
- the mobile terminal device enters the control mode and sets the reference angle ⁇ 0.
- the portable terminal device changes the display range 4 according to the angle ⁇ n of the tilting operation in a state where the first press is not held during the control mode.
- the portable terminal device ends the change of the display range 4, cancels the control mode, and returns to the normal mode. In this way, the user can browse the desired location by changing the display range 4 of the content or the like by a simple operation.
- the touch detection unit 201 can detect a pinch operation or the like. In the case of a pinch operation, the user touches two fingers on the display screen 2 and increases or decreases the distance between the two fingers as it is.
- the display control unit 204 controls a display operation such as enlargement or reduction of the display image size in the display screen 2 in accordance with detection of the state of the pinch operation.
- the display range 4 can be scrolled by an operation of tilting the housing 1 by first pressing the area 801 of the display screen 2 by the user. That is, the display range 4 of the display information 3 can be changed.
- Display control in the mobile terminal device will be described below.
- the display control unit 204 of the mobile terminal device accepts a specific touch pressing operation and an operation of tilting the housing 1 by the user, and scrolls the display range 4. Perform range change control.
- the user is initially in a handheld state as shown in FIG. 6 and is viewing a part of the content 800 as the display range 4 as shown in FIG.
- the user wants to browse other part of the content 800 from the state, first, as shown in FIG. 28, the user first presses the area 801 of the display screen 2. At this time, the user releases the finger after pressing with a certain degree of strength.
- the portable terminal device shifts to the control mode in the case of the first pressing in which the pressing strength Pn is greater than or equal to a predetermined magnitude.
- the mobile terminal device detects the angle ⁇ at the time of detecting the first press and sets it as the reference angle ⁇ 0. Note that the angle ⁇ detected within a predetermined time from the detection point of the first press may be used.
- the user performs an operation of tilting the housing 1 in a desired direction with the finger released from the display screen 2 after the first pressing operation. For example, when the user wants to scroll 5 in the upward direction, the user tilts in the negative direction.
- the mobile terminal device detects an angle ⁇ n corresponding to the tilting operation, and detects a difference value ( ⁇ n ⁇ 0) which is an amount of a relative tilt angle.
- the mobile terminal device uses the first pressing strength Pn and the difference value ( ⁇ n ⁇ 0) to determine whether or not to scroll and the direction and speed of scrolling.
- the portable terminal device performs control so that different scroll display operations are performed according to the direction and size indicated by the difference value ( ⁇ n ⁇ 0). By this scroll display operation, the display range 4 in the area 801 of the display screen 2 is changed.
- the user When the user is in a state where the desired display range 4 is displayed in the area 801 by scrolling, the user can pause scrolling by returning the tilt of the housing 1 to a state close to the initial reference angle ⁇ 0. Further, the user can resume scrolling by an operation of tilting from the state.
- the user can return to the normal mode by the second pressing operation in the state of the desired display range 4.
- the mobile terminal device detects the second press during the second press operation, ends the change of the display range 4 by scrolling at that time, cancels the control mode, and returns to the normal mode.
- the user can browse a part of the content 800 corresponding to the display range 4 at the time of the cancellation.
- the user may select and operate an object such as the link 7 in the desired display range 4 by touching before the second pressing operation.
- the mobile terminal device performs processing for executing the object, for example, processing for reading and displaying the content of the link 7, and cancels the control mode.
- FIG. 29 shows a flow of control processing for realizing display range change control in the sixth embodiment.
- the basic operation execution unit 104a particularly the display control unit 204, executes the processing of the flow of FIG.
- the first mode, the second mode, and the third mode are provided as modes that are control states for realizing this flow.
- the management values for each mode are 0, 1, and 2.
- FIG. 29 includes steps S601 to S626. Hereinafter, it demonstrates in order of a step.
- the display control unit 204 reads the content selected by the user.
- the display control unit 204 first displays the top of the content, for example, the area 821 in FIG.
- the mobile terminal device receives an input operation by the user through the operation unit 106 or the touch press sensor 117, and acquires input information corresponding to the input operation.
- the display control unit 204 acquires touch input information through the touch detection unit 201.
- the touch detection unit 201 detects the presence / absence of touch and the touch position coordinates (X1, Y1).
- the press detection part 202 detects the presence or absence of a press, and the strength Pn of a press.
- the display control unit 204 branches the process based on the presence / absence of touch based on the input information. If there is a touch (Y), the process proceeds to S605. If there is no touch (N), the process proceeds to S617.
- the display control unit 204 acquires the tilt angle ⁇ of the mobile terminal device by the tilt angle detection unit 203.
- the display control unit 204 sets the angle ⁇ acquired in S613 as the reference angle ⁇ 0.
- the flow of S607, S610, S614, etc. corresponds to the control during the first pressing operation.
- the display control unit 204 stores and holds the reference angle ⁇ 0 in the memory.
- the display control unit 204 executes a process associated with the object. For example, the display control unit 204 performs processing for acquiring and reading the content specified by the URL of the link 7 from a server on the Internet and displaying the content on the display screen 2. In this case, the mobile terminal device exits the loop of this flow as indicated by A1, and performs the same processing from the beginning of this flow for new content.
- the tilt angle detection unit 203 detects the tilt angle ⁇ n of the mobile terminal device.
- the display control unit 204 acquires information including the angle ⁇ n from the tilt angle detection unit 203.
- the display control unit 204 compares the absolute value
- this difference value when this difference value is 0 or almost 0, it represents that it has not changed from the state of the reference angle ⁇ 0.
- is in a range smaller than the threshold ⁇ t, scrolling does not occur. Therefore, by setting the threshold value ⁇ t, it is possible to prevent scrolling when the tilt angle slightly changes without the intention of the user.
- the display control unit 204 sets the scroll speed Sn to be used for the scroll display operation using the angle ⁇ n acquired in S621 according to the following equation (5).
- a predetermined reference scroll speed is set to S0.
- the reference scroll speed S0 may be a fixed set value on mounting or a set value that can be variably set by the user.
- the scroll speed Sn is increased by multiplying the reference scroll speed S0 by multiplication in accordance with the magnitude of the absolute value of the difference of the angle ⁇ n with respect to the threshold value ⁇ t (
- the display control unit 204 performs branching according to the relationship between the angle ⁇ n and the reference angle ⁇ 0, in other words, the sign of the difference value ( ⁇ n ⁇ 0).
- the process proceeds to S625, and when the angle ⁇ n is smaller ( ⁇ n ⁇ 0), the process proceeds to S626.
- the display control unit 204 performs the downward scroll process for causing the scroll 6 of FIG. 8 to be performed using the scroll speed Sn set in S623 in response to the forward inclination, and then returns to S603.
- the display control unit 204 performs an upward scroll process for causing the scroll 5 of FIG. 8 to be performed using the scroll speed Sn set in S623 in response to the negative inclination, and then returns to S603.
- the flow of S604, S617, S625, etc. corresponds to the change of the display range 4 during the control mode.
- the process at a predetermined time is repeated in a loop, and the scroll process such as S625 corresponds to scrolling for moving a predetermined distance in a predetermined time. Long-distance continuous scrolling is also realized by continuing the processing of S625 and the like many times by the loop.
- FIG. 10 shows the relationship between the absolute value
- the abscissa is the absolute value
- the vertical axis represents the scroll speed Sn, for example, the reference scroll speed S0, 2 ⁇ S0, 3 ⁇ S0.
- a straight line 1001 indicates a function corresponding to the expression (5), and the scroll speed Sn increases linearly according to the absolute value
- the mobile terminal device of the sixth embodiment changes the content display range 4 by scroll display control using the pressure Pn and the inclination angle ⁇ n.
- the user sets the casing 1 of the mobile terminal device in a handheld state suitable for himself or the situation, for example, a state in which he naturally holds it with one hand.
- the user can set the state as the reference angle ⁇ 0 by the first pressing operation at a desired time.
- the user can change the display range 4 by scrolling by directly tilting the housing 1 in a desired direction.
- a user can cancel the state by a 2nd press operation at a desired time.
- the user can browse the desired display range 4 quickly with a simple operation without having to repeat the touch operation many times.
- the user can move a desired distance by scrolling with a single operation.
- the reference angle ⁇ 0 is set by using the first press of a predetermined size or more as a trigger and the reference angle ⁇ 0 is set, there is no possibility of erroneous scrolling when a touch occurs unintentionally by the user. Further, the user can adjust the scroll speed Sn and the like according to the angle ⁇ n and the like. The user can also quickly select the link 7 or the like in conjunction with the scroll.
- the mobile terminal device of the sixth embodiment it can be suitably applied to a device having a relatively small display screen size such as a smart watch.
- a device having a relatively small display screen size such as a smart watch.
- the size of the display screen is relatively small, when the display screen is touched and pressed with a finger, the part of the display screen is hidden by the finger, making it difficult for the user to visually recognize the display screen, which may not be easy to use.
- the mobile terminal device according to the sixth embodiment even when the size of the display screen 2 is relatively small, it is possible to perform scrolling or the like with the user pressing once and releasing the finger, and the display information is visually recognized. Cheap.
- FIG. 30 illustrates a pressing operation on the display screen 2 when the mobile terminal device according to the sixth embodiment is a smart watch.
- a state in which a position in the display screen 2 is touched and pressed with one finger of the right hand in a state where the smart watch is worn on the left wrist is shown.
- a case where the display screen 2 is circular and has a wrist width of about the size of the display screen 2 is shown.
- the first pressing operation a part of the display screen 2 is temporarily hidden.
- the entire display screen 2 can be visually recognized. The user can scroll the display screen 2 by looking at the entire display screen 2 by an operation of tilting the wrist or the like, so that the desired display range 4 can be easily obtained.
- Modification (1) The following is possible as a modification of the sixth embodiment.
- the sixth embodiment as shown in FIG. 28 and the like, the case of controlling the scroll display operation in the Y direction using the tilt angle ⁇ of the display screen 2 and the content with respect to the Y direction has been described. Similar to the first embodiment, various modifications are possible. For example, it is possible to similarly control the scroll display operation in the X direction using the tilt angle of the display screen 2 and the content with respect to the X direction.
- FIG. 7 shows an operation of tilting the tilt angle ⁇ n with respect to the X direction.
- Modification (2) As the display operation for changing the display range, when applied to enlargement / reduction, for example, a correspondence relationship such as enlargement processing when the angle of inclination is positive and reduction processing when the inclination angle is negative may be used.
- a digital camera is used as the mobile terminal device, and a plurality of photographic images are used as the target information.
- a plurality of photographic images or one selected photographic image is displayed in the display screen. In this state, it is possible to scroll the photographic image by a swipe operation or the like and to enlarge / reduce the photographic image by a pinch operation or the like.
- the size of the photographic image is large or enlarged, a part of the photographic image is displayed on the display screen 2.
- the device enters the control mode from the normal mode in response to the first pressing operation.
- the photographic image can be scrolled or enlarged / reduced according to the angle of inclination, and the control mode returns to the normal mode display according to the second pressing operation.
- a photographic image it can be applied to a panoramic image or a celestial sphere image that has a large size and angle of view and cannot be displayed at a time.
- the operation in the control mode it is possible to easily change a part of the panoramic image or the whole celestial sphere image as the display range corresponding to the viewing direction.
- the user can preferably browse a desired part or the whole of the photographic image.
- step S623 in FIG. 29 the scroll speed Sn is determined to be linearly changed according to the absolute value
- it may be determined by a step-like function like a function 1002 in FIG.
- the scroll speed Sn is determined to be a constant value according to the division of the range of the absolute value
- the scroll speed Sn may be set to a constant value regardless of the angle ⁇ n, or may be variably set by user setting.
- the threshold value Pt and the threshold value ⁇ t in FIG. 29 may be fixed set values for mounting or may be set by the user.
- Predetermined information indicating the state of the control mode may be displayed in the display screen 2 when the control mode is shifted in response to the first pressing operation. Further, when the control mode is canceled by the second pressing operation, display of predetermined information may be deleted or another predetermined output may be performed. Further, when the first press is determined and the mode is shifted to the control mode, the touch duration time or the like may be further determined as a condition.
- the information on the pressure intensity Pn is used for the determination of the first pressing operation and the second pressing operation, and the control mode switching.
- the pressing strength Pn may be used when determining the scroll speed or the like.
- the reference scroll speed S0 in step S623 in FIG. 29 is determined using the first pressing strength Pn.
- the reference scroll speed S0 is increased as the strength Pn is increased.
- the scroll speed Sn is calculated using the reference scroll speed S0. That is, the scroll speed Sn is determined by reflecting both information of the strength Pn and the angle ⁇ n.
- the scroll speed Sn may be determined using the first pressing strength Pn, and the angle ⁇ n may be used only for determining the scroll direction.
- the first press is not held during the control mode from the first press operation to the second press operation, and basically there is no touch.
- a state where the first press is not held during the control mode and a state where the touch is present may be maintained in the same manner as in the seventh embodiment described later. That is, in the modification, after the first press is detected by the first pressing operation, the pressure is weakened and the touch is kept without releasing the finger.
- the display range is changed according to the angle of inclination, and the touch position can be arbitrarily changed. And control mode is cancelled
- the temporary stop of the scroll is realized by returning the angle ⁇ n to the vicinity of the reference angle ⁇ 0.
- the scroll pause may be realized as follows. After the first pressing operation, scrolling is automatically performed in accordance with the angle ⁇ n without touching. If it is desired to pause the scrolling halfway, the user touches the display screen 2 lightly to maintain the touched state. The mobile terminal device temporarily stops scrolling while detecting the touched state. The user lifts his finger when he wants to resume scrolling. The mobile terminal device resumes scrolling in response to the detection of the no-touch state. And control mode is cancelled
- the target information is the content display information
- the display range change control display operation is the Y-direction scroll.
- FIG. 31 shows appearance, operation, display control, and the like as a configuration outline of the seventh embodiment.
- the left side of FIG. 31 shows a state where the location of the content display information 1201 in the display screen 2 is first pressed.
- the user performs a first pressing operation on a location in the display screen 2 by pressing a predetermined size or more.
- the first pressing operation is an operation of maintaining the touch with the finger weakened after the first pressing of a predetermined size or more, that is, keeping the finger in contact. is there.
- the first press is not held.
- the portable terminal device treats the first position corresponding to the touch position coordinates where the first pressing operation is performed as the reference position.
- the mobile terminal device enters the control mode from the normal mode using the first pressing operation as a trigger.
- the right side of FIG. 31 shows the state when entering the control mode.
- the mobile terminal device displays a direction selection icon J1 for scroll control using the first position as a reference position.
- the direction selection icon J1 is a control object that enables selection of a scroll direction and the like.
- the direction selection icon J1 is composed of an upper area e1, a lower area e2, and a central stop area e0 between them. Initially, the direction selection icon J1 is displayed in a state where the central stop region e0 is disposed within a predetermined range with respect to the first position corresponding to the touch position of the fingertip of the first pressing operation. In other words, the direction selection icon J1 is arranged so that the first position is included in the central stop area e0. In this state, scrolling has not started yet.
- the user selects a desired area in the direction selection icon J1 by a slide operation in which the finger is moved on the direction selection icon J1 while maintaining the touch after the first pressing operation.
- the user selects to place the tip of the finger in the upward region e1
- the user can select upward scrolling
- the user selects to place the tip of the finger in the downward region e2 the user can select downward scrolling.
- the upward area e1 is selected
- the mobile terminal device performs upward scrolling in the same manner as the scroll 5 in FIG. 8 of the sixth embodiment.
- the downward area e ⁇ b> 2 the mobile terminal device performs downward scrolling similarly to the scroll 6.
- the user can select pause of scrolling by selecting to place the finger in the central stop area e0.
- the central stop area e0 When the central stop area e0 is selected, the mobile terminal device temporarily stops scrolling in the upward direction or the downward direction. For example, the user selects the upper area e1 from the state of the first central stop area e0 and scrolls upward.
- the desired display range 4 When the desired display range 4 is reached, the user returns the position of the finger to the central stop area e0 and stops the upward scroll.
- the user selects the downward area e2 and scrolls downward from that state.
- the desired display range 4 the user returns the finger position to the central stop area e0 and stops the downward scrolling.
- the mobile terminal device When the mobile terminal device detects a state where the user releases his / her finger from the direction selection icon J1, that is, a no-touch state, the mobile terminal device cancels this control mode and returns to the normal mode. With the release, the mobile terminal device ends scrolling in the state of the display range 4 at that time, and also hides the direction selection icon J1.
- the mobile terminal device selects the link 7 and executes a corresponding process, and cancels the control mode.
- the mobile terminal device determines the scroll speed according to the first pressing strength Pn of the first pressing operation. In addition, the mobile terminal device variably determines the scrolling speed according to the strength of pressing when selecting the upper area e1 or the lower area e2 of the direction selection icon J1.
- FIG. 32 shows a flow of control processing of the display control unit 204 in the seventh embodiment.
- the mode includes the first mode to the third mode, and the management values are 0, 1, and 2.
- FIG. 32 includes steps S701 to S722. Hereinafter, it demonstrates in order of a step.
- the processing in S701 to S706 is the same as the processing in the sixth embodiment.
- the display control unit 204 stores and holds the touch position coordinates (X1, Y1) in the memory.
- the display control unit 204 sets the scroll speed Sn based on the formula (6) below using the pressing strength Pn acquired in S706.
- the scroll speed Sn S0 ⁇ Pn / Pt (6)
- the scroll speed Sn is determined so as to increase the reference scroll speed S0 by multiplication in accordance with the magnitude (Pn / Pt) of the pressing strength Pn with respect to the threshold value Pt. That is, the scroll speed Sn increases as the strength Pn increases.
- the display control unit 204 determines which region in the direction selection icon J1 corresponds to the touch position coordinates (X1, Y1) acquired in S705, and branches. That is, it is determined whether the touch position is in the upward area e1, the downward area e2, or the central stop area e0. When it corresponds to the upper direction area e1, the process proceeds to S716, when it corresponds to the lower direction area e2, the process proceeds to S717, and when it corresponds to the central stop area e0, the process returns to S703. Note that when the touch position is the central stop area e0, the scroll process such as S716 is not executed, which is realized as a scroll pause for a predetermined time.
- the display control unit 204 performs an upward scroll process at the scroll speed Sn set in S714 in response to the selection of the upward area e1, and returns to S703.
- scroll 5 is performed in which a predetermined distance is continuously moved in a predetermined time corresponding to the scroll speed Sn.
- the display control unit 204 performs the downward scroll process at the scroll speed Sn set in S714 according to the selection of the downward area e2, and returns to S703.
- scroll 6 is performed in which a predetermined distance is continuously moved in a predetermined time corresponding to the scroll speed Sn.
- the display control unit 204 determines the touch position coordinates (X1, Y1) stored in S711 as the touch position on the display screen 2, and the position of the object such as the link 7 in the display information 3 on the display screen 2. Compare The display control unit 204 branches depending on whether or not the positions match. If they match, the process proceeds to S720. If they do not match, the process proceeds to S722. (S720) The display control unit 204 executes processing associated with the selected object. For example, the display control unit 204 performs processing for acquiring and reading the content specified by the URL of the link 7 from a server on the Internet and displaying the content on the display screen 2.
- the mobile terminal device goes through the loop of this flow as indicated by A2, and performs the same processing from the beginning of this flow for new content.
- the display control unit 204 hides the direction selection icon J1.
- Modification (1) The following is possible as a modification of the seventh embodiment.
- the display control of the Y direction scroll is performed by displaying the direction selection icon J1 including the upper and lower regions in the Y direction.
- the present invention is not limited to this.
- FIG. 33 shows a case where display control of X-direction scrolling is performed as a first modification.
- content display information 1401 such as an electronic book including vertically written text is shown.
- the mobile terminal device displays a direction selection icon J2 including left and right regions in the X direction in response to the first pressing operation.
- the direction selection icon J2 has a left direction area e3, a central stop area e0, and a right direction area e4.
- the mobile terminal device uses the direction selection icon J2 to control left and right scrolling in the X direction.
- FIG. 34 shows a case where display control of scrolling in both the Y direction and the X direction is performed as a second modification.
- map information 1501 having a relatively large size is shown as the target information.
- the mobile terminal device displays a direction selection icon J3 in response to the first pressing operation.
- This direction selection icon J3 has four direction areas, upper, lower, left and right, and a central stop area. The mobile terminal device controls scrolling in each of the upper, lower, left and right directions according to the selection of the direction area.
- the display state may be controlled in detail, for example, the direction area corresponding to the direction in which the scroll is invalid is hidden or cannot be selected.
- FIG. 35 shows a form in which the central stop area e0 is not provided in the direction selection icon as a third modification.
- the mobile terminal device displays a direction selection icon J4 in response to the first pressing operation.
- This direction selection icon J4 has an upper area e1 in the upper half of the circle and a lower area e2 in the lower half. Depending on these areas, scrolling upward or downward can be selected.
- the mobile terminal device temporarily stops scrolling.
- the mobile terminal device cancels the control mode.
- the control mode may be canceled without temporarily stopping the scrolling.
- the control mode switching may be performed using the first pressing operation and the second pressing operation.
- the control mode is entered by the first pressing operation on the display screen 2 to display the direction selection icon, and the control mode is canceled by the second pressing operation to hide the direction selection icon.
- the second pressing operation may be a second pressing particularly in the central stop area e0, or may be a second pressing outside the direction selection icon.
- the touched state may not be maintained. The user can select a desired scroll direction and the like by touching the direction selection icon after releasing the finger by the first pressing operation. In this control mode, the user can select by touching the link 7.
- information on the pressure Pn is used when determining the first pressing operation and setting the scroll speed Sn.
- information on the pressure strength Pn may be used as another control variable.
- a fixed value for example, the reference scroll speed S0 may be used.
- the pressing strength Pn or the like of the upper area e1 or the lower area e2 is detected.
- the mobile terminal device variably determines the scroll speed Sn in the direction using the pressing strength Pn of the region. For example, the user moves the finger to the upper area e1 and presses it with a desired strength.
- the mobile terminal device determines the scroll speed Sn so as to increase with respect to the reference scroll speed S0 according to the pressing strength Pn of the upper area e1. That is, the higher the upper area e1 is pressed, the faster the upward scroll is realized.
- the mobile terminal device may control the enlargement / reduction display operation by detecting the pressing strength Pn of the central stop area e0.
- the portable terminal device controls the enlargement / reduction of the image according to the pressing strength Pn of the central stop area e0 and the touch position.
- the mobile terminal device enlarges and displays a map image according to the magnitude of the strength Pn, for example, with the touch position at the center.
- the mobile terminal device displays a reduced display as its strength Pn decreases.
- the user can release the control mode in that state by releasing his / her finger from the central stop area e0 when the image has a desired size.
- the target information is map information
- the display range change control display operation is a scroll in an arbitrary direction in the planes of the X direction and the Y direction.
- FIG. 36 shows operation, display control, and the like as a configuration outline of the eighth embodiment.
- FIG. 36 shows a case where the display screen 2 is touch-pressed with the thumb while holding the housing 1 with the left hand.
- the state shown in FIG. 36 is defined as a first state.
- the user touches and presses a desired portion of the map information 1701 in the display screen 2. This operation is referred to as a first pressing operation.
- the first pressing operation is an operation of maintaining the touch without weakening the pressure and releasing the finger after detecting the first pressing of a predetermined size or more. During the control mode after the first pressing operation, the first pressing is not held.
- the mobile terminal device enters the control mode from the normal mode in response to the first pressing operation, sets the reference position Lr, and displays a predetermined reference point icon C1 at the reference position Lr.
- the reference point icon C1 is a first position icon.
- the sun mark is used as the reference point icon C1.
- FIG. 37 shows a second state which is a state transitioned from the first state of FIG. From the first state in which the user touches the finger at the reference position Lr, the user performs a slide operation to move the finger to a desired position while maintaining the touch.
- the distance between two points of the reference position Lr, which is the first position LA, and the second position LB is Dn.
- the direction from the reference position Lr to the second position LB is V1.
- the mobile terminal device grasps the second position LB, the distance Dn, the direction V1, and the like.
- the reference point icon C1 remains displayed. The user can recognize the magnitude and direction V1 of the distance Dn between the two points of the first position LA and the second position LB based on the reference point icon C1.
- a form in which the reference point icon C1 or the like is not displayed at the first position LA may be used.
- a predetermined second position icon may be displayed at the second position LB. Both the reference point icon C1 and the second position icon may be displayed.
- FIG. 38 shows a third state that is a transition from the second state of FIG.
- the mobile terminal device grasps the positional relationship between the reference position Lr and the second position LB in the change from the first state to the second state, and based on the positional relationship, whether to scroll, the direction, the speed Control etc.
- the scroll 191 is performed in the direction V1 corresponding to the positional relationship between the two points.
- the display range 4 in the map information 1701 moves in the direction V1.
- the image portion moves in a direction 192 that is the opposite direction to the direction V1 of the scroll 191.
- FIG. 39 shows a change in the display range 4 on the map information 1701 when scrolling 191 in the direction V1 from the second state to the third state.
- the display range 4 changes from the display range 2001 in the first state and the second state to the display range 2002 in the third state.
- the mobile terminal device when the user moves the touch position so as to return from the second position LB to the reference point icon C1 of the reference position Lr, the mobile terminal device temporarily stops scrolling. When the user lifts his / her finger, the mobile terminal device ends scrolling in the state of the display range 4 at that time, hides the reference point icon C1, cancels the control mode, and returns to the normal mode.
- FIG. 40 shows a flow of control processing of the display control unit 204 in the eighth embodiment.
- modes there are a first mode and a second mode, and management values are set to 0 and 1.
- FIG. 40 includes steps S801 to S817. Hereinafter, it demonstrates in order of a step.
- the display control unit 204 reads map information.
- the display control unit 204 first displays a partial range of a predetermined position in the map information on the display screen 2.
- the predetermined position is, for example, a current GPS position coordinate of the mobile terminal device or a position designated by the user in the position search.
- the mobile terminal device receives an input operation by the user through the operation unit 106 or the touch pressure sensor 117, and acquires input information corresponding to the input operation.
- the display control unit 204 acquires touch input information through the touch detection unit 201. At that time, the touch detection unit 201 detects the presence / absence of touch and the touch position coordinates (X1, Y1).
- the press detection part 202 detects the presence or absence of a press, and the strength Pn of a press. (S804)
- the display control unit 204 branches the process based on the presence / absence of touch based on the input information. If there is a touch (Y), the process proceeds to S805. If there is no touch (N), the process proceeds to S815.
- the display control unit 204 acquires information including the touch position coordinates (X1, Y1) from the touch detection unit 201.
- the display control unit 204 acquires information including the pressure intensity Pn at the touch position from the pressure detection unit 202.
- the display control unit 204 compares the pressure intensity Pn acquired in S806 with the threshold value Pt, determines whether the intensity Pn is equal to or greater than the threshold value Pt, and branches. If Pn ⁇ Pt, the process proceeds to S809, and if Pn ⁇ Pt, the process returns to S803.
- the display control unit 204 displays the reference point icon C1 at the reference position Lr in the display screen 2 as shown in FIG. (S811)
- the flow to S811 corresponds to the shift to the control mode according to the first pressing operation.
- the scroll 191 in the arbitrary direction in the plane constituted by the X direction and the Y direction that is, the scroll 191 like the direction V1 in the third state in FIG. 38 is changed between the X direction scroll and the Y direction scroll. This is achieved by dividing and combining.
- the X-direction scroll speed Sx is the speed for the X-direction scroll
- the Y-direction scroll speed Sy is the speed for the Y-direction scroll.
- the display control unit 204 calculates the X-direction scroll speed Sx and the Y-direction scroll speed Sy according to the following equation (8).
- the display control unit 204 uses the scroll speed ⁇ Sx, Sy ⁇ set in S813 to perform scroll processing for scrolling in the X direction and the Y direction as display control of the map information, and then returns to S803.
- the scroll 191 in the direction V1 corresponding to the two points between the reference position Lr and the second position LB is performed in the X and Y planes of the display screen 2 as in the third state of FIG. Realized.
- the display range 4 in the map information 1701 is changed as shown in FIG.
- the flow to S814 corresponds to the change of the display range during the control mode.
- scrolling for a predetermined distance is performed for a predetermined time, and the processing of S814 is continued in a loop, whereby long-distance scrolling is also realized.
- the display range can be changed with little effort without having to repeat the touch operation many times.
- the user can scroll in a desired direction by a simple operation with one hand and one finger.
- the user can adjust the scrolling speed according to the strength of pressing.
- it is possible to scroll in an arbitrary direction within the plane, and the user can select the scroll direction more finely.
- step S812 of FIG. 40 the scroll speed Sn is determined using the pressing strength Pn.
- the expression (7) may be replaced with the following expression (12).
- Mode switching may be performed using the first pressing operation and the second pressing operation.
- the control mode is entered by the first pressing operation on the display screen 2, the reference position Lr is set and the reference point icon C1 is displayed, and the control mode is released by the second pressing operation.
- the touched state may not be maintained.
- the user can select a desired scroll direction and the like by touching the second position LB after releasing the finger by the first pressing operation.
- the second pressing operation may be a second pressing on the reference point icon C1.
- information on the pressure strength Pn may be used as another control variable.
- a fixed value for example, the reference scroll speed S0 may be used.
- the scroll speed Sn may be determined according to the size of the distance Dn or the like.
- the pressing strength Pn at the second position LB is detected, and the scroll speed Sn is variably determined using the strength Pn.
- the mobile terminal device determines the scroll speed Sn so as to increase the reference scroll speed S0 according to the strength Pn. In other words, the higher the pressing at the second position LB, the faster the scrolling is realized.
- the mobile terminal device may detect the pressing strength Pn at the reference position Lr and control the enlargement / reduction display operation at the touch position.
- Embodiment 9 shows the case of a plurality of home screens and a plurality of application screens as target information.
- the ninth embodiment as the display range change control, screen switching when switching one of a plurality of screens to display on the display screen 2 is controlled.
- the ninth embodiment corresponds to a modification of the sixth embodiment, and screen switching is controlled using the angle of inclination in the display range change control.
- FIG. 11 shows a state in which one selected home screen among a plurality of home screens is displayed on display screen 2 of the mobile terminal device according to the ninth embodiment.
- the mobile terminal device according to the ninth embodiment switches and displays a plurality of home screens on the display screen 2 in accordance with a specific touch pressing operation.
- FIG. 41 shows a touch pressing operation on the home screen and screen switching as display control of the ninth embodiment.
- the mobile terminal device receives the first pressing operation, the second pressing operation, the tilting operation, and the like, and controls screen switching of a plurality of home screens on the display screen 2.
- the screen switching is a display operation for switching the home screen that becomes the display range 4 on the display screen 2 at predetermined time intervals.
- 41 shows a case where the user holds the casing 1 with a left hand (not shown) and presses the display screen 2 with one finger of the right hand.
- the user performs a first pressing operation on a location on the home screen.
- the mobile terminal device detects the first press at that time, the mobile terminal device enters the control mode from the normal mode, and sets the tilt angle ⁇ of the housing 1 at that time as the reference angle ⁇ 0.
- the control mode the user performs an operation of tilting in a desired direction, for example, the Y direction.
- the mobile terminal device determines the screen switching direction and the like according to the difference value ( ⁇ n ⁇ 0) of the angle ⁇ n at that time. For example, the mobile terminal device determines to switch the screen in the first direction when the inclination is in the negative direction, and to switch the screen in the second direction when the tilt is in the positive direction.
- the first direction is a layer descending direction in which the layer to be the display range 4 is lowered
- the second direction is a layer ascending direction.
- the mobile terminal device may determine an update time interval for each screen and each layer corresponding to the speed at the time of screen switching according to the angle ⁇ .
- the display control unit 204 sequentially switches a plurality of home screens in the layer descending direction. That is, the home screen displayed as the display range 4 on the display screen 2 is sequentially switched from the top layer L1 to the bottom layer L5, for example.
- the user can pause the screen switching by returning the tilt to a state near the first reference angle ⁇ 0 during the control mode. Further, the user can also execute the corresponding process by selecting and operating the icon 9 in the home screen by touching in the control mode.
- the user performs the second pressing operation while the desired home screen is in the display range 4. Thereby, the mobile terminal device ends the screen switching, cancels the control mode, and returns to the normal mode.
- the update time interval at the time of screen switching may be determined based on the following equation (13), for example. Let the time interval be Kn.
- the predetermined reference time interval is K0.
- the time interval Kn is calculated so as to decrease with respect to the reference time interval K0 according to the ratio (Pt / Pn) between the pressure intensity Pn and the threshold value Pt.
- FIG. 21 shows a function 2101 corresponding to the expression (13).
- the horizontal axis indicates the strength Pn, and the vertical axis indicates the time interval Kn.
- the time interval Kn is determined so as to decrease gradually as the strength Pn increases. That is, the greater the strength Pn, the faster the screen switching speed.
- a step-like function such as the function 2102 may be applied, or an upper limit value or a lower limit value may be provided.
- the time interval Kn can be various values such as a constant value and a user set value.
- the target information is not limited to a plurality of home screens, and can be similarly applied to a plurality of application screens. Further, the present invention is not limited to a layered arrangement as a plurality of screens, and can be similarly applied to a case of arranging in parallel in the X direction and the Y direction.
- FIG. 16 shows a display state of the display screen 2 in the modified example.
- the control of the ninth embodiment can be applied using the plurality of screens as target information.
- the control mode is entered in response to the first pressing operation.
- the control mode for example, by switching for one screen in the layer descending direction, the layer display state on the right side of FIG. 16 is switched.
- the application screen G2 is displayed as the layer L1 closest to the front.
- FIG. 17 shows a case where content history information in the application screen is used as target information.
- history screens E1 to E3 corresponding to browsing history information of Web pages are shown.
- the latest history screen E1 is the display range 4.
- the history screens E1 to E3 and the like can be displayed by switching from the present to the past or from the past to the present direction by an operation for changing the tilt in the Y direction.
- FIG. 18 shows a case where the target information is content on the application screen, for example, a plurality of page information constituting an electronic book.
- the page screens p1 to p3 corresponding to a plurality of page information are shown.
- the first page screen p1 is the display range 4.
- the page screens p1 to p3 and the like can be switched and displayed in a desired direction by an operation of changing the tilt in the X direction.
- the screen switching is a display operation in which each screen is moved intermittently at a predetermined time interval.
- the display operation is not limited to this, and may be a display operation in which the screen is continuously moved as in the scroll according to the sixth embodiment.
- a vibration pattern may be generated every time one screen is switched, or a predetermined character or image display, audio output, or the like may be used.
- a mode in which the screen switching direction and speed are determined in accordance with the operation of the direction selection icon of the seventh embodiment and the positional relationship between the two points of the eighth embodiment is also possible. Furthermore, it is good also as a form which determines the direction of display operation
- FIG. 42 shows operations on the display screen 2 in the modification.
- a display operation in the first direction is performed in the case of pressing in the upper region R1 in the display screen 2
- a display operation in the second direction is performed in the case of pressing in the lower region R2.
- An example of determination will be shown.
- a line 2801 indicates a boundary line between the upper region R1 and the lower region R2 on the setting.
- the direction and speed of the display operation may be determined according to the distinction of the number of touch positions when the inside of the display screen 2 is pressed. For example, as the first pressing operation, a relatively low first speed in the case of a one-point touch in the display screen 2, a relatively high second speed in the case of two-point simultaneous touch, and so on. You may decide.
- the mobile terminal device may be provided with a plurality of press sensors as shown in FIG.
- the direction and speed of the display operation may be determined in accordance with the proper use of these pressure sensors.
- the portable terminal device according to the modified example includes, for example, a first direction display operation in the case of a first press on the front touch sensor 117, and a second direction display operation in the case of a first press on the back pressure sensor 118. To be determined.
- the tenth embodiment shows a case of a plurality of icons displayed in the display screen 2 as target information.
- the display range change control a display operation when a plurality of icons are arranged and displayed in the display screen 2 is controlled.
- the tenth embodiment corresponds to a modification of the sixth embodiment, and the display operation is controlled using the tilt angle in the display range change control.
- FIG. 43 shows display examples and operations of the arrangement of a plurality of icons in the home screen as display control in the tenth embodiment, as in FIG. FIG. 43 shows a case where the user operates the thumb 1 while holding the housing 1 with the left hand.
- FIG. 43A shows the first arrangement state.
- FIG. 43B shows the second arrangement state.
- the user performs a first pressing operation of pressing a part in the display screen 2 at a predetermined size or more and releasing the finger.
- the pressing position is an arbitrary position in the display screen 2. Note that the position of the pressing may be a position on the icon 9 or a position of an area other than the icon 9.
- the mobile terminal device enters the control mode in response to the first pressing operation, and sets the angle of inclination of the housing 1 as the reference angle ⁇ 0.
- the mobile terminal device changes the arrangement of the plurality of icons 9 from the first arrangement state to the second arrangement state.
- the mobile terminal device moves the plurality of ring icons 9 so as to rotate in a predetermined direction, for example, clockwise, in the second arrangement state in the control mode. Further, the mobile terminal device may determine the initial speed of movement of the icon 9 according to the first pressing strength Pn of the first pressing operation.
- the mobile terminal device variably controls the moving direction and speed of the icon 9 according to the angle ⁇ n of the tilting operation in the second arrangement state.
- the speed is determined in accordance with the absolute value
- the mobile terminal device when the user returns the tilt angle ⁇ n to the vicinity of the reference angle ⁇ 0, the mobile terminal device temporarily stops the movement of the icon 9.
- the mobile terminal device may be temporarily stopped when the user touches the center of the ring.
- the mobile terminal device executes processing of an application associated with the icon 9 and releases the control mode.
- the user performs a second pressing operation of pressing a part in the display screen 2, for example, the center or outside area of the ring, with a predetermined size or more and releasing the finger.
- the mobile terminal device releases the control mode in response to the second pressing operation, and returns from the second arrangement state to the first arrangement state.
- the position of the center point Q0 may be a user set value, or may be a position near the touch position coordinate at the time of the first pressing operation.
- the mobile terminal device may adjust the ring, the size of the icon 9, and displaying a part of the ring in the display screen 2 according to the number of the icons 9.
- an operation for selecting a desired icon 9 on the screen can be realized with less effort.
- the user operates with one hand or one finger, if the finger does not reach the desired icon 9 in the first arrangement state in the display screen 2, or if the desired icon 9 is not found, the user performs the first pressing operation. Accordingly, the second arrangement state is changed. The user rotates the icon group 9 in the second arrangement state, and lifts the finger when the desired icon 9 comes to the finger touch position. Alternatively, after the rotation of the icon 9 is temporarily stopped, the desired icon 9 is touch-operated. As a result, a desired icon 9 can be selected and shifted to the application screen.
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
より好適な使い勝手を実現できる携帯端末装置を提供する。携帯端末装置は、表示画面2にコンテンツ等の情報を表示する表示部と、表示画面2に対する押圧を検出する押圧検出部と、携帯端末装置の傾きの角度を検出する傾き角度検出部と、表示画面2に表示される表示情報3の表示範囲4を変更する制御を行う表示制御部とを備える。表示制御部は、所定の大きさ以上の押圧が検出された場合に、検出された傾きの角度を基準角度θ0として設定し、押圧が保持されている状態において、検出された傾きの角度θnと基準角度θ0との差分値に応じて、表示画面2の表示情報3の表示範囲4を変更するように、スクロール5,6等を制御する。
Description
本発明は、携帯端末装置の技術に関する。また、本発明は、表示画面に対するユーザインタフェース技術に関する。
タッチパネルの表示画面に対するユーザの指等の接触により入力操作を可能とする、スマートフォン等の携帯端末装置が普及している。携帯端末装置は、タッチ入力操作に応じて、表示画面内のコンテンツ等の表示を制御する。携帯端末装置は、入力操作に応じて例えばインターネットからコンテンツ情報を取得して表示画面に表示する。その際、携帯端末装置は、そのコンテンツの全体が表示画面内に表示しきれない場合には、そのコンテンツの表示情報の一部を表示する。携帯端末装置は、表示画面内でのタッチ入力操作として、タップ、スワイプ、フリック、ピンチ等の各種の操作を受け付ける。例えば、スワイプ操作の場合、ユーザは表示画面を指でタッチし、タッチした状態のまま移動させてから指を離す。フリック操作の場合、ユーザは表示画面を指でタッチした後に素早く指を移動させてから指を離す。携帯端末装置は、タッチ入力操作に応じて、表示画面内のコンテンツの表示範囲をスクロール等させる。これにより、ユーザは、表示画面でコンテンツの他の一部や全体を閲覧等できる。
また、携帯端末装置は、基本操作画面あるいはホーム画面等と呼ばれる画面を設けている。例えば、ホーム画面では、メールやブラウザ等の複数のアプリケーションのアイコンが配置されている。また、複数のホーム画面が設けられる場合もある。ホーム画面で入力操作によりアイコンが選択されると、そのアイコンに対応付けられているアプリケーションが実行され、アプリケーション画面が表示される。複数のアプリケーションが実行されている場合、複数のアプリケーション画面が設けられる。アプリケーション画面では、コンテンツ等の全体または一部が表示される。ユーザは、表示画面内に表示されるホーム画面等の表示範囲を、タッチ入力操作により切り替えることができる。
上記のような携帯端末装置のユーザインタフェースに関する先行技術例として、特開2011-76349号公報(特許文献1)が挙げられる。特許文献1には、携帯情報端末等として、以下の旨が記載されている。その携帯情報端末は、自装置の傾きを検知し、傾きの方向と大きさを示す傾き情報を生成し、画面に対するタッチ操作による接触が維持された状態で検知された傾きについての傾き情報に基づいて、表示画像を変化させる。
また、近年では、タッチパネル及び携帯端末装置として、タッチセンサだけでなく、押圧状態を検出できる押圧センサを備えるものも実現されている。
しかしながら、携帯端末装置の表示画面の大きさは限られており、コンテンツ表示情報のサイズが大きい場合や多数のホーム画面等がある場合には、表示画面内において、コンテンツの一部や複数の画面の一部のみが表示範囲となる。ユーザが所望のコンテンツや画面の一部や全体を閲覧等したい場合、表示範囲のスクロール等のために、スワイプ等のタッチ入力操作を何回も繰り返す必要がある。タッチ入力操作を何回も繰り返すことは、手間がかかり、身体にも負担をかける。また、表示画面内に多数のアイコン等が配置されている場合、ユーザが所望のアイコン等を探してその箇所をタッチする操作の際に、指が届かない場合もある。その場合、目的の操作のために、端末の持ち手の状態を変える、両手で操作する等の対応が必要になり、手間がかかる。
特許文献1のような技術を用いる場合、ユーザが、概略平板形状の端末の表示画面を、水平の状態でタッチして角度を持つ状態に傾けた場合に、表示画像をスクロール等させることができる。しかし、個々のユーザや状況や目的の操作等に応じて、端末の傾きの状態や、持ち手や指の状態は、様々である。通常、ユーザが端末を手に持った状態で表示画面を見る場合、ユーザの視線及び持ち手の状態に合わせて、水平の地面に対して表示画面内の上下方向が斜めに傾いた状態をとる場合が多い。そのため、特許文献1のような技術では、様々な状態に好適に対応することはできず、表示画面の内容が視認しにくい場合や、意図しないタッチによってスクロールしてしまう等の可能性があり、使い勝手の点で改善余地がある。
本発明の目的は、携帯端末装置及び表示画面に対するユーザインタフェースの技術に関して、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる技術を提供することである。
本発明のうち代表的な実施の形態は、携帯端末装置であって、以下に示す構成を有することを特徴とする。
一実施の形態の携帯端末装置は、表示画面に情報を表示する表示部と、前記表示画面に対する押圧を検出する押圧検出部と、前記表示画面に表示される前記情報の表示範囲を変更する制御を行う表示制御部と、を備え、前記表示制御部は、前記押圧検出部により所定の大きさ以上の押圧が検出された場合に、前記押圧が保持されている状態において、前記表示画面に表示する前記情報の前記表示範囲を変更する。
一実施の形態の携帯端末装置は、表示画面に情報を表示する表示部と、前記表示画面に対する押圧を検出する押圧検出部と、前記表示画面に表示される前記情報の表示範囲を変更する制御を行う表示制御部と、を備え、前記表示制御部は、前記押圧検出部により所定の大きさ以上の第1押圧が検出された後に、前記第1押圧が保持されていない状態において、前記表示範囲を変更する。
本発明のうち代表的な実施の形態によれば、携帯端末装置及び表示画面に対するユーザインタフェースの技術に関して、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる。
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において同一部には原則として同一符号を付し、その繰り返しの説明は省略する。
(実施の形態1)
図1~図10を用いて、本発明の実施の形態1の携帯端末装置について説明する。
図1~図10を用いて、本発明の実施の形態1の携帯端末装置について説明する。
[構成概要]
図1は、実施の形態1の携帯端末装置の構成概要を示す。図1では、ユーザが左手で携帯端末装置の筐体1を持ち、表示画面2内の箇所を親指でタッチ及び押圧する際の状態を示す。携帯端末装置は、水平面、水平方向に対する絶対的な傾きの角度θを持って傾いた状態である。表示画面2には、コンテンツ等の表示情報3の全体のうち一部が表示範囲4として表示されている。なお、説明上、X方向、Y方向、Z方向を示す。X方向及びY方向は、筐体1、表示画面2、及びコンテンツの表示情報3等の平面を構成する方向である。X方向は、画面内水平方向、横方向、左右方向である。Y方向は、画面内垂直方向、縦方向、上下方向である。Z方向は、X方向及びY方向に対する垂直方向であり、筐体1等の厚さ方向である。
図1は、実施の形態1の携帯端末装置の構成概要を示す。図1では、ユーザが左手で携帯端末装置の筐体1を持ち、表示画面2内の箇所を親指でタッチ及び押圧する際の状態を示す。携帯端末装置は、水平面、水平方向に対する絶対的な傾きの角度θを持って傾いた状態である。表示画面2には、コンテンツ等の表示情報3の全体のうち一部が表示範囲4として表示されている。なお、説明上、X方向、Y方向、Z方向を示す。X方向及びY方向は、筐体1、表示画面2、及びコンテンツの表示情報3等の平面を構成する方向である。X方向は、画面内水平方向、横方向、左右方向である。Y方向は、画面内垂直方向、縦方向、上下方向である。Z方向は、X方向及びY方向に対する垂直方向であり、筐体1等の厚さ方向である。
携帯端末装置は、表示部、タッチ検出部、押圧検出部、傾き角度検出部、表示制御部等を備える。表示部は、表示画面2にコンテンツ等の表示情報3を表示する。タッチ検出部は、表示画面2に対するタッチの有無及び位置座標等を検出する。押圧検出部は、表示画面2に対する押圧の強さ等を検出する。傾き角度検出部は、携帯端末装置の傾きの角度として角度θ及び角度θn等を検出する。表示制御部は、押圧や傾き角度の状態に基づいて、表示情報3の表示範囲4を変更する制御として、スクロール5,6等を制御する。
ユーザは、表示画面2に表示されているコンテンツのうちの他の一部を閲覧等したい場合、自分に適した手持ちの状態で、表示画面2内の箇所を例えば親指でタッチ及び押圧する。押圧検出部は、その際に所定の大きさ以上の押圧を検出する。傾き角度検出部は、その際の筐体1の傾きの角度を検出する。表示制御部は、所定の押圧が検出された場合、その時点で検出された傾きの角度θを、基準角度θ0として設定する。
ユーザは、表示画面2をタッチ及び押圧したままの状態で、筐体1を傾ける操作を行う。言い換えると、筐体1は、所定の回転軸及び方向で回転させられる。傾き角度検出部は、その傾ける操作及び回転に伴う傾きの角度θnを同様に検出する。表示制御部は、タッチ及び押圧が保持されている状態で検出された傾きの角度θnと基準角度θ0との差分の大きさに応じて、表示画面2での表示範囲4を変更する制御を行う。表示制御部は、その変更制御として、スクロール5,6や画面切り替え等の表示動作を制御する。スクロール5,6は、表示画面2に表示される表示範囲4をY方向の上下等で連続的に移動させる動作である。画面切り替えは、表示範囲4をコンテンツの一部の領域や後述の画面等の単位で切り替えるように移動させる動作である。
ユーザは、スクロール5,6等の動作によって所望のコンテンツや画面の箇所が表示された状態で、表示画面2から指を離す。押圧検出部は、その際の所定の大きさ以上の押圧が無い状態を検出する。表示制御部は、その押圧が無い状態の検出に基づいて、スクロール5,6等を停止する。
図1の下側には、上記制御を時間軸で示す。携帯端末装置は、最初、通常モードの状態から、表示画面2で所定の大きさ以上の押圧が有るタッチ押圧操作がされると、特有の制御モードに入る。その制御モードでは、上記基準角度θ0が設定され、押圧が維持されたままで傾ける操作に応じて、表示範囲4の変更制御が行われる。ユーザが指を離すと、所定の大きさ以上の押圧が無い状態となり、その制御モードが解除され、通常モードに戻る。このように、ユーザは、簡単な操作によってコンテンツ等の表示範囲4を変えて素早く所望の箇所を閲覧等することができる。
[携帯端末装置(1)]
図2は、実施の形態1の携帯端末装置の機能ブロック構成を示す。実施の形態1の携帯端末装置は、スマートフォンである。携帯端末装置としては、携帯電話機、タブレット型PC、PDA、その他の各種の携帯用デジタル機器が適用可能である。
図2は、実施の形態1の携帯端末装置の機能ブロック構成を示す。実施の形態1の携帯端末装置は、スマートフォンである。携帯端末装置としては、携帯電話機、タブレット型PC、PDA、その他の各種の携帯用デジタル機器が適用可能である。
実施の形態1の携帯端末装置は、主制御部101、システムバス102、ROM103、RAM104、ストレージ部105、操作部106、振動発生部107、拡張インタフェース部108、センサ部110、映像処理部120、音声処理部130、通信処理部140、等を有する。
主制御部101は、マイクロプロセッサユニット等により構成され、プログラム処理に従って携帯端末装置の全体を制御する。システムバス102は、主制御部101と各部との間でデータ送受信を行うためのデータ通信路である。ROM103は、OS等の基本動作プログラムやアプリケーションプログラム等が格納されているメモリである。ROM103は、例えばEEPROMやフラッシュROM等、書き換え可能なROMが用いられる。ROM103に格納されているプログラムの更新により、基本動作プログラム等のバージョンアップや機能拡張が可能である。RAM104は、基本動作プログラムやアプリケーションプログラム等の実行時のワークエリアとなる。ストレージ部105には、アプリケーションプログラム等が格納されている。
操作部106は、ユーザによる入力操作を可能とする入力デバイスを含む部分であり、操作キーを含む。操作キーは、携帯端末装置の電源オン/オフやスタンバイを可能とする操作キーや、基本操作画面を表示するための操作キー等を含む。
振動発生部107は、偏心モータ等により、携帯端末装置を振動させる。これにより、ユーザに状態を伝えることができる。拡張インタフェース部108は、携帯端末装置の機能を拡張するためのインタフェース群である。拡張インタフェース部108は、例えばUSBインタフェース、メモリインタフェース等で構成される。USBインタフェースは、キーボードやその他のUSB機器の接続を行う。メモリインタフェースは、メモリカードやその他のメモリ媒体の接続、及びデータ送受信を行う。
センサ部110は、携帯端末装置に関する状態を検出するためのセンサ群である。センサ部110は、GPS受信部111、加速度センサ112、ジャイロセンサ113、地磁気センサ114、照度センサ115、近接センサ116、タッチ押圧センサ117を含む。センサ部110は、その他のセンサを備えてもよい。
GPS受信部111を用いて、携帯端末装置の位置が例えば緯度及び経度として検出可能である。加速度センサ112及びジャイロセンサ113を用いて、携帯端末装置の動き及び傾きが検出可能である。傾きとしては、少なくとも絶対的な傾きとして水平面に対する傾きの角度が検出可能である。地磁気センサ114を用いて、携帯端末装置の方角が検出可能である。照度センサ115を用いて、携帯端末装置の周囲の明るさが検出可能である。近接センサ116を用いて、携帯端末装置の周囲物との近接状況が検出可能である。
タッチ押圧センサ117を用いて、表示部121の表示画面2に対する指のタッチ及び押圧の状態を検出可能である。例えば、タッチ状態として、タッチ有無及びタッチ位置座標が検出可能である。例えば、押圧状態として押圧有無及び押圧の強さが検出可能である。なお、タッチ押圧センサ117は、タッチセンサと押圧センサとの一体型に限らず、タッチセンサと押圧センサとが別々の装置として設けられてもよい。
映像処理部120は、表示部121、映像信号処理部122、第1映像入力部123、第2映像入力部124を含む。表示部121は、表示画面2を構成し、例えば液晶パネル等の表示装置を含む。表示部121は、映像信号処理部122で処理された映像データを表示画面2に表示する。表示部121は、タッチ押圧センサ117の機能と対応しており、タッチ押圧センサ117を内蔵した型のタッチパネルを含んでもよい。映像信号処理部122は、ビデオRAM等を備え、ビデオRAMに入力された映像データに基づいて、表示部121を駆動する。映像信号処理部122は、必要に応じて、映像データのフォーマット変換、メニューやその他のOSD信号の重畳処理等を行う。第1映像入力部123及び第2映像入力部124は、例えばカメラユニットにより構成される。カメラユニットは、レンズから入力した光を、CCDやCMOSセンサ等の素子を用いて電気信号に変換することにより、周囲や対象物の映像データを得る。
音声処理部130は、音声出力部131、音声信号処理部132、音声入力部133を含む。音声出力部131は、スピーカを含み、音声信号処理部132で処理された音声信号を音声出力する。音声入力部133は、マイクを含み、周囲の音声を音声データに変換して入力する。
通信処理部140は、LAN通信部141、電話網通信部142、近距離通信部143を含む。LAN通信部141は、無線通信用アクセスポイントとの無線通信接続及びデータ送受信を行う。電話網通信部142は、移動体電話通信網の基地局との無線通信接続、電話通信、及びデータ送受信を行う。近距離通信部143は、例えばBlueTooth(登録商標)等の通信インタフェースに対応し、対応する機器との間で近距離無線通信を行う。通信処理部140の各部は、それぞれ、符号回路や復号回路、アンテナ等を備える。通信処理部140は、赤外線通信部等を備えてもよい。
[携帯端末装置(2)]
図3は、実施の形態1の携帯端末装置のソフトウェア構成として、特に、ROM103、RAM104、及びストレージ部105におけるプログラムやデータの構成を示す。ROM103には、基本動作プログラム103a、その他のプログラム103bが格納されている。RAM104には、基本動作実行部104a、アプリケーション実行部104b、一時記憶領域104c、等が構成される。基本動作プログラム等の実行時には、必要に応じてデータが一時記憶領域104cに保持される。
図3は、実施の形態1の携帯端末装置のソフトウェア構成として、特に、ROM103、RAM104、及びストレージ部105におけるプログラムやデータの構成を示す。ROM103には、基本動作プログラム103a、その他のプログラム103bが格納されている。RAM104には、基本動作実行部104a、アプリケーション実行部104b、一時記憶領域104c、等が構成される。基本動作プログラム等の実行時には、必要に応じてデータが一時記憶領域104cに保持される。
ストレージ部105には、アプリケーションプログラム105a、各種情報/データ記憶領域105b等を有する。アプリケーションプログラム105aは、メール、ブラウザ、地図、ゲーム、電子書籍リーダ等、各種機能を実現するためのプログラムである。各種情報/データ記憶領域105bには、携帯端末装置の設定情報やアプリケーション毎の設定情報等の各種情報やデータが記憶される。ストレージ部105は、フラッシュROMやSSDやHDD等の不揮発性記憶装置を含み、携帯端末装置に電源が供給されていない状態でも記憶情報を保持する。
なお、ROM103及びRAM104は主制御部101と一体の構成でもよい。ROM103の機能の一部または全部は、代替として、ストレージ部105の一部記憶領域により実現されてもよい。
主制御部101は、ROM103から基本動作プログラム103aを読み出してRAM104に展開して実行することにより、基本動作実行部104aを実現する。主制御部101は、ストレージ部105からアプリケーションプログラム105aを読み出してRAM104に展開して実行することにより、アプリケーション実行部104bを実現する。
基本動作実行部104aには、各実行部として、タッチ検出部201、押圧検出部202、傾き角度検出部203、表示制御部204、及び振動制御部205を含む。各実行部は連携する。
タッチ検出部201は、タッチ押圧センサ117を用いてタッチ検出処理を行う。タッチ検出部201は、表示画面2内の複数の箇所のタッチを検出する公知の機能を実現する。タッチ検出部201は、タップ、スワイプ、フリック、ピンチ等の操作を検出する公知の機能を実現する。押圧検出部202は、タッチ押圧センサ117を用いて押圧検出処理を行う。押圧検出部202は、タッチ位置での押圧有無及び押圧の強さを検出する。
傾き角度検出部203は、加速度センサ112やジャイロセンサ113を用いて、携帯端末装置の傾きの角度の検出処理を行う。表示制御部204は、表示部121の表示画面2に対する入力操作に応じて、表示画面2の表示内容を制御する処理を行う。この処理は、スクロール表示動作等の制御処理を含む。振動制御部205は、振動発生部107を用いて携帯端末装置に振動を発生させる処理を行う。
なお、基本動作プログラム103aにより実現される携帯端末装置のOSは、公知のグラフィカルユーザインタフェース制御部を含む。グラフィカルユーザインタフェース制御部は、表示画面2に対するタッチ入力操作を通じて入力情報を得る機能や、その入力情報に応じた制御処理に基づいて表示画面2への出力を制御する機能を実現する。
[外観及びコンテンツ表示]
図4は、携帯端末装置の外観、及びアプリケーション画面でのコンテンツ表示の例を示す。図4の左側は、表示画面2を持つ筐体1の前面の構成を示し、右側は背面の構成を示す。概略平板形状の筐体1の表面において、概略矩形の表示画面2を有する。表示画面2内には、コンテンツ表示情報401として、本例ではWebブラウザによるアプリケーション画面におけるWebページの一部の領域が表示されている。なお、Webページ内のテキストや画像等を、○,×,△,□等の記号で簡易的に図示している。コンテンツ内には、リンク等のオブジェクトが含まれている場合がある。本例では、×で示す領域と、△で示す領域との間に、URL等のリンク7が含まれている場合を簡易的に図示している。表示画面2内には、時計やアドレス等の情報を表示する領域402も設けられている。
図4は、携帯端末装置の外観、及びアプリケーション画面でのコンテンツ表示の例を示す。図4の左側は、表示画面2を持つ筐体1の前面の構成を示し、右側は背面の構成を示す。概略平板形状の筐体1の表面において、概略矩形の表示画面2を有する。表示画面2内には、コンテンツ表示情報401として、本例ではWebブラウザによるアプリケーション画面におけるWebページの一部の領域が表示されている。なお、Webページ内のテキストや画像等を、○,×,△,□等の記号で簡易的に図示している。コンテンツ内には、リンク等のオブジェクトが含まれている場合がある。本例では、×で示す領域と、△で示す領域との間に、URL等のリンク7が含まれている場合を簡易的に図示している。表示画面2内には、時計やアドレス等の情報を表示する領域402も設けられている。
筐体1には、第1映像入力部123に対応する前面のカメラユニット423、第2映像入力部124に対応する背面のカメラユニット424、音声出力部131のスピーカ431、音声入力部133のマイク433、等が設けられている。
筐体1には、操作キーとして、電源キーk1、ホームキーk2を有する。電源キーk1は、携帯端末装置の電源のオン/オフ、及びスタンバイ状態への移行/復帰の入力操作を可能とする。電源キーk1の所定時間以上の押下により電源のオン/オフが切り替えられる。電源キーk1の所定時間よりも短い時間の押下によりスタンバイ状態への移行または復帰が行われる。ホームキーk2は、後述の基本操作画面であるホーム画面の表示に関する入力操作を可能とする。アプリケーション画面が表示されている状態におけるホームキーk2の押下によりホーム画面の表示に切り替えられる。
ユーザは、表示画面2におけるアプリケーション画面内のコンテンツのリンク7等や、ホーム画面内のアイコン等のオブジェクトの箇所をタッチする入力操作を行う。これにより、携帯端末装置は、例えばリンク7に対応付けられているコンテンツの読み込み及び表示を行う。携帯端末装置は、例えばアイコンに対応付けられているアプリケーションの実行及びアプリケーション画面の表示を行う。
[タッチ押圧検出]
図5は、タッチ押圧センサ117を用いたタッチ位置座標や押圧の検出について示す。表示画面2及びタッチ押圧センサ117に対応した領域500を有する。領域500は、タッチ及び押圧の状態が検出可能な領域である。領域500において、X方向及びY方向の平面における位置座標(X,Y)を有する。領域500において指によりタッチや押圧される点の位置を位置座標(X1,Y1)として示す。領域500の原点を左上の位置座標(0,0)とし、領域500の横幅をXm、縦幅をYmとする。
図5は、タッチ押圧センサ117を用いたタッチ位置座標や押圧の検出について示す。表示画面2及びタッチ押圧センサ117に対応した領域500を有する。領域500は、タッチ及び押圧の状態が検出可能な領域である。領域500において、X方向及びY方向の平面における位置座標(X,Y)を有する。領域500において指によりタッチや押圧される点の位置を位置座標(X1,Y1)として示す。領域500の原点を左上の位置座標(0,0)とし、領域500の横幅をXm、縦幅をYmとする。
タッチ検出部201は、タッチ押圧センサ117を用いて、領域500におけるタッチされた点の位置座標(X1,Y1)を検出する。押圧検出部202は、タッチ押圧センサ117を用いて、タッチに伴って押圧された点における押圧の強さを検出する。押圧の強さをPnとする。また、タッチ検出部201は、タッチ押圧センサ117を用いて、領域500において複数の指が同時にタッチされた場合におけるタッチ数及び各タッチ位置座標等を検出可能である。
なお、タッチ検出及び押圧検出の方式については特に限定されず、公知の方式を適用可能である。一例としては静電容量型のタッチ押圧検出方式が適用可能である。この方式では、表示画面に対する指の近接や押圧による静電容量変化を電圧値として検出し、その電圧値に基づいて計算によりタッチ位置座標や押圧の強さを得る。
[使用状態、傾き角度、操作]
図6は、ユーザが携帯端末装置を手に持って使用する状態、携帯端末装置の傾き角度、傾ける操作等について、ユーザ及び筐体1を横から見た状態で示す。この状態では、筐体1及び表示画面2に対応する平面が、水平面や垂直面に対して傾いている。この傾きの状態では、水平方向、水平面に対して、絶対的な傾きの角度θを有する。実施の形態1の携帯端末装置は、この角度θを検出して基準角度θ0として設定する。ユーザは、この基準角度θ0の状態から、スクロール等のために、筐体1を傾ける操作を行う。
図6は、ユーザが携帯端末装置を手に持って使用する状態、携帯端末装置の傾き角度、傾ける操作等について、ユーザ及び筐体1を横から見た状態で示す。この状態では、筐体1及び表示画面2に対応する平面が、水平面や垂直面に対して傾いている。この傾きの状態では、水平方向、水平面に対して、絶対的な傾きの角度θを有する。実施の形態1の携帯端末装置は、この角度θを検出して基準角度θ0として設定する。ユーザは、この基準角度θ0の状態から、スクロール等のために、筐体1を傾ける操作を行う。
図7は、図6に対応した傾ける操作等を、ユーザの視線で表示画面2の正面を見た状態で示す。図7の例では、表示画面2のX方向及びY方向の中央付近の点がタッチされている。また、その点が、手持ちによる携帯端末装置の支持の基準点601であるとする。傾ける操作の際の回転軸は、X方向の軸であり、線701で示す。
図6及び図7で、基準角度θ0に対して更に傾ける操作をした時における絶対的な傾きの角度をθnとする。角度θnは、本例では表示画面2及びコンテンツのY方向に関する傾きの角度である。相対的な傾きの角度を表す量として、基準角度θ0と角度θnとの差分値(θn-θ0)を有する。また、傾ける操作及び傾きの角度θnに関して、正方向及び負方向を示す。正方向は、支持の基準点を固定とした場合に、表示画面2の上辺をユーザから見て手前へ傾ける場合の方向とし、負方向は、表示画面2の上辺をユーザから見て奥へ傾ける場合の方向とする。
[表示範囲変更制御、スクロール表示]
図8は、実施の形態1の携帯端末装置における表示範囲変更制御として、コンテンツのスクロール表示動作を示す。表示画面2内のアプリケーション画面において、コンテンツ800が表示可能な領域801を含む。領域801に、コンテンツ800の表示情報3の一部が表示範囲4として表示されている。コンテンツ800は、Webページの例であり、実際のデータはHTML等により構成される。コンテンツ800の表示情報3では、テキストや画像等の領域の間にリンク7を含んでいる場合を示す。コンテンツ800の表示情報3は、アプリケーションにより、領域801の大きさに合わせて可変される。
図8は、実施の形態1の携帯端末装置における表示範囲変更制御として、コンテンツのスクロール表示動作を示す。表示画面2内のアプリケーション画面において、コンテンツ800が表示可能な領域801を含む。領域801に、コンテンツ800の表示情報3の一部が表示範囲4として表示されている。コンテンツ800は、Webページの例であり、実際のデータはHTML等により構成される。コンテンツ800の表示情報3では、テキストや画像等の領域の間にリンク7を含んでいる場合を示す。コンテンツ800の表示情報3は、アプリケーションにより、領域801の大きさに合わせて可変される。
領域801の大きさに対し、コンテンツ800の表示情報3の全体のサイズ、即ち拡大縮小等が無い場合の標準サイズが大きい。そのため、表示情報3の全体を領域801に表示することができない。よって、領域801には、コンテンツ800の表示情報3の一部が表示範囲4として表示される。表示範囲4は、コンテンツ800の表示情報3が表示画面2の領域801に表示される際の範囲である。表示範囲4は、本例では、Webページの途中の領域である場合を示し、×で示す領域の一部、リンク7、△で示す領域の一部が含まれている。
ユーザは、領域801に表示されている表示範囲4の状態から、表示されていないコンテンツ800の他の一部を閲覧等したい場合、従来ではスワイプやフリック等によりスクロールをさせる。本例では、表示情報3をY方向の上または下にスクロール可能である場合を示す。従来では、サイズが大きいコンテンツ800を閲覧等したい場合、スワイプ等の操作を何回も繰り返す必要があり、手間が大きい。
一方、実施の形態1では、ユーザにより表示画面2の領域801を押圧して筐体1を傾ける操作により、領域801での表示範囲4をスクロールさせることができる。これにより、コンテンツ800の表示情報3の表示範囲4を変更することができる。スクロール5は、第1方向スクロールであり、コンテンツ800内での先頭や相対的に上方向へのスクロールを示す。スクロール5では、表示範囲4が上方向に移動され、領域801にはコンテンツ800内での相対的に上方向の一部が表示される。スクロール6は、第2方向スクロールであり、コンテンツ800内での末端や相対的に下方向へのスクロールを示す。スクロール6では、表示範囲4が下方向に移動され、領域801にはコンテンツ800内での相対的に下方向の一部が表示される。なお、表示画面2の領域801内では、スクロール方向に対する反対方向へ画像部分が動く。
[表示制御]
実施の形態1の携帯端末装置における表示制御について以下である。携帯端末装置の表示制御部204は、表示画面2のアプリケーション画面でコンテンツを表示する場合に、ユーザによる特定のタッチ押圧操作及び筐体1を傾ける操作を受け付けて、表示範囲4をスクロールさせる、表示範囲変更制御を行う。
実施の形態1の携帯端末装置における表示制御について以下である。携帯端末装置の表示制御部204は、表示画面2のアプリケーション画面でコンテンツを表示する場合に、ユーザによる特定のタッチ押圧操作及び筐体1を傾ける操作を受け付けて、表示範囲4をスクロールさせる、表示範囲変更制御を行う。
ユーザは、最初、図6のような手持ちの状態であり、図8のようにコンテンツ800の一部を表示範囲4として閲覧しているとする。ユーザは、その状態から、コンテンツ800の他の一部を閲覧等したい場合、まず、表示画面2の領域801を指によってタッチ及び押圧する。この際、ユーザは、ある程度以上の強さで押圧する。携帯端末装置は、その押圧の強さが所定の大きさ以上である場合、特有の制御モードへ移行させる。携帯端末装置は、その時の状態に対応した図6の角度θを検出し、基準角度θ0として設定する。基準角度θ0は、制御用に一時的に設定される角度である。
ユーザは、そのようにタッチ及び押圧した状態のまま、筐体1を所望の方向に傾ける操作をする。ユーザは、例えば上方向へのスクロール5をさせたい場合には、負方向へ傾ける操作をする。携帯端末装置は、その傾ける操作に応じて角度θnを検出し、相対的な傾きの角度の量である差分値(θn-θ0)を検出する。携帯端末装置は、その角度θnの大きさ、具体的には差分値(θn-θ0)を用いて、スクロールをさせるか否か及びそのスクロールの方向や速度等を決定する。携帯端末装置は、角度θnの方向及び大きさに応じて、異なるスクロールとなるように制御する。このスクロール表示動作により、表示画面2の領域801での表示範囲4が変更される。
ユーザは、スクロールにより領域801に所望の表示範囲4が表示される状態になったら、指を離す。これにより、携帯端末装置は、その時点でスクロールを停止させる。即ち、領域801には、その時点の表示範囲4が表示される。ユーザは、その表示範囲4に対応するコンテンツ800の他の一部を閲覧等できる。また、スクロールを停止して指を離した位置が、リンク7等のオブジェクトに該当する場合、携帯端末装置は、そのオブジェクトを実行する処理、例えばリンク7のコンテンツを読み込んで表示する処理を行う。
[制御フロー]
図9は、実施の形態1における表示範囲変更制御を実現する制御処理のフローを示す。基本動作実行部104a、特に表示制御部204は、図9のフローの処理を実行する。なお、このフローを実現するための制御状態であるモードとして、第1モード、第2モード、第3モードを有する。各モードの管理上の値を、0,1,2とする。モード=0(第1モード)は初期状態を示す。モード=1(第2モード)は、タッチ有りの状態であり、基準角度θ0を設定していない状態を示す。モード=2(第3モード)は、所定の押圧有りの状態であり、基準角度θ0を設定した状態を示す。図9は、ステップS101~S123を有する。以下、ステップの順に説明する。
図9は、実施の形態1における表示範囲変更制御を実現する制御処理のフローを示す。基本動作実行部104a、特に表示制御部204は、図9のフローの処理を実行する。なお、このフローを実現するための制御状態であるモードとして、第1モード、第2モード、第3モードを有する。各モードの管理上の値を、0,1,2とする。モード=0(第1モード)は初期状態を示す。モード=1(第2モード)は、タッチ有りの状態であり、基準角度θ0を設定していない状態を示す。モード=2(第3モード)は、所定の押圧有りの状態であり、基準角度θ0を設定した状態を示す。図9は、ステップS101~S123を有する。以下、ステップの順に説明する。
(S101)表示制御部204は、ユーザにより選択されたコンテンツを読み込む。表示制御部204は、最初、モードをモード=0(第1モード)に設定する。(S102)表示制御部204は、表示画面2に、最初、コンテンツのうちの先頭、例えば図8の領域821、を表示する。なお、このような表示位置は、アプリケーションやコンテンツに応じて決まる。(S103) 携帯端末装置は、操作部106やタッチ押圧センサ117を通じて、ユーザによる入力操作を受け付けて、それに対応する入力情報を取得する。表示制御部204は、タッチ検出部201を通じて、タッチ入力情報を取得する。その際、タッチ検出部201は、タッチ有無及びタッチ位置座標(X1,Y1)を検出する。また、押圧検出部202は、押圧の有無及び押圧の強さPnを検出する。(S104)表示制御部204は、入力情報に基づいて、タッチ有無の判断により、処理を分岐させる。タッチ有りの場合(Y)にはS105へ進み、タッチ無しの場合(N)にはS120へ進む。
(S105)表示制御部204は、タッチ検出部201から、タッチ位置座標(X1,Y1)を取得する。(S106)また、表示制御部204は、押圧検出部202から、タッチ位置における押圧の強さPnを取得する。(S107)表示制御部204は、S106で取得した押圧の強さPnを、所定の閾値Ptと比較し、強さPnが閾値Pt以上であるか否かを判断し、処理を分岐させる。Pn≧Ptの場合にはS110へ進み、Pn<Ptの場合にはS108へ進む。
(S108)表示制御部204は、S105で取得したタッチ位置座標(X1,Y1)をメモリに記憶して保持する。(S109)表示制御部204は、モードをモード=1(第2モード)に設定し、S103に戻る。
(S110)表示制御部204は、傾き角度検出部203により携帯端末装置の傾きの角度θnを取得する。(S111)表示制御部204は、現在のモードがモード=2(第3モード)であるか否かを確認し、分岐を行う。モード=2(第3モード)の場合にはS115へ進み、否の場合にはS112へ進む。
(S112)表示制御部204は、S110で取得した角度θnを、基準角度θ0として設定する。(S113)表示制御部204は、基準角度θ0をメモリに記憶して保持する。(S114)表示制御部204は、モードをモード=2(第3モード)に設定し、S103へ戻る。
(S115)一方、モード=2(第3モード)の場合、S115で、表示制御部204は、角度θnと基準角度θ0との差分値の絶対値|θn-θ0|を所定の閾値θtと比較し、閾値θt以上であるか否かを判断し、分岐を行う。|θn-θ0|≧θtの場合にはS116へ進み、否の場合にはS103へ戻る。なお、差分値が0または殆ど0である場合、基準角度θ0の状態から変化していないことを表す。したがって、閾値θtの設定により、ユーザが意図しないで微妙に傾き角度が変化した場合にスクロールするのを防止することができる。
(S116)表示制御部204は、S106で取得した押圧の強さPn等を用いて、スクロール表示動作に使用するためのスクロール速度Snを、下記(1)の式に従って設定する。
Sn=S0×Pn/Pt ・・・(1)
所定の基準スクロール速度をS0とする。基準スクロール速度S0は、実装上の固定の設定値としてもよいし、ユーザにより可変に設定可能な設定値としてもよい。(1)の式の場合、スクロール速度Snは、基準スクロール速度S0を、閾値Ptに対する押圧の強さPnの大きさ(Pn/Pt)に応じて乗算で増大させるように決定される。即ち、ユーザによる押圧が強いほど、スクロール速度Snを大きくすることができる。
所定の基準スクロール速度をS0とする。基準スクロール速度S0は、実装上の固定の設定値としてもよいし、ユーザにより可変に設定可能な設定値としてもよい。(1)の式の場合、スクロール速度Snは、基準スクロール速度S0を、閾値Ptに対する押圧の強さPnの大きさ(Pn/Pt)に応じて乗算で増大させるように決定される。即ち、ユーザによる押圧が強いほど、スクロール速度Snを大きくすることができる。
(S117)次に、表示制御部204は、角度θnと基準角度θ0との差分値(θn-θ0)の符号の正負を判断し、分岐を行う。正の場合((θn-θ0)>0)にはS118へ進み、負の場合((θn-θ0)<0)にはS119へ進む。(S118)表示制御部204は、正方向の傾きに対応して、S116で設定したスクロール速度Snを用いて、図8のスクロール6をさせる下方向スクロール処理を行い、その後、S103へ戻る。(S119)表示制御部204は、負方向の傾きに対応して、S116で設定したスクロール速度Snを用いて、図8のスクロール5をさせる上方向スクロール処理を行い、その後、S103へ戻る。
(S120)一方、S104でタッチ無しの場合、S120で、表示制御部204は、現在のモードがモード=1(第2モード)である否かを確認し、分岐を行う。モード=1(第2モード)である場合にはS121へ進み、否の場合にはS123へ進む。(S121)表示制御部204は、表示画面2でのタッチ位置としてS108で記憶されたタッチ位置座標(X1,Y1)と、表示画面2の表示情報3のうちのリンク7等のオブジェクトの位置とを比較する。表示制御部204は、それらの位置が一致するか否かにより、分岐を行う。一致の場合にはS122へ進み、不一致の場合にはS123へ進む。(S122)表示制御部204は、リンク7に対応付けられた処理を実行する。例えば、表示制御部204は、リンク7のURLで指定されるコンテンツを、インターネット上のサーバから取得して読み込み、表示画面2に表示する処理を行う。この場合、携帯端末装置は、A1で示すように本フローのループを抜けて、新たなコンテンツについて、本フローの最初から同様に処理を行う。(S123)表示制御部204は、モードをモード=0(第1モード)に設定し、S103に戻る。
[スクロール速度の設定]
図10は、図9のステップS116に対応した、スクロール速度Snの設定に関する、押圧の強さPnとスクロール速度Snとの関係を示す。横軸は押圧の強さPnであり、例えば閾値Pt、2×Pt、3×Ptの値を示す。縦軸はスクロール速度Snであり、例えば基準スクロール速度S0、2×S0、3×S0の値を示す。直線1001は、(1)の式に対応する関数を示し、強さPnに応じてスクロール速度Snが線形に増加する。
図10は、図9のステップS116に対応した、スクロール速度Snの設定に関する、押圧の強さPnとスクロール速度Snとの関係を示す。横軸は押圧の強さPnであり、例えば閾値Pt、2×Pt、3×Ptの値を示す。縦軸はスクロール速度Snであり、例えば基準スクロール速度S0、2×S0、3×S0の値を示す。直線1001は、(1)の式に対応する関数を示し、強さPnに応じてスクロール速度Snが線形に増加する。
[効果等]
上記のように、実施の形態1の携帯端末装置によれば、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる。携帯端末装置は、押圧の強さPn及び相対的な傾きの角度θnを用いて、スクロール表示制御により、コンテンツの表示範囲4を変更する。ユーザは、携帯端末装置の筐体1を、自分や状況に適した手持ちの状態、例えば片手で自然に持った状態とする。ユーザは、所望の時点で押圧によってその状態を基準角度θ0として設定できる。そして、ユーザは、そのまま筐体1を所望の方向へ傾ける操作により、コンテンツの表示情報をスクロールさせて表示範囲4を変えることができる。ユーザは、タッチ操作を何回も繰り返す必要無く、簡単な操作で素早く所望の表示範囲4を閲覧等することができる。ユーザは、一回の操作でスクロールにより所望の距離を移動させることができる。
上記のように、実施の形態1の携帯端末装置によれば、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる。携帯端末装置は、押圧の強さPn及び相対的な傾きの角度θnを用いて、スクロール表示制御により、コンテンツの表示範囲4を変更する。ユーザは、携帯端末装置の筐体1を、自分や状況に適した手持ちの状態、例えば片手で自然に持った状態とする。ユーザは、所望の時点で押圧によってその状態を基準角度θ0として設定できる。そして、ユーザは、そのまま筐体1を所望の方向へ傾ける操作により、コンテンツの表示情報をスクロールさせて表示範囲4を変えることができる。ユーザは、タッチ操作を何回も繰り返す必要無く、簡単な操作で素早く所望の表示範囲4を閲覧等することができる。ユーザは、一回の操作でスクロールにより所望の距離を移動させることができる。
所定の押圧をトリガとして制御モードに入り基準角度θ0が設定されるので、ユーザが意図せずにタッチが生じた場合に誤ってスクロールされることも無い。また、ユーザは、押圧の強さ等に応じてスクロール速度等も好みに調整できる。また、ユーザは、スクロール動作に連動させて、別途のタッチ操作を要せずに、素早くリンク等を実行させることもできる。
[変形例(1)]
実施の形態1の変形例として以下が可能である。表示範囲変更制御の対象となるコンテンツとして、Webページ等に限らず、写真画像等、各種が適用可能である。例えば、写真画像のサイズが大きい場合や拡大した場合、表示画面2に写真画像の一部が表示される。その際、実施の形態1のスクロールの制御等を同様に適用可能である。また、表示範囲変更制御としては、スクロール表示動作に限らず、拡大縮小動作等も適用可能である。例えば、携帯端末装置は、写真画像を表示し、ユーザが表示画面2を押圧したまま傾ける操作をすると、その傾きの角度に応じて、写真画像の表示サイズを拡大または縮小する。これにより、ユーザは、写真画像の所望の一部または全体を閲覧等できる。
実施の形態1の変形例として以下が可能である。表示範囲変更制御の対象となるコンテンツとして、Webページ等に限らず、写真画像等、各種が適用可能である。例えば、写真画像のサイズが大きい場合や拡大した場合、表示画面2に写真画像の一部が表示される。その際、実施の形態1のスクロールの制御等を同様に適用可能である。また、表示範囲変更制御としては、スクロール表示動作に限らず、拡大縮小動作等も適用可能である。例えば、携帯端末装置は、写真画像を表示し、ユーザが表示画面2を押圧したまま傾ける操作をすると、その傾きの角度に応じて、写真画像の表示サイズを拡大または縮小する。これにより、ユーザは、写真画像の所望の一部または全体を閲覧等できる。
[変形例(2)]
実施の形態1では、図1等のように、表示画面2及びコンテンツのY方向に関する傾きの角度を用いてY方向のスクロール表示動作を制御する場合を示したが、これに限らず可能である。表示画面2及びコンテンツのX方向に関する傾きの角度を用いて、X方向のスクロール表示動作を制御する形態も同様に可能である。また、上記Y方向の制御と上記X方向の制御との両方を一緒に実行することにより、上下左右を含む全方向でのスクロール表示動作を制御する形態も可能である。このような各方向の制御は、実装上の固定の適用としてもよいし、ユーザ設定に応じて選択可能な適用としてもよいし、アプリケーションやコンテンツ等に応じて選択される適用としてもよい。例えば、写真や地図のように、比較的大きいサイズを持ち拡大縮小等が可能であるコンテンツを表示するアプリケーションの場合に、上記全方向の制御を適用する形態としてもよい。
実施の形態1では、図1等のように、表示画面2及びコンテンツのY方向に関する傾きの角度を用いてY方向のスクロール表示動作を制御する場合を示したが、これに限らず可能である。表示画面2及びコンテンツのX方向に関する傾きの角度を用いて、X方向のスクロール表示動作を制御する形態も同様に可能である。また、上記Y方向の制御と上記X方向の制御との両方を一緒に実行することにより、上下左右を含む全方向でのスクロール表示動作を制御する形態も可能である。このような各方向の制御は、実装上の固定の適用としてもよいし、ユーザ設定に応じて選択可能な適用としてもよいし、アプリケーションやコンテンツ等に応じて選択される適用としてもよい。例えば、写真や地図のように、比較的大きいサイズを持ち拡大縮小等が可能であるコンテンツを表示するアプリケーションの場合に、上記全方向の制御を適用する形態としてもよい。
実施の形態1では、制御の対応関係として、正方向の傾きの場合に下方向のスクロール6、負方向の傾きの場合に上方向のスクロール5としたが、逆の対応関係としてもよい。
実施の形態1のスクロール表示動作は、表示範囲4を連続的に変更する動作、例えば画素単位で滑らかに移動させる動作としたが、これに限らず適用可能である。例えば、一定の領域や距離毎に断続的にスクロールさせる動作も適用可能である。
[変形例(3)]
図9のステップS116では、スクロール速度Snを、押圧の強さPnに応じて変えるように決定したが、これに限らず可能である。下記(2)の式を用いて、スクロール速度Snを、角度θnの大きさに応じて決定してもよい。
図9のステップS116では、スクロール速度Snを、押圧の強さPnに応じて変えるように決定したが、これに限らず可能である。下記(2)の式を用いて、スクロール速度Snを、角度θnの大きさに応じて決定してもよい。
Sn=S0×|θn-θ0|/θt ・・・(2)
(2)の式の場合、閾値θtに対する絶対値|θn-θ0|の大きさに応じて、基準スクロール速度S0を増加させるようにスクロール速度Snを決定している。この変形例の場合、スクロール速度Snの設定の際の関係は、図10で、押圧の強さPnを、傾きの角度θnに関する差分値の絶対値|θn-θ0|に代えたものとなる。
(2)の式の場合、閾値θtに対する絶対値|θn-θ0|の大きさに応じて、基準スクロール速度S0を増加させるようにスクロール速度Snを決定している。この変形例の場合、スクロール速度Snの設定の際の関係は、図10で、押圧の強さPnを、傾きの角度θnに関する差分値の絶対値|θn-θ0|に代えたものとなる。
[変形例(4)]
図9のステップS116、図10では、直線1001のように線形の関数でスクロール速度Snを決定したが、これに限らず可能である。例えば、図10の関数1002のように、階段状の関数で決定してもよい。この関数1002では、押圧の強さPnの範囲の区分に応じて、スクロール速度Snが一定値に決定される。また、スクロール速度Snの決定の際、予め規定された上限値や下限値を含む関数を適用し、その下限値から上限値までの範囲内で決定してもよい。また、線形の関数に限らず、非線形の関数を適用してもよい。
図9のステップS116、図10では、直線1001のように線形の関数でスクロール速度Snを決定したが、これに限らず可能である。例えば、図10の関数1002のように、階段状の関数で決定してもよい。この関数1002では、押圧の強さPnの範囲の区分に応じて、スクロール速度Snが一定値に決定される。また、スクロール速度Snの決定の際、予め規定された上限値や下限値を含む関数を適用し、その下限値から上限値までの範囲内で決定してもよい。また、線形の関数に限らず、非線形の関数を適用してもよい。
また、スクロール速度Snを、押圧の強さPnや角度θnに依らずに一定値に設定してもよい。また、ユーザ設定によりスクロール速度Snを設定可能としてもよい。ユーザ設定手段としては、例えば表示画面2にユーザ設定画面等を表示してスクロール速度Sn等を設定する項目を設けてもよい。
図9のステップS107の押圧の強さPnに関する閾値Pt、あるいはステップS115の角度θnに関する閾値θtについては、実装上の固定の設定値としてもよいし、ユーザ設定により可変に設定可能な設定値としてもよい。ユーザ設定可能とする形態の場合、ユーザは自分が操作しやすい好適な設定にすることができる。
[変形例(5)]
所定の大きさ以上の押圧により基準角度θ0が設定されて特有の制御モードに移行した時点で、表示画面2内にその制御モードの状態を表す所定の情報を表示してもよい。これは表示に限らず、所定の音声出力や振動発生でもよい。また、指が離されてその制御モードが解除された時点で、その所定の情報の表示の消去や他の所定の出力をしてもよい。
所定の大きさ以上の押圧により基準角度θ0が設定されて特有の制御モードに移行した時点で、表示画面2内にその制御モードの状態を表す所定の情報を表示してもよい。これは表示に限らず、所定の音声出力や振動発生でもよい。また、指が離されてその制御モードが解除された時点で、その所定の情報の表示の消去や他の所定の出力をしてもよい。
また、所定の大きさ以上の押圧の強さをトリガとして制御モードに移行させる際に、更に、タッチ継続時間を条件として判断してもよい。即ち、所定の大きさ以上の押圧時のタッチ継続時間が所定の閾値以上である場合に、制御モードに移行させてもよい。
(実施の形態2)
図11~図18を用いて、本発明の実施の形態2の携帯端末装置について説明する。実施の形態2等の基本的な構成は実施の形態1と同様であり、以下、実施の形態2における実施の形態1とは異なる構成部分について説明する。
図11~図18を用いて、本発明の実施の形態2の携帯端末装置について説明する。実施の形態2等の基本的な構成は実施の形態1と同様であり、以下、実施の形態2における実施の形態1とは異なる構成部分について説明する。
[ホーム画面]
図11は、実施の形態2における、表示画面2のホーム画面、及び複数のホーム画面の切り替えについて示す。実施の形態2の携帯端末装置は、特定のタッチ押圧操作に応じて、表示画面2で複数のホーム画面を切り替えて表示する。ホーム画面として、中身が異なる複数のホーム画面を有する。表示画面2内には基本的に1つのホーム画面が表示される。複数のホーム画面のうちの選択された1つのホーム画面が表示範囲4に相当する。1つのホーム画面では、背景上に、アプリケーションに対応付けられているアイコン9等が配置されている。ユーザがアイコン9を選択操作することにより、対応するアプリケーション画面に遷移する。
図11は、実施の形態2における、表示画面2のホーム画面、及び複数のホーム画面の切り替えについて示す。実施の形態2の携帯端末装置は、特定のタッチ押圧操作に応じて、表示画面2で複数のホーム画面を切り替えて表示する。ホーム画面として、中身が異なる複数のホーム画面を有する。表示画面2内には基本的に1つのホーム画面が表示される。複数のホーム画面のうちの選択された1つのホーム画面が表示範囲4に相当する。1つのホーム画面では、背景上に、アプリケーションに対応付けられているアイコン9等が配置されている。ユーザがアイコン9を選択操作することにより、対応するアプリケーション画面に遷移する。
本例では、複数のホーム画面として、ホーム画面H1~H5を有する。ホーム画面H1~H5は、携帯端末装置のOSにより、情報として仮想的にレイヤ状の配置で管理されている。即ち、ホーム画面H1~H5は、レイヤL1~L5として管理されている。例えば、ホーム画面H1は、トップのレイヤL1であり、手前側に配置されている。ホーム画面H5は、ボトムのレイヤL5であり、奥側に配置されている。ホーム画面及びレイヤの数は、必要に応じて増減される。なお、ボトムのレイヤはトップのレイヤにループするようにつながっていてもよい。
ホーム画面H1~H5は、例えばジャンルで分けられている場合を示す。例えば、ホーム画面H1では、下部に、メール、SNS、チャット等の通信関係のジャンルのアプリケーションに対応する3個のアイコン9が配置されている。例えば、ホーム画面H2は、ゲーム等のジャンルのアイコンが配置されている。複数のホーム画面は、ユーザによる設定も可能である。また、1つのホーム画面に複数のアイコンが収まらない場合に自動的に複数のホーム画面に分けられる場合もある。
[表示制御]
図12は、実施の形態2の表示制御として、ホーム画面に対するタッチ押圧操作、及び画面切り替え表示動作を示す。実施の形態2の携帯端末装置は、ユーザによる特定のタッチ押圧操作を受け付けて、表示範囲変更制御として、表示画面2での複数のホーム画面の画面切り替えを制御する。表示範囲変更制御の対象は、実施の形態1ではコンテンツ表示情報であったが、実施の形態2では複数のホーム画面である。
図12は、実施の形態2の表示制御として、ホーム画面に対するタッチ押圧操作、及び画面切り替え表示動作を示す。実施の形態2の携帯端末装置は、ユーザによる特定のタッチ押圧操作を受け付けて、表示範囲変更制御として、表示画面2での複数のホーム画面の画面切り替えを制御する。表示範囲変更制御の対象は、実施の形態1ではコンテンツ表示情報であったが、実施の形態2では複数のホーム画面である。
実施の形態1等は、ユーザが片手で携帯端末装置を操作可能である場合を示している。一方、実施の形態2では、ユーザが両手で携帯端末装置を操作する場合を示す。ユーザは、図7と同様に、図示しない左手で携帯端末装置を持っているとする。そして、ユーザは、図12のように、右手の指で表示画面2内の箇所をタッチ及び押圧するとする。実施の形態2では、タッチ押圧操作として、一本指、二本指を使い分ける。タッチ検出部201及び押圧検出部202は、タッチ押圧センサ117を用いて、表示画面2での一本指でのタッチ押圧、二本指でのタッチ押圧を、区別して検出する。即ち、表示画面2内の一箇所で所定の大きさ以上の押圧有りの状態と、表示画面2内で二箇所が同時に所定の大きさ以上の押圧有りの状態と、が検出される。
上記二種類のタッチ押圧操作の使い分けに応じて、表示制御部204は、二種類の画面切り替え動作を適用する。表示制御部204は、図12のように、画面切り替えの方向として、第1方向、第2方向を制御する。対応関係として、一本指の押圧の場合には、第1方向、例えばレイヤ下降方向での画面切り替えとし、二本指の押圧の場合には、第2方向、例えばレイヤ上昇方向での画面切り替えとする。
図12の上側に示すように、表示制御部204は、一本指での所定の大きさ以上の押圧が検出されている間は、複数のホーム画面を、第1方向であるレイヤ下降方向で、順次に切り替える。即ち、押圧が保持されている状態で、表示画面2に表示範囲4として表示される1つのホーム画面は、手前のトップのレイヤL1から奥のボトムのレイヤL5の方向へ順次に切り替えられる。
図12の下側に示すように、表示制御部204は、二本指での所定の大きさ以上の押圧が検出されている間は、複数のホーム画面を、第2方向であるレイヤ上昇方向で、順次に切り替える。即ち、押圧が保持されている状態で、表示画面2に表示範囲4として表示される1つのホーム画面は、奥のボトムのレイヤL5から手前のトップのレイヤL1の方向へ順次に切り替えられる。
また、ユーザは、上記画面切り替えにより、所望のホーム画面に切り替えられた状態になった時に、表示画面2から指を離し、押圧無しの状態にする。その時点で、表示制御部204は、画面切り替えを停止させる。
[制御フロー(1)]
図13は、実施の形態2の携帯端末装置の表示制御部204による制御処理のフローを示す。図13はステップS201~S217を有する。以下、ステップの順に説明する。実施の形態2では、モードとして、第1モード、第2モード、第3モード、第4モードを有する。なお、各実施の形態でモードは独立しており意味は異なる。
図13は、実施の形態2の携帯端末装置の表示制御部204による制御処理のフローを示す。図13はステップS201~S217を有する。以下、ステップの順に説明する。実施の形態2では、モードとして、第1モード、第2モード、第3モード、第4モードを有する。なお、各実施の形態でモードは独立しており意味は異なる。
(S201)表示制御部204は、モードをモード=0(第1モード)に設定する。(S202)表示画面2に表示する1つのホーム画面のレイヤを、レイヤLnとする。表示制御部204は、最初、レイヤLnを、トップのレイヤL1に設定する。(S203)表示制御部204は、設定されているレイヤLnに対応するホーム画面を、表示画面2に表示する。最初はレイヤL1に対応するホーム画面H1が表示される。(S204)表示制御部204は、操作部106やタッチ押圧センサ117を通じて、タッチ押圧操作を受け付ける。(S205)表示制御部204は、タッチ有無に応じて、分岐を行う。タッチ有りの場合にはS206へ進み、タッチ無しの場合にはS214へ進む。
(S206)表示制御部204は、タッチ検出部201により検出されたタッチ位置座標(X1,Y1)を含むタッチ入力情報を取得する。このタッチ入力情報は、一本指、二本指のタッチの区別の情報を含む。(S207)表示制御部204は、押圧検出部202により検出された押圧の強さPnを取得する。(S208)表示制御部204は、押圧の強さPnが閾値Pt以上か否かを判断し、分岐を行う。Pn≧Ptの場合にはS211へ進み、Pn<Ptの場合にはS209へ進む。
(S209)表示制御部204は、タッチ位置座標(X1,Y1)をメモリに記憶して保持する。(S210)表示制御部204は、モードをモード=1(第2モード)に設定し、S203へ戻る。
(S211)一方、S211では、表示制御部204は、S206で取得したタッチ入力情報に基づいて、タッチ位置が一箇所か二箇所か、タッチ箇所の数を判断し、分岐を行う。一箇所のタッチの場合にはS212へ進み、二箇所のタッチの場合にはS213へ進む。(S212)表示制御部204は、一箇所のタッチに対応した、第1方向画面切り替えとして、レイヤ下降処理を行う。表示制御部204は、その中で必要に応じてレイヤLnの設定を更新し、S203へ戻る。(S213)表示制御部204は、二箇所のタッチに対応した、第2方向画面切り替えとして、レイヤ上昇処理を行う。表示制御部204は、その中で必要に応じてレイヤLnの設定を更新し、S203へ戻る。
(S214)一方、S205でタッチ無しの場合、S214で、表示制御部204は、モードがモード=1(第2モード)であるか否かを確認し、分岐を行う。モード=1(第2モード)の場合にはS215へ進み、否の場合にはS217へ進む。(S215)表示制御部204は、S209で記憶したタッチ位置座標(X1,Y1)と、表示画面2に表示されているホーム画面におけるアイコンの位置とが一致するか否かを判断し、分岐を行う。タッチ位置がアイコン位置に該当する場合にはS216へ進み、該当しない場合にはS217へ進む。(S216)表示制御部204は、該当するアイコン位置に対応付けられているアプリケーションを実行する処理を行う。そして、A2のように本フローのループを抜け、実行されるアプリケーションのアプリケーション画面の処理へ遷移する。(S217)表示制御部204は、モードをモード=0(第1モード)に設定し、S203に戻る。
[制御フロー(2)]
図14は、図13のステップS212のレイヤ下降処理の詳細を示す。この処理は、ステップS221~S229を有する。制御上、モード=2(第3モード)を有する。第3モードは、レイヤ下降処理を表す。
図14は、図13のステップS212のレイヤ下降処理の詳細を示す。この処理は、ステップS221~S229を有する。制御上、モード=2(第3モード)を有する。第3モードは、レイヤ下降処理を表す。
(S221)表示制御部204は、現在のモードがモード=2(第3モード)であるか否かを確認し、分岐を行う。モード=2(第3モード)である場合にはS224へ進み、否の場合にはS222へ進む。(S222)表示制御部204は、モードをモード=2(第3モード)に設定する。(S223)表示制御部204は、タイマを起動して時間を計測する。タイマの計測時間の値をTnとする。そして、S212のレイヤ下降処理を終了する。この値Tnは、ユーザにより表示画面2のタッチ押圧状態が保持されている時間に相当する。
(S224)表示制御部204は、タイマの値Tnが、所定の時間の閾値T0以上であるか否かを判断し、分岐を行う。値Tnが閾値T0以上である場合にはS225へ進み、否の場合には、S212のレイヤ下降処理を終了する。
(S225)表示制御部204は、表示画面2に表示されているホーム画面のレイヤLnが、ボトムのレイヤ(例えばレイヤL5)であるか否かを判断し、分岐を行う。ボトムのレイヤである場合にはS226へ進み、否の場合にはS227へ進む。(S226)表示制御部204は、振動制御部205を用いて、所定の第1振動パターンを発生させる。これにより、ユーザに、現在表示中のホーム画面がボトムのレイヤL5に対応するホーム画面H5になったことを伝える。そして、S212のレイヤ下降処理を終了する。
(S227)表示制御部204は、表示画面2に表示するレイヤLnを下降させるように1増加させる。例えば、レイヤLnは、最初のレイヤL1から次のレイヤL2となる。(S228)表示制御部204は、振動制御部205を用いて、所定の第2振動パターンを発生させる。これにより、ユーザに、現在表示中のホーム画面がボトム以外のレイヤに対応するホーム画面になったことを伝える。表示制御部204は、例えば、ボトムの画面に切り替えた場合、第1振動として第2振動よりも大きい振動を発生させる。(S229)その後、表示制御部204は、タイマを再度起動し、S212のレイヤ下降処理を終了する。
[制御フロー(3)]
図15は、図13のステップS213のレイヤ上昇処理の詳細を示す。ステップS231~239を有する。本処理は、基本的には図14のレイヤ下降処理と同様の考え方である。制御上、モード=3(第4モード)を有する。第4モードは、レイヤ上昇処理を表す。
図15は、図13のステップS213のレイヤ上昇処理の詳細を示す。ステップS231~239を有する。本処理は、基本的には図14のレイヤ下降処理と同様の考え方である。制御上、モード=3(第4モード)を有する。第4モードは、レイヤ上昇処理を表す。
S231で、表示制御部204は、現在のモードがモード=3(第4モード)であるか否かを確認し、分岐を行う。モード=3(第4モード)である場合にはS234へ進み、否の場合にはS232へ進む。S232で、表示制御部204は、モードをモード=3(第4モード)に設定する。S233で、表示制御部204は、タイマを起動して時間を計測し、S213のレイヤ上昇処理を終了する。S234で、表示制御部204は、値Tnが閾値T0以上であるか否かを判断し、分岐を行う。値Tnが閾値T0以上である場合にはS235へ進み、否の場合には、S213のレイヤ上昇処理を終了する。
S235で、表示制御部204は、現在表示画面2に表示されているホーム画面のレイヤLnがトップのレイヤL1であるか否かを判断し、分岐を行う。トップのレイヤL1である場合にはS236へ進み、否の場合にはS237へ進む。S236で、表示制御部204は、振動制御部205を用いて、所定の第1振動パターンを発生させる。これにより、ユーザに、現在表示中のホーム画面がトップのレイヤL1に対応するホーム画面H1になったことを伝える。そして、S213のレイヤ上昇処理を終了する。
S237で、表示制御部204は、表示画面2に表示するレイヤLnを上昇させるように1減少させる。S238で、表示制御部204は、振動制御部205を用いて、所定の第2振動パターンを発生させる。これにより、ユーザに、現在表示中のホーム画面がトップ以外のレイヤに対応するホーム画面になったことを伝える。表示制御部204は、例えば、トップの画面に切り替えた場合、第1振動として第2振動よりも大きい振動を発生させる。S239で、表示制御部204は、タイマを再度起動し、S213のレイヤ上昇処理を終了する。
[効果等]
上記のように、実施の形態2では、図12のように、表示画面2を一本指または二本指で押圧する操作により、複数のホーム画面を第1方向または第2方向で切り替えて表示することができる。ユーザは、複数のホーム画面から所望のホーム画面を選択する際に、スワイプ等の操作を何回も行う必要無く、1回の操作のみで容易に切り替え可能である。また、画面切り替え毎に振動が発生するので、ユーザは、画面切り替えの状態を認識しやすい。
上記のように、実施の形態2では、図12のように、表示画面2を一本指または二本指で押圧する操作により、複数のホーム画面を第1方向または第2方向で切り替えて表示することができる。ユーザは、複数のホーム画面から所望のホーム画面を選択する際に、スワイプ等の操作を何回も行う必要無く、1回の操作のみで容易に切り替え可能である。また、画面切り替え毎に振動が発生するので、ユーザは、画面切り替えの状態を認識しやすい。
[変形例(1)]
実施の形態2の変形例として以下が可能である。二本指の二箇所同時のタッチ検出に限らず、複数指による複数箇所同時のタッチ検出を利用してもよい。制御の対応関係としては、一本指の場合にレイヤ上昇、二本指の場合にレイヤ下降としてもよい。また、複数の画面のレイヤ状の配置に限らず、X方向やY方向に並列の配置の場合にも適用可能である。また、図14及び図15の振動発生のステップを省略した形態でもよい。第1振動パターンと第2振動パターンに分けずに1つの振動パターンでもよい。また、振動発生に限らず、所定の文字や画像の表示、所定の音声出力、等に代えてもよい。
実施の形態2の変形例として以下が可能である。二本指の二箇所同時のタッチ検出に限らず、複数指による複数箇所同時のタッチ検出を利用してもよい。制御の対応関係としては、一本指の場合にレイヤ上昇、二本指の場合にレイヤ下降としてもよい。また、複数の画面のレイヤ状の配置に限らず、X方向やY方向に並列の配置の場合にも適用可能である。また、図14及び図15の振動発生のステップを省略した形態でもよい。第1振動パターンと第2振動パターンに分けずに1つの振動パターンでもよい。また、振動発生に限らず、所定の文字や画像の表示、所定の音声出力、等に代えてもよい。
[変形例(2)]
図16は、変形例における表示画面2の表示状態を示す。図16のように、表示画面2内に複数の画面がレイヤ状や並列で配置されて表示される場合がある。その場合に、変形例として、実施の形態2と同様の制御を適用可能である。例えば、通常のホーム画面の状態から、ホームキーk2の2回押下により、図16の左側のような複数の画面のレイヤ表示状態へ遷移する。本例では、複数のアプリケーション画面G1~G4等のレイヤ状の配置の場合を示す。左側の状態では、アプリケーション画面G1がレイヤL1として最も手前に来た状態で表示されている。この状態から例えば一本指で押圧されると、レイヤ下降により、図16の右側のレイヤ表示状態に切り替えられる。この状態では、アプリケーション画面G2がレイヤL1として最も手前に来た状態で表示されている。
図16は、変形例における表示画面2の表示状態を示す。図16のように、表示画面2内に複数の画面がレイヤ状や並列で配置されて表示される場合がある。その場合に、変形例として、実施の形態2と同様の制御を適用可能である。例えば、通常のホーム画面の状態から、ホームキーk2の2回押下により、図16の左側のような複数の画面のレイヤ表示状態へ遷移する。本例では、複数のアプリケーション画面G1~G4等のレイヤ状の配置の場合を示す。左側の状態では、アプリケーション画面G1がレイヤL1として最も手前に来た状態で表示されている。この状態から例えば一本指で押圧されると、レイヤ下降により、図16の右側のレイヤ表示状態に切り替えられる。この状態では、アプリケーション画面G2がレイヤL1として最も手前に来た状態で表示されている。
[変形例(3)]
表示範囲変更制御の対象となる情報としては、複数のホーム画面に限らず、複数のアプリケーション画面等についても同様に適用可能である。
表示範囲変更制御の対象となる情報としては、複数のホーム画面に限らず、複数のアプリケーション画面等についても同様に適用可能である。
図17は、変更制御の対象として、アプリケーション画面内のコンテンツ履歴情報とする場合を示す。時系列でコンテンツ履歴情報を有し、例えばWebページの閲覧履歴情報に対応する履歴画面E1~E3等を示す。例えば、最新の履歴画面E1が表示範囲4となっている。実施の形態1のように押圧して傾きをY方向で変える操作、実施の形態2のように一本指または二本指で押圧する操作等により、履歴画面E1~E3等を、現在から過去または過去から現在の方向へ切り替えて表示させる。
図18は、変更制御の対象として、アプリケーション画面内のコンテンツ、例えば電子書籍を構成する、複数のページ情報とする場合を示す。複数のページ情報として、例えば各ページに対応するページ画面p1~p3等を示す。例えば、先頭のページ画面p1が表示範囲4となっている。同様に、押圧して傾きをX方向で変える操作、一本指または二本指で押圧する操作等により、ページ画面p1~p3等を所望の方向へ切り替えて表示できる。
(実施の形態3)
図19~図22を用いて、本発明の実施の形態3の携帯端末装置について説明する。以下、実施の形態3における実施の形態1等とは異なる構成部分について説明する。実施の形態3では、実施の形態2と同様に複数のホーム画面の切り替えを制御する場合を示す。
図19~図22を用いて、本発明の実施の形態3の携帯端末装置について説明する。以下、実施の形態3における実施の形態1等とは異なる構成部分について説明する。実施の形態3では、実施の形態2と同様に複数のホーム画面の切り替えを制御する場合を示す。
[表示制御]
図19は、実施の形態3の表示制御について示す。ユーザは、二種類のタッチ押圧操作を使い分ける。携帯端末装置は、表示画面2内、即ちホーム画面の領域内に、上側領域R1と下側領域R2との二種類の領域を区分して設ける。二種類のタッチ押圧操作として、上側領域R1内の箇所を押圧する第1操作と、下側領域R2内の箇所を押圧する第2操作とを有する。図19の上側に示すように、第1操作がされた場合、携帯端末装置は、実施の形態2の図12の上側の動作と同様に、第1方向で画面切り替えを行う。図19の下側に示すように、第2操作がされた場合、携帯端末装置は、図12の下側の動作と同様に、第2方向で画面切り替えを行う。なお、一点鎖線で示す境界線190は、上側領域R1と下側領域R2との境界線であり、表示画面2内には表示されない。
図19は、実施の形態3の表示制御について示す。ユーザは、二種類のタッチ押圧操作を使い分ける。携帯端末装置は、表示画面2内、即ちホーム画面の領域内に、上側領域R1と下側領域R2との二種類の領域を区分して設ける。二種類のタッチ押圧操作として、上側領域R1内の箇所を押圧する第1操作と、下側領域R2内の箇所を押圧する第2操作とを有する。図19の上側に示すように、第1操作がされた場合、携帯端末装置は、実施の形態2の図12の上側の動作と同様に、第1方向で画面切り替えを行う。図19の下側に示すように、第2操作がされた場合、携帯端末装置は、図12の下側の動作と同様に、第2方向で画面切り替えを行う。なお、一点鎖線で示す境界線190は、上側領域R1と下側領域R2との境界線であり、表示画面2内には表示されない。
[制御フロー(1)]
図20は、実施の形態3における表示制御部204の制御処理のフローを示す。ステップS301~S317を有する。図20で、実施の形態2の図13のフローと主に異なる部分は、ステップS311~S313の部分である。S308で、押圧の強さPnが閾値Pt以上である場合にはS311へ進む。制御上、第1モードから第4モードまでを有する。
図20は、実施の形態3における表示制御部204の制御処理のフローを示す。ステップS301~S317を有する。図20で、実施の形態2の図13のフローと主に異なる部分は、ステップS311~S313の部分である。S308で、押圧の強さPnが閾値Pt以上である場合にはS311へ進む。制御上、第1モードから第4モードまでを有する。
(S311)表示制御部204は、S306で取得されたタッチ位置座標(X1,Y1)で示すタッチ押圧位置が、上側領域R1内か下側領域R2内かを判断する。例えば、表示制御部204は、値Y1が、縦幅Ymの半分の値(Ym/2)と比べて小さい場合には上側領域R1内、大きい場合には下側領域R2内であると判断する。表示制御部204は、それら二種類の領域の区別に応じて、分岐を行う。上側領域R1の場合にはS312へ進み、下側領域R2の場合にはS313へ進む。
(S312)表示制御部204は、上側領域R1に対応した第1方向画面切り替えとしてレイヤ下降処理を行い、その中で必要に応じてレイヤLnの設定を更新し、S303へ戻る。(S313)表示制御部204は、下側領域R2に対応した第2方向画面切り替えとしてレイヤ上昇処理を行い、その中で必要に応じてレイヤLnの設定を更新し、S303へ戻る。
[制御フロー(2)]
図20のS312,S313の詳細処理は以下である。この処理は、基本的には図14及び図15と同様であり、異なる部分について以下である。図14のS224及び図15のS234では、第3モードや第4モードである場合に、タイマの時間の値Tnが閾値T0以上であるかを判断した。実施の形態3では、図14のS224及び図15のS234に代えて、以下の処理を行う。
図20のS312,S313の詳細処理は以下である。この処理は、基本的には図14及び図15と同様であり、異なる部分について以下である。図14のS224及び図15のS234では、第3モードや第4モードである場合に、タイマの時間の値Tnが閾値T0以上であるかを判断した。実施の形態3では、図14のS224及び図15のS234に代えて、以下の処理を行う。
表示制御部204は、まず、下記(3)の式に基づいて、画面切り替え表示動作におけるレイヤLnの更新に関する時間間隔Knを決定する。
Kn=K0×Pt/Pn ・・・(3)
(3)の式で、求める時間間隔をKnとする。基準となる所定の時間間隔をK0とする。表示制御部204は、押圧の強さPn、押圧の閾値Ptを用いる。なお、Pt等の具体的な値は実施の形態毎に異なる。(3)の式では、時間間隔K0を、押圧の強さPnに対する閾値Ptの大きさ(Pt/Pn)に応じて、減少させるようにして、時間間隔Knを計算している。即ち、押圧の強さPnが大きいほど、時間間隔Knが短くなるように決定される。表示制御部204は、その時間間隔Knを、タイマの時間の値Tnに関する閾値T0として用いる。
(3)の式で、求める時間間隔をKnとする。基準となる所定の時間間隔をK0とする。表示制御部204は、押圧の強さPn、押圧の閾値Ptを用いる。なお、Pt等の具体的な値は実施の形態毎に異なる。(3)の式では、時間間隔K0を、押圧の強さPnに対する閾値Ptの大きさ(Pt/Pn)に応じて、減少させるようにして、時間間隔Knを計算している。即ち、押圧の強さPnが大きいほど、時間間隔Knが短くなるように決定される。表示制御部204は、その時間間隔Knを、タイマの時間の値Tnに関する閾値T0として用いる。
次に、表示制御部204は、タイマの時間の値Tnを、閾値T0である時間間隔Knと比較して、分岐を行う。値Tnが時間間隔Kn以上である場合にはS225あるいはS235へ進み、否の場合には処理を終了する。上記のように、実施の形態3では、画面切り替えの際のレイヤ更新に関する時間間隔を、押圧の強さPnに応じて可変で設定する。
[時間間隔の設定]
図21は、上記時間間隔Knの設定に関する、押圧の強さPnと時間間隔Knとの関係を示す。実施の形態3では、(3)の式に従う曲線2101により時間間隔Knが決定される。曲線2101は、非線形の関数であり、PnをPtよりも大きくしてゆくと、最初は急峻にKnを減少させ、その後次第に緩やかにKnを減少させる。
図21は、上記時間間隔Knの設定に関する、押圧の強さPnと時間間隔Knとの関係を示す。実施の形態3では、(3)の式に従う曲線2101により時間間隔Knが決定される。曲線2101は、非線形の関数であり、PnをPtよりも大きくしてゆくと、最初は急峻にKnを減少させ、その後次第に緩やかにKnを減少させる。
なお、変形例として、関数2102のように階段状の関係を適用してもよいし、線形の関数を適用してもよい。関数2102では、時間間隔Knは、Pnの範囲毎の一定値として決定される。時間間隔Knは、上限値や下限値が規定されてもよい。時間間隔Knは、押圧の強さPnに依らずに一定値としてもよいし、ユーザ設定値としてもよい。
[片手操作]
図22は、実施の形態3における左右の手に応じた操作を示す。(a)は、左手で上側領域R1を押圧する第1操作を示す。(b)は、左手で下側領域R2を押圧する第2操作を示す。(c)は、右手で上側領域R1を押圧する第1操作を示す。(d)は、右手で下側領域R2を押圧する第2操作を示す。実施の形態3は、このように左手のみの操作及び右手のみの操作の両方の片手操作に対応可能な機能を有している。ユーザは、いずれの片手操作も選択可能である。なお、実施の形態1等でも同様に、両方の片手操作に対応可能な機能を有する。実施の形態2では、両手及び二本指を用いる。
図22は、実施の形態3における左右の手に応じた操作を示す。(a)は、左手で上側領域R1を押圧する第1操作を示す。(b)は、左手で下側領域R2を押圧する第2操作を示す。(c)は、右手で上側領域R1を押圧する第1操作を示す。(d)は、右手で下側領域R2を押圧する第2操作を示す。実施の形態3は、このように左手のみの操作及び右手のみの操作の両方の片手操作に対応可能な機能を有している。ユーザは、いずれの片手操作も選択可能である。なお、実施の形態1等でも同様に、両方の片手操作に対応可能な機能を有する。実施の形態2では、両手及び二本指を用いる。
[効果等]
上記のように、実施の形態3では、ユーザは、表示画面2の上側領域R1または下側領域R2の押圧の操作により、複数のホーム画面を切り替えて表示させることができる。これにより、実施の形態2と同様に、何回もタッチ入力操作を行う必要無く、容易に所望のホーム画面へ切り替えることができる。
上記のように、実施の形態3では、ユーザは、表示画面2の上側領域R1または下側領域R2の押圧の操作により、複数のホーム画面を切り替えて表示させることができる。これにより、実施の形態2と同様に、何回もタッチ入力操作を行う必要無く、容易に所望のホーム画面へ切り替えることができる。
[変形例]
実施の形態3の変形例として以下が可能である。制御の対応関係としては、上側領域R1の場合にレイヤ上昇、下側領域R2の場合にレイヤ下降としてもよい。上側領域R1と下側領域R2との二種類の領域、境界線190の位置は、実装上の固定の設定値としてもよいし、ユーザ設定可能な可変の設定値としてもよい。ユーザ設定の場合、ユーザの手指の大きさ等に応じて、ユーザが操作しやすい好適な領域を設定可能である。ユーザ設定手段としては、例えばユーザ設定画面で上側領域R1と下側領域R2との境界線を表示し、ユーザ入力操作に応じてその境界線を移動させて、ユーザの所望の位置に設定してもよい。あるいは、ユーザ設定画面で、ユーザにより所望の二箇所をタッチ押圧してもらう。携帯端末装置は、それらの位置や押圧等の情報を取得し、それらの位置の中間に、二種類の領域の境界線を設定する。他の実施の形態における操作についても同様にユーザ設定を可能としてもよい。
実施の形態3の変形例として以下が可能である。制御の対応関係としては、上側領域R1の場合にレイヤ上昇、下側領域R2の場合にレイヤ下降としてもよい。上側領域R1と下側領域R2との二種類の領域、境界線190の位置は、実装上の固定の設定値としてもよいし、ユーザ設定可能な可変の設定値としてもよい。ユーザ設定の場合、ユーザの手指の大きさ等に応じて、ユーザが操作しやすい好適な領域を設定可能である。ユーザ設定手段としては、例えばユーザ設定画面で上側領域R1と下側領域R2との境界線を表示し、ユーザ入力操作に応じてその境界線を移動させて、ユーザの所望の位置に設定してもよい。あるいは、ユーザ設定画面で、ユーザにより所望の二箇所をタッチ押圧してもらう。携帯端末装置は、それらの位置や押圧等の情報を取得し、それらの位置の中間に、二種類の領域の境界線を設定する。他の実施の形態における操作についても同様にユーザ設定を可能としてもよい。
また、上記二種類の領域に限らず、適用可能である。例えば、表示画面2内を、左側領域と右側領域との二種類の領域に区分してもよい。この場合、左側領域を押下する第1操作と、右側領域を押下する第2操作とを有する。第1操作及び第2操作に応じて、画面切り替えの方向等を異ならせる。例えば、複数のアプリケーション画面や複数のアイコン等が、X方向で並列に配置されているとする。第1操作の場合には左方向への画面切り替えやスクロールとし、第2操作の場合には右方向への画面切り替えやスクロールとする。また、表示画面2内の任意の位置に任意の大きさで二種類の領域を設定してもよい。
(実施の形態4)
図23~図25を用いて、本発明の実施の形態4の携帯端末装置について説明する。以下、実施の形態4における実施の形態1等とは異なる構成部分について説明する。実施の形態4では、表示範囲変更制御の対象として、ホーム画面内に表示される複数のアイコンとし、複数のアイコンの配置変更制御を行う。
図23~図25を用いて、本発明の実施の形態4の携帯端末装置について説明する。以下、実施の形態4における実施の形態1等とは異なる構成部分について説明する。実施の形態4では、表示範囲変更制御の対象として、ホーム画面内に表示される複数のアイコンとし、複数のアイコンの配置変更制御を行う。
[制御概要及びアイコン配置]
図23は、実施の形態4における表示制御の概要として、ホーム画面における複数のアイコンの配置の表示例を示す。なお、ユーザが筐体1を左手で持った状態で、その親指により操作する場合を示す。
図23は、実施の形態4における表示制御の概要として、ホーム画面における複数のアイコンの配置の表示例を示す。なお、ユーザが筐体1を左手で持った状態で、その親指により操作する場合を示す。
図23の(a)は、第1配置状態を示す。表示画面2でホーム画面を表示する領域内に、複数のアイコン9が、X方向及びY方向に並列で行列状に配置されている。本例では、8個のアプリケーションに対応付けられた8個のアイコン9が、下辺付近の領域に配置されている場合を示す。8個のアイコン9を、識別のため、「App1」~「App8」で示す。
図23の(b)は、第2配置状態を示す。第2配置状態では、複数のアイコン9が、円形、リング状に配置され、かつ、そのリングにおいて複数のアイコン9が円周上を回転するように移動する。また、アイコン9群の移動については、実施の形態2等と同様に、所定の時間間隔毎に移動される。実施の形態4では、表示画面2内の所定の位置を中心点Q0としてリングが配置される。
実施の形態4では、表示画面2内の箇所を所定の大きさ以上で押圧する押圧操作を受け付ける。その押圧の位置は、表示画面2内の任意位置とする。なお、その押圧の位置は、特にアイコン9上の位置としてもよいし、アイコン9以外の領域の位置としてもよい。携帯端末装置は、所定の押圧操作に応じて、ホーム画面の表示状態、即ちアイコン配置を変更する制御を行う。携帯端末装置は、その変更制御として、第1配置状態から第2配置状態へ遷移させる。そして、第2配置状態で、携帯端末装置は、押圧が保持されている状態で、リングの複数のアイコンを所定の方向で回転させるように移動させる。
また、携帯端末装置は、所定の操作、即ち指を離して押圧無しにする操作に応じて、アイコンの回転を停止させ、その離した位置に該当するアイコンを自動的に選択して実行させる。ユーザは、最初に押圧した位置から所定の大きさ以上の押圧を維持したまま位置をずらしてもよい。例えば、ユーザは、所望のアイコンの位置へ指をずらし、その位置で指を離す。これにより、携帯端末装置は、その位置のアイコンを選択する。あるいは、ユーザは、アイコンが無い位置へ指をずらし、その位置で指を離す。これにより、携帯端末装置は、アイコンを選択せずに第1配置状態へ戻す。
[制御フロー(1)]
図24は、実施の形態4における表示制御部204の制御処理のフローを示す。ステップS401~S415を有する。制御上、第1モードから第3モードまでを有する。主に特徴的な処理の部分としてS410及びS415を有する。
図24は、実施の形態4における表示制御部204の制御処理のフローを示す。ステップS401~S415を有する。制御上、第1モードから第3モードまでを有する。主に特徴的な処理の部分としてS410及びS415を有する。
(S401)表示制御部204は、モードをモード=0(第1モード)に設定する。(S402)表示制御部204は、表示画面2に、ホーム画面を、図23の(a)のように第1配置状態で表示する。(S403)表示制御部204は、ユーザ入力操作を受け付ける。(S404)表示制御部204は、タッチ有無に応じて分岐を行う。タッチ有りの場合にはS405へ進み、タッチ無しの場合にはS411へ進む。
(S405)表示制御部204は、タッチ位置座標(X1,Y1)を取得する。(S406)表示制御部204は、押圧の強さPnを取得する。(S407)表示制御部204は、押圧の強さPnが閾値Pt以上であるか否かを判断し、分岐を行う。Pn≧Ptの場合にはS410へ進み、Pn<Ptの場合にはS408へ進む。(S408)表示制御部204は、タッチ位置座標(X1,Y1)をメモリに記憶して保持する。(S409)表示制御部204は、モードをモード=1(第2モード)に設定し、S403へ戻る。(S410)表示制御部204は、アイコン配置変更処理を行う。即ち、表示制御部204は、表示画面2のアイコン配置状態を、第1配置状態から第2配置状態へ遷移させる。この処理の詳細は図25に示される。この処理の後、S403へ戻る。
(S411)一方、S404でタッチ無しの場合、S411で、表示制御部204は、モードがモード=1(第2モード)であるかを確認し、分岐を行う。モード=1(第2モード)である場合にはS412へ進み、否の場合にはS414へ進む。(S412)表示制御部204は、S408で記憶されたタッチ位置座標(X1,Y1)と、ホーム画面内のアイコンの位置とを比較して一致するか否かを判断し、分岐を行う。タッチ位置、即ち押圧が保持されている位置が、アイコン位置に該当する場合にはS413へ進み、該当しない場合にはS414へ進む。(S413)表示制御部204は、該当するアイコンに対応付けられたアプリケーションを実行する処理を行う。その後、A4のように、本フローのループを抜けて、実行先のアプリケーションの処理へ遷移する。(S414)表示制御部204は、モードをモード=0(第1モード)に設定し、S415へ進む。(S415)表示制御部204は、アイコン配置復帰処理を行う。即ち、表示制御部204は、アイコン配置状態を、第2配置状態から第1配置状態へ遷移させる。そして、S403へ戻る。
[制御フロー(2)]
図25は、ステップS410のアイコン配置変更処理の詳細を示す。ステップS421~S428を有する。特徴的な処理の部分としてS423やS427を含む。
図25は、ステップS410のアイコン配置変更処理の詳細を示す。ステップS421~S428を有する。特徴的な処理の部分としてS423やS427を含む。
(S421)表示制御部204は、モードがモード=2(第3モード)であるか否かを確認し、分岐を行う。モード=2(第3モード)である場合にはS425へ進み、否の場合にはS422へ進む。(S422)表示制御部204は、モードをモード=2(第3モード)に設定する。(S423)表示制御部204は、アイコン配置回転表示処理を行う。表示制御部204は、図23の(b)のように、複数のアイコンをリング状に配置する。中心点Q0に基づいてリングが配置される。最初の状態では、例えば、アイコン「App1」を、所定の位置、本例では上端(時計の12時)の位置に配置し、そこから右回りにアイコン「App2」以下を順次に等間隔で配置する。等間隔はアイコン数に応じて決まる。あるいは、表示制御部204は、押圧の位置に一番近いアイコン(例えば(a)の「App2」)を、リング上の一番近い位置(例えば(b)の「App8」の位置)に配置してもよい。なお、アイコン数によっては、リングの大きさを変える、アイコンのサイズを変える、リングのうちの一部を表示画面2内に表示する等、調整してもよい。(S424)表示制御部204は、タイマを起動して時間を値Tnとして計測し、本フローを終了する。
(S425)一方、モード=2(第3モード)である場合、S425で、表示制御部204は、実施の形態3と同様に、時間間隔Knを設定する。即ち、前述の(3)の式に基づいて、Kn=K0×Pt/Pnとして計算する。この時間間隔Knは、アイコンの所定距離の移動の際の時間間隔として用いられる。具体的な値は実施の形態3とは異なる。前述のように、押圧の強さPnに応じて時間間隔Knが減少するので、その分、アイコンの位置がより速く切り替えられることになる。(S426)表示制御部204は、タイマの値Tnが、閾値T0である時間間隔Kn以上であるか否かを判断し、分岐を行う。Tn≧Knである場合にはS427へ進み、否の場合には本フローを終了する。(S427)表示制御部204は、第2配置状態におけるアイコン配置移動処理を行う。表示制御部204は、リングの円周に配置されているアイコン群の表示として、アイコン毎に所定の方向(右回り)で所定の等間隔の距離の単位で移動させる。例えば、図23の(b)で最初に上端の位置にあったアイコン「App1」は、アイコン「App2」の位置へ移動される。同様に、各アイコンは、1つ先のアイコンの位置へ移動される。(S428)表示制御部204は、タイマを再度起動させて、本フローを終了する。
[効果等]
上記のように、実施の形態4では、第1配置状態において、ユーザが選択したい所望のアイコンに指が届かない場合にも、第2配置状態に変えてアイコン群を回転させて、所望のアイコンが指の位置に来た時に指を離すことで、そのアイコンを選択できる。従来では、ユーザは、片手の一本指でアイコンを選択する際、所望のアイコンに指が届かない場合がある。その場合、ユーザは、持ち手の状態を変える、別の手の指で押す、等の手間が必要となる。実施の形態4では、そのような手間が不要となり、片手及び一本指で容易に素早くアイコンを選択可能である。また、押圧の強さに応じてアイコンの回転の時間間隔を変えることにより、指が届く位置に所望のアイコンを素早く移動させることができる。
上記のように、実施の形態4では、第1配置状態において、ユーザが選択したい所望のアイコンに指が届かない場合にも、第2配置状態に変えてアイコン群を回転させて、所望のアイコンが指の位置に来た時に指を離すことで、そのアイコンを選択できる。従来では、ユーザは、片手の一本指でアイコンを選択する際、所望のアイコンに指が届かない場合がある。その場合、ユーザは、持ち手の状態を変える、別の手の指で押す、等の手間が必要となる。実施の形態4では、そのような手間が不要となり、片手及び一本指で容易に素早くアイコンを選択可能である。また、押圧の強さに応じてアイコンの回転の時間間隔を変えることにより、指が届く位置に所望のアイコンを素早く移動させることができる。
[変形例]
実施の形態4の変形例として以下が可能である。実施の形態4の表示制御は、画面内に配置される複数のアイコンに限らず、他のオブジェクトを対象として、同様に適用可能である。他のオブジェクトの例としては、メールのアプリケーション画面における複数のメール項目等が挙げられる。
実施の形態4の変形例として以下が可能である。実施の形態4の表示制御は、画面内に配置される複数のアイコンに限らず、他のオブジェクトを対象として、同様に適用可能である。他のオブジェクトの例としては、メールのアプリケーション画面における複数のメール項目等が挙げられる。
また、アイコン群の移動については、時間間隔毎の断続的な移動に限らず、実施の形態1のスクロールと同様に連続的な移動としてもよい。アイコン群の移動は、リング状の回転に限らず可能である。例えば、複数のアイコンがX方向やY方向や任意の方向で並列に配置され、先頭のアイコンと末端のアイコンとがループでつながっている。その配置において、アイコン群を時間間隔毎にあるいは連続的なスクロール等で移動させる。
また、アイコン配置のリングの中心点Q0の位置は、実装上の固定の設定値に限らず、ユーザ設定による可変の位置としてもよい。例えば、ユーザが使用する手及び指の位置に合わせて好適な位置に設定可能である。また、中心点Q0の位置を、その都度のタッチ押圧の位置に応じて決定してもよい。例えば、タッチ位置座標(X1,Y1)の点を中心点Q0としてもよいし、その点の近くに中心点Q0を設定してもよい。
また、実施の形態4のアイコン配置変更制御に、実施の形態2や実施の形態3の二種類の操作を用いた制御を組み合わせた形態としてもよい。その場合、押圧操作の区別に応じて、アイコンの回転方向等を変えることができる。例えば、第1領域の押圧の場合には右回り、第2領域の押圧の場合には左回り、等にできる。
(実施の形態5)
図26~図27を用いて、本発明の実施の形態5の携帯端末装置について説明する。以下、実施の形態5における実施の形態1等とは異なる構成部分について説明する。実施の形態5では、二種類の操作として、筐体1の前面の押圧センサに対する押圧操作と、筐体1の背面の押圧センサに対する押圧操作とを使い分ける。携帯端末装置は、それらの操作に応じて異なる表示範囲変更制御を行う。変更制御の対象及び動作としては、実施の形態2等と同様に、複数のホーム画面の切り替えの場合を示すが、コンテンツ表示情報のスクロール等も同様に適用できる。
図26~図27を用いて、本発明の実施の形態5の携帯端末装置について説明する。以下、実施の形態5における実施の形態1等とは異なる構成部分について説明する。実施の形態5では、二種類の操作として、筐体1の前面の押圧センサに対する押圧操作と、筐体1の背面の押圧センサに対する押圧操作とを使い分ける。携帯端末装置は、それらの操作に応じて異なる表示範囲変更制御を行う。変更制御の対象及び動作としては、実施の形態2等と同様に、複数のホーム画面の切り替えの場合を示すが、コンテンツ表示情報のスクロール等も同様に適用できる。
[外観、操作]
図26は、実施の形態5における携帯端末装置の外観、操作等を示す。図26の左側は、携帯端末装置の前面を示し、左手で持った状態を示す。表示画面2に対応する領域にはタッチ押圧センサ117が配置されている。図26の右側は、携帯端末装置の背面を示し、左手で持った状態を示す。背面には、所定の位置、例えばX方向で中央、Y方向で上側領域内の位置に、背面押圧センサ118が配置されている。背面押圧センサ118を左手の一本指で押圧する操作を示す。
図26は、実施の形態5における携帯端末装置の外観、操作等を示す。図26の左側は、携帯端末装置の前面を示し、左手で持った状態を示す。表示画面2に対応する領域にはタッチ押圧センサ117が配置されている。図26の右側は、携帯端末装置の背面を示し、左手で持った状態を示す。背面には、所定の位置、例えばX方向で中央、Y方向で上側領域内の位置に、背面押圧センサ118が配置されている。背面押圧センサ118を左手の一本指で押圧する操作を示す。
[装置構成]
実施の形態5の携帯端末装置は、実施の形態1の図2の構成に対し異なる部分として、センサ部110に、タッチ押圧センサ117に加えて背面押圧センサ118を有する。背面押圧センサ118は、押圧の有無及び強さを検出する。図3の押圧検出部202は、タッチ押圧センサ117の押圧状態だけでなく、背面押圧センサ118の押圧状態を検出する。
実施の形態5の携帯端末装置は、実施の形態1の図2の構成に対し異なる部分として、センサ部110に、タッチ押圧センサ117に加えて背面押圧センサ118を有する。背面押圧センサ118は、押圧の有無及び強さを検出する。図3の押圧検出部202は、タッチ押圧センサ117の押圧状態だけでなく、背面押圧センサ118の押圧状態を検出する。
[制御フロー]
図27は、実施の形態5における表示制御部204の制御処理のフローを示す。ステップS501~S518を有する。S501からS510までの処理は、実施の形態2のS201からS210までの処理と同様である。S502では画面切り替えの際のレイヤ更新のためのレイヤLnが設定される。最初は、レイヤL1の画面が表示される。S507では前面のタッチ押圧センサ117を用いて押圧の強さPnが検出される。S508では、押圧の強さPnが閾値Pt以上である場合に、S511へ進む。(S511)表示制御部204は、第1方向の画面切り替えとして、レイヤ下降処理を行い、必要に応じてレイヤLnを更新し、S503へ戻る。
図27は、実施の形態5における表示制御部204の制御処理のフローを示す。ステップS501~S518を有する。S501からS510までの処理は、実施の形態2のS201からS210までの処理と同様である。S502では画面切り替えの際のレイヤ更新のためのレイヤLnが設定される。最初は、レイヤL1の画面が表示される。S507では前面のタッチ押圧センサ117を用いて押圧の強さPnが検出される。S508では、押圧の強さPnが閾値Pt以上である場合に、S511へ進む。(S511)表示制御部204は、第1方向の画面切り替えとして、レイヤ下降処理を行い、必要に応じてレイヤLnを更新し、S503へ戻る。
(S512)一方、S505でタッチ押圧センサ117を通じてタッチ無しの場合には、S512へ進む。S512では、押圧検出部202により背面押圧センサ118を通じて押圧状態を検出する。押圧検出部202は、その押圧状態として押圧の強さPmを取得する。(S513)表示制御部204は、押圧の強さPmが所定の閾値Ps以上であるか否かを判断し、分岐を行う。Pm≧Psの場合にはS514へ進み、否の場合にはS515へ進む。(S514)表示制御部204は、第2方向の画面切り替えとして、レイヤ上昇処理を行い、必要に応じてレイヤLnを更新し、S503へ戻る。S515以降の処理は、図13のS214以降の処理と同様である。
S511のレイヤ下降処理の詳細は以下である。基本的には実施の形態2や実施の形態3のレイヤ下降処理と同様である。S511では、S507で取得した押圧の強さPnについて、図25のS425と同様に、レイヤ更新に関する時間間隔Knを設定する。そして、表示制御部204は、タイマの時間の値Tnが、閾値T0である時間間隔Kn以上であるかを判断し、分岐を行う。以降の処理は、前述と同様である。
S514のレイヤ上昇処理の詳細は以下である。基本的には実施の形態2や実施の形態3のレイヤ上昇処理と同様である。S514ではS512で取得した背面の押圧の強さPmについて、図25のS425と同様に、レイヤ更新に関する時間間隔Knを設定する。例えば、下記(4)の式に基づいて、時間間隔Knを決定する。
Kn=K0×Ps/Pm ・・・(4)
そして、表示制御部204は、タイマの時間の値Tnが、閾値T0である時間間隔Kn以上であるかを判断し、分岐を行う。以降の処理は、前述と同様である。
そして、表示制御部204は、タイマの時間の値Tnが、閾値T0である時間間隔Kn以上であるかを判断し、分岐を行う。以降の処理は、前述と同様である。
[効果等]
上記のように、実施の形態5では、ユーザが前面の表示画面2のタッチ押圧センサ117を所定の大きさ以上で押圧操作した場合には、複数のホーム画面が第1方向で切り替えられて表示される。また、ユーザが背面の背面押圧センサ118を所定の大きさ以上で押圧操作した場合には、複数のホーム画面が第2方向で切り替えられて表示される。ユーザは、携帯端末装置を片手で持った状態で前面の押圧と背面の押圧とを使い分けながら、容易に画面切り替え等が可能である。
上記のように、実施の形態5では、ユーザが前面の表示画面2のタッチ押圧センサ117を所定の大きさ以上で押圧操作した場合には、複数のホーム画面が第1方向で切り替えられて表示される。また、ユーザが背面の背面押圧センサ118を所定の大きさ以上で押圧操作した場合には、複数のホーム画面が第2方向で切り替えられて表示される。ユーザは、携帯端末装置を片手で持った状態で前面の押圧と背面の押圧とを使い分けながら、容易に画面切り替え等が可能である。
[変形例]
実施の形態5の変形例として以下が可能である。実施の形態5では、制御の対応関係として、前面の押圧の場合にはレイヤ下降処理、背面の押圧の場合にはレイヤ上昇処理としたが、逆の対応関係としてもよい。背面押圧センサ118に限らず、筐体1の別の位置、例えば側面の位置に、押圧センサが設けられてもよい。
実施の形態5の変形例として以下が可能である。実施の形態5では、制御の対応関係として、前面の押圧の場合にはレイヤ下降処理、背面の押圧の場合にはレイヤ上昇処理としたが、逆の対応関係としてもよい。背面押圧センサ118に限らず、筐体1の別の位置、例えば側面の位置に、押圧センサが設けられてもよい。
(他の実施の形態)
前述の実施の形態では、表示範囲変更制御の対象として、コンテンツ、ホーム画面、アプリケーション画面、アイコン等の場合を説明した。また、変更制御の表示動作として、スクロール、画面切り替え、アイコン移動等を説明した。これらは、前述の実施の形態での組み合わせに限らず、各種の組み合わせの形態が勿論可能である。
前述の実施の形態では、表示範囲変更制御の対象として、コンテンツ、ホーム画面、アプリケーション画面、アイコン等の場合を説明した。また、変更制御の表示動作として、スクロール、画面切り替え、アイコン移動等を説明した。これらは、前述の実施の形態での組み合わせに限らず、各種の組み合わせの形態が勿論可能である。
例えば、実施の形態1のタッチ押圧及び傾き角度の制御と、実施の形態2の複数画面切り替え制御とを組み合わせた形態が可能である。この形態の場合、ユーザが画面内を押圧して筐体を傾ける操作をすると、携帯端末装置は、押圧の強さや傾き角度を用いて、画面切り替えの方向や速度、時間間隔等を制御する。
例えば、実施の形態1のコンテンツのスクロール表示制御と、実施の形態2の複数指の押圧制御、または実施の形態3の2種類の領域の押圧制御とを組み合わせた形態が可能である。この形態の場合、ユーザが画面内を押圧操作すると、携帯端末装置は、押圧の強さや位置や数を用いて、コンテンツのスクロールの方向や速度等を制御する。
(実施の形態6)
図28~図30を用いて、本発明の実施の形態6の携帯端末装置について説明する。以下、実施の形態6における実施の形態1とは異なる構成部分について説明する。
図28~図30を用いて、本発明の実施の形態6の携帯端末装置について説明する。以下、実施の形態6における実施の形態1とは異なる構成部分について説明する。
[構成概要]
図28は、実施の形態6の携帯端末装置の構成概要を示す。図28では、ユーザが左手で携帯端末装置の筐体1を持ち、表示画面2内の箇所を親指でタッチ及び押圧する際の状態を示す。携帯端末装置は、水平面、水平方向に対する絶対的な傾きの角度θを持って傾いた状態である。表示画面2には、コンテンツ等の表示情報3の全体のうち一部が表示範囲4として表示されている。
図28は、実施の形態6の携帯端末装置の構成概要を示す。図28では、ユーザが左手で携帯端末装置の筐体1を持ち、表示画面2内の箇所を親指でタッチ及び押圧する際の状態を示す。携帯端末装置は、水平面、水平方向に対する絶対的な傾きの角度θを持って傾いた状態である。表示画面2には、コンテンツ等の表示情報3の全体のうち一部が表示範囲4として表示されている。
携帯端末装置は、表示部、タッチ検出部、押圧検出部、傾き角度検出部、表示制御部等を備える。表示部は、表示画面2にコンテンツ等の表示情報3を表示する。タッチ検出部は、表示画面2に対するタッチの有無及び位置座標等を検出する。押圧検出部は、表示画面2に対する押圧の強さ等を検出する。傾き角度検出部は、携帯端末装置の傾きの角度θを検出する。表示制御部は、押圧や傾き角度の状態に基づいて、表示情報3の表示範囲4を変更する制御として、スクロール5,6等を制御する。
ユーザは、表示画面2に表示されているコンテンツのうちの他の一部を閲覧等したい場合、自分に適した手持ちの状態で、表示画面2内の箇所を例えば親指でタッチ及び押圧する。この操作を第1押圧操作とする。ユーザは、第1押圧操作の際、ある程度以上の強さで押圧してから指を離す。押圧検出部は、その際に所定の大きさ以上の第1押圧を検出する。また、傾き角度検出部は、その第1押圧の際における筐体1の傾きの角度θを検出する。表示制御部は、第1押圧の検出に基づいて、通常モードから特有の制御モードへ移行させる。表示制御部は、第1押圧の際に検出された傾きの角度θを、基準角度θ0として設定する。第1押圧操作後の制御モードでは、表示画面2から指が離されており、第1押圧が保持されていない状態、かつタッチ無し状態である。
ユーザは、制御モードの状態で、筐体1を傾ける操作を行う。言い換えると、筐体1は、所定の回転軸及び方向で回転させられる。傾き角度検出部は、その傾ける操作及び回転に伴う傾きの角度θnを同様に検出する。表示制御部は、制御モードの状態で検出された傾きの角度θnと基準角度θ0との差分の大きさに応じて、表示画面2での表示範囲4を変更する制御を行う。表示制御部は、その変更制御として、スクロール5,6等の表示動作を制御する。スクロール5,6は、表示画面2に表示される表示範囲4をY方向の上下等で連続的に移動させる動作である。
ユーザは、スクロール5,6等の動作によって所望のコンテンツの一部が表示範囲4として表示された状態になったら、表示画面2内の箇所を再びタッチ及び押圧する。この操作を第2押圧操作とする。ユーザは、第2押圧操作の際、ある程度以上の強さで押圧してから指を離す。押圧検出部は、第2押圧操作の際の所定の大きさ以上の第2押圧を検出する。表示制御部は、第2押圧の検出に基づいて、スクロール5,6等の動作を終了させて、制御モードを解除して通常モードに戻る。また、ユーザは、制御モード中、角度θnを最初の基準角度θ0の付近の状態に戻すように傾けてもよい。その場合、携帯端末装置は、スクロール5,6を一時停止させる。
図28の下側には、上記制御を時間軸で示す。携帯端末装置は、最初、通常モードの状態から、表示画面2での第1押圧操作がされると、制御モードに入り、基準角度θ0を設定する。携帯端末装置は、制御モード中、第1押圧が保持されていない状態で、傾ける操作の角度θnに応じて、表示範囲4を変更する。携帯端末装置は、制御モードの状態から、表示画面2での第2押圧操作がされると、表示範囲4の変更を終了し、制御モードを解除して通常モードに戻る。このように、ユーザは、簡単な操作によってコンテンツ等の表示範囲4を変えて所望の箇所を閲覧等することができる。
[タッチ押圧検出]
タッチ検出部201は、ピンチ操作等を検出可能である。ピンチ操作の場合、ユーザは、表示画面2に二本の指をタッチし、そのまま二本の指の間隔を拡げるまたは狭める。表示制御部204は、そのピンチ操作の状態の検出に応じて、表示画面2内の表示画像サイズの拡大または縮小等の表示動作を制御する。
タッチ検出部201は、ピンチ操作等を検出可能である。ピンチ操作の場合、ユーザは、表示画面2に二本の指をタッチし、そのまま二本の指の間隔を拡げるまたは狭める。表示制御部204は、そのピンチ操作の状態の検出に応じて、表示画面2内の表示画像サイズの拡大または縮小等の表示動作を制御する。
[表示範囲変更制御、スクロール表示]
図8で、実施の形態6では、ユーザにより表示画面2の領域801内を第1押圧操作して筐体1を傾ける操作により、表示範囲4をスクロールさせることができる。即ち、表示情報3の表示範囲4を変更することができる。
図8で、実施の形態6では、ユーザにより表示画面2の領域801内を第1押圧操作して筐体1を傾ける操作により、表示範囲4をスクロールさせることができる。即ち、表示情報3の表示範囲4を変更することができる。
[表示制御]
実施の形態6の携帯端末装置における表示制御について以下である。携帯端末装置の表示制御部204は、表示画面2のアプリケーション画面でコンテンツを表示する場合に、ユーザによる特定のタッチ押圧操作及び筐体1を傾ける操作を受け付けて、表示範囲4をスクロールさせる、表示範囲変更制御を行う。
実施の形態6の携帯端末装置における表示制御について以下である。携帯端末装置の表示制御部204は、表示画面2のアプリケーション画面でコンテンツを表示する場合に、ユーザによる特定のタッチ押圧操作及び筐体1を傾ける操作を受け付けて、表示範囲4をスクロールさせる、表示範囲変更制御を行う。
ユーザは、最初、図6のような手持ちの状態であり、図8のようにコンテンツ800の一部を表示範囲4として閲覧しているとする。ユーザは、その状態から、コンテンツ800の他の一部を閲覧等したい場合、図28のように、まず、表示画面2の領域801を第1押圧操作する。この際、ユーザは、ある程度以上の強さで押圧してから指を離す。携帯端末装置は、その押圧の強さPnが所定の大きさ以上である第1押圧の場合、制御モードへ移行させる。携帯端末装置は、第1押圧の検出の時の角度θを検出し、基準角度θ0として設定する。なお、角度θは、第1押圧の検出時点から所定時間内で検出されたものを用いてもよい。
ユーザは、第1押圧操作後の、表示画面2から指を離している状態で、筐体1を所望の方向に傾ける操作をする。ユーザは、例えば上方向へのスクロール5をさせたい場合、負方向へ傾ける。携帯端末装置は、その傾ける操作に応じた角度θnを検出し、相対的な傾きの角度の量である差分値(θn-θ0)を検出する。携帯端末装置は、第1押圧の強さPn及び差分値(θn-θ0)を用いて、スクロールさせるか否か及びスクロールの方向や速度等を決定する。携帯端末装置は、差分値(θn-θ0)で示す方向及び大きさに応じて、異なるスクロール表示動作となるように制御する。このスクロール表示動作により、表示画面2の領域801での表示範囲4が変更される。
ユーザは、スクロールにより領域801に所望の表示範囲4が表示される状態になったら、筐体1の傾きを最初の基準角度θ0に近い状態に戻すことにより、スクロールを一時停止させることができる。また、ユーザは、その状態から傾ける操作により、スクロールを再開させることができる。
ユーザは、所望の表示範囲4の状態で、第2押圧操作により、通常モードへ戻ることができる。携帯端末装置は、第2押圧操作の際の第2押圧を検出し、その時点でスクロールによる表示範囲4の変更を終了させ、制御モードを解除して通常モードへ戻る。ユーザは、その解除の時点の表示範囲4に対応するコンテンツ800の一部を閲覧等できる。
また、ユーザは、第2押圧操作の前に、所望の表示範囲4内にあるリンク7等のオブジェクトをタッチにより選択操作してもよい。この場合、携帯端末装置は、そのオブジェクトを実行する処理、例えばリンク7のコンテンツを読み込んで表示する処理を行うと共に、制御モードを解除する。
[制御フロー]
図29は、実施の形態6における表示範囲変更制御を実現する制御処理のフローを示す。基本動作実行部104a、特に表示制御部204は、図29のフローの処理を実行する。なお、このフローを実現するための制御状態であるモードとして、第1モード、第2モード、第3モードを有する。各モードの管理上の値を、0,1,2とする。モード=0(第1モード)は初期状態を示す。モード=1(第2モード)は、タッチ有り状態等を示す。モード=2(第3モード)は、第1押圧有り状態等を示す。図29は、ステップS601~S626を有する。以下、ステップの順に説明する。
図29は、実施の形態6における表示範囲変更制御を実現する制御処理のフローを示す。基本動作実行部104a、特に表示制御部204は、図29のフローの処理を実行する。なお、このフローを実現するための制御状態であるモードとして、第1モード、第2モード、第3モードを有する。各モードの管理上の値を、0,1,2とする。モード=0(第1モード)は初期状態を示す。モード=1(第2モード)は、タッチ有り状態等を示す。モード=2(第3モード)は、第1押圧有り状態等を示す。図29は、ステップS601~S626を有する。以下、ステップの順に説明する。
(S601)表示制御部204は、ユーザにより選択されたコンテンツを読み込む。表示制御部204は、最初、モードをモード=0(第1モード)に設定する。(S602)表示制御部204は、表示画面2に、最初、コンテンツのうちの先頭、例えば図8の領域821を表示する。(S603)携帯端末装置は、操作部106やタッチ押圧センサ117を通じて、ユーザによる入力操作を受け付けて、それに対応する入力情報を取得する。表示制御部204は、タッチ検出部201を通じて、タッチ入力情報を取得する。その際、タッチ検出部201は、タッチ有無及びタッチ位置座標(X1,Y1)を検出する。また、押圧検出部202は、押圧の有無及び押圧の強さPnを検出する。(S604)表示制御部204は、入力情報に基づいて、タッチ有無の判断により、処理を分岐させる。タッチ有りの場合(Y)にはS605、タッチ無しの場合(N)にはS617へ進む。
(S605)表示制御部204は、タッチ検出部201から、タッチ位置座標(X1,Y1)を含む情報を取得する。(S606)また、表示制御部204は、押圧検出部202から、S605のタッチ位置座標に対応するタッチ位置における押圧の強さPnを含む情報を取得する。(S607)表示制御部204は、現在のモードがモード=2(第3モード)であるか否かを確認し、分岐を行う。モード=2の場合にはS608、否の場合にはS610へ進む。(S608)表示制御部204は、S606で取得した押圧の強さPnを、所定の閾値Ptと比較し、強さPnが閾値Pt以上であるか否かを判断し、分岐を行う。Pn≧Ptの場合にはS609へ進み、Pn<Ptの場合にはS603へ戻る。(S609)表示制御部204は、モードをモード=0(第1モード)に設定し、S603へ戻る。なお、S607,S609の流れは、第2押圧操作による制御モードの解除に相当する。
(S610)一方、S610では、表示制御部204は、S606で取得した押圧の強さPnを、所定の閾値Ptと比較し、強さPnが閾値Pt以上であるか否かを判断し、分岐を行う。Pn≧Ptの場合にはS613、Pn<Ptの場合にはS611へ進む。(S611)表示制御部204は、S605で取得したタッチ位置座標(X1,Y1)をメモリに記憶して保持する。(S612)表示制御部204は、モードをモード=1(第2モード)に設定し、S603に戻る。
(S613)一方、S613では、表示制御部204は、傾き角度検出部203により携帯端末装置の傾きの角度θを取得する。(S614)表示制御部204は、S613で取得した角度θを、基準角度θ0として設定する。なお、S607,S610,S614等の流れは、第1押圧操作時の制御に相当する。(S615)表示制御部204は、基準角度θ0をメモリに記憶して保持する。(S616)表示制御部204は、モードをモード=2(第3モード)に設定し、S603へ戻る。
(S617)一方、S604でタッチ無しの場合、S617で、表示制御部204は、現在のモードを確認し、分岐を行う。モード=0の場合にはS603へ戻り、モード=1の場合にはS618へ進み、モード=2の場合にはS621へ進む。(S618)表示制御部204は、表示画面2でのタッチ位置としてS611で記憶されたタッチ位置座標(X1,Y1)と、表示画面2の表示情報3のうちのリンク7等のオブジェクトの位置とを比較する。表示制御部204は、それらの位置が一致するか否かにより、分岐を行う。一致の場合、即ちユーザのタッチ位置がリンク7等に該当する場合にはS620へ進み、不一致の場合にはS619へ進む。(S619)表示制御部204は、モードをモード=0(第1モード)に設定し、S603へ戻る。(S620)表示制御部204は、オブジェクトに対応付けられた処理を実行する。例えば、表示制御部204は、リンク7のURLで指定されるコンテンツを、インターネット上のサーバから取得して読み込み、表示画面2に表示する処理を行う。この場合、携帯端末装置は、A1で示すように本フローのループを抜けて、新たなコンテンツについて、本フローの最初から同様に処理を行う。
(S621)一方、S621では、傾き角度検出部203により、携帯端末装置の傾きの角度θnを検出する。表示制御部204は、傾き角度検出部203から、その角度θnを含む情報を取得する。(S622)表示制御部204は、角度θnと基準角度θ0との差分値の絶対値|θn-θ0|を、所定の閾値θtと比較し、閾値θt以上であるか否かを判断し、分岐を行う。|θn-θ0|≧θtの場合にはS623へ進み、|θn-θ0|<θtの場合にはS603へ戻る。なお、この差分値が0または殆ど0である場合、基準角度θ0の状態から変化していないことを表す。絶対値|θn-θ0|が閾値θtよりも小さい範囲内にある場合にはスクロールを生じさせない。したがって、閾値θtの設定により、ユーザが意図しないで微妙に傾き角度が変化した場合にスクロールするのを防止することができる。
(S623)表示制御部204は、S621で取得した角度θn等を用いて、スクロール表示動作に使用するためのスクロール速度Snを、下記(5)の式に従って設定する。
Sn=S0×|θn-θ0|/θt ・・・(5)
所定の基準スクロール速度をS0とする。基準スクロール速度S0は、実装上の固定の設定値としてもよいし、ユーザにより可変に設定可能な設定値としてもよい。(5)の式では、閾値θtに対する角度θnの差分の絶対値の大きさ(|θn-θ0|/θt)に応じて、基準スクロール速度S0を乗算で増大させるようにして、スクロール速度Snが決定される。即ち、基準角度θ0に対して傾ける角度θnが大きいほど、スクロール速度Snを大きくすることができる。
所定の基準スクロール速度をS0とする。基準スクロール速度S0は、実装上の固定の設定値としてもよいし、ユーザにより可変に設定可能な設定値としてもよい。(5)の式では、閾値θtに対する角度θnの差分の絶対値の大きさ(|θn-θ0|/θt)に応じて、基準スクロール速度S0を乗算で増大させるようにして、スクロール速度Snが決定される。即ち、基準角度θ0に対して傾ける角度θnが大きいほど、スクロール速度Snを大きくすることができる。
(S624)次に、表示制御部204は、角度θnと基準角度θ0との大きさの関係、言い換えると差分値(θn-θ0)の符号の正負に応じて、分岐を行う。角度θnが基準角度θ0よりも大きい場合(θn>θ0)にはS625、小さい場合(θn<θ0)にはS626へ進む。(S625)表示制御部204は、正方向の傾きに対応して、S623で設定したスクロール速度Snを用いて、図8のスクロール6をさせる下方向スクロール処理を行い、その後、S603へ戻る。(S626)表示制御部204は、負方向の傾きに対応して、S623で設定したスクロール速度Snを用いて、図8のスクロール5をさせる上方向スクロール処理を行い、その後、S603へ戻る。
S604,S617,S625等の流れは、制御モード中の表示範囲4の変更に相当する。なお、本フローでは、ループで所定時間毎の処理が繰り返され、S625等のスクロール処理は、所定時間で所定距離を移動させる分のスクロールに相当する。ループによりS625等の処理が何回も継続されることにより、長距離の連続的なスクロールも実現される。
[スクロール速度の設定]
図10で、図29のステップS623のスクロール速度Snの設定に関する、傾きの角度θの差分の絶対値|θn-θ0|とスクロール速度Snとの関係を示す。横軸は絶対値|θn-θ0|であり、例えば閾値θt、2×θt、3×θtの値を示す。縦軸はスクロール速度Snであり、例えば基準スクロール速度S0、2×S0、3×S0の値を示す。直線1001は、(5)の式に対応する関数を示し、絶対値|θn-θ0|に応じてスクロール速度Snが線形に増加する。
図10で、図29のステップS623のスクロール速度Snの設定に関する、傾きの角度θの差分の絶対値|θn-θ0|とスクロール速度Snとの関係を示す。横軸は絶対値|θn-θ0|であり、例えば閾値θt、2×θt、3×θtの値を示す。縦軸はスクロール速度Snであり、例えば基準スクロール速度S0、2×S0、3×S0の値を示す。直線1001は、(5)の式に対応する関数を示し、絶対値|θn-θ0|に応じてスクロール速度Snが線形に増加する。
[効果等]
上記のように、実施の形態6の携帯端末装置によれば、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる。携帯端末装置は、押圧の強さPn及び傾きの角度θnを用いて、スクロール表示制御によりコンテンツの表示範囲4を変更する。ユーザは、携帯端末装置の筐体1を、自分や状況に適した手持ちの状態、例えば片手で自然に持った状態とする。ユーザは、所望の時点で第1押圧操作によってその状態を基準角度θ0として設定できる。ユーザは、そのまま筐体1を所望の方向へ傾ける操作により、スクロールさせて表示範囲4を変えることができる。そして、ユーザは、所望の時点で第2押圧操作によってその状態を解除することができる。ユーザは、タッチ操作を何回も繰り返す必要無く、簡単な操作で素早く所望の表示範囲4を閲覧等することができる。ユーザは、一回の操作でスクロールにより所望の距離を移動させることができる。
上記のように、実施の形態6の携帯端末装置によれば、ユーザの様々な状態に対応して少ない手間でコンテンツ等の表示範囲の変更が実現でき、より好適な使い勝手を実現できる。携帯端末装置は、押圧の強さPn及び傾きの角度θnを用いて、スクロール表示制御によりコンテンツの表示範囲4を変更する。ユーザは、携帯端末装置の筐体1を、自分や状況に適した手持ちの状態、例えば片手で自然に持った状態とする。ユーザは、所望の時点で第1押圧操作によってその状態を基準角度θ0として設定できる。ユーザは、そのまま筐体1を所望の方向へ傾ける操作により、スクロールさせて表示範囲4を変えることができる。そして、ユーザは、所望の時点で第2押圧操作によってその状態を解除することができる。ユーザは、タッチ操作を何回も繰り返す必要無く、簡単な操作で素早く所望の表示範囲4を閲覧等することができる。ユーザは、一回の操作でスクロールにより所望の距離を移動させることができる。
所定の大きさ以上の第1押圧をトリガとして制御モードに入り基準角度θ0が設定されるので、ユーザが意図せずにタッチが生じた場合に誤ってスクロールされることも無い。また、ユーザは、角度θn等に応じてスクロール速度Sn等も好みに調整できる。また、ユーザは、スクロールに連動させて素早くリンク7等を選択することもできる。
また、実施の形態6の携帯端末装置によれば、スマートウォッチ等、表示画面のサイズが比較的小さい装置にも、好適に適用可能である。表示画面のサイズが比較的小さい場合、表示画面を指でタッチ及び押圧した際、指によって表示画面の一部が隠れてしまい、その部分がユーザから視認し難くなり、使い勝手が良くない場合がある。それに対し、実施の形態6の携帯端末装置では、表示画面2のサイズが比較的小さい場合でも、ユーザが1回押圧して指を離した状態でスクロール等が可能であり、表示情報が視認しやすい。
図30は、実施の形態6の携帯端末装置としてスマートウォッチである場合の表示画面2に対する押圧操作等を示す。左手首にスマートウォッチを装着した状態で、右手の一本指で表示画面2内の箇所をタッチ及び押圧する様子を示す。表示画面2が円形であり、表示画面2のサイズとして手首幅程度を有する場合を示す。第1押圧操作の際、一時的に表示画面2の一部が隠れる。第1押圧操作で指を離した後の制御モードの状態では、表示画面2の全体が視認できる。ユーザは、表示画面2の全体を見ながら手首を傾ける操作等によりスクロールさせることができ、所望の表示範囲4にしやすい。
[変形例(1)]
実施の形態6の変形例として以下が可能である。実施の形態6では、図28等のように、表示画面2及びコンテンツのY方向に関する傾きの角度θを用いてY方向のスクロール表示動作を制御する場合を示したが、これに限らず実施の形態1と同様に各種の変形例が可能である。例えば、表示画面2及びコンテンツのX方向に関する傾きの角度を用いて、X方向のスクロール表示動作を制御する形態も同様に可能である。図7には、X方向に関する傾きの角度φnに関する傾ける操作を示している。
実施の形態6の変形例として以下が可能である。実施の形態6では、図28等のように、表示画面2及びコンテンツのY方向に関する傾きの角度θを用いてY方向のスクロール表示動作を制御する場合を示したが、これに限らず実施の形態1と同様に各種の変形例が可能である。例えば、表示画面2及びコンテンツのX方向に関する傾きの角度を用いて、X方向のスクロール表示動作を制御する形態も同様に可能である。図7には、X方向に関する傾きの角度φnに関する傾ける操作を示している。
[変形例(2)]
表示範囲変更の表示動作としては、拡大縮小に適用する場合、例えば、傾きの角度が正方向の場合には拡大処理、負方向の場合には縮小処理といった対応関係としてもよい。例えば、携帯端末装置としてデジタルカメラとし、対象情報として複数の写真画像とする。その装置において、通常モード時には、複数の写真画像または選択された1つの写真画像を表示画面内に表示する。その状態で、スワイプ操作等による写真画像のスクロールや、ピンチ操作等による写真画像の拡大/縮小が可能である。写真画像のサイズが大きい場合や拡大した場合、表示画面2には写真画像の一部が表示される。その装置は、通常モードから第1押圧操作に応じて制御モードに入る。その制御モードの表示では、傾きの角度に応じて、写真画像のスクロールあるいは拡大/縮小を可能とし、第2押圧操作に応じて制御モードから通常モードの表示に戻る。
表示範囲変更の表示動作としては、拡大縮小に適用する場合、例えば、傾きの角度が正方向の場合には拡大処理、負方向の場合には縮小処理といった対応関係としてもよい。例えば、携帯端末装置としてデジタルカメラとし、対象情報として複数の写真画像とする。その装置において、通常モード時には、複数の写真画像または選択された1つの写真画像を表示画面内に表示する。その状態で、スワイプ操作等による写真画像のスクロールや、ピンチ操作等による写真画像の拡大/縮小が可能である。写真画像のサイズが大きい場合や拡大した場合、表示画面2には写真画像の一部が表示される。その装置は、通常モードから第1押圧操作に応じて制御モードに入る。その制御モードの表示では、傾きの角度に応じて、写真画像のスクロールあるいは拡大/縮小を可能とし、第2押圧操作に応じて制御モードから通常モードの表示に戻る。
特に、写真画像としては、サイズや画角が大きく一度に全体を表示できないパノラマ画像や全天球画像にも適用可能である。制御モード中の操作により、パノラマ画像や全天球画像の全体のうち、視線方向に対応して表示範囲とする一部を容易に変更できる。ユーザは、その写真画像の所望の一部または全体を好適に閲覧等できる。
[変形例(3)]
図29のステップS623では、図10の直線1001の関数のように、スクロール速度Snを絶対値|θn-θ0|に応じて線形で変えるように決定したが、これに限らず可能である。例えば、図10の関数1002のように、階段状の関数で決定してもよい。この関数1002では、絶対値|θn-θ0|の範囲の区分に応じて、スクロール速度Snが一定値に決定される。また、スクロール速度Snを、角度θnに依らずに一定値に設定してもよいし、ユーザ設定により可変に設定可能としてもよい。図29の閾値Ptや閾値θtについては、実装上の固定の設定値としてもよいし、ユーザ設定可能としてもよい。
図29のステップS623では、図10の直線1001の関数のように、スクロール速度Snを絶対値|θn-θ0|に応じて線形で変えるように決定したが、これに限らず可能である。例えば、図10の関数1002のように、階段状の関数で決定してもよい。この関数1002では、絶対値|θn-θ0|の範囲の区分に応じて、スクロール速度Snが一定値に決定される。また、スクロール速度Snを、角度θnに依らずに一定値に設定してもよいし、ユーザ設定により可変に設定可能としてもよい。図29の閾値Ptや閾値θtについては、実装上の固定の設定値としてもよいし、ユーザ設定可能としてもよい。
[変形例(4)]
第1押圧操作に応じて制御モードに移行した時点で、表示画面2内にその制御モードの状態を表す所定の情報を表示してもよい。また、第2押圧操作により制御モードが解除された時点で、所定の情報の表示の消去や他の所定の出力をしてもよい。また、第1押圧を判断して制御モードに移行させる際に、更に、タッチ継続時間等を条件として判断してもよい。
第1押圧操作に応じて制御モードに移行した時点で、表示画面2内にその制御モードの状態を表す所定の情報を表示してもよい。また、第2押圧操作により制御モードが解除された時点で、所定の情報の表示の消去や他の所定の出力をしてもよい。また、第1押圧を判断して制御モードに移行させる際に、更に、タッチ継続時間等を条件として判断してもよい。
[変形例(5)]
実施の形態6では、基本的には、押圧の強さPnの情報を、第1押圧操作及び第2押圧操作の判定、制御モード切り替えに使用している。更に、変形例として、スクロール速度等の決定の際に押圧の強さPnを用いてもよい。例えば、第1押圧の強さPnを用いて、図29のステップS623の基準スクロール速度S0を決定する。例えば、強さPnが大きいほど基準スクロール速度S0が大きくなるようにする。そして、その基準スクロール速度S0を用いてスクロール速度Snが計算される。即ち、そのスクロール速度Snは、強さPnと角度θnとの両方の情報を反映して決定される。また、第1押圧の強さPnを用いてスクロール速度Snを決定し、角度θnについてはスクロール方向の決定のみに用いる形態等でもよい。
実施の形態6では、基本的には、押圧の強さPnの情報を、第1押圧操作及び第2押圧操作の判定、制御モード切り替えに使用している。更に、変形例として、スクロール速度等の決定の際に押圧の強さPnを用いてもよい。例えば、第1押圧の強さPnを用いて、図29のステップS623の基準スクロール速度S0を決定する。例えば、強さPnが大きいほど基準スクロール速度S0が大きくなるようにする。そして、その基準スクロール速度S0を用いてスクロール速度Snが計算される。即ち、そのスクロール速度Snは、強さPnと角度θnとの両方の情報を反映して決定される。また、第1押圧の強さPnを用いてスクロール速度Snを決定し、角度θnについてはスクロール方向の決定のみに用いる形態等でもよい。
[変形例(6)]
実施の形態6では、第1押圧操作後から第2押圧操作までの制御モード中、第1押圧が保持されていない状態であり、基本的にタッチ無し状態である。変形例として、後述の実施の形態7等と同様に、制御モード中、第1押圧が保持されていない状態、かつ、タッチ有りが維持される状態としてもよい。即ち、変形例では、第1押圧操作で第1押圧が検出された後に押圧を弱めて指を離さずにタッチしたままの状態とする。制御モード中では、傾きの角度に応じて表示範囲が変更され、タッチ位置については任意に変更可能とする。そして、第2押圧操作の第2押圧の検出に応じて制御モードが解除される。
実施の形態6では、第1押圧操作後から第2押圧操作までの制御モード中、第1押圧が保持されていない状態であり、基本的にタッチ無し状態である。変形例として、後述の実施の形態7等と同様に、制御モード中、第1押圧が保持されていない状態、かつ、タッチ有りが維持される状態としてもよい。即ち、変形例では、第1押圧操作で第1押圧が検出された後に押圧を弱めて指を離さずにタッチしたままの状態とする。制御モード中では、傾きの角度に応じて表示範囲が変更され、タッチ位置については任意に変更可能とする。そして、第2押圧操作の第2押圧の検出に応じて制御モードが解除される。
また、実施の形態6では、スクロールの一時停止については、角度θnを基準角度θ0の付近に戻すことにより実現された。変形例として、以下のようにスクロールの一時停止を実現してもよい。第1押圧操作後、タッチ無し状態で、角度θnに応じて自動的にスクロールが行われる。その途中でスクロールを一時停止したい場合、ユーザは、表示画面2内を軽くタッチしてタッチ有り状態を維持する。携帯端末装置は、そのタッチ有り状態の検出の間、スクロールを一時停止させる。ユーザは、スクロールを再開させたい場合、指を離す。携帯端末装置は、そのタッチ無し状態の検出に応じて、スクロールを再開させる。そして、第2押圧操作の第2押圧の検出に応じて制御モードが解除される。
(実施の形態7)
図31~図35を用いて、本発明の実施の形態7の携帯端末装置について説明する。以下、実施の形態7における実施の形態1とは異なる構成部分について説明する。実施の形態7では、実施の形態6と同様に、対象情報としてはコンテンツ表示情報である場合を示し、表示範囲変更制御の表示動作としてはY方向のスクロールである場合を示す。
図31~図35を用いて、本発明の実施の形態7の携帯端末装置について説明する。以下、実施の形態7における実施の形態1とは異なる構成部分について説明する。実施の形態7では、実施の形態6と同様に、対象情報としてはコンテンツ表示情報である場合を示し、表示範囲変更制御の表示動作としてはY方向のスクロールである場合を示す。
[構成概要]
図31は、実施の形態7の構成概要として、外観、操作、表示制御等を示す。図31の左側は、表示画面2内のコンテンツ表示情報1201の箇所を第1押圧操作する様子を示す。ユーザは、表示画面2内の箇所を所定の大きさ以上の押圧で第1押圧操作する。この第1押圧操作は、実施の形態6の第1押圧操作とは異なり、所定の大きさ以上の第1押圧の後に、押圧を弱めて指を接触したまま、即ちタッチ有りを維持する操作である。制御モード中では第1押圧が保持されていない状態となる。携帯端末装置は、第1押圧操作がされたタッチ位置座標に対応する第1位置を基準位置として扱う。携帯端末装置は、第1押圧操作をトリガとして通常モードから制御モードに入る。
図31は、実施の形態7の構成概要として、外観、操作、表示制御等を示す。図31の左側は、表示画面2内のコンテンツ表示情報1201の箇所を第1押圧操作する様子を示す。ユーザは、表示画面2内の箇所を所定の大きさ以上の押圧で第1押圧操作する。この第1押圧操作は、実施の形態6の第1押圧操作とは異なり、所定の大きさ以上の第1押圧の後に、押圧を弱めて指を接触したまま、即ちタッチ有りを維持する操作である。制御モード中では第1押圧が保持されていない状態となる。携帯端末装置は、第1押圧操作がされたタッチ位置座標に対応する第1位置を基準位置として扱う。携帯端末装置は、第1押圧操作をトリガとして通常モードから制御モードに入る。
図31の右側は、制御モードに入った時の状態を示す。携帯端末装置は、第1位置を基準位置として、スクロール制御のための方向選択アイコンJ1を表示する。方向選択アイコンJ1は、スクロール方向の選択等を可能とする制御用のオブジェクトである。方向選択アイコンJ1は、上方向領域e1と、下方向領域e2と、それらの間にある中央停止領域e0とから構成されている。最初は、第1押圧操作の指の先のタッチ位置に対応する第1位置に対して所定範囲内に中央停止領域e0が配置された状態で方向選択アイコンJ1が表示される。言い換えると、中央停止領域e0内に第1位置が含まれているように方向選択アイコンJ1が配置される。この状態ではまだスクロールは開始されない。
ユーザは、第1押圧操作後のタッチ有りを維持したままの状態で、方向選択アイコンJ1上で指を移動させるスライド操作により、方向選択アイコンJ1内の所望の領域を選択する。ユーザは、上方向領域e1に指の先を置くように選択すると、上方向スクロールを選択でき、下方向領域e2に指の先を置くように選択すると、下方向スクロールを選択できる。上方向領域e1が選択された場合、携帯端末装置は、実施の形態6の図8のスクロール5と同様に上方向スクロールを行う。下方向領域e2が選択された場合、携帯端末装置は、スクロール6と同様に下方向スクロールを行う。
また、ユーザは、指を中央停止領域e0に置くように選択することにより、スクロールの一時停止を選択できる。中央停止領域e0が選択された場合、携帯端末装置は、上方向や下方向のスクロールを一時停止させる。例えば、ユーザは、最初の中央停止領域e0の状態から上方向領域e1を選択して上方向スクロールをさせる。ユーザは、所望の表示範囲4の状態になったら、指の位置を中央停止領域e0に戻して上方向スクロールを停止させる。また、ユーザは、その状態から、下方向領域e2を選択して下方向スクロールをさせ、所望の表示範囲4の状態になったら、指の位置を中央停止領域e0に戻して下方向スクロールを停止させる。
携帯端末装置は、ユーザが方向選択アイコンJ1から指を離した状態、即ちタッチ無し状態を検出した場合、この制御モードを解除して通常モードに戻す。携帯端末装置は、解除に伴い、その時点の表示範囲4の状態でスクロールを終了させて、方向選択アイコンJ1も非表示にする。
また、制御モード中、ユーザが指をリンク7の位置に移動して指を離した場合、携帯端末装置は、そのリンク7を選択して対応処理を実行すると共に、制御モードを解除する。
また、携帯端末装置は、第1押圧操作の第1押圧の強さPnに応じて、スクロール速度を決定する。また、携帯端末装置は、方向選択アイコンJ1の上方向領域e1または下方向領域e2の選択の際の押圧の強さに応じて、スクロール速度を可変に決定する。
[制御フロー]
図32は、実施の形態7における表示制御部204の制御処理のフローを示す。モードとして第1モードから第3モードまでを有し、管理上の値を0,1,2とする。図32はステップS701~S722を有する。以下、ステップの順に説明する。S701~S706の処理は、実施の形態6の処理と同様である。
図32は、実施の形態7における表示制御部204の制御処理のフローを示す。モードとして第1モードから第3モードまでを有し、管理上の値を0,1,2とする。図32はステップS701~S722を有する。以下、ステップの順に説明する。S701~S706の処理は、実施の形態6の処理と同様である。
(S707)表示制御部204は、現在のモードがモード=2(第3モード)であるか否かを確認し、分岐を行う。モード=2の場合にはS713、否の場合にはS708へ進む。(S708)表示制御部204は、S706で取得した押圧の強さPnを、閾値Ptと比較し、強さPnが閾値Pt以上であるか否かを判断し、分岐を行う。Pn≧Ptの場合にはS709、Pn<Ptの場合にはS711へ進む。(S709)表示制御部204は、図31のように方向選択アイコンJ1を表示する。この際、表示制御部204は、S705で取得したタッチ位置座標(X1,Y1)に対する所定の範囲内にある位置に、中央停止領域e0が配置される状態で、方向選択アイコンJ1を表示する。(S710)表示制御部204は、モードをモード=2(第3モード)に設定し、S703へ戻る。
(S711)一方、S711では、表示制御部204は、タッチ位置座標(X1,Y1)をメモリに記憶して保持する。(S712)表示制御部204は、モードをモード=1(第2モード)に設定し、S703へ戻る。
(S713)一方、S707でモード=2の場合、S713で、表示制御部204は、S705で取得したタッチ位置座標(X1,Y1)が、方向選択アイコンJ1の領域内か否かを判断し、分岐を行う。方向選択アイコンJ1の領域内である場合にはS714へ進み、領域外である場合にはS703へ戻る。
(S714)表示制御部204は、S706で取得した押圧の強さPn等を用いて、下記(6)の式に基づいて、スクロール速度Snを設定する。
Sn=S0×Pn/Pt ・・・(6)
(6)の式では、閾値Ptに対する押圧の強さPnの大きさ(Pn/Pt)に応じて、基準スクロール速度S0を乗算で増加させるように、スクロール速度Snが決定される。即ち、強さPnが大きいほどスクロール速度Snが大きくなる。
(6)の式では、閾値Ptに対する押圧の強さPnの大きさ(Pn/Pt)に応じて、基準スクロール速度S0を乗算で増加させるように、スクロール速度Snが決定される。即ち、強さPnが大きいほどスクロール速度Snが大きくなる。
(S715)表示制御部204は、S705で取得したタッチ位置座標(X1,Y1)が、方向選択アイコンJ1内のいずれの領域に該当するかを判断し、分岐を行う。即ち、タッチ位置が、上方向領域e1、下方向領域e2、中央停止領域e0のいずれにあるかが判断される。上方向領域e1に該当する場合にはS716へ進み、下方向領域e2に該当する場合にはS717へ進み、中央停止領域e0に該当する場合にはS703へ戻る。なお、タッチ位置が中央停止領域e0の場合、S716等のスクロール処理が実行されないので、所定時間のスクロール一時停止として実現される。
(S716)表示制御部204は、上方向領域e1の選択に応じて、S714で設定したスクロール速度Snで、上方向スクロール処理を行い、S703へ戻る。この処理では、スクロール速度Snに対応して、所定時間で所定距離を連続的に移動させるスクロール5が行われる。(S717)表示制御部204は、下方向領域e2の選択に応じて、S714で設定したスクロール速度Snで、下方向スクロール処理を行い、S703へ戻る。この処理では、スクロール速度Snに対応して、所定時間で所定距離を連続的に移動させるスクロール6が行われる。
(S718)一方、S704でタッチ無しの場合、S718で、表示制御部204は、現在のモードを確認し、分岐を行う。モード=0(第1モード)の場合にはS703へ戻り、モード=1(第2モード)の場合にはS719へ進み、モード=2(第3モード)の場合にはS721へ進む。
(S719)表示制御部204は、表示画面2でのタッチ位置としてS711で記憶されたタッチ位置座標(X1,Y1)と、表示画面2の表示情報3のうちのリンク7等のオブジェクトの位置とを比較する。表示制御部204は、それらの位置が一致するか否かにより、分岐を行う。一致の場合にはS720、不一致の場合にはS722へ進む。(S720)表示制御部204は、選択されたオブジェクトに対応付けられた処理を実行する。例えば、表示制御部204は、リンク7のURLで指定されるコンテンツを、インターネット上のサーバから取得して読み込み、表示画面2に表示する処理を行う。この場合、携帯端末装置は、A2で示すように本フローのループを抜けて、新たなコンテンツについて、本フローの最初から同様に処理を行う。(S721)一方、S721では、表示制御部204は、方向選択アイコンJ1を非表示にする。(S722)表示制御部204は、モードをモード=0(第1モード)に設定し、S703へ戻る。
[効果等]
上記のように、実施の形態7の携帯端末装置によれば、実施の形態6と同様に、何回もタッチ操作を繰り返す必要無く、少ない手間で表示範囲の変更が可能である。ユーザは、片手及び一本指の操作によってコンテンツ表示情報を所望の状態に素早くスクロールさせることができる。ユーザは、押圧の強さ等に応じてスクロール速度を調整できる。実施の形態7では、方向選択アイコンJ1により表示画面2内の一部が隠れるが、スクロール可能な方向等をユーザに明確に認識させることができる。
上記のように、実施の形態7の携帯端末装置によれば、実施の形態6と同様に、何回もタッチ操作を繰り返す必要無く、少ない手間で表示範囲の変更が可能である。ユーザは、片手及び一本指の操作によってコンテンツ表示情報を所望の状態に素早くスクロールさせることができる。ユーザは、押圧の強さ等に応じてスクロール速度を調整できる。実施の形態7では、方向選択アイコンJ1により表示画面2内の一部が隠れるが、スクロール可能な方向等をユーザに明確に認識させることができる。
[変形例(1)]
実施の形態7の変形例として以下が可能である。実施の形態7では、Y方向の上下の領域を含む方向選択アイコンJ1を表示してY方向スクロールの表示制御を行ったが、これに限らず可能である。
実施の形態7の変形例として以下が可能である。実施の形態7では、Y方向の上下の領域を含む方向選択アイコンJ1を表示してY方向スクロールの表示制御を行ったが、これに限らず可能である。
図33は、第1変形例として、X方向スクロールの表示制御を行う場合を示す。対象情報として、例えば縦書き文章を含む電子書籍等のコンテンツ表示情報1401の場合を示す。携帯端末装置は、第1押圧操作に応じて、X方向の左右の領域を含む方向選択アイコンJ2を表示する。この方向選択アイコンJ2は、左方向領域e3、中央停止領域e0、右方向領域e4を有する。携帯端末装置は、この方向選択アイコンJ2を用いて、X方向の左右のスクロールを制御する。
図34は、第2変形例として、Y方向及びX方向の両方のスクロールの表示制御を行う場合を示す。対象情報として、例えば比較的大きいサイズを持つ地図情報1501の場合を示す。携帯端末装置は、第1押圧操作に応じて、方向選択アイコンJ3を表示する。この方向選択アイコンJ3は、上下左右の4つの方向領域と中央停止領域とを有する。携帯端末装置は、方向領域の選択に応じて上下左右の各方向のスクロールを制御する。
また、例えばコンテンツのY方向の先頭が表示範囲4となっている場合、上方向へのスクロールは無効である。他の変形例として、方向選択アイコンの表示において、スクロールが無効な方向に対応する方向領域を、非表示にする、あるいは選択不可能表示にする等、表示状態を詳細に制御してもよい。
図35は、第3変形例として、方向選択アイコンに中央停止領域e0を設けない形態を示す。携帯端末装置は、第1押圧操作に応じて、方向選択アイコンJ4を表示する。この方向選択アイコンJ4は、円形のうちの上半分に上方向領域e1、下半分に下方向領域e2を有する。それらの領域により上方向または下方向スクロールを選択できる。また、ユーザが、方向選択アイコンJ4内をタッチしている状態から方向選択アイコンJ4外の位置に指をずらした場合、携帯端末装置は、スクロールを一時停止させる。また、ユーザが、方向選択アイコンJ4の内または外から指を離した場合、携帯端末装置は、制御モードを解除する。他の変形例として、方向選択アイコンJ4の外に指が移動した場合に、スクロールの一時停止を行わずに制御モードを解除してもよい。
[変形例(2)]
変形例として、実施の形態6と同様に、第1押圧操作及び第2押圧操作を用いて制御モード切り替えを行ってもよい。この変形例では、表示画面2に対する第1押圧操作により制御モードに入って方向選択アイコンを表示し、第2押圧操作により制御モードを解除して方向選択アイコンを非表示にする。第2押圧操作としては、特に中央停止領域e0での第2押圧としてもよいし、方向選択アイコンの外での第2押圧としてもよい。この制御モード中、タッチ有り状態が維持されなくてもよい。ユーザは、第1押圧操作で指を離してから方向選択アイコンをタッチして所望のスクロール方向等を選択可能である。また、この制御モード中、ユーザは、リンク7をタッチして選択可能である。
変形例として、実施の形態6と同様に、第1押圧操作及び第2押圧操作を用いて制御モード切り替えを行ってもよい。この変形例では、表示画面2に対する第1押圧操作により制御モードに入って方向選択アイコンを表示し、第2押圧操作により制御モードを解除して方向選択アイコンを非表示にする。第2押圧操作としては、特に中央停止領域e0での第2押圧としてもよいし、方向選択アイコンの外での第2押圧としてもよい。この制御モード中、タッチ有り状態が維持されなくてもよい。ユーザは、第1押圧操作で指を離してから方向選択アイコンをタッチして所望のスクロール方向等を選択可能である。また、この制御モード中、ユーザは、リンク7をタッチして選択可能である。
[変形例(3)]
実施の形態7では、押圧の強さPnの情報を、第1押圧操作の判定、及びスクロール速度Snの設定の際に使用している。これに限らず、変形例として、押圧の強さPnの情報を、他の制御の変数として使用してもよい。例えば、図32のステップS714のスクロール速度Snの設定の際には、一定値、例えば基準スクロール速度S0としてもよい。また、制御モード中、上方向領域e1または下方向領域e2の押圧の強さPn等を検出する。そして、携帯端末装置は、その領域の押圧の強さPnを用いて、その方向のスクロール速度Snを可変に決定する。ユーザは、例えば上方向領域e1に指を移動させて所望の強さで押下する。携帯端末装置は、その上方向領域e1の押圧の強さPnに応じて、基準スクロール速度S0に対し増加させるように、スクロール速度Snを決定する。即ち、上方向領域e1を強く押下するほど、高速の上方向スクロールが実現される。
実施の形態7では、押圧の強さPnの情報を、第1押圧操作の判定、及びスクロール速度Snの設定の際に使用している。これに限らず、変形例として、押圧の強さPnの情報を、他の制御の変数として使用してもよい。例えば、図32のステップS714のスクロール速度Snの設定の際には、一定値、例えば基準スクロール速度S0としてもよい。また、制御モード中、上方向領域e1または下方向領域e2の押圧の強さPn等を検出する。そして、携帯端末装置は、その領域の押圧の強さPnを用いて、その方向のスクロール速度Snを可変に決定する。ユーザは、例えば上方向領域e1に指を移動させて所望の強さで押下する。携帯端末装置は、その上方向領域e1の押圧の強さPnに応じて、基準スクロール速度S0に対し増加させるように、スクロール速度Snを決定する。即ち、上方向領域e1を強く押下するほど、高速の上方向スクロールが実現される。
また、携帯端末装置は、中央停止領域e0の押圧の強さPnを検出して、拡大縮小表示動作を制御してもよい。ユーザは、中央停止領域e0でスクロールを一時停止させ、その位置で画像を拡大したい場合に、中央停止領域e0を所望の強さで押下する。携帯端末装置は、その中央停止領域e0の押圧の強さPn、及びそのタッチ位置に応じて、画像の拡大縮小を制御する。携帯端末装置は、例えばそのタッチ位置を中心として、強さPnの大きさに応じて地図の画像を拡大表示する。また、携帯端末装置は、その強さPnが小さくなることに応じて縮小表示する。ユーザは、画像が所望の大きさになった状態で中央停止領域e0から指を離すことにより、その状態で制御モードを解除できる。
(実施の形態8)
図36~図40を用いて、本発明の実施の形態8の携帯端末装置について説明する。以下、実施の形態8における実施の形態7とは異なる構成部分について説明する。実施の形態8では、対象情報としては地図情報である場合を示し、表示範囲変更制御の表示動作としてはX方向及びY方向の平面内の任意方向のスクロールである場合を示す。
図36~図40を用いて、本発明の実施の形態8の携帯端末装置について説明する。以下、実施の形態8における実施の形態7とは異なる構成部分について説明する。実施の形態8では、対象情報としては地図情報である場合を示し、表示範囲変更制御の表示動作としてはX方向及びY方向の平面内の任意方向のスクロールである場合を示す。
[構成概要]
図36は、実施の形態8の構成概要として、操作、表示制御等を示す。図36では、左手で筐体1を持った状態で、その親指で表示画面2内をタッチ押圧操作する場合を示す。図36の状態を第1状態とする。ユーザは、表示画面2内の地図情報1701のうちの所望の箇所をタッチ及び押圧する。この操作を第1押圧操作とする。この第1押圧操作は、所定の大きさ以上の第1押圧の検出後に、押圧を弱めて指を離さずにタッチ有りを維持する操作とする。第1押圧操作後の制御モード中、第1押圧が保持されていない状態である。第1押圧操作の時のタッチ位置座標(X1,Y1)を、第1位置LAとし、LA=(Xa,Ya)として表す。携帯端末装置は、第1押圧の検出に応じて、その第1位置LAを、基準位置Lrとして設定する。Lr=(Xr,Yr)として表す。
図36は、実施の形態8の構成概要として、操作、表示制御等を示す。図36では、左手で筐体1を持った状態で、その親指で表示画面2内をタッチ押圧操作する場合を示す。図36の状態を第1状態とする。ユーザは、表示画面2内の地図情報1701のうちの所望の箇所をタッチ及び押圧する。この操作を第1押圧操作とする。この第1押圧操作は、所定の大きさ以上の第1押圧の検出後に、押圧を弱めて指を離さずにタッチ有りを維持する操作とする。第1押圧操作後の制御モード中、第1押圧が保持されていない状態である。第1押圧操作の時のタッチ位置座標(X1,Y1)を、第1位置LAとし、LA=(Xa,Ya)として表す。携帯端末装置は、第1押圧の検出に応じて、その第1位置LAを、基準位置Lrとして設定する。Lr=(Xr,Yr)として表す。
携帯端末装置は、第1押圧操作に応じて通常モードから制御モードに入ると共に、基準位置Lrを設定して、基準位置Lrに所定の基準点アイコンC1を表示する。基準点アイコンC1は、言い換えると、第1位置アイコンである。本例では、基準点アイコンC1として、太陽マークとしている。
図37は、図36の第1状態から遷移した状態である第2状態を示す。ユーザは、基準位置Lrで指をタッチしている第1状態から、タッチ有りを維持したまま、指を所望の位置へ移動させるスライド操作をする。この操作により指を移動した後のタッチ位置を、第2位置LBとする。LB=(Xb,Yb)として表す。
第1位置LAである基準位置Lrと第2位置LBとの2点間の距離を、Dnとする。また、基準位置Lrから第2位置LBへの方向を、V1とする。携帯端末装置は、第2位置LB、距離Dn、方向V1等を把握する。制御モード中、基準点アイコンC1は表示したままにされる。ユーザは、基準点アイコンC1に基づいて、第1位置LAと第2位置LBとの2点間の距離Dnの大きさ及び方向V1を認識できる。
なお、変形例として、第1位置LAに基準点アイコンC1等を表示しない形態でもよい。また、第2位置LBに所定の第2位置アイコンを表示する形態でもよい。基準点アイコンC1と第2位置アイコンとの両方を表示する形態でもよい。
図38は、図37の第2状態から遷移した状態である第3状態を示す。携帯端末装置は、第1状態から第2状態への変化における、基準位置Lrと第2位置LBとの位置関係を把握し、その位置関係に基づいて、スクロールさせるか否か、その方向、速度等を制御する。図38の第3状態では、2点間の位置関係に対応する方向V1で、スクロール191が行われている。これにより、地図情報1701における表示範囲4が方向V1で移動する。なお、表示画面2内では、スクロール191の方向V1に対する反対方向である方向192に画像部分が動く。
図39は、第2状態から第3状態への方向V1のスクロール191の際の、地図情報1701上における表示範囲4の変化を示す。表示範囲4は、第1状態及び第2状態の表示範囲2001から、第3状態の表示範囲2002へ変化している。
また、ユーザが、タッチ位置を第2位置LBから基準位置Lrの基準点アイコンC1に戻すように移動した場合、携帯端末装置は、スクロールを一時停止させる。ユーザが指を離した場合、携帯端末装置は、その時点の表示範囲4の状態でスクロールを終了させ、基準点アイコンC1を非表示にし、制御モードを解除して通常モードに戻る。
[制御フロー]
図40は、実施の形態8における表示制御部204の制御処理のフローを示す。地図や位置検索等のアプリケーションにおいてアプリケーション画面内に地図情報を表示する際の制御処理を示す。モードとして、第1モード、第2モードを有し、管理上の値を0,1とする。図40はステップS801~S817を有する。以下、ステップの順に説明する。
図40は、実施の形態8における表示制御部204の制御処理のフローを示す。地図や位置検索等のアプリケーションにおいてアプリケーション画面内に地図情報を表示する際の制御処理を示す。モードとして、第1モード、第2モードを有し、管理上の値を0,1とする。図40はステップS801~S817を有する。以下、ステップの順に説明する。
(S801)表示制御部204は、地図情報を読み込む。表示制御部204は、最初、モードをモード=0(第1モード)に設定する。(S802)表示制御部204は、表示画面2に、最初、地図情報のうちの所定の位置の一部の範囲を表示する。所定の位置は、例えば、携帯端末装置の現在のGPS位置座標、あるいは位置検索でユーザが指定した位置等である。(S803)携帯端末装置は、操作部106やタッチ押圧センサ117を通じて、ユーザによる入力操作を受け付けて、それに対応する入力情報を取得する。表示制御部204は、タッチ検出部201を通じて、タッチ入力情報を取得する。その際、タッチ検出部201は、タッチ有無及びタッチ位置座標(X1,Y1)を検出する。また、押圧検出部202は、押圧の有無及び押圧の強さPnを検出する。(S804)表示制御部204は、入力情報に基づいて、タッチ有無の判断により、処理を分岐させる。タッチ有りの場合(Y)にはS805、タッチ無しの場合(N)にはS815へ進む。
(S805)表示制御部204は、タッチ検出部201から、タッチ位置座標(X1,Y1)を含む情報を取得する。(S806)表示制御部204は、押圧検出部202から、タッチ位置における押圧の強さPnを含む情報を取得する。(S807)表示制御部204は、現在のモードを確認し、分岐を行う。モード=0(第1モード)の場合にはS808、モード=1(第2モード)の場合にはS812へ進む。(S808)表示制御部204は、S806で取得した押圧の強さPnを、閾値Ptと比較し、強さPnが閾値Pt以上であるか否かを判断し、分岐を行う。Pn≧Ptの場合にはS809へ進み、Pn<Ptの場合にはS803へ戻る。
(S809)表示制御部204は、S805で取得したタッチ位置座標(X1,Y1)を、基準位置Lr=(Xr,Yr)として設定し、メモリに記憶して保持する。この際のタッチ位置座標(X1,Y1)は、第1状態の第1位置LA=(Xa,Ya)に相当する。(S810)表示制御部204は、図36のように、表示画面2内の基準位置Lrに、基準点アイコンC1を表示する。(S811)表示制御部204は、モードをモード=1(第2モード)に設定し、S803へ戻る。S811への流れは、第1押圧操作に応じた制御モードへの移行に相当する。
(S812)一方、S807でモード=1である場合、S812で、表示制御部204は、S806で取得した押圧の強さPnを用いて、実施の形態7の(6)の式と同様に、下記(7)の式での計算に基づいて、スクロール速度Snを設定する。
Sn=S0×Pn/Pt ・・・(7)
(S813)表示制御部204は、S805で取得したタッチ位置座標(X1,Y1)と、S809で記憶した基準位置Lr=(Xr,Yr)との位置関係に基づいて、X方向スクロール速度Sx及びY方向スクロール速度Syを設定する。この際、表示制御部204は、S812で設定したスクロール速度Snを基準として用いて、以下の式に基づいて、X方向スクロール速度Sx及びY方向スクロール速度Syを決定する。この際のタッチ位置座標(X1,Y1)は、第2状態の第2位置LB=(Xb,Yb)に相当する。
(S813)表示制御部204は、S805で取得したタッチ位置座標(X1,Y1)と、S809で記憶した基準位置Lr=(Xr,Yr)との位置関係に基づいて、X方向スクロール速度Sx及びY方向スクロール速度Syを設定する。この際、表示制御部204は、S812で設定したスクロール速度Snを基準として用いて、以下の式に基づいて、X方向スクロール速度Sx及びY方向スクロール速度Syを決定する。この際のタッチ位置座標(X1,Y1)は、第2状態の第2位置LB=(Xb,Yb)に相当する。
実施の形態8では、X方向及びY方向で構成される平面内における任意方向のスクロール、即ち、図38の第3状態の方向V1のようなスクロール191を、X方向スクロールとY方向スクロールとの分割及び合成により実現する。X方向スクロール速度Sxは、そのX方向スクロール分の速度であり、Y方向スクロール速度Syは、そのY方向スクロール分の速度である。
表示制御部204は、Y1=Yb≠Yrである場合には、下記(8)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
Sx=Sn×(Xr-X1)/(Yr-Y1),Sy=Sn ・・・(8)
表示制御部204は、Y1=Yb=Yrである場合には、下記(9)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
表示制御部204は、Y1=Yb=Yrである場合には、下記(9)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
Sx=Sn,Sy=0 ・・・(9)
(8)の式では、基準位置Lrと第2位置LB=(Xb,Yb)=(X1,Y1)との間における、X方向の位置の差分(Xr-X1)と、Y方向の位置の差分(Yr-Y1)とを用いて、それらの比率(Xr-X1)/(Yr-Y1)が計算される。そして、(8)の式では、その比率の大きさに応じて、基準となるスクロール速度Snに対し増加させるようにして、X方向スクロール速度Sxが計算される。(8)の式で、例えば、(Xr-X1)=(Yr-Y1)の場合には、Sx=Snとなり、X方向スクロール速度SxとY方向スクロール速度Syが同じになる。
(8)の式では、基準位置Lrと第2位置LB=(Xb,Yb)=(X1,Y1)との間における、X方向の位置の差分(Xr-X1)と、Y方向の位置の差分(Yr-Y1)とを用いて、それらの比率(Xr-X1)/(Yr-Y1)が計算される。そして、(8)の式では、その比率の大きさに応じて、基準となるスクロール速度Snに対し増加させるようにして、X方向スクロール速度Sxが計算される。(8)の式で、例えば、(Xr-X1)=(Yr-Y1)の場合には、Sx=Snとなり、X方向スクロール速度SxとY方向スクロール速度Syが同じになる。
(S814)表示制御部204は、地図情報の表示制御として、S813で設定したスクロール速度{Sx,Sy}を用いて、X方向及びY方向でスクロールさせるスクロール処理を行い、その後、S803に戻る。S814により、図38の第3状態のように、表示画面2のX方向及びY方向の平面内において、基準位置Lrと第2位置LBとの2点間に対応する方向V1でのスクロール191が実現される。これに伴い、図39のように、地図情報1701における表示範囲4が変更される。S814への流れは、制御モード中の表示範囲の変更に相当する。S814では、所定時間で所定距離のスクロールが行われ、ループでS814の処理が継続されることにより、長距離のスクロールも実現される。
(S815)一方、S804でタッチ無しの場合、S815で、表示制御部204は、現在のモードを確認し、分岐を行う。モード=0の場合にはS803に戻り、モード=1の場合には、S816へ進む。(S816)表示制御部204は、表示画面2内における基準点アイコンC1を非表示にする。(S817)表示制御部204は、モードをモード=0(第1モード)に設定し、S803へ戻る。S817への流れは、制御モードの解除に相当する。
[効果等]
上記のように、実施の形態8の携帯端末装置によれば、実施の形態7と同様に、何回もタッチ操作を繰り返す必要無く、少ない手間で表示範囲の変更が可能である。ユーザは、片手及び一本指の簡単な操作によって所望の方向へスクロールさせることができる。ユーザは、押圧の強さ等に応じてスクロール速度を調整できる。実施の形態8では、平面内で任意方向にスクロール可能であり、ユーザはスクロール方向をより細かく選択できる。
上記のように、実施の形態8の携帯端末装置によれば、実施の形態7と同様に、何回もタッチ操作を繰り返す必要無く、少ない手間で表示範囲の変更が可能である。ユーザは、片手及び一本指の簡単な操作によって所望の方向へスクロールさせることができる。ユーザは、押圧の強さ等に応じてスクロール速度を調整できる。実施の形態8では、平面内で任意方向にスクロール可能であり、ユーザはスクロール方向をより細かく選択できる。
[変形例(1)]
実施の形態8の変形例として以下が可能である。図40のステップS813でX方向スクロール速度Sx及びY方向スクロール速度Syを設定する際、以下の式に従って決定してもよい。
実施の形態8の変形例として以下が可能である。図40のステップS813でX方向スクロール速度Sx及びY方向スクロール速度Syを設定する際、以下の式に従って決定してもよい。
表示制御部204は、X1=Xb≠Xrである場合には、下記(10)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
Sx=Sn,Sy=Sn×(Yr-Y1)/(Xr-X1) ・・・(10)
表示制御部204は、X1=Xb=Xrである場合には、下記(11)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
表示制御部204は、X1=Xb=Xrである場合には、下記(11)の式に従い、X方向スクロール速度Sx及びY方向スクロール速度Syを計算する。
Sx=0,Sy=Sn ・・・(11)
なお、(8)、(9)の式は、Y方向の位置を基準とする場合であり、(10)、(11)の式は、X方向の位置を基準とする場合である。
なお、(8)、(9)の式は、Y方向の位置を基準とする場合であり、(10)、(11)の式は、X方向の位置を基準とする場合である。
図40のステップS812では押圧の強さPnを用いてスクロール速度Snを決定したが、変形例として、(7)の式を下記(12)の式に代えてもよい。
Sn=S0×Dn/Dt ・・・(12)
(12)の式では、図37の2点間の距離Dnを用いている。基準値Dtは、距離Dnに関する所定の基準値を示す。(12)の式では、基準値Dtに対する距離Dnの大きさ(Dn/Dt)に応じて、基準スクロール速度S0に対し増加させるようにして、スクロール速度Snが決定される。携帯端末装置は、このスクロール速度Snに基づいて、ステップS813で各方向のスクロール速度{Sx,Sy}を決定する。
(12)の式では、図37の2点間の距離Dnを用いている。基準値Dtは、距離Dnに関する所定の基準値を示す。(12)の式では、基準値Dtに対する距離Dnの大きさ(Dn/Dt)に応じて、基準スクロール速度S0に対し増加させるようにして、スクロール速度Snが決定される。携帯端末装置は、このスクロール速度Snに基づいて、ステップS813で各方向のスクロール速度{Sx,Sy}を決定する。
[変形例(2)]
実施の形態8は、実施の形態7と同様に各種の変形例が可能である。例えば、実施の形態6と同様に、第1押圧操作及び第2押圧操作を用いてモード切り替えを行ってもよい。この変形例では、表示画面2内に対する第1押圧操作により制御モードに入って基準位置Lrを設定して基準点アイコンC1を表示し、第2押圧操作により制御モードを解除する。この制御モード中、タッチ有り状態が維持されなくてもよい。ユーザは、第1押圧操作で指を離してから第2位置LBをタッチして所望のスクロール方向等を選択可能である。第2押圧操作としては、特に基準点アイコンC1上の第2押圧としてもよい。
実施の形態8は、実施の形態7と同様に各種の変形例が可能である。例えば、実施の形態6と同様に、第1押圧操作及び第2押圧操作を用いてモード切り替えを行ってもよい。この変形例では、表示画面2内に対する第1押圧操作により制御モードに入って基準位置Lrを設定して基準点アイコンC1を表示し、第2押圧操作により制御モードを解除する。この制御モード中、タッチ有り状態が維持されなくてもよい。ユーザは、第1押圧操作で指を離してから第2位置LBをタッチして所望のスクロール方向等を選択可能である。第2押圧操作としては、特に基準点アイコンC1上の第2押圧としてもよい。
[変形例(3)]
実施の形態7の変形例と同様に、押圧の強さPnの情報を、他の制御の変数として使用してもよい。例えば、図40のステップS812のスクロール速度Snの設定の際に、一定値、例えば基準スクロール速度S0としてもよい。あるいは、スクロール速度Snを、距離Dnの大きさ等に応じて決めてもよい。また、この変形例では、制御モード中、第2位置LBでの押圧の強さPn等を検出し、その強さPnを用いてスクロール速度Snを可変に決定する。携帯端末装置は、その強さPnに応じて基準スクロール速度S0に対し増加させるようにスクロール速度Snを決定する。即ち、第2位置LBで強く押下するほど、高速のスクロールが実現される。
実施の形態7の変形例と同様に、押圧の強さPnの情報を、他の制御の変数として使用してもよい。例えば、図40のステップS812のスクロール速度Snの設定の際に、一定値、例えば基準スクロール速度S0としてもよい。あるいは、スクロール速度Snを、距離Dnの大きさ等に応じて決めてもよい。また、この変形例では、制御モード中、第2位置LBでの押圧の強さPn等を検出し、その強さPnを用いてスクロール速度Snを可変に決定する。携帯端末装置は、その強さPnに応じて基準スクロール速度S0に対し増加させるようにスクロール速度Snを決定する。即ち、第2位置LBで強く押下するほど、高速のスクロールが実現される。
また、実施の形態7の変形例と同様に、携帯端末装置は、基準位置Lrでの押圧の強さPnを検出し、そのタッチ位置での拡大縮小表示動作を制御してもよい。
(実施の形態9)
図41~図42を用いて、本発明の実施の形態9の携帯端末装置について説明する。以下、実施の形態9における実施の形態6等とは異なる構成部分について説明する。実施の形態9は、対象情報として、複数のホーム画面や複数のアプリケーション画面の場合を示す。実施の形態9では、表示範囲変更制御として、表示画面2に複数の画面のうちの1つの画面を切り替えて表示する際の画面切り替えを制御する。また、実施の形態9は、実施の形態6の変形例に相当し、表示範囲変更制御で、傾きの角度を用いて、画面切り替えを制御する。
図41~図42を用いて、本発明の実施の形態9の携帯端末装置について説明する。以下、実施の形態9における実施の形態6等とは異なる構成部分について説明する。実施の形態9は、対象情報として、複数のホーム画面や複数のアプリケーション画面の場合を示す。実施の形態9では、表示範囲変更制御として、表示画面2に複数の画面のうちの1つの画面を切り替えて表示する際の画面切り替えを制御する。また、実施の形態9は、実施の形態6の変形例に相当し、表示範囲変更制御で、傾きの角度を用いて、画面切り替えを制御する。
[ホーム画面]
図11で、実施の形態9の携帯端末装置の表示画面2に、複数のホーム画面のうちの選択された1つのホーム画面を表示する状態について示す。実施の形態9の携帯端末装置は、特定のタッチ押圧操作に応じて、表示画面2で複数のホーム画面を切り替えて表示する。
図11で、実施の形態9の携帯端末装置の表示画面2に、複数のホーム画面のうちの選択された1つのホーム画面を表示する状態について示す。実施の形態9の携帯端末装置は、特定のタッチ押圧操作に応じて、表示画面2で複数のホーム画面を切り替えて表示する。
[表示制御]
図41は、実施の形態9の表示制御として、ホーム画面に対するタッチ押圧操作、及び画面切り替えを示す。実施の形態9の携帯端末装置は、第1押圧操作、第2押圧操作、傾ける操作等を受け付けて、表示画面2での複数のホーム画面の画面切り替えを制御する。画面切り替えは、表示画面2での表示範囲4となるホーム画面を所定の時間間隔毎に切り替える表示動作である。なお、図41では、ユーザは、図示しない左手で筐体1を持ち、右手の一本指で表示画面2を押圧する場合を示す。
図41は、実施の形態9の表示制御として、ホーム画面に対するタッチ押圧操作、及び画面切り替えを示す。実施の形態9の携帯端末装置は、第1押圧操作、第2押圧操作、傾ける操作等を受け付けて、表示画面2での複数のホーム画面の画面切り替えを制御する。画面切り替えは、表示画面2での表示範囲4となるホーム画面を所定の時間間隔毎に切り替える表示動作である。なお、図41では、ユーザは、図示しない左手で筐体1を持ち、右手の一本指で表示画面2を押圧する場合を示す。
ユーザは、ホーム画面内の箇所を第1押圧操作する。携帯端末装置は、その際の第1押圧を検出すると、通常モードから制御モードに入り、その時の筐体1の傾きの角度θを基準角度θ0として設定する。ユーザは、制御モードの状態で、所望の方向、例えばY方向で傾ける操作を行う。携帯端末装置は、その際の角度θnの差分値(θn-θ0)に応じて、画面切り替えの方向等を決定する。携帯端末装置は、例えば、傾きが負方向である場合には第1方向の画面切り替え、正方向である場合には第2方向の画面切り替えに決定する。第1方向は、表示範囲4とするレイヤを下降させるレイヤ下降方向であり、第2方向は、レイヤ上昇方向である。また、携帯端末装置は、角度θに応じて、画面切り替えの際の速度に対応する、画面及びレイヤ毎の更新の時間間隔等を決定してもよい。
表示制御部204は、第1方向画面切り替えの場合、複数のホーム画面をレイヤ下降方向で順次に切り替える。即ち、表示画面2に表示範囲4として表示されるホーム画面は、例えばトップのレイヤL1からボトムのレイヤL5の方向へ順次に切り替えられる。ユーザは、制御モード中、傾きを最初の基準角度θ0の付近の状態に戻すことにより、画面切り替えを一時停止させることができる。また、ユーザは、制御モード中、ホーム画面内のアイコン9をタッチで選択操作することにより、対応処理を実行させることもできる。ユーザは、所望のホーム画面が表示範囲4になった状態で第2押圧操作をする。これにより、携帯端末装置は、画面切り替えを終了させて制御モードを解除して通常モードに戻る。
[効果等]
上記のように、実施の形態9によれば、何回もタッチ操作を繰り返す必要無く、少ない手間で複数のホーム画面の切り替えが可能である。ユーザは、簡単な操作によって所望の方向へホーム画面を切り替えることができる。ユーザは、押圧の強さや傾きの角度等に応じて画面切り替えの速度を調整できる。
上記のように、実施の形態9によれば、何回もタッチ操作を繰り返す必要無く、少ない手間で複数のホーム画面の切り替えが可能である。ユーザは、簡単な操作によって所望の方向へホーム画面を切り替えることができる。ユーザは、押圧の強さや傾きの角度等に応じて画面切り替えの速度を調整できる。
[変形例(1)]
実施の形態9の変形例として以下が可能である。画面切り替えの際の更新の時間間隔については、例えば下記(13)の式に基づいて決定してもよい。時間間隔をKnとする。所定の基準時間間隔をK0とする。(13)の式では、押圧の強さPnと閾値Ptとの比率(Pt/Pn)に応じて、基準時間間隔K0に対し減少させるように時間間隔Knが計算される。
実施の形態9の変形例として以下が可能である。画面切り替えの際の更新の時間間隔については、例えば下記(13)の式に基づいて決定してもよい。時間間隔をKnとする。所定の基準時間間隔をK0とする。(13)の式では、押圧の強さPnと閾値Ptとの比率(Pt/Pn)に応じて、基準時間間隔K0に対し減少させるように時間間隔Knが計算される。
Kn=K0×Pt/Pn ・・・(13)
図21で、(13)の式に対応する関数2101を示す。横軸は強さPn、縦軸は時間間隔Knを示す。関数2101では、強さPnが大きくなるほど、次第に緩やかになるように時間間隔Knが減少するように決定される。即ち、強さPnが大きいほど、画面切り替えの際の速度が速くなる。また、関数2102のように階段状の関数を適用してもよいし、上限値や下限値を設けてもよい。時間間隔Knは、実施の形態6と同様に、一定値やユーザ設定値等、各種可能である。
図21で、(13)の式に対応する関数2101を示す。横軸は強さPn、縦軸は時間間隔Knを示す。関数2101では、強さPnが大きくなるほど、次第に緩やかになるように時間間隔Knが減少するように決定される。即ち、強さPnが大きいほど、画面切り替えの際の速度が速くなる。また、関数2102のように階段状の関数を適用してもよいし、上限値や下限値を設けてもよい。時間間隔Knは、実施の形態6と同様に、一定値やユーザ設定値等、各種可能である。
[変形例(2)]
対象情報としては、複数のホーム画面に限らず、複数のアプリケーション画面等にも同様に適用可能である。また、複数の画面としてレイヤ状の配置に限らず、X方向やY方向で並列の配置の場合にも同様に適用可能である。
対象情報としては、複数のホーム画面に限らず、複数のアプリケーション画面等にも同様に適用可能である。また、複数の画面としてレイヤ状の配置に限らず、X方向やY方向で並列の配置の場合にも同様に適用可能である。
図16で、変形例における表示画面2の表示状態を示す。このように表示画面2内で複数の画面の画像がレイヤ状や並列で配置されて表示される場合がある。この場合に、それらの複数の画面を対象情報として実施の形態9の制御を適用可能である。例えば、通常のホーム画面の状態から、ホームキーk2の2回押下により、図16の左側のようなレイヤ表示状態へ遷移する。本例では、複数のアプリケーション画面G1~G4等のレイヤ状の配置の場合を示す。この状態では、アプリケーション画面G1がレイヤL1として最も手前に来た状態で表示されている。この状態から、第1押圧操作に応じて制御モードに入る。制御モード中、例えばレイヤ下降方向での1画面分の切り替えにより、図16の右側のレイヤ表示状態に切り替えられる。この状態では、アプリケーション画面G2がレイヤL1として最も手前に来た状態で表示されている。
図17で、対象情報としてアプリケーション画面内のコンテンツ履歴情報とする場合を示す。時系列でコンテンツ履歴情報を有し、例えばWebページの閲覧履歴情報に対応する履歴画面E1~E3等を示す。例えば、最新の履歴画面E1が表示範囲4となっている。制御モード中、傾きをY方向で変える操作等により、履歴画面E1~E3等を、現在から過去、または過去から現在の方向へ切り替えて表示できる。
図18で、対象情報としてアプリケーション画面内のコンテンツ、例えば電子書籍を構成する複数のページ情報とする場合を示す。複数のページ情報に対応するページ画面p1~p3等を示す。例えば、先頭のページ画面p1が表示範囲4となっている。制御モード中、傾きをX方向で変える操作等により、ページ画面p1~p3等を、所望の方向へ切り替えて表示できる。
[変形例(3)]
画面切り替えは、画面毎に所定の時間間隔で断続的に移動させる表示動作としたが、これに限らず、実施の形態6のスクロールのように連続的に移動させる表示動作としてもよい。また、画面切り替えの際、1画面分の切り替え毎に振動パターンを発生させてもよいし、所定の文字や画像の表示、音声出力等としてもよい。実施の形態7の方向選択アイコンの操作や、実施の形態8の2点間の位置関係に応じて、画面切り替えの方向や速度等を決定する形態も同様に可能である。更に、表示画面2内を押圧する際のタッチ位置の違いの区別に応じて表示動作の方向や速度等を決定する形態としてもよい。
画面切り替えは、画面毎に所定の時間間隔で断続的に移動させる表示動作としたが、これに限らず、実施の形態6のスクロールのように連続的に移動させる表示動作としてもよい。また、画面切り替えの際、1画面分の切り替え毎に振動パターンを発生させてもよいし、所定の文字や画像の表示、音声出力等としてもよい。実施の形態7の方向選択アイコンの操作や、実施の形態8の2点間の位置関係に応じて、画面切り替えの方向や速度等を決定する形態も同様に可能である。更に、表示画面2内を押圧する際のタッチ位置の違いの区別に応じて表示動作の方向や速度等を決定する形態としてもよい。
図42は、変形例における表示画面2での操作を示す。図42では、第1押圧操作として、表示画面2内の上側領域R1内の押圧の場合には第1方向の表示動作、下側領域R2内の押圧の場合には第2方向の表示動作に決定する例を示す。線2801は、設定上の上側領域R1と下側領域R2との境界線を示す。更に、表示画面2内を押圧する際のタッチ位置の数の区別に応じて表示動作の方向や速度等を決定してもよい。例えば、第1押圧操作として、表示画面2内の一箇所のタッチの場合には相対的に低速の第1速度、二箇所同時タッチの場合には相対的に高速の第2速度、といったように決定してもよい。
変形例として、図26のように、携帯端末装置に複数の押圧センサを備えてもよい。その場合に、それらの押圧センサの使い分けに応じて、表示動作の方向や速度等を決定してもよい。変形例の携帯端末装置は、例えば、前面のタッチ押圧センサ117に対する第1押圧の場合には第1方向表示動作、背面の押圧センサ118に対する第1押圧の場合には第2方向表示動作、といったように決定する。
(実施の形態10)
図43を用いて、本発明の実施の形態10の携帯端末装置について説明する。以下、実施の形態10における実施の形態6等とは異なる構成部分について説明する。実施の形態10は、対象情報として、表示画面2内に表示される複数のアイコンの場合を示す。実施の形態10では、表示範囲変更制御として、表示画面2内に複数のアイコンを配置して表示する際の表示動作を制御する。また、実施の形態10は、実施の形態6の変形例に相当し、表示範囲変更制御で、傾きの角度を用いて、表示動作を制御する。
図43を用いて、本発明の実施の形態10の携帯端末装置について説明する。以下、実施の形態10における実施の形態6等とは異なる構成部分について説明する。実施の形態10は、対象情報として、表示画面2内に表示される複数のアイコンの場合を示す。実施の形態10では、表示範囲変更制御として、表示画面2内に複数のアイコンを配置して表示する際の表示動作を制御する。また、実施の形態10は、実施の形態6の変形例に相当し、表示範囲変更制御で、傾きの角度を用いて、表示動作を制御する。
[制御概要及びアイコン配置]
図43は、図23と同様に、実施の形態10における表示制御として、ホーム画面内の複数のアイコンの配置の表示例や操作等を示す。図43では、ユーザが筐体1を左手で持った状態で、その親指により操作する場合を示す。図43の(a)は第1配置状態を示す。図43の(b)は第2配置状態を示す。
図43は、図23と同様に、実施の形態10における表示制御として、ホーム画面内の複数のアイコンの配置の表示例や操作等を示す。図43では、ユーザが筐体1を左手で持った状態で、その親指により操作する場合を示す。図43の(a)は第1配置状態を示す。図43の(b)は第2配置状態を示す。
第1配置状態で、ユーザは、表示画面2内の箇所を所定の大きさ以上で押圧して指を離す第1押圧操作をする。その押圧の位置は、表示画面2内の任意位置とする。なお、その押圧の位置は、特にアイコン9上の位置としてもよいし、アイコン9以外の領域の位置としてもよい。携帯端末装置は、第1押圧操作に応じて制御モードに入り、筐体1の傾きの角度を基準角度θ0として設定する。携帯端末装置は、複数のアイコン9の配置を第1配置状態から第2配置状態へ変更する。
携帯端末装置は、制御モードにおける第2配置状態で、リングの複数のアイコン9を所定の方向、例えば右回りで回転するように移動させる。また、携帯端末装置は、第1押圧操作の第1押圧の強さPnに応じて、アイコン9の移動の初期速度を決定してもよい。
また、携帯端末装置は、第2配置状態における傾ける操作の角度θnに応じて、アイコン9の移動の方向や速度を可変に制御する。例えば、正方向の傾きの場合には右回り、負方向の傾きの場合には左回りにし、絶対値|θn-θ0|に応じて速度を決める。
また、ユーザが傾きの角度θnを基準角度θ0の付近に戻した場合、携帯端末装置は、アイコン9の移動を一時停止させる。また、携帯端末装置は、ユーザがリングの中心をタッチした場合等に一時停止させてもよい。また、ユーザが所望のアイコン9をタッチで選択操作した場合、携帯端末装置は、そのアイコン9に対応付けられているアプリケーションの処理を実行して、制御モードを解除する。
第2配置状態で、ユーザは、表示画面2内の箇所、例えばリングの中心または外の領域を、所定の大きさ以上で押圧して指を離す第2押圧操作をする。携帯端末装置は、その第2押圧操作に応じて制御モードを解除し、第2配置状態から第1配置状態へ戻す。
なお、中心点Q0の位置は、ユーザ設定値としてもよいし、第1押圧操作の際のタッチ位置座標の付近の位置としてもよい。携帯端末装置は、第2配置状態で、アイコン9の数に応じて、リングやアイコン9の大きさ、表示画面2内にリングのうちの一部を表示する等、調整してもよい。
[効果等]
上記のように、実施の形態10によれば、少ない手間で画面内の所望のアイコン9を選択する操作が実現できる。ユーザは、片手や一本指で操作する場合に、表示画面2内の第1配置状態で所望のアイコン9に指が届かない場合や、所望のアイコン9がみつからない場合、第1押圧操作に応じて第2配置状態に変更する。ユーザは、第2配置状態でアイコン9群を回転させ、所望のアイコン9が指のタッチ位置に来た時に指を離す。あるいは、アイコン9の回転を一時停止させてから、所望のアイコン9をタッチ操作する。これにより、所望のアイコン9を選択操作してアプリケーション画面に遷移させることができる。
上記のように、実施の形態10によれば、少ない手間で画面内の所望のアイコン9を選択する操作が実現できる。ユーザは、片手や一本指で操作する場合に、表示画面2内の第1配置状態で所望のアイコン9に指が届かない場合や、所望のアイコン9がみつからない場合、第1押圧操作に応じて第2配置状態に変更する。ユーザは、第2配置状態でアイコン9群を回転させ、所望のアイコン9が指のタッチ位置に来た時に指を離す。あるいは、アイコン9の回転を一時停止させてから、所望のアイコン9をタッチ操作する。これにより、所望のアイコン9を選択操作してアプリケーション画面に遷移させることができる。
従来では、ユーザは、所望のアイコンに指が届かない場合、持ち手の状態を変える、別の手の指で押す、等の手間が必要となる。実施の形態10では、そのような手間が不要となり、片手及び一本指で容易に素早くアイコンを選択可能である。また、ユーザは、押圧の強さや傾きの角度等に応じてアイコンの回転の方向や速度を調整でき、所望のアイコンを素早く選択できる。
以上、本発明を実施の形態に基づいて具体的に説明したが、本発明は前述の実施の形態に限定されず、その要旨を逸脱しない範囲で種々変更可能である。本発明の機能等は、一部または全部が、集積回路等のハードウェアで実現されてもよいし、ソフトウェアプログラム処理で実現されてもよい。
1…筐体、2…表示画面、3…表示情報、4…表示範囲、5,6…スクロール。
Claims (31)
- 携帯端末装置であって、
表示画面に情報を表示する表示部と、
前記表示画面に対する押圧を検出する押圧検出部と、
前記表示画面に表示される前記情報の表示範囲を変更する制御を行う表示制御部と、
を備え、
前記表示制御部は、前記押圧検出部により所定の大きさ以上の押圧が検出された場合に、前記押圧が保持されている状態において、前記表示画面に表示する前記情報の前記表示範囲を変更する、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記携帯端末装置の傾きの角度を検出する傾き角度検出部を備え、
前記表示制御部は、前記所定の大きさ以上の押圧が検出された場合に、前記傾き角度検出部により検出された前記傾きの第1角度を基準角度として設定し、前記押圧が保持されている状態において、前記傾き角度検出部により検出された前記傾きの第2角度と前記基準角度との差分の大きさに応じて、前記表示範囲を変更する、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示制御部は、前記押圧が保持されている状態から、前記所定の大きさ以上の押圧が無い状態へ変化した場合に、前記表示範囲の変更を停止する、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示制御部は、前記押圧が保持されている状態から、前記所定の大きさ以上の押圧が無い状態へ変化した場合に、前記押圧が無い状態が検出された時の位置が、前記表示画面内のオブジェクトの位置に該当する場合、前記オブジェクトに対応付けられた処理を実行する、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示制御部は、前記変更の際、前記表示範囲をスクロールさせる、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示制御部は、前記変更の際、複数の画面のうち前記表示範囲とする画面を切り替える、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示制御部は、前記変更の際、前記表示画面内の複数のオブジェクトの配置を変更して、前記配置内において各々のオブジェクトを移動させる、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示画面に対する一箇所の押圧の第1操作と、複数箇所同時の押圧の第2操作との二種類の操作を区別して検出し、
前記表示制御部は、前記二種類の操作の区別に応じて、前記変更の制御における二種類の動作として、前記表示範囲を第1方向で変更する第1動作と、第2方向で変更する第2動作と、を行う、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示画面に対する第1領域内の押圧の第1操作と、第2領域内の押圧の第2操作との二種類の操作を区別して検出し、
前記表示制御部は、前記二種類の操作の区別に応じて、前記変更の制御における二種類の動作として、前記表示範囲を第1方向で変更する第1動作と、第2方向で変更する第2動作と、を行う、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示画面がある前面に設けられる第1押圧センサと、
前記第1押圧センサとは別に設けられる第2押圧センサと、
を備え、
前記表示制御部は、
前記第1押圧センサに対する押圧の第1操作と、前記第2押圧センサに対する押圧の第2操作との二種類の操作を区別して検出し、
前記表示制御部は、前記二種類の操作の区別に応じて、前記変更の制御における二種類の動作として、前記情報を第1方向で変更する第1動作と、第2方向で変更する第2動作と、を行う、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示制御部は、前記押圧の強さに応じて、前記変更の際に表示情報を連続的に移動させる際の速度、または断続的に移動させる際の時間間隔を変える、
携帯端末装置。 - 請求項2記載の携帯端末装置において、
前記表示制御部は、前記傾きの角度の前記差分の大きさに応じて、前記変更の際に表示情報を連続的に移動させる際の速度、または断続的に移動させる際の時間間隔を変える、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記情報は、コンテンツ表示情報、複数のホーム画面、複数のアプリケーション画面、画面内の複数のアイコンのうちの少なくとも1つである、
携帯端末装置。 - 請求項1記載の携帯端末装置において、
前記表示画面がある前面に設けられるタッチ押圧センサと、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部と、
を備える、携帯端末装置。 - 表示画面に情報を表示する表示部と、
前記表示画面に対する押圧を検出する押圧検出部と、
前記表示画面に表示される前記情報の表示範囲を変更する制御を行う表示制御部と、
を備え、
前記表示制御部は、前記押圧検出部により所定の大きさ以上の第1押圧が検出された後に、前記第1押圧が保持されていない状態において、前記表示範囲を変更する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記携帯端末装置の傾きの角度を検出する傾き角度検出部を備え、
前記表示制御部は、前記第1押圧が検出された時に前記傾き角度検出部により検出された前記傾きの第1角度を基準角度として設定し、前記第1押圧が保持されていない状態において、前記傾き角度検出部により検出された前記傾きの第2角度と前記基準角度との差分の大きさに応じて、前記表示範囲を変更する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示制御部は、前記第1押圧が検出された時に前記タッチ検出部により検出されたタッチ位置座標の第1位置を基準位置として、方向選択アイコンを表示し、前記第1押圧が保持されていない状態において、前記方向選択アイコン上のタッチ位置に応じて選択される方向に、前記表示範囲を変更する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示制御部は、前記第1押圧が検出された時に前記タッチ検出部により検出されたタッチ位置座標の第1位置を基準位置として、前記第1押圧が保持されていない状態において、前記タッチ検出部により検出されたタッチ位置座標の第2位置と前記第1位置との位置関係に応じて決まる方向に、前記表示範囲を変更する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示制御部は、前記第1押圧の検出よりも後に、前記押圧検出部により所定の大きさ以上の第2押圧が検出された場合、前記表示範囲の変更を終了する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示制御部は、前記第1押圧が保持されていない状態、かつ、前記タッチ検出部により検出されたタッチ有り状態が維持されている状態において、前記表示範囲を変更し、前記タッチ検出部によりタッチ無し状態への変化が検出された場合、前記表示範囲の変更を終了する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部を備え、
前記表示制御部は、前記第1押圧の検出よりも後に、前記タッチ検出部により前記表示画面内のオブジェクトの選択操作が検出された場合、前記表示範囲の変更を終了して前記オブジェクトに対応付けられた処理を実行する、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示制御部は、前記変更の際、前記表示範囲をスクロールさせる、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示制御部は、前記変更の際、複数の画面のうち前記表示範囲とする画面を切り替える、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示制御部は、前記変更の際、前記表示画面内の複数のオブジェクトの配置を変更して、前記配置内において各々のオブジェクトを移動させる、
携帯端末装置。 - 請求項16記載の携帯端末装置において、
前記表示制御部は、前記第2角度が前記第1角度の付近の所定の角度範囲内である場合、前記表示範囲の変更の表示動作を行わない、または一時停止させる、
携帯端末装置。 - 請求項17記載の携帯端末装置において、
前記方向選択アイコンは、中央停止領域を含み、
前記表示制御部は、前記タッチ位置が前記中央停止領域である場合、または前記方向選択アイコンの外の領域である場合、前記表示範囲の変更の表示動作を行わない、または一時停止させる、
携帯端末装置。 - 請求項18記載の携帯端末装置において、
前記表示制御部は、タッチ位置が前記第1位置の付近の所定範囲内である場合、前記表示範囲の変更の表示動作を行わない、または一時停止させる、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示制御部は、前記第1押圧の強さに応じて、前記変更の際に表示情報を連続的に移動させる際の速度、または断続的に移動させる際の時間間隔を変える、
携帯端末装置。 - 請求項16記載の携帯端末装置において、
前記表示制御部は、前記傾きの角度の前記差分の大きさに応じて、前記変更の際に表示情報を連続的に移動させる際の速度、または断続的に移動させる際の時間間隔を変える、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記情報は、コンテンツ表示情報、複数のホーム画面、複数のアプリケーション画面、画面内の複数のアイコン、のうちの少なくとも1つである、
携帯端末装置。 - 請求項15記載の携帯端末装置において、
前記表示画面がある前面に設けられるタッチ押圧センサと、
前記表示画面に対するタッチ位置座標を検出するタッチ検出部と、
を備える、携帯端末装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201780024655.4A CN109074222B (zh) | 2016-04-19 | 2017-04-19 | 移动终端装置 |
US16/094,211 US20190095068A1 (en) | 2016-04-19 | 2017-04-19 | Portable terminal device |
US17/691,520 US20220197458A1 (en) | 2016-04-19 | 2022-03-10 | Portable terminal device |
US18/610,490 US20240231595A1 (en) | 2016-04-19 | 2024-03-20 | Portable terminal device |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016083539A JP6725305B2 (ja) | 2016-04-19 | 2016-04-19 | 携帯端末装置 |
JP2016-083539 | 2016-04-19 | ||
JP2016-093789 | 2016-05-09 | ||
JP2016093789A JP6691426B2 (ja) | 2016-05-09 | 2016-05-09 | 携帯端末装置 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US16/094,211 A-371-Of-International US20190095068A1 (en) | 2016-04-19 | 2017-04-19 | Portable terminal device |
US17/691,520 Continuation US20220197458A1 (en) | 2016-04-19 | 2022-03-10 | Portable terminal device |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017183652A1 true WO2017183652A1 (ja) | 2017-10-26 |
Family
ID=60116075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2017/015661 WO2017183652A1 (ja) | 2016-04-19 | 2017-04-19 | 携帯端末装置 |
Country Status (3)
Country | Link |
---|---|
US (3) | US20190095068A1 (ja) |
CN (1) | CN109074222B (ja) |
WO (1) | WO2017183652A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110018767A (zh) * | 2018-03-19 | 2019-07-16 | 京瓷办公信息系统株式会社 | 信息处理装置 |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5966665B2 (ja) * | 2012-06-26 | 2016-08-10 | ソニー株式会社 | 情報処理装置、情報処理方法および記録媒体 |
US10867445B1 (en) * | 2016-11-16 | 2020-12-15 | Amazon Technologies, Inc. | Content segmentation and navigation |
US10466889B2 (en) | 2017-05-16 | 2019-11-05 | Apple Inc. | Devices, methods, and graphical user interfaces for accessing notifications |
WO2020133040A1 (zh) * | 2018-12-27 | 2020-07-02 | 海能达通信股份有限公司 | 控制方法、装置、电子设备及存储介质 |
CN112987987A (zh) * | 2019-12-13 | 2021-06-18 | 华为技术有限公司 | 一种应用图标的显示方法及电子设备 |
US11137904B1 (en) | 2020-03-10 | 2021-10-05 | Apple Inc. | Devices, methods, and graphical user interfaces for interacting with user interface objects corresponding to applications |
CN111966256B (zh) * | 2020-08-25 | 2022-05-06 | 惠州Tcl云创科技有限公司 | 一种屏幕控制方法、装置、存储介质及移动终端 |
CN112667931B (zh) * | 2020-12-23 | 2022-09-23 | 展讯通信(天津)有限公司 | 网页收藏方法、电子设备和存储介质 |
US11842028B2 (en) | 2022-05-06 | 2023-12-12 | Apple Inc. | Devices, methods, and graphical user interfaces for updating a session region |
EP4273678A1 (en) | 2022-05-06 | 2023-11-08 | Apple Inc. | Devices, methods, and graphical user interfaces for updating a session region |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002109557A (ja) * | 2000-10-03 | 2002-04-12 | Ricoh Co Ltd | アイコンの切り替え方式 |
JP2009110178A (ja) * | 2007-10-29 | 2009-05-21 | Toshiba Corp | 情報処理装置、スクロール制御プログラムおよびスクロール制御方法 |
JP2012048583A (ja) * | 2010-08-27 | 2012-03-08 | Kyocera Corp | 表示装置および表示装置の制御方法 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8462109B2 (en) * | 2007-01-05 | 2013-06-11 | Invensense, Inc. | Controlling and accessing content using motion processing on mobile devices |
JP4605214B2 (ja) * | 2007-12-19 | 2011-01-05 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
US8558803B2 (en) * | 2008-11-28 | 2013-10-15 | Samsung Electronics Co., Ltd. | Input device for portable terminal and method thereof |
JP5173870B2 (ja) * | 2009-01-28 | 2013-04-03 | 京セラ株式会社 | 入力装置 |
US8224392B2 (en) * | 2009-04-29 | 2012-07-17 | Lg Electronics Inc. | Mobile terminal capable of recognizing fingernail touch and method of controlling the operation thereof |
KR101830962B1 (ko) * | 2010-12-29 | 2018-02-22 | 삼성전자주식회사 | 휴대용 단말기에서 출력 화면을 제어하기 위한 장치 및 방법 |
US9285976B2 (en) * | 2011-07-22 | 2016-03-15 | Kddi Corporation | User interface device capable of image scrolling not accompanying finger movement, image scrolling method, and program |
US8976128B2 (en) * | 2011-09-12 | 2015-03-10 | Google Technology Holdings LLC | Using pressure differences with a touch-sensitive display screen |
JP6083987B2 (ja) * | 2011-10-12 | 2017-02-22 | キヤノン株式会社 | 撮像装置、その制御方法及びプログラム |
JP5498518B2 (ja) * | 2012-02-23 | 2014-05-21 | 株式会社ゼンリンデータコム | 画像表示装置、コンピュータプログラムおよび画像表示方法 |
KR20130110715A (ko) * | 2012-03-30 | 2013-10-10 | 삼성전자주식회사 | 플렉서블 베젤 제공 방법 및 장치 |
KR101943435B1 (ko) * | 2012-04-08 | 2019-04-17 | 삼성전자주식회사 | 플렉서블 디스플레이 장치 및 그 동작 방법 |
US20140002374A1 (en) * | 2012-06-29 | 2014-01-02 | Lenovo (Singapore) Pte. Ltd. | Text selection utilizing pressure-sensitive touch |
US20150234572A1 (en) * | 2012-10-16 | 2015-08-20 | Mitsubishi Electric Corporation | Information display device and display information operation method |
US20140152581A1 (en) * | 2012-11-30 | 2014-06-05 | Lenovo (Singapore) Pte. Ltd. | Force as a device action modifier |
US20140210729A1 (en) * | 2013-01-28 | 2014-07-31 | Barnesandnoble.Com Llc | Gesture based user interface for use in an eyes-free mode |
JP5835255B2 (ja) * | 2013-03-19 | 2015-12-24 | カシオ計算機株式会社 | グラフ表示装置及びグラフ表示プログラム |
JP6044472B2 (ja) * | 2013-06-28 | 2016-12-14 | 富士ゼロックス株式会社 | 情報処理装置及びプログラム |
JP2015106165A (ja) * | 2013-11-28 | 2015-06-08 | 京セラ株式会社 | 電子機器 |
CN103984463A (zh) * | 2014-06-04 | 2014-08-13 | 深圳市亚略特生物识别科技有限公司 | 触摸屏的解锁方法及装置 |
CN104133892A (zh) * | 2014-07-30 | 2014-11-05 | 宇龙计算机通信科技(深圳)有限公司 | 一种显示方法、系统及终端 |
US20160224220A1 (en) * | 2015-02-04 | 2016-08-04 | Wipro Limited | System and method for navigating between user interface screens |
-
2017
- 2017-04-19 US US16/094,211 patent/US20190095068A1/en not_active Abandoned
- 2017-04-19 WO PCT/JP2017/015661 patent/WO2017183652A1/ja active Application Filing
- 2017-04-19 CN CN201780024655.4A patent/CN109074222B/zh active Active
-
2022
- 2022-03-10 US US17/691,520 patent/US20220197458A1/en not_active Abandoned
-
2024
- 2024-03-20 US US18/610,490 patent/US20240231595A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002109557A (ja) * | 2000-10-03 | 2002-04-12 | Ricoh Co Ltd | アイコンの切り替え方式 |
JP2009110178A (ja) * | 2007-10-29 | 2009-05-21 | Toshiba Corp | 情報処理装置、スクロール制御プログラムおよびスクロール制御方法 |
JP2012048583A (ja) * | 2010-08-27 | 2012-03-08 | Kyocera Corp | 表示装置および表示装置の制御方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110018767A (zh) * | 2018-03-19 | 2019-07-16 | 京瓷办公信息系统株式会社 | 信息处理装置 |
Also Published As
Publication number | Publication date |
---|---|
CN109074222A (zh) | 2018-12-21 |
CN109074222B (zh) | 2022-10-25 |
US20220197458A1 (en) | 2022-06-23 |
US20190095068A1 (en) | 2019-03-28 |
US20240231595A1 (en) | 2024-07-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017183652A1 (ja) | 携帯端末装置 | |
KR102097496B1 (ko) | 폴더블 이동 단말기 및 그 제어 방법 | |
US20170357473A1 (en) | Mobile device with touch screens and method of controlling the same | |
US20190187795A9 (en) | Systems and methods for using textures in graphical user interface widgets | |
CN104932809B (zh) | 用于控制显示面板的装置和方法 | |
CN115220838A (zh) | 一种微件处理方法以及相关装置 | |
KR20130127649A (ko) | 표시부에 출력되는 입력 영역 운용 방법 및 이를 지원하는 단말기 | |
KR20100066036A (ko) | 휴대 단말기 운용 방법 및 장치 | |
JP2010136187A (ja) | 携帯端末 | |
US20200379598A1 (en) | Apparatus capable of sensing touch and sensing touch pressure, and control method therefor | |
WO2014208691A1 (ja) | 携帯機器、携帯機器の制御方法 | |
US20200089362A1 (en) | Device and control method capable of touch sensing and touch pressure sensing | |
JP6691426B2 (ja) | 携帯端末装置 | |
JP6725305B2 (ja) | 携帯端末装置 | |
US11354031B2 (en) | Electronic apparatus, computer-readable non-transitory recording medium, and display control method for controlling a scroll speed of a display screen | |
JP6122355B2 (ja) | 携帯端末装置 | |
KR101911680B1 (ko) | 터치 감지 디스플레이 장치 및 그 화면 제어 방법 | |
CN111158575B (zh) | 终端执行处理的方法、装置、设备以及存储介质 | |
KR20190128139A (ko) | 터치 감지 및 터치압력 감지가 가능한 장치 및 제어방법 | |
JP7157104B2 (ja) | 表示方法 | |
CN114995710A (zh) | 一种可穿戴设备交互方法、可穿戴设备及可读存储介质 | |
KR20110066545A (ko) | 터치스크린을 이용하여 이미지를 표시하기 위한 방법 및 단말 | |
US20200033959A1 (en) | Electronic apparatus, computer-readable non-transitory recording medium, and display control method | |
JP5510008B2 (ja) | 携帯端末装置 | |
KR20120018923A (ko) | 이동 단말기 및 그 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17785990 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17785990 Country of ref document: EP Kind code of ref document: A1 |