WO2013122216A1 - 画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体 - Google Patents

画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体 Download PDF

Info

Publication number
WO2013122216A1
WO2013122216A1 PCT/JP2013/053729 JP2013053729W WO2013122216A1 WO 2013122216 A1 WO2013122216 A1 WO 2013122216A1 JP 2013053729 W JP2013053729 W JP 2013053729W WO 2013122216 A1 WO2013122216 A1 WO 2013122216A1
Authority
WO
WIPO (PCT)
Prior art keywords
screen
state
unit
scroll
display
Prior art date
Application number
PCT/JP2013/053729
Other languages
English (en)
French (fr)
Inventor
健文 大塚
石川 博一
賢一 堀内
誠悟 伊藤
忠郎 長沢
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to US14/357,880 priority Critical patent/US20140285530A1/en
Priority to EP13749164.3A priority patent/EP2816461A4/en
Publication of WO2013122216A1 publication Critical patent/WO2013122216A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/34Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/324Power saving characterised by the action undertaken by lowering clock frequency
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/3296Power saving characterised by the action undertaken by lowering the supply or operating voltage
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/34Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling
    • G09G5/346Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling for systems having a bit-mapped display memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Definitions

  • the present invention relates to a screen display device capable of scroll display, a control method thereof, a program, and a computer-readable recording medium.
  • an operating system (hereinafter referred to as OS) that incorporates a power management function has been proposed.
  • the operation state is discriminated from the management items such as the CPU work amount and the power supply state, and the CPU frequency and voltage are changed (Dynamic (frequency scaling, Dynamic voltage scaling), and power gating technology is used.
  • Implements appropriate processing (reducing operation) such as reducing the number of operating cores.
  • the degeneration operation is performed at a timing when processing according to the user's operation is required, the responsiveness to the user's operation may be deteriorated. As a result, the user may be given a feeling of operation such as “stickiness” and “bad response”.
  • GUI graphical user interface
  • scrolling is generally performed because not all information can be displayed on one screen. That is, the content displayed in the screen is slid by the touch operation of pressing a part of the screen and moving the finger as it is.
  • the followability / responsiveness of the screen scroll to the touch operation may be deteriorated.
  • the scroll process it is necessary to generate and display an image to be displayed on the screen at a high speed, which increases the processing amount of the CPU.
  • the load is highest immediately after the start of the scroll process.
  • the degeneration operation is performed during the scroll process, the CPU processing capacity may be insufficient.
  • the screen display does not come into contact with a finger, and that there is a case where a user feels a rattle after a touch operation (flick) in which the hand is released after scrolling.
  • Japanese Patent Application Laid-Open No. H10-228561 describes that a high clock stage is set for processing caused by a user event to improve responsiveness and shorten processing time.
  • Patent Document 2 discloses a device that controls the operating frequency of a CPU in accordance with the contents of processing to be executed.
  • the apparatus sets a predetermined clock stage in the CPU.
  • Patent Document 1 sets a high clock level even when scroll processing is not performed if processing due to a user event occurs. Therefore, even when the processing load is not so high, a clock stage higher than necessary may be set.
  • the device described in Patent Document 2 described above sets a predetermined clock stage in the CPU fixedly every time a key input is received from the user, even when a calculation load is not applied to the CPU. For this reason, only in the high load state at the start of scrolling, the processing performance is required, but the high clock stage is set for a certain period. Therefore, the processing performance more than necessary is maintained, and the power consumption cannot be effectively suppressed.
  • the present invention has been made in view of the above problems, and an object of the present invention is to realize a screen display device and the like that can perform a smooth scrolling process by effectively performing a contraction operation in a scrolling process for a scrollable screen. There is to do.
  • a screen display device is a screen display device capable of scroll-displaying a display image larger than the display area of the display unit, and the screen displayed on the display unit is scrolled.
  • a screen determination means for determining whether or not it is possible, an operation reception means for receiving an operation input for changing the scroll state of the screen from the user, and a scrollable screen is displayed when the operation input is received, While a transition from the first state in which processing is performed with predetermined performance to the second state in which processing is performed with performance according to the processing amount is suppressed for a predetermined time, a scrollable screen is displayed.
  • a state control means for executing processing in the second state when not displayed.
  • a method for controlling a screen display device displays a display image larger than the display area of the display unit on the display unit in the screen display device control method capable of scroll display.
  • a screen determination step for determining whether or not the screen being scrolled can be scrolled an operation reception step for receiving an operation input for changing the scroll state of the screen from the user, and a screen that can be scrolled when the operation input is received.
  • the transition from the first state in which the process is executed with the predetermined performance to the second state in which the process is executed with the performance according to the processing amount is suppressed for a predetermined time.
  • a state control step for executing processing in the second state when a scrollable screen is not displayed.
  • the screen display device is a screen display device capable of scroll-displaying a display image larger than the display area of the display unit, and determining whether or not the screen displayed on the display unit is scrollable.
  • the second And state control means for executing processing in the state.
  • the screen display device control method is a screen display device control method capable of scroll-displaying a display image larger than the display area of the display unit, and whether or not the screen displayed on the display unit is scrollable.
  • a screen determination step for determining whether or not, an operation reception step for receiving an operation input for changing the scroll state of the screen from the user, and a screen that can be scrolled when the operation input is received.
  • the screen that can be scrolled is displayed while the transition from the first state in which the process is executed to the second state in which the process is executed with the performance according to the processing amount is suppressed for a predetermined time. If not, the method includes a state control step for executing processing in the second state.
  • the program according to the present invention is a program for operating a screen display device capable of scroll-displaying a display image larger than the display area of the display unit, and whether or not the screen displayed on the display unit is scrollable.
  • a screen determination step for determining whether or not, an operation reception step for receiving an operation input for changing the scroll state of the screen from the user, and a screen that can be scrolled when the operation input is received.
  • the first state is suppressed from transitioning to the second state for a predetermined time, and when a scrollable screen is not displayed, processing is performed in the second state.
  • FIG. 4 is a functional block diagram illustrating an example of a functional configuration of a control unit included in a mobile terminal according to an embodiment of the present invention. It is a figure which shows the outline
  • FIG. 2A illustrates the appearance of the mobile terminal 1.
  • FIG. 2B is a diagram illustrating a correspondence relationship between the touch panel display unit 35 of the mobile terminal 1 and scrollable display content.
  • the mobile terminal 1 is provided with a touch panel display unit 35 as a user interface.
  • a touch panel display unit 35 As a user interface, a part P1 of the display content P10 larger than the displayable area of the display unit 35B (FIG. 3; described later) (hereinafter referred to as partial content P1) is displayed. Has been.
  • a sign P2 indicating the relative position of the partial content P1 in the display content P10 is displayed in the sign display area P3 in the partial content P1.
  • FIG. 2B shows an overall image of the display content P10.
  • the display content P10 shown in (b) of FIG. 2 is content that can be scrolled up and down.
  • the display content P10 is, for example, a vertically long web page that can be browsed by a web browser or a list in which items are arranged in a vertical direction as a list.
  • This list includes a setting menu list for performing various settings of the mobile terminal 1.
  • the present invention is not limited to this, and the display content P10 may be, for example, a list that can be scrolled to the left or right or a map that can be scrolled in any direction. That is, the display content P10 may be vertically long or horizontally long with respect to the display unit 35B. Further, the display content P10 may be longer in both the vertical width and the horizontal width than the displayable area of the display unit 35B.
  • the vertical width of the display unit 35B of the touch panel display unit 35 is L
  • the overall vertical width of the display content P10 is 10L.
  • Such display content P10 is displayed on the display unit B of the touch panel display unit 35 by an application having a graphical user interface (GUI) capable of scroll display.
  • GUI graphical user interface
  • the application includes a setting application for displaying a setting menu list and performing various settings of the mobile terminal 1.
  • the user When the application is operating on the mobile terminal 1, the user performs a touch operation on the operation unit 35A (FIG. 3; described later) of the touch panel display unit 35 to display the display content P10 displayed on the display unit 35B ( The partial content P1) can be scrolled up and down.
  • FIG. 3 is a block diagram illustrating a configuration example of the mobile terminal 1.
  • the mobile terminal 1 is illustratively a multi-function mobile phone, a so-called smartphone.
  • the mobile terminal 1 includes a control unit 10, an imaging unit 31, a voice input / output unit 32, a power supply unit 33, a communication unit 34, a touch panel display unit 35, a button unit 36, and a storage unit 50. It is a configuration.
  • the control unit 10 controls the various functions of the mobile terminal 1 in an integrated manner. Details of the control unit 10 will be described later.
  • the imaging unit 31 provides a camera function for capturing an image by photographing a subject.
  • the imaging unit 31 can be realized by, for example, an optical system and an imaging device (CCD (Charge-Coupled Device), CMOS (Complementary Metal-Oxide-Semiconductor), or the like).
  • CCD Charge-Coupled Device
  • CMOS Complementary Metal-Oxide-Semiconductor
  • the voice input / output unit 32 performs voice input / output.
  • the voice input / output unit 32 can be realized by, for example, a microphone that converts a sound wave into an electric signal and inputs the electric signal to the control unit 10 and a speaker that converts the electric signal from the control unit 10 into a sound wave and outputs the sound wave.
  • the audio input / output unit 32 may be provided with a terminal for connecting to external headphones or a headset.
  • the power supply unit 33 is for supplying power for operating each unit of the mobile terminal 1.
  • the power supply unit 33 can be realized by, for example, a secondary battery. Further, the power supply to the portable terminal 1 can be performed by connecting a USB (Universal Serial Bus) or an AC adapter to an external power source.
  • USB Universal Serial Bus
  • the communication unit 34 is for communicating with an external device of the mobile terminal 1.
  • the communication unit 34 communicates with an external device via a mobile phone network or short-range wireless communication.
  • the communication unit 34 can employ, for example, a wireless LAN (IEEE 802.11), Bluetooth (registered trademark), or the like as a short-range wireless communication method.
  • the touch panel display unit 35 includes an operation unit 35A that accepts a contact operation and a display unit 35B that performs screen display.
  • the operation unit 35A detects a touch operation (hereinafter referred to as a touch event) on the display screen of the display unit 35B, and supplies operation data related to the touch event to the control unit 10.
  • the operation data may include the contact operation position, the direction of the contact operation, acceleration, strength, and the like.
  • the operation unit 35A detects the contact operation position by, for example, a matrix switch, a resistive film method, a surface acoustic wave method, an infrared method, an electromagnetic induction method, a capacitance method, and an image of an object.
  • a method of detecting (light sensor method) and the like are examples of the present invention.
  • the present invention is not limited to this, and various methods can be appropriately applied to the method for detecting the contact operation position.
  • the method for detecting the contact operation position described above includes a method for detecting not only “contact” but also “proximity”. However, in the following, for convenience of explanation, only “contact” is described without distinguishing between “contact” and “prox
  • the display unit 35B has a display screen for displaying image data, receives image data from the control unit 10, and displays an image on the display screen based on the received image data.
  • the display unit 35B can be realized by, for example, an LCD (Liquid Crystal Display), a PDP (Plasma Display Panel), an EL (Electroluminescence) display, or the like.
  • the button unit 36 is a hardware button provided on the surface of the mobile terminal 1. Specific examples of the button unit 36 include a shutter button for operating the camera of the imaging unit 31, a home button for moving the screen in the display unit 35B to the home screen, and a sound output volume in the audio input / output unit 32. Examples include a volume button and a power button for turning the power on and off.
  • the button unit 36 creates operation data corresponding to the user's operation and transmits it to the control unit 10.
  • Timer 37 is for measuring time.
  • the timer unit 37 can be realized by, for example, a real time clock (RTC) IC (Integrated Circuit) for time measurement.
  • RTC real time clock
  • IC Integrated Circuit
  • the storage unit 50 stores various data, display contents, and programs.
  • the storage unit 30 includes a buffer memory 51 and a storage medium reading unit 52.
  • the buffer memory 51 stores a buffer image (described later).
  • the storage medium reading unit 52 reads various data, display contents, and programs stored in the external storage medium 2.
  • the captured image captured by the imaging unit 31 may be stored in the storage unit 50 as display content.
  • FIG. 1 is a functional block diagram illustrating an example of a functional configuration of the control unit 10 illustrated in FIG. In FIG. 1, only members referred to in the following description among the members illustrated in FIG. 3 are illustrated.
  • the control unit 10 includes an operation determination unit (operation reception unit) 101, a screen determination unit (screen determination unit) 102, a suppression instruction unit (state control unit) 103, a degeneration operation setting unit (state control unit). ) 104, a scroll processing unit (preliminary image generation unit) 105, an elapsed time determination unit (state control unit) 106, a release instruction unit (state control unit) 107, and a movement determination unit (movement determination unit) 108.
  • the control unit 10 is realized by a CPU (Central Processing Unit) executing a program stored in a storage element such as a RAM (Random Access Memory) or a flash memory.
  • a CPU Central Processing Unit
  • the control unit 10 is in either a normal state (first state) in which processing is performed with normal performance (predetermined performance) or a degenerate state (second state) in which processing is performed with performance according to the processing amount. It is possible to operate in one of the operating states.
  • the CPU for realizing the control unit 10 operates at a clock frequency at a predetermined stage.
  • the clock frequency stage is referred to as a clock stage.
  • the “degenerate state” specifically refers to a state in which the clock stage is set according to the processing amount for the CPU. For example, when the amount of processing is large, a high clock level can be set in order to improve the processing performance. Also, for example, when the amount of processing is small, a low clock level can be set to reduce power consumption. For example, power consumption can be reduced by stopping some of the functions included in the CPU for realizing the control unit 10 or changing the frequency (clock stage) at which the CPU operates, the number of operating cores, the voltage, and the like. And the state where performance is suppressed.
  • the “normal state” refers to a state that is not in a degenerated state
  • the “normal performance” refers to the performance of the control unit 10 that is exhibited in a normal state.
  • a predetermined clock stage is set for the CPU. For example, when operating in the “normal state”, the maximum settable clock level can be set for the CPU.
  • the CPU a CPU that can perform a degeneration operation can be arbitrarily adopted.
  • the CPU may be a multi-core processor or a single-core processor as long as a degenerate operation is possible.
  • the operation determination unit 101 detects a touch event in the operation unit 35A, and determines whether or not the detected touch event is an instruction to scroll. Specifically, the operation determination unit 101 detects a touch event when operation data is supplied from the operation unit 35A.
  • the touch event includes a tap event, a touch down event, a touch move event, and a touch up event.
  • the tap event indicates that there is a contact operation in the operation unit 35A within a predetermined time, and the contact operation is released with almost no change in the contact operation position.
  • the touchdown event indicates that there is a touch operation in the operation unit 35A.
  • the touch move event indicates that there is a touch operation in the operation unit 35A, and the touch operation position is changed in a predetermined direction.
  • the touch-up event indicates that the touch operation on the operation unit 35A has been released.
  • An operation that repels the operation unit 35A that is, an operation in which the touch operation is released after the touch move event is maintained for a predetermined time is also referred to as a flick operation.
  • the operation determination unit 101 determines whether the touch event is a touch move event based on the operation data. For example, the operation determination unit 101 detects a move event in the vertical direction as an event for instructing scrolling on a screen that can be scrolled up and down. Further, the operation determination unit 101 determines whether the touch event is a touch-up event based on the operation data.
  • the screen determination unit 102 determines the state of the display screen displayed on the display unit 35B. Specifically, the screen determination unit 102 determines whether or not the state of the display screen can be scrolled because display content larger than the displayable area of the display unit 35B is displayed on the display unit 35B. The screen determination unit 102 determines whether the display screen is stationary (not scrolling).
  • the inhibition instruction unit 103 instructs the degeneration operation setting unit 104 to suppress the degeneration operation according to the determination result of the screen determination unit 102.
  • the degeneration operation setting unit 104 sets the operation state of the control unit 10 according to the inhibition instruction unit 103 or the degeneration operation setting unit 104.
  • the degeneration operation setting unit 104 sets the operation state to the normal state in accordance with the instruction from the inhibition instruction unit 103. That is, when the control unit 10 is operating in the degenerated state, the degeneration operation setting unit 104 suppresses the degeneration operation in accordance with an instruction from the suppression instruction unit 103, thereby causing the operation state to transition to the normal state.
  • the degeneration operation setting unit 104 sets the operation state of the control unit 10 to the degeneration state in accordance with an instruction from the release instruction unit 107. That is, the degeneration operation setting unit 104 cancels the degeneration operation in accordance with an instruction from the release instruction unit 107 when the degeneration operation is suppressed, that is, when the control unit 10 operates in a normal state. Transition the operating state to the degenerate state.
  • the degeneration operation setting unit 104 is configured to perform a degeneration operation at the clock stage.
  • this configuration is merely an illustrative example, and the degeneration operation setting unit 104 is not limited to such a configuration.
  • the degeneration operation setting unit 104 can employ a configuration that performs a degeneration operation of the number of operating cores.
  • the scroll processing unit 105 creates an image of display content necessary for scroll display.
  • the scroll processing unit 105 creates a display image of the screen displayed after scrolling in addition to the display image of the screen currently displayed on the display unit 35B.
  • Such a function of the scroll processing unit 105 is also referred to as a buffering function.
  • the image after scrolling created in advance by the scroll processing unit 105 before scrolling is referred to as a buffer image.
  • the scroll processing unit 105 writes the buffer image into the buffer memory 51, and reads the buffer image from the buffer memory 51 in accordance with the scroll to create a display image.
  • the scroll processing unit 105 stores the buffer image, for example, the display content stored in the storage unit 50, the display content that can be acquired via the communication unit 34 via the network, and the external storage through the storage medium reading unit 52. It is created based on display content read from the medium 2.
  • the scroll processing unit 105 adjusts the scroll speed according to the touch event. For example, the scroll processing unit 105 increases or decreases the scroll speed according to the acceleration of the touch operation, the movement distance of the contact operation position in a predetermined time, or the like.
  • the scroll processing unit 105 performs a scroll process to follow the touch operation position in response to the touch move event. Further, the scroll processing unit 105 performs an inertial scroll process of gradually reducing the scroll speed after starting scrolling at a predetermined speed in response to a flick operation (touch-up event).
  • the elapsed time determination unit 106 determines whether or not a predetermined time has elapsed since the degeneration operation is suppressed. Specifically, first, the elapsed time determination unit 106 measures the elapsed time from the time when the degeneration operation is suppressed to the current time based on the time measurement in the timer 37. Then, the elapsed time determination unit 106 determines whether or not a predetermined time has elapsed since the degeneration operation was suppressed, based on the measured elapsed time.
  • the release instruction unit 107 instructs the degeneration operation setting unit 104 to cancel the suppression of the degeneration operation according to the determination result of the elapsed time determination unit 106.
  • the movement determination unit 108 determines the movement state of the contact operation in the operation unit 35A. Specifically, the movement determination unit 108 determines whether or not the contact operation position has moved a predetermined distance within a predetermined time based on the operation data. The movement determination unit 108 can acquire the predetermined time with reference to the time measurement in the timer 37. The movement determination unit 108 determines whether or not the current contact operation position is the screen edge.
  • Each unit of the control unit 10 may be realized as an OS function or an application function.
  • the mobile phone 1 determines whether or not the screen displayed on the display unit 35B can be scrolled in the mobile phone 1 capable of scrolling display images larger than the display area of the display unit 35B. If the screen determination unit 102 to be operated, the operation determination unit 101 to receive an operation input for changing the scroll state of the screen from the user, and a scrollable screen are displayed when the operation input is received, the “normal state” is displayed. ”To“ degraded state ”for a predetermined time, and when a scrollable screen is not displayed, a degeneration operation setting unit 104 that executes processing in the degenerated state It is.
  • FIG. 4 is a flowchart illustrating an example of a process flow of the degeneration operation in the mobile terminal 1.
  • the operation determination unit 101 first detects a touch event (S101), and determines whether the detected touch event is a touch move event (S102). .
  • the operation determination unit 101 continues to wait for a touch event (return to S101).
  • the screen determination unit 102 determines whether or not the state of the display screen can be scrolled (S103).
  • the screen determination unit 102 may determine that scrolling is not possible when the partial content displayed on the display unit 35B corresponds to the end of the display content. For example, in a list that can be scrolled up and down, when the display screen corresponds to the upper end or the lower end of the list, the screen determination unit 102 may determine that scrolling is not possible.
  • the process returns at the start (returns to S101).
  • the degeneration operation setting unit 104 may be set to operate in the “degenerate state”.
  • the screen determination unit 102 determines whether or not the display screen is stationary (S104).
  • the inhibition instruction unit 103 instructs the degeneration operation setting unit 104 to suppress the degeneration operation at the clock stage. Thereby, the degeneration operation is suppressed and the control unit 10 starts the operation in the normal state (S105). At this time, it is preferable to set a clock stage of a predetermined stage or more or a maximum clock stage.
  • the scroll processing unit 105 performs scroll initialization processing (S106).
  • the scroll processing unit 105 creates a buffer image of display content necessary for scroll display.
  • the scroll processing unit 105 starts scrolling the display screen while referring to the buffer memory 51 (S107).
  • the elapsed time determination unit 106 determines whether or not a predetermined time has elapsed since the degeneration operation was suppressed (S108). If the predetermined time has not elapsed, the scroll process is continued (NO in S108).
  • This predetermined time is, for example, a time corresponding to one operation cycle of the clock change process. More specifically, this predetermined time can be set to 20 milliseconds.
  • the clock change process is performed in the OS layer upon receiving a request from the application.
  • the release instruction unit 197 instructs the reduction operation setting unit 104 to release the suppression of the reduction operation (S109).
  • the touch move event is detected.
  • the present invention is not limited to this, and a flick operation (touch up event) may be detected.
  • the scroll process may be an inertia scroll process according to a flick operation.
  • the scroll processing unit 105 acquires partial content corresponding to the scroll movement direction from the display content, and generates a display image based on the acquired partial content.
  • the scroll processing unit 105 acquires partial content over the network via the communication unit 34 or acquires from the external storage medium 2 via the storage medium reading unit 52.
  • a touch move event occurs at time T1 (indicated as “finger movement start” in the drawing), and the touch move event ends at time T7 (“finger movement end” in the drawing).
  • T1 indicated as “finger movement start” in the drawing
  • T7 finger movement end
  • the graph shown in FIG. 6 shows a case where the frame rate of the display unit 35B is 60 fps (frame / second).
  • the T1-T3 section is the first frame
  • the T3-T5 section is the second frame
  • the T5-T7 section is the third frame.
  • the amount of processing is larger in the T1-T2 section than in the T2-T3 section.
  • the processing load is higher in the first half of the frame due to the creation of a buffer image or the like. Because. That is, FIG. 6 illustrates a case where the creation of the buffer image ends in the T1-T2 section.
  • the processing amount in the T1-T3 section is larger than that in the T3-T5 section and the T5-T7 section because the processing amount in the section immediately after the start of processing is larger than in the subsequent sections.
  • a peak of processing amount appears every approximately 16 milliseconds, which is a cycle of one frame.
  • the amount of processing in the scroll processing becomes the largest at the start of scrolling, and then becomes lower when the processing for one frame is completed. Thereafter, a predetermined amount of processing is periodically generated at a cycle of one frame.
  • FIG. 7 is a graph illustrating the correspondence between the clock stage and the time when the clock stage is uniformly increased from the start to the end of the touch move.
  • the time axis in the figure is about 20 milliseconds (msec) per scale, and this corresponds to the operation period of the clock change process.
  • FIG. 7 shows a case where the clock stage “6” is uniformly set from the start to the end of the touch move.
  • control unit 50 (CPU) operates by the degeneration operation.
  • FIG. 8 is a graph illustrating the correspondence between the clock stage and the time when the clock stage is increased from the start of the touch move until a predetermined time elapses and then the clock stage is raised or lowered according to the processing load. .
  • the time axis in the figure is about 20 milliseconds (msec) per scale, similar to FIG.
  • the clock stage may be set according to the processing amount from the time T1 when the touch move starts.
  • control unit 50 (CPU) operates by the degeneration operation.
  • the clock stage is set to “6” from the start of touch move (start of processing) until a predetermined time elapses. That is, the degeneration operation is suppressed from the time T1 when the touch move is started (processing is started) to the time T2 when the predetermined time elapses.
  • the present invention is not limited to this, and a predetermined clock stage more than that set by the clock stage setting according to the processing amount is set. It is also possible to adopt a configuration.
  • the predetermined time is 20 milliseconds, which coincides with the operation cycle of the CPU.
  • This predetermined time may be determined based on the measured time by measuring in advance the time required for processing immediately after the start of the touch move. Further, if it is found as a result of the measurement that the processing immediately after the start of the touch move is completed within one operation cycle of the clock change processing, the predetermined time is made the same as one operation cycle of the CPU as shown in FIG. Can be set.
  • the clock stages “5”, “4”, “3”, “4”, And “3” are set.
  • FIG. 8 there is a timing at which the clock stage is pulled up without a monotonous decrease from the start of the touch move to the end of the touch move. This is because immediately after the frame is switched, the processing load increases due to processing such as creation of a buffer image, and the clock stage is raised at this timing.
  • the clock level can be set high in a predetermined time immediately after the start of the touch move when the processing load is high.
  • the power consumption immediately after the start of the touch move can be suppressed by setting the clock stage according to the processing amount from the time T1 when the touch move is started.
  • the scroll process is not performed, it is assumed that the processing load will not increase so much, and the possibility of bothering the user due to “flickering” of the scroll is low.
  • the above configuration is a configuration in which B) the clock stage is increased for a predetermined time from the start of the touch move, and the clock stage is subsequently raised or lowered according to the processing load.
  • FIG. 5 is a flowchart illustrating an example of a process flow of the degeneration operation in the mobile terminal 1.
  • the operation determination unit 101 first detects a touch event (S201). Then, the operation determination unit 101 determines whether the touch event is a touch-up event (S202), the screen determination unit 102 determines whether the display screen state is scrollable (S203), and the display. It is determined whether the screen state is being scrolled (S204).
  • the degeneration operation setting unit 104 may be set to operate in the “degenerate state”.
  • the touch event is a touch-up event (YES in S202)
  • the display screen can be scrolled (YES in S203), and the display screen is being scrolled (YES in S204), the following Process.
  • the inhibition instruction unit 103 instructs the degeneration operation setting unit 104 to inhibit the degeneration operation at the clock stage. Thereby, the degeneracy operation is suppressed and the control unit 10 starts the operation in the normal state (S205).
  • scroll processing unit 105 performs scroll deceleration processing (S206).
  • This scroll deceleration process is, for example, an inertia scroll process performed according to a user's flick operation.
  • the scroll movement distance may be reduced in a quadratic curve as time passes.
  • S207 to S209 are the same as S108 to S110 shown in FIG.
  • FIG. 9 is a flowchart illustrating an example of a process flow of the degeneration operation in the mobile terminal 1.
  • the operation determination unit 101 detects a touch event (S301).
  • the operation determination unit 101 determines whether or not the touch event is a touch move event (S302). Further, the screen determination unit 102 determines whether the display screen state is scrollable (S303) and whether the display screen state is being scrolled (S304). Further, the movement determination unit 108 determines whether or not the contact operation position has moved a predetermined distance within a predetermined time (S305). If the state of the display screen is not scrollable, the operation may be performed in the “degenerate state”.
  • Steps S306 to S310 are the same as steps S205 to S209 shown in FIG.
  • the contact operation position moves a predetermined distance within a predetermined time, it is expected that the user performs a flick operation.
  • the predetermined time and the predetermined distance can be determined according to the screen size of the display unit 35B. That is, when the contact operation position moves for a predetermined time and the contact operation position reaches the end of the display unit 35B, the user is expected to perform a flick operation. In this way, the required time and moving distance such that the contact operation position is predicted to reach the end of the display unit 35B can be set as the predetermined distance.
  • the predetermined distance can be, for example, 1/3 of the vertical or horizontal width of the screen.
  • the predetermined time can be set to 100 milliseconds, for example.
  • control unit 10 operates in a normal state, so that the clock stage and the like can be increased in advance.
  • FIG. 10 is a flowchart illustrating another example of the process flow of the degeneration operation in the mobile terminal 1.
  • the operation determination unit 101 first detects a touch event (S401).
  • the operation determination unit 101 determines whether or not the touch event is a touch move event (S402).
  • the screen determination unit 102 determines whether the display screen state is scrollable (S403) and whether the display screen state is being scrolled (S404).
  • the movement determination unit 108 determines whether or not the contact operation position has moved a predetermined distance within a predetermined time from the touchdown (S405), and whether or not the current contact operation position is the screen edge (S406). To do. If the state of the display screen is not scrollable, the operation may be performed in the “degenerate state”.
  • Steps S407 to S411 are the same as steps S205 to S209 shown in FIG.
  • the degeneration operation setting unit 104 (indicated by a dotted line in FIG. 1) provided in the control unit 10 is realized as an OS function, and the other units are realized as application functions. Also good.
  • the OS function includes a degeneration operation setting unit 104.
  • the OS function can also be expressed as a function that controls state transition between the “normal state” and the “degenerate state”.
  • the application functions include an operation determination unit 101, a screen determination unit 102, a suppression instruction unit 103, a scroll processing unit 105, an elapsed time determination unit 106, a release instruction unit 107, and a movement determination unit 108.
  • the application function When the condition for inhibiting the degeneration operation at the start of the scroll process is satisfied (YES in S104), the application function (suppression instruction unit 103) requests the OS function (degeneration operation setting unit 104) to inhibit the degeneration operation. To do.
  • the OS function side receives the request for suppressing the degeneration operation, and suppresses the degeneration operation (S105).
  • S106 to S108 are executed in the application function.
  • the application function release instruction unit 197) releases the degeneration operation suppression from the OS function (degeneration operation setting unit 104). Request.
  • the OS function side receives the request for canceling the degeneration operation suppression, and cancels the degeneration operation suppression (S109). Thereafter, on the OS function side, while setting the clock stage according to the processing amount, the application function side executes scroll processing. Thereafter, when the scroll process is completed, the process ends (S110).
  • the OS function side often detects whether or not the display screen can be scrolled when the occurrence of the touch event even if the presence or absence of the touch event is detected. Furthermore, what kind of display screen is displayed is often managed on the application function side.
  • the application function detects the occurrence of scroll processing with a large amount of processing, and requests the OS function to suppress the degeneration operation before executing the scroll processing.
  • the OS function suppresses the degeneration operation, so that sufficient CPU performance can be obtained when the application function executes the scroll process.
  • the above configuration can notify the OS function in advance of the suppression of the degeneration operation from the application function.
  • the OS function is earlier in the clock stage than the configuration that executes the degeneration function corresponding to the process. Can be raised.
  • the application function can raise the clock stage prior to performing the scroll process, so that the scroll process can be smoothly started up.
  • the application function side may request the OS function side to perform a degeneration operation.
  • each block of the control unit 10 of the portable terminal 1 described above may be realized in hardware by a logic circuit formed on an integrated circuit (IC chip), or a CPU (Central Processing Unit) is used. It may be realized by software.
  • IC chip integrated circuit
  • CPU Central Processing Unit
  • the mobile terminal 1 includes a CPU that executes instructions of a program that realizes each function, a ROM (Read Only Memory) that stores the program, and a RAM (Random Access that expands the program). Memory), a storage device (recording medium) such as a memory for storing the program and various data, and the like.
  • An object of the present invention is a recording medium in which a program code (execution format program, intermediate code program, source program) of a control program of the portable terminal 1 which is software for realizing the functions described above is recorded so as to be readable by a computer. Can also be achieved by reading the program code recorded on the recording medium and executing it by the computer (or CPU or MPU).
  • Examples of the recording medium include tapes such as magnetic tapes and cassette tapes, magnetic disks such as floppy (registered trademark) disks / hard disks, CD-ROMs (Compact Disc-Read-Only Memory) / MO discs (Magneto-Optical discs).
  • tapes such as magnetic tapes and cassette tapes
  • magnetic disks such as floppy (registered trademark) disks / hard disks
  • CD-ROMs Compact Disc-Read-Only Memory
  • MO discs Magnetic-Optical discs
  • IC cards including memory cards
  • Cards such as optical cards
  • the portable terminal 1 may be configured to be connectable to a communication network, and the program code may be supplied via the communication network.
  • the communication network is not particularly limited as long as it can transmit the program code.
  • the Internet intranet, extranet, LAN (Local Area Network), ISDN (Integrated Services Digital Network), VAN (Value-Added Network), CATV (Community Area Antenna / Cable Television) communication network, Virtual Private Network (Virtual Private Network) Network), telephone line network, mobile communication network, satellite communication network, and the like.
  • the transmission medium constituting the communication network may be any medium that can transmit the program code, and is not limited to a specific configuration or type.
  • the present invention can also be realized in the form of a computer data signal embedded in a carrier wave in which the program code is embodied by electronic transmission.
  • the screen display device is a screen display device capable of scroll-displaying a display image larger than the display area of the display unit, and determining whether or not the screen displayed on the display unit is scrollable.
  • the second And state control means for executing processing in the state.
  • the screen display device control method is a screen display device control method capable of scroll-displaying a display image larger than the display area of the display unit, and whether or not the screen displayed on the display unit is scrollable.
  • a screen determination step for determining whether or not, an operation reception step for receiving an operation input for changing the scroll state of the screen from the user, and a screen that can be scrolled when the operation input is received.
  • the screen that can be scrolled is displayed while the transition from the first state in which the process is executed to the second state in which the process is executed with the performance according to the processing amount is suppressed for a predetermined time. If not, the method includes a state control step for executing processing in the second state.
  • Scroll display is a display method in which a display image that is larger than the display area of the display unit is partially displayed on the display unit while moving up, down, left, and right.
  • the display image is image data generated for display on the screen of the display unit.
  • the display image is, for example, a vertically long web page that can be browsed by a web browser, a list in which items are arranged in a vertical or horizontal direction, and a map that can be scrolled in any direction.
  • the scroll display includes the following processing.
  • the processing amount is changed from the first state in which processing is performed with a predetermined performance.
  • the transition to the second state in which the above process is executed with the performance corresponding to can be suppressed for a predetermined time.
  • “performing the above processing with the performance according to the processing amount” means, for example, performing the processing by causing the CPU or the like to be in a so-called “degenerate state” according to the processing amount.
  • “Degenerate state” means, for example, by stopping some functions included in a CPU or changing the frequency (clock stage) at which the CPU operates, the number of operating cores, the voltage, etc.
  • a state where performance is suppressed For example, when the amount of processing is large, a high clock level can be set in order to improve the processing performance. While the CPU is performing a large amount of processing, a high clock phase may be maintained. Also, for example, when the amount of processing is small, a low clock level can be set to reduce power consumption.
  • the first state refers to a “normal state” that is not a degenerate state.
  • Normal performance refers to the performance of a CPU that is exhibited in a normal state.
  • the clock stage is set at a predetermined stage because it is not the “degenerate state”.
  • the operation input is preferably an operation input for instructing to start scrolling the screen.
  • the pre-image generating means for generating the screen after scrolling in advance when the screen is scrolled, the pre-image generating means for generating the screen after scrolling in advance, and the predetermined time is determined based on the time taken to generate the screen after scrolling. It is preferable that
  • processing to generate the screen after scrolling occurs.
  • Such processing is also called buffer processing.
  • a high load is applied to execute such buffer processing.
  • the time for suppressing the degeneration operation is determined based on the time required for buffer processing. For this reason, it is possible to improve the processing performance of the apparatus during a period during which processing is performed with a high load.
  • the screen display device preferably includes a touch panel configured integrally with the display unit, and the operation receiving means receives an operation input on the touch panel.
  • the operation input is an operation input for instructing to start inertial scroll of the screen in a predetermined direction, and the scroll speed of the inertial scroll is reduced according to the operation input. It is preferred that the process is performed.
  • the inertial scroll of the screen in a predetermined direction is a scroll method in which the scroll state is maintained by the scroll operation input so far.
  • the scroll state is maintained and the scroll speed is reduced by so-called flick input or the like.
  • the scroll speed can be reduced in the inertial scroll in a state in which the degeneration operation is suppressed and the processing performance of the apparatus is improved in response to the operation input. Therefore, the inertial scroll process can be executed smoothly.
  • the operation input is an operation input that instructs to scroll the screen according to the position of the operation input on the touch panel, and the position of the operation input on the touch panel is within a predetermined time. It is preferable that a movement determination unit for determining whether or not the vehicle has moved a predetermined distance is provided, and the state control unit further performs the suppression according to a determination result of the movement determination unit.
  • the processing performance of the apparatus can be improved in advance. Therefore, the inertial scroll process can be executed smoothly.
  • the movement determination unit determines whether or not the position of the operation input is at an end of a display area of the display unit.
  • the screen display device may be realized by a computer.
  • a program for realizing the screen display device by the computer by operating the computer as each unit of the screen display device and a computer-readable recording medium recording the program also fall within the scope of the present invention.
  • the program controls the screen display device that controls state transition between a first state in which processing is performed with a predetermined performance and a second state in which processing is performed with performance according to the processing amount. It may be realized as an application function that makes a request to the system under the following conditions (1) and (2). (1) When a scrollable screen is displayed when an operation input is received, a request to operate in the first state is made. (2) When a scrollable screen is not displayed when an operation input is received, a request to operate in the second state is made.
  • the present invention can be applied to smartphones, tablet terminals, notebook personal computers, other screen display devices, and the like.
  • Mobile terminal (screen display device) 10 Control Unit 101 Operation Determination Unit (Operation Accepting Unit) 102 Screen determination unit (screen determination means) 103 Suppression instruction part (state control means) 104 Degeneration operation setting unit (state control means) 105 Scroll processing unit (pre-image generation means) 106 Elapsed time determination unit (state control means) 107 Release instruction section (state control means) 108 Movement determination unit (movement determination means) 35 Touch Panel Display Unit 35A Operation Unit 35B Display Unit 50 Storage Unit 51 Buffer Memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Power Sources (AREA)
  • Telephone Function (AREA)

Abstract

 スクロール表示可能な携帯電話機(1)において、スクロールを指示する操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の時間、縮退動作を抑止する一方で、スクロール可能な画面が表示されていない場合、縮退状態で処理を実行させる縮退動作設定部(104)を備える。

Description

画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体
 本発明はスクロール表示可能な画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体に関する。
 近年、情報端末に搭載されるCPU(Central Processing Unit)が、高性能化、マルチコア化されるのに伴って、CPU動作時の消費電力及び発熱量が増加傾向にある。そこで、消費電力及び発熱量を抑えるため、様々なパワーマネジメントの仕組みが提案されている。
 例えば、パワーマネジメント機能を組み込んだオペレーティングシステム(Operating Sytem;以下、OSと略称する)が提案されている。このようなOSでは、CPUの仕事量や給電状態などの管理項目から動作状態を判別し、CPUの周波数や電圧を変更する(Dynamic frequency scaling, Dynamic voltage scaling)処理や、パワーゲーティング技術を用いて動作コア数を減らすなどの処理を適宜行う(縮退動作させる)を実装している。
 しかしながら、このような縮退動作を行うと、消費電力及び発熱量が削減できる一方で、本来CPUが有している処理能力が十分に発揮できない状態となる。
 このため、ユーザの操作に応じた処理が必要となるタイミングで、縮退動作が行われていると、ユーザの操作に対する応答性が悪くなる場合がある。その結果、ユーザに対して「もたつく」、「反応が悪い」といった操作感を与えてしまうことがあった。
 例えば、タッチ操作可能なディスプレイとグラフィカルユーザーインターフェース(Graphical User Interface;以下、GUIと略称する)を備える情報端末でスクロール表示を行う場合について説明すると次のとおりである。
 電話帳などの一覧表示や、アプリケーション一覧画面、地図などの表示を行った場合、一画面内にすべての情報を表示することができないためスクロール表示することが一般的である。すなわち、画面の一部を押下しそのまま指をずらすタッチ操作を契機として画面内に表示されている内容をスライドさせる。
 このように、タッチ操作に応じてスクロール処理を行うようなアプリケーションの場合、タッチ操作に対する画面スクロールの追従性・応答性が悪くなることがある。
 具体的に説明すると次のとおりである。まず、スクロール処理では、画面に表示する画像を高速に生成、表示する必要があるため、CPUの処理量が大きくなる。特にスクロール処理の開始直後が最も負荷が高くなる。
 これに対して、上述のCPUの縮退動作を行うと、消費電力及び発熱量を抑えることができる一方で、CPUの処理能力を低下させる結果となる。
 よって、スクロール処理の際に縮退動作を行うと、CPUの処理能力が足りなくなる場合がある。その結果、タッチ操作を行ってスクロールするとき、画面表示が指についてこない現象や、スクロール後に手を離すタッチ操作(フリック)の後、カタツキを感じることがあるといった問題があった。
 このような、操作閲覧方法における追従性・応答性の向上のため、従来、次のようなことが提案されている。まず、特許文献1には、ユーザイベント起因の処理に対して、高クロック段階を設定することで応答性向上および処理時間の短縮化を図ることが記載されている。
 また、特許文献2には、実行される処理の内容に応じて、CPUの動作周波数を制御する装置が開示されている。当該装置は、ユーザからキー入力を受け付けた場合に、CPUに所定のクロック段階を設定する。
国際公開WO 2010/097885(A1)号明細書(2010年9月2日公開) 日本国公開特許公報「特開2010-39791号公報(2010年2月18日公開)」
 上記特許文献1に記載された装置は、ユーザイベント起因の処理が発生すれば、スクロール処理を行わないような場合にも、高いクロック段階を設定する。よって、処理負荷があまり高くないような場合でも、必要以上に高いクロック段階が設定されかねなかった。
 また、上記の特許文献2に記載された装置は、CPUに計算負荷が加わらない場合であっても、ユーザからキー入力を受け付けるたびにCPUに所定のクロック段階を固定的に設定する。このため、スクロール開始時の高負荷状態のときだけ、処理性能が必要であるにもかかわらず、一定期間高クロック段階に設定されていた。よって、必要以上の処理性能が維持されてしまい、効果的に消費電力を抑制できなかった。
 本発明は上記問題に鑑みてなされたものであり、その目的は、スクロール可能な画面に対するスクロール処理において、効果的に縮退動作を行って円滑なスクロール処理を行うことができる画面表示装置等を実現することにある。
 上記の課題を解決するために、本発明に係る画面表示装置は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定手段と、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付手段と、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御手段と、を備えることを特徴とする。
 上記の課題を解決するために、本発明に係る画面表示装置の制御方法は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置の制御方法において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御ステップと、を含むことを特徴とする。
 本発明に係る画面表示装置は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定手段と、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付手段と、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御手段と、を備える構成である。
 本発明に係る画面表示装置の制御方法は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置の制御方法において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御ステップと、を含む方法である。
 本発明に係るプログラムは、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置を動作させるためのプログラムであって、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態と、処理量に応じた性能で上記処理を実行する第2の状態との間の状態遷移を制御する画面表示装置の制御システムに対して、上記第1の状態から、上記第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行することを要求する状態制御要求ステップと、を含む処理をコンピュータに実行させるためのプログラムである。
 よって、スクロール可能な画面に対するスクロール処理において、効果的に縮退動作を行って、円滑なスクロール処理を行うことができ、これによりユーザの操作感を損なうことを防ぐことができる。
本発明の一実施形態に係る携帯端末機が備える制御部の機能的構成の一例について示した機能ブロック図である。 上記携帯端末機の概要を示す図である。(a)は、携帯端末機の外観について例示している。(b)は、携帯端末機のタッチパネル表示部と、スクロール可能な表示コンテンツとの対応関係を示している。 上記携帯端末機の構成例を示すブロック図である。 携帯端末機における縮退動作の処理の流れの一例について示したフローチャートである。 携帯端末機における縮退動作の処理の流れの一例について示したフローチャートである。 スクロール処理時に発生する処理量の特性について示す図である。 タッチムーブ開始から終了まで一律にクロック段階を高めた場合のクロック段階と時間との対応関係を例示するグラフである。 タッチムーブ開始から所定時間が経過するまでの間、クロック段階を高め、以後処理負荷に応じてクロック段階を上下させた場合のクロック段階と時間との対応関係を例示するグラフである。 携帯端末機における縮退動作の処理の流れの一例について示したフローチャートである。 携帯端末機1における縮退動作の処理の流れの他の一例について示したフローチャートである。
 以下、本発明の実施の形態について、図1~10を用いて説明すると次のとおりである。
 (携帯端末機の概要)
 まず、図2を用いて、本発明の一実施形態である携帯端末機(画面表示装置)1の概要について示すと次のとおりである。図2の(a)は、携帯端末機1の外観について例示している。また、図2の(b)は、携帯端末機1のタッチパネル表示部35と、スクロール可能な表示コンテンツとの対応関係を示す図である。
 図2の(a)に示すように、携帯端末機1には、ユーザーインターフェースとして、タッチパネル表示部35が設けられている。また、図2の(a)に示すタッチパネル表示部35では、表示部35B(図3;後述)の表示可能領域よりも大きな表示コンテンツP10の一部P1(以下、部分コンテンツP1と称する)が表示されている。
 また、図2の(a)に示すように、部分コンテンツP1には、表示コンテンツP10における部分コンテンツP1の相対的な位置を示す標識P2が標識表示領域P3において表示される。
 図2の(b)に表示コンテンツP10の全体イメージを示している。図2の(b)に示す表示コンテンツP10は、上下スクロール可能なコンテンツである。表示コンテンツP10は、例えば、ウェブブラウザで閲覧可能な縦長のWebページや、項目を一覧として縦方向に並べたリストである。このリストには、携帯端末機1の各種設定を行うための設定メニューリストが含まれる。
 しかしながら、これに限られず、表示コンテンツP10は、例えば、左右の何れかにスクロール可能なリストや、上下左右任意の方向にスクロール可能な地図などであってもよい。すなわち、表示コンテンツP10は、表示部35Bに対して縦長であっても、横長であってもよい。また、表示コンテンツP10は、表示部35Bの表示可能領域よりも縦幅、横幅ともに長くてもよい。
 また、図2の(b)では、例示的に、タッチパネル表示部35の表示部35Bの縦幅をLとし、表示コンテンツP10の全体の縦幅を10Lとしている。
 このような表示コンテンツP10は、スクロール表示が可能なグラフィカルユーザインターフェース(GUI)を有するアプリケーションによりタッチパネル表示部35の表示部Bに表示される。例えば、このアプリケーションには、設定メニューリストを表示して携帯端末機1の各種設定を行うための設定アプリケーションが含まれる。
 ユーザは、携帯端末機1においてアプリケーションが動作しているときに、タッチパネル表示部35の操作部35A(図3;後述)に対するタッチ操作を行って、表示部35Bに表示する表示コンテンツP10の箇所(部分コンテンツP1)を上下にスクロールさせることができる。
 (携帯端末機の構成)
 次に、図3を用いて、本発明の一実施形態である携帯端末機1の構成について説明すると次のとおりである。図3は、携帯端末機1の構成例を示すブロック図である。携帯端末機1は、例示的には、多機能携帯電話機、いわゆるスマートフォンである。
 図3に示すように、携帯端末機1は、制御部10、撮像部31、音声入出力部32、電源部33、通信部34、タッチパネル表示部35、ボタン部36、および記憶部50を備える構成である。
 制御部10は、携帯端末機1の各種機能を統括的に制御するものである。制御部10の詳細については、後述する。
 撮像部31は、被写体を撮影して画像を取得するためのカメラ機能を提供するものである。撮像部31は、例えば、光学系および撮像素子(CCD(Charge Coupled Devices)、CMOS(Complementary Metal-Oxide-Semiconductor)等)により実現することができる。
 音声入出力部32は、音声の入出力を行うものである。音声入出力部32は、例えば、音波を電気信号に変換して制御部10に入力するマイク、および、制御部10からの電気信号を音波に変換して出力するスピーカにより実現することができる。なお、音声入出力部32には、外部のヘッドホン、ヘッドセットと接続するための端子が設けられていてもよい。
 電源部33は、携帯端末機1の各部が動作するための電力を供給するためのものである。電源部33は、例えば、二次電池により実現することができる。また、携帯端末機1に対する電源供給は、USB(Universal Serial Bus)や、ACアダプタを外部の電源と接続して行うこともできる。
 通信部34は、携帯端末機1の外部の装置と通信を行うためのものである。通信部34は、例示的には、携帯電話網や、近距離無線を介して外部の装置と通信を行う。通信部34は、近距離無線通信方式として、例えば、無線LAN(IEEE802.11)、Bluetooth(登録商標)等を採用することができる。
 タッチパネル表示部35は、接触操作を受け付ける操作部35Aおよび画面表示を行う表示部35Bを備える。
 操作部35Aは、表示部35Bの表示画面の接触操作(以下、タッチイベントと称する)を検出して、タッチイベントに関する操作データを、制御部10に供給する。なお、操作データには、接触操作位置や、接触操作の向き、加速度および強さなどが含まれていてもよい。また、操作部35Aが、接触操作位置を検出する手法としては、例えば、マトリクス・スイッチ、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式、および、対象物の画像を検出する方式(光センサ方式)などが挙げられる。しかしながら、これに限られず、接触操作位置を検出する手法には、種々の手法を適宜適用することができる。なお、上記した接触操作位置を検出する手法には、「接触」だけでなく「近接」を検出する手法が含まれる。ただし、以下では、説明の便宜上、「接触」および「近接」の区別をすることなく、単に「接触」とのみ記載する。
 表示部35Bは、画像データを表示するための表示画面を有しており、制御部10から画像データを受信し、受信した画像データに基づいてその表示画面に画像を表示するものである。表示部35Bは、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、EL(Electroluminescence)ディスプレイなどにより実現することができる。
 ボタン部36は、携帯端末機1の表面に設けられたハードウェア的なボタンである。ボタン部36の具体例としては、撮像部31のカメラを動作させるシャッターボタン、表示部35Bにおける画面をホーム画面に移動させるためのホームボタン、音声入出力部32における音声出力ボリュームを変更するための音量ボタン、および、電源をオン・オフするための電源ボタンなどが挙げられる。ボタン部36は、ユーザの操作に応じた操作データを作成して制御部10に送信する。
 タイマー37は、時間を計測するためのものである。タイマー部37は、例えば、時刻計測用のリアルタイムクロック(RTC)IC(Integrated Circuit)により実現することができる。
 記憶部50は、各種データ、表示コンテンツおよびプログラムを記憶させておくものである。記憶部30は、バッファメモリ51および記憶媒体読取部52を備える。バッファメモリ51には、バッファ画像(後述)が記憶される。記憶媒体読取部52は、外部記憶媒体2に記憶されている各種データ、表示コンテンツ、およびプログラムを読み取るものである。
 なお、記憶部50に、撮像部31により撮像された撮像画像が表示コンテンツとして記憶されてもよい。
 (制御部の詳細)
 図1を用いて、制御部10の詳細について説明する。図1は、図3に示した制御部10の機能的構成の一例について示した機能ブロック図である。なお、図1では、図3に示した部材のうち、以下の説明において参照する部材のみを示している。
 図1に示すように、制御部10は、操作判定部(操作受付手段)101、画面判定部(画面判定手段)102、抑止指示部(状態制御手段)103、縮退動作設定部(状態制御手段)104、スクロール処理部(事前画像生成手段)105、経過時間判定部(状態制御手段)106、解除指示部(状態制御手段)107、および移動判定部(移動判定手段)108を備える。
 また、制御部10は、例えばRAM(Random Access Memory)やフラッシュメモリなどの記憶素子に記憶されたプログラムをCPU(Central Processing Unit)が実行することによって実現される。また、制御部10は、通常の性能(所定の性能)で処理を実行する通常状態(第1の状態)および処理量に応じた性能で処理を実行する縮退状態(第2の状態)のいずれか一方の動作状態で動作することができる。
 また、制御部10を実現するためのCPUは、所定の段階のクロック周波数で動作する。以下、クロック周波数の段階のことをクロック段階と称する。
 ここで、「縮退状態」とは、具体的には、CPUに対して、処理量に応じたクロック段階設定を行う状態のことをいう。例えば、処理量が多いときには、処理性能を高めるため、高いクロック段階を設定することができる。また、例えば、処理量が少ないときには、消費電力を抑えるため、低いクロック段階を設定することができる。例えば、制御部10を実現するためのCPUに含まれる一部の機能を停止させたり、該CPUが動作する周波数(クロック段階)や動作コア数、電圧等を変更したりすることによって、消費電力と性能とを抑制している状態をいう。また、「通常の状態」とは、縮退状態でない状態をいい、「通常の性能」とは、通常の状態で発揮される制御部10の性能をいう。通常の状態では、CPUに対して所定のクロック段階を設定する。例えば、「通常の状態」で動作する場合、CPUに対して、設定可能な最大のクロック段階を設定することができる。
 なお、CPUとしては、縮退動作が可能なものを任意に採用することができる。例えば、CPUは、縮退動作が可能であれば、マルチコアプロセッサであっても、シングルコアプロセッサであってもかまわない。
 操作判定部101は、操作部35Aにおけるタッチイベントを検出し、検出したタッチイベントがスクロールを指示するものであるか否かを判定する。具体的には、操作判定部101は、操作部35Aから操作データが供給されることによりタッチイベントを検出する。タッチイベントには、タップイベント、タッチダウンイベント、タッチムーブイベント、タッチアップイベントが含まれる。
 タップイベントは、所定時間内に、操作部35Aにおいて接触操作があり、ほぼ接触操作位置が変わることなく接触操作が解除されたことを示すものである。
 タッチダウンイベントは、操作部35Aにおいて、接触操作があったことを示すものである。
 タッチムーブイベントは、操作部35Aにおいて接触操作があり、接触操作位置が所定の方向に遷移していることを示すものである。
 タッチアップイベントは、操作部35Aにおける接触操作が解除されたことを示すものである。なお、操作部35Aをはじくような操作、すなわち、所定の時間、タッチムーブイベントが維持されたのち、接触操作が解除される操作のことを、フリック操作とも称する。
 操作判定部101は、操作データに基づいて、タッチイベントがタッチムーブイベントであるか否かを判定する。操作判定部101は、例えば、上下スクロールが可能な画面において、上下方向のムーブイベントを、スクロールを指示するイベントとして検出する。また、操作判定部101は、操作データに基づいて、タッチイベントがタッチアップイベントであるか否かを判定する。
 画面判定部102は、表示部35Bに表示されている表示画面の状態を判定する。具体的には、画面判定部102は、表示部35Bの表示可能領域よりも大きな表示コンテンツが表示部35Bに表示されていることで、表示画面の状態がスクロール可能か否かを判定する。また、画面判定部102は、表示画面の状態が静止中(スクロール中でない)であるか否かを判定する。
 抑止指示部103は、画面判定部102の判定結果に応じて、縮退動作設定部104に、縮退動作を抑止するよう指示する。
 縮退動作設定部104は、抑止指示部103または縮退動作設定部104に応じて制御部10の動作状態を設定するものである。
 また、縮退動作設定部104は、抑止指示部103の指示に応じて動作状態を通常状態に設定する。すなわち、縮退動作設定部104は、制御部10が縮退状態で動作しているときは、抑止指示部103の指示に応じて縮退動作を抑止し、これにより動作状態を通常状態に遷移させる。
 縮退動作設定部104は、解除指示部107の指示に応じて制御部10の動作状態を縮退状態に設定する。すなわち、縮退動作設定部104は、縮退動作が抑止される、すなわち制御部10が通常状態で動作しているときに、解除指示部107の指示に応じて縮退動作の抑止を解除し、これにより動作状態を縮退状態に遷移させる。
 なお、以下では、説明を簡潔にするため、縮退動作設定部104では、クロック段階の縮退動作を行う構成とする。しかしながら、この構成はあくまで説明のための例示であって、縮退動作設定部104は、このような構成に限定されない。すなわち、縮退動作設定部104では、動作コア数の縮退動作等を実施する構成を採用することも可能である。
 スクロール処理部105は、スクロール表示のために必要な表示コンテンツの画像を作成するものである。スクロール処理部105は、表示部35Bに現在表示している画面の表示画像に加えて、スクロール後に表示される画面の表示画像を作成する。スクロール処理部105のこのような機能のことをバッファリング機能とも称する。以下、スクロール処理部105がスクロール前に予め作成しておくスクロール後画像のことをバッファ画像と称する。
 スクロール処理部105は、バッファ画像をバッファメモリ51に書き込み、スクロールに応じてバッファメモリ51からバッファ画像を読みだして表示画像を作成する。
 ここで、再び図2を参照しながら、スクロール処理部105が作成するバッファ画像について説明すると次のとおりである。スクロール処理部105は、例えば、図2の(b)に示す長さBLの分だけバッファ画像を作成しておいてもよい。図2の(b)では、例示的に、BL=Lとしている。すなわち、図2の(b)に示す例では、スクロール処理部105は、表示部35Bに現在表示している部分コンテンツP1の上下1画面分に相当する画像をバッファ画像として作成する。
 スクロール処理部105は、バッファ画像を、例えば、記憶部50に記憶されている表示コンテンツ、通信部34を介してネットワーク越しに取得可能な表示コンテンツ、および、記憶媒体読取部52を介して外部記憶媒体2から読みだされる表示コンテンツに基づいて作成する。
 また、スクロール処理部105は、タッチイベントに応じてスクロール速度を調整する。例えば、スクロール処理部105は、タッチ操作の加速度、接触操作位置の所定時間における移動距離等に応じて、スクロール速度を加減する。
 スクロール処理部105は、タッチムーブイベントに対して、接触操作位置に追従するようなスクロール処理を行う。また、スクロール処理部105は、フリック操作(タッチアップイベント)に応じて、所定の速度でスクロールを開始したのち、スクロール速度を徐々に減速する慣性スクロール処理を行う。
 経過時間判定部106は、縮退動作が抑止されたときから所定時間が経過しているか否かを判定する。具体的には、まず、経過時間判定部106は、タイマー37における時間計測に基づいて、縮退動作が抑止された時刻から、現在時刻までの経過時間を計測する。そして、経過時間判定部106は、計測した経過時間に基づいて、縮退動作が抑止されたときから所定時間が経過しているか否かを判定する。
 解除指示部107は、経過時間判定部106の判定結果に応じて、縮退動作設定部104に、縮退動作の抑止を解除するよう指示する。
 移動判定部108は、操作部35Aにおける接触操作の移動状態を判定する。具体的には、移動判定部108は、操作データに基づいて所定時間内に接触操作位置が所定の距離を移動したか否かを判定する。移動判定部108は、タイマー37における時間計測を参照して上記所定時間を取得することができる。移動判定部108は、現在の接触操作位置が画面端か否かを判定する。
 なお、制御部10の各部は、それぞれ、OSの機能、または、アプリケーションの機能として実現されていてもよい。
 以上に説明したとおり、携帯電話機1は、表示部35Bの表示領域より大きな表示画像を、スクロール表示可能な携帯電話機1において、表示部35Bにて表示している画面がスクロール可能か否かを判定する画面判定部102と、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作判定部101と、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、「通常の状態」から、「縮退状態」へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、縮退状態で処理を実行させる縮退動作設定部104と、を備える構成である。
 以下において、図4~図10を用いて、上記構成による具体的な処理の流れについて説明する。
 (処理の流れ)
  (1)タッチムーブイベント検出時の縮退動作の処理の流れ
 図4を用いて、タッチムーブイベント検出時の縮退動作の処理の流れについて説明する。図4は、携帯端末機1における縮退動作の処理の流れの一例について示したフローチャートである。
 図4に示すように、処理が開始されると、まず、操作判定部101が、タッチイベントを検出し(S101)、検出したタッチイベントがタッチムーブイベントであるか否かを判定する(S102)。
 タッチイベントがタッチムーブイベントでない場合(S102においてNO)、操作判定部101は、引き続きタッチイベントを待ち受ける(S101に戻る)。
 一方、タッチイベントがタッチムーブイベントである場合(S102においてYES)、画面判定部102が、表示画面の状態がスクロール可能か否かを判定する(S103)。ここで、画面判定部102は、表示部35Bに表示している部分コンテンツが、表示コンテンツの端部に相当する場合、スクロール可能でないと判定してもよい。例えば、上下スクロールが可能なリストにおいて、表示画面がリストの上端または下端に相当する場合、画面判定部102は、スクロール可能でないと判定してもよい。
 表示画面の状態がスクロール可能でない場合(S103においてNO)、処理は、開始時に戻る(S101に戻る)。このとき、縮退動作設定部104は、「縮退状態」で動作するよう設定してもよい。
 一方、表示画面の状態がスクロール可能である場合(S103においてYES)、画面判定部102は、表示画面が静止中であるか否かを判定する(S104)。
 表示画面がスクロールの最中であり、静止していない場合(S104においてNO)、引き続きスクロール処理を行う(S111)。スクロール処理が完了すれば(S110)、処理は終了する。
 一方、表示画面が静止している場合(S104においてYES)、以下の処理を行う。まず、抑止指示部103が、縮退動作設定部104に、クロック段階の縮退動作を抑止するよう指示する。これにより、縮退動作が抑止されて、制御部10は、通常状態で動作を開始する(S105)。なお、このとき所定の段階以上のクロック段階が設定されるか、最大のクロック段階が設定されることが好ましい。
 次に、スクロール処理部105が、スクロールの初期化処理を行う(S106)。初期化処理において、スクロール処理部105は、スクロール表示のために必要な表示コンテンツのバッファ画像を作成する。
 続いて、スクロール処理部105は、バッファメモリ51を参照しながら、表示画面のスクロール処理を開始する(S107)。
 ここで、経過時間判定部106が、縮退動作が抑止されたときから所定時間が経過しているか否かを判定する(S108)。所定時間が経過していない場合、そのままスクロール処理が続行される(S108においてNO)。この所定時間は、例えば、クロック変更処理の1動作周期に相当する時間である。より具体的には、この所定時間を20ミリ秒と設定することができる。なお、クロック変更処理は、アプリケーションからの要求をうけてOS層で行われる。
 一方、所定時間が経過している場合(S108においてYES)、解除指示部197が、縮退動作設定部104に、縮退動作の抑止を解除するよう指示する(S109)。
 そして、スクロール処理が完了すれば(S110)、処理は終了する。
 なお、S102では、タッチムーブイベントを検知していたが、これに限られず、フリック操作(タッチアップイベント)を検知するようにしてもよい。また、上記スクロール処理は、フリック操作に従った慣性スクロール処理であってもよい。
   [作用・効果]
 上記構成によれば、スクロール可能な画面が表示部35Bにおいて表示されているとき、スクロールを指示する操作を検出したことを契機に、所定の時間、縮退動作を抑止する。このためバッファ画像の作成を所定の時間内に完了させるために必要なCPU性能の確保を図ることができる。
 例えば、バッファ画像の作成処理において、スクロール処理部105は、表示コンテンツのうち、スクロール移動方向に相当する部分コンテンツを取得し、取得した部分コンテンツに基づいて表示画像を生成する。また、スクロール処理部105は、部分コンテンツを、通信部34を介してネットワーク越しに取得したり、あるいは記憶媒体読取部52を介して外部記憶媒体2から取得したりする。これらは、比較的高いCPU性能を必要とする処理である。
 よって、上記構成によれば、このような負荷の高い処理をスクロール処理部105が実行するときに、必要なCPU性能の確保を図ることができる。
 また、スクロール処理を開始したときにおける所定の時間、このようにCPU性能を高めることにより、スクロールの動きはじめの「もたつき」や、「カタツキ」を低減することができる。
 よって、スクロール可能な画面に対するスクロール処理において、効果的に縮退動作を行って、円滑なスクロール処理を行うことができ、これによりユーザの操作感を損なうことを防ぐことができる。
 図6~8を用いて、具体的に説明すると次のとおりである。まず、図6を用いて、スクロール処理時に発生する処理量の特性について説明する。図6は、時間T1にタッチムーブイベントが発生(図中には、“指移動開始”と表記している)し、時間T7にタッチムーブイベントが終了(図中には、“指移動終了”と表記している)したときの処理量と時間との対応関係を例示している。
 また、図6に示すグラフは、表示部35Bのフレームレートが60fps(フレーム/秒)である場合について示している。図中、時間軸は、1目盛約8ミリ秒(msec)であり、2目盛(例えばT1~T3の間)が1フレームに相当する。すなわち、2目盛で、約16ミリ秒(=1/60秒)となる。
 図6では、T1-T3区間が第1フレーム、T3-T5区間が第2フレームおよびT5-T7区間が第3フレームであるとする。
 ここで、例えば第1フレームにおいて、T2-T3区間よりもT1-T2区間のほうが、処理量が多くなっているのは、フレームの前半部分のほうが、バッファ画像の作成等により処理負荷が高くなるからである。つまり、図6は、T1-T2区間においてバッファ画像の作成が終了する場合について例示している。
 また、T1-T3区間のほうが、T3-T5区間およびT5-T7区間よりも処理量が多いのは、処理開始直後の区間ほうが、その後の区間のよりも処理量が多くなるためである。
 また、図6に示すグラフでは、1フレームの周期である約16ミリ秒ごとに処理量の山(ピーク)が現れる。このように、スクロール処理における処理量は、スクロール開始時に最も多くなり、その後1フレーム分の処理が完了すると低くなる。また、その後は、1フレームの周期で定期的に所定の処理量が発生する。
 次に、図7および図8を参照しながら、スクロール処理開始時に、A)タッチムーブ開始から終了まで一律にクロック段階を高めた場合と、B)タッチムーブ開始から所定時間クロック段階を高め、以後処理負荷に応じてクロック段階を上下させた場合とを対比する。
 まず、図7を用いて、A)タッチムーブ開始から終了まで一律にクロック段階を高めた場合について説明する。
 図7は、タッチムーブ開始から終了まで一律にクロック段階を高めた場合のクロック段階と時間との対応関係を例示するグラフである。なお、図中の時間軸は、1目盛約20ミリ秒(msec)であり、これはクロック変更処理の動作周期に対応している。
 図7では、タッチムーブ開始から終了まで一律にクロック段階「6」を設定した場合を示している。
 図7において、0-T1区間においては、縮退動作にて制御部50(CPU)は動作する。
 タッチムーブ開始(処理開始)時である時間T1において、クロック段階が「6」まで引き上げられて、タッチムーブ終了(処理開始)時である時間T7において、クロック段階「6」の設定が解除されている。
 続いて、図8を用いて、B)タッチムーブ開始から所定時間が経過するまでの間、クロック段階を高め、以後処理負荷に応じてクロック段階を上下させた場合について説明する。
 図8は、タッチムーブ開始から所定時間が経過するまでの間、クロック段階を高め、以後処理負荷に応じてクロック段階を上下させた場合のクロック段階と時間との対応関係を例示するグラフである。なお、図中の時間軸は、1目盛約20ミリ秒(msec)である点は、図7と同様である。また、図8に示す例では、表示画面の状態がスクロール可能であるとする。さらに言えば、表示画面の状態がスクロール可能でないときは、タッチムーブ開始時である時間T1から、処理量に応じたクロック段階設定を行ってもよい。
 図8において、0-T1区間においては、縮退動作にて制御部50(CPU)は動作する。
 図8では、タッチムーブ開始(処理開始)から所定時間が経過するまでの間、クロック段階を「6」に設定する。すなわち、タッチムーブ開始(処理開始)である時間T1から所定時間が経過する時間T2までの間、縮退動作を抑止する。
 このときクロック段階は、既に説明した通り、最大のクロック段階を設定しておくことが好ましいが、これに限られず、処理量に応じたクロック段階設定で設定される以上の所定のクロック段階を設定する構成とすることも可能である。
 図8に示すように、所定時間は、20ミリ秒であり、CPUの動作周期と一致している。この所定時間は、タッチムーブ開始直後の処理にかかる時間を予め測定しておき、測定した時間に基づいて決定してもよい。また、その測定の結果、クロック変更処理の1動作周期以内に上記タッチムーブ開始直後の処理が完了することが判明すれば、図8に示すように当該所定時間をCPUの1動作周期と同一に設定することができる。
 時間T2以後は、縮退動作の抑止を解除して、処理量に応じたクロック段階設定を行う。
 図8に示すように、区間T2-T3、T3-T4、T4-T5、T5-T6、およびT6-T7において、それぞれ、クロック段階「5」、「4」、「3」、「4」、および「3」が設定される。図8に示すように、タッチムーブ開始時からタッチムーブ終了時までの間で、クロック段階が単調に低下してゆかず、クロック段階が引き上げられるタイミングがある。これは、フレームが切り替わった直後は、バッファ画像の作成等の処理により処理負荷が高くなり、このタイミングでクロック段階が引き上げられるためである。
 クロック段階を示す山が高いほうが、処理性能は高いが、消費電力が高くなる。時間T2以降は、図7に示すグラフほうが、図8に示すグラフよりも山が高いため、図7に示す場合のほうが、図8に示す場合よりも消費電力の総計は高くなる。また、図8に示す場合では、処理の負荷が高くなるタッチムーブ開始直後の所定時間において、クロック段階を高く設定できる。
 よって、図8に示す場合は、図7に示す場合と比較すれば、低消費電力化を図ることができる。
 一方で、表示画面の状態がスクロール可能でないときは、タッチムーブ開始時である時間T1から、処理量に応じたクロック段階設定を行えば、タッチムーブ開始直後の消費電力を抑えることができる。すなわち、スクロール処理を行わないのであれば、さほど処理負荷も高まらないことが想定され、またスクロールの「モタツキ」等によりユーザを煩わす可能性も低い。
 上記構成は、B)タッチムーブ開始から所定時間クロック段階を高め、以後処理負荷に応じてクロック段階を上下させる構成である。
 よって、上記構成によれば、タッチムーブ開始直後のスクロール処理の「モタツキ」を低減しつつ、低消費電力化を図ることができるとともに、スクロール処理を行わないときの消費電力を低減することができる。
  (2)タッチアップイベント検出時の縮退動作の処理の流れ
 次に、図5を用いて、タッチアップイベント検出時の縮退動作の処理の流れについて説明する。図5は、携帯端末機1における縮退動作の処理の流れの一例について示したフローチャートである。
 図5に示すように、処理が開始されると、まず、操作判定部101が、タッチイベントを検出する(S201)。そして、操作判定部101が、当該タッチイベントがタッチアップイベントか否か(S202)を判定し、画面判定部102が、表示画面の状態がスクロール可能であるか否か(S203)、および、表示画面の状態がスクロール中であるか否か(S204)を判定する。
 ここで、タッチイベントが、タッチアップイベントでない(S202においてNO)、表示画面がスクロール可能でない(S203においてNO)、および、表示画面がスクロール中でない(S204においてNO)のいずれかの場合、さらにタッチイベントを待ち受ける(S201に戻る)。このとき、縮退動作設定部104は、「縮退状態」で動作するよう設定してもよい。
 これに対して、タッチイベントが、タッチアップイベントあり(S202においてYES)、表示画面がスクロール可能であり(S203においてYES)、かつ、表示画面がスクロール中である(S204においてYES)場合、以下の処理を行う。
 まず、抑止指示部103が、縮退動作設定部104に、クロック段階の縮退動作を抑止するよう指示する。これにより、縮退動作が抑止されて、制御部10は、通常状態で動作を開始する(S205)。
 次に、スクロール処理部105が、スクロールの減速処理を行う(S206)。このスクロール減速処理は、例えば、ユーザのフリック操作に応じて行う慣性スクロール処理である。このスクロールの減速処理において、スクロール移動距離は、時間経過に応じて2次曲線的に小さくなってもよい。
 以下、S207~S209は、それぞれ図4に示すS108~S110と同様であるので、ここではその説明を省略する。
   [作用・効果]
 上記構成によれば、スクロール減速処理という比較的負荷の高い処理を開始する際に、高いクロック段階を設定することができる。
 このため、スクロール減速処理を開始するときの「モタツキ」等を軽減することができる。
  (3)タッチアップ予想時の縮退動作の処理の流れ#1
 次に、図9を用いて、タッチアップ予想を行うときの縮退動作の処理の流れについて説明する。図9は、携帯端末機1における縮退動作の処理の流れの一例について示したフローチャートである。
 図9に示すように、処理が開始されると、まず、操作判定部101が、タッチイベントを検出する(S301)。
 そして、S301~S305において、操作判定部101、画面判定部102、および移動判定部108が、以下の判定を行う。すなわち、操作判定部101が、当該タッチイベントがタッチムーブイベントか否か(S302)を判定する。また、画面判定部102が、表示画面の状態がスクロール可能であるか否か(S303)、および、表示画面の状態がスクロール中であるか否か(S304)を判定する。また、移動判定部108が、所定時間内に接触操作位置が所定の距離を移動したか否かを判定する(S305)。ここで表示画面の状態がスクロール可能でなければ、「縮退状態」で動作してもよい。
 S301~S305において、すべて「YES」であれば、以下、S306~S310において、クロック段階の縮退動作の抑止を行うとともに、スクロール減速処理を行う。S306~S310は、それぞれ図5に示すS205~S209と同様であるので、ここではその説明を省略する。
 所定時間内に接触操作位置が所定の距離を移動した場合、ユーザがフリック操作を行うことが予想される。
 上記所定時間および所定の距離は、表示部35Bの画面サイズに応じて定めることができる。すなわち、所定時間、接触操作位置が移動することにより、接触操作位置が表示部35Bの端部に達した場合、ユーザがフリック操作を行うことが予想される。このように、接触操作位置が表示部35Bの端部に達することが予測されるような所要時間および移動距離を、上記所定の距離とすることができる。
 上記所定の距離は、例えば、画面の縦幅または横幅の1/3とすることができる。また、上記所定時間は、例えば、100ミリ秒とすることができる。
   [作用・効果]
 以上の構成によれば、スクロール処理中において、ユーザがフリック操作を行うと予想されたタイミングを契機に、所定の時間、縮退動作を抑止する。
 このため、フリック操作に応じてスクロール処理を行う際に、通常状態で制御部10が動作しておくことにより、クロック段階等を予め高めておくことができる。
 その結果、フリック操作に応じたスクロール処理、すなわち、スクロール減速処理を開始するときのCPU性能を高めておくことができ、これによりスクロール減速処理開始時の「モタツキ」等の低減を図ることができる。
  (4)タッチアップ予想時の縮退動作の処理の流れ#2
 次に、図10を用いて、タッチアップ予想を行うときの縮退動作の処理の流れについて説明する。図10は、携帯端末機1における縮退動作の処理の流れの他の一例について示したフローチャートである。
 図10に示すように、処理が開始されると、まず、操作判定部101が、タッチイベントを検出する(S401)。
 そして、S401~S406において、操作判定部101、画面判定部102、および移動判定部108が、以下の判定を行う。すなわち、操作判定部101が、当該タッチイベントがタッチムーブイベントか否か(S402)を判定する。また、画面判定部102が、表示画面の状態がスクロール可能であるか否か(S403)、および、表示画面の状態がスクロール中であるか否か(S404)を判定する。また、移動判定部108が、タッチダウンから所定時間内に接触操作位置が所定の距離を移動したか否か(S405)、および、現在の接触操作位置が画面端か否か(S406)を判定する。ここで表示画面の状態がスクロール可能でなければ、「縮退状態」で動作してもよい。
 S401~S406において、すべて「YES」であれば、以下、S407~S411において、クロック段階の縮退動作の抑止を行うとともに、スクロール減速処理を行う。S407~S411は、それぞれ図5に示すS205~S209と同様であるので、ここではその説明を省略する。
   [作用・効果]
 上記構成によれば、上記(3)の方法に比べてさらに、現在の接触操作位置が画面端にあるか否かを判定する。このため、ユーザがフリック操作を行うか否かをより精度よく判定することができる。なお、現在の接触操作位置が画面端であるか否かの判定において、画面外周から10ピクセルの範囲を画面端としてもよい。
  (OS機能およびアプリケーション機能の構成例)
 以上の説明においては、制御部10の各部がOS機能およびアプリケーション機能のいずれにより実現されているかについては特に示さなかった。
 以下において、再び図1を参照しながら、OS機能およびアプリケーション機能の構成例について説明する。
 図1に示すように、制御部10が備える縮退動作設定部104(図1において点線にて枠囲みにて示している)をOS機能として実現し、それ以外の各部をアプリケーション機能として実現してもよい。
 以下、OS機能には、縮退動作設定部104が含まれる。OS機能とは、「通常の状態」と、「縮退状態」との間の状態遷移を制御する機能と表現することもできる。また、アプリケーション機能には、操作判定部101、画面判定部102、抑止指示部103、スクロール処理部105、経過時間判定部106、解除指示部107、および移動判定部108が含まれるとする。
 さらに図4のフローチャートを用いて、このように構成した場合の動作の流れについて説明すると次のとおりである。
 処理が開始されると、S101~S104は、アプリケーション機能によって実行される。
 スクロール処理開始時における縮退動作の抑止の条件が満たされると(S104においてYES)、アプリケーション機能(抑止指示部103)から、OS機能(縮退動作設定部104)に対して、縮退動作の抑止を要求する。OS機能側では、縮退動作の抑止要求を受信し、縮退動作の抑止を行う(S105)。
 以下、アプリケーション機能においてS106~S108が実行される。S108において、縮退動作の抑止を解除する条件が満たされると(S108においてYES)、アプリケーション機能(解除指示部197)から、OS機能(縮退動作設定部104)に対して、縮退動作の抑止の解除を要求する。OS機能側では、縮退動作の抑止の解除要求を受信し、縮退動作の抑止の解除を行う(S109)。その後、OS機能側では、処理量に応じたクロック段階設定を行う一方で、アプリケーション機能側では、スクロール処理を実行する。その後、スクロール処理が完了したら処理は終了する(S110)。
 ここで、一般的に、OS機能側では、タッチイベント発生の有無を検知していても、そのイベントが発生したときに、表示画面がスクロール可能かどうかまでは検知していないことが多い。さらにいえば、どのような表示画面を表示しているかは、アプリケーション機能側で管理されることが多い。
 上記構成によれば、アプリケーション機能が、処理量が多いスクロール処理の発生を検知し、スクロール処理を実行する前に、OS機能に縮退動作の抑止の要求を行う。
 これに応じて、OS機能では、縮退動作の抑止を行うので、アプリケーション機能が、スクロール処理を実行するときには、十分なCPU性能が得られることになる。
 また、上記構成は、アプリケーション機能から、OS機能に対して、縮退動作の抑止を事前に通知しておくことができる。
 このため、タッチイベントが発生し、アプリケーション機能においてスクロール処理の実行が開始されてから、OS機能が、当該処理に対応して、縮退機能を実行する構成と比べると、より早い時点で、クロック段階を引き上げておくことができる。
 これにより、アプリケーション機能が、スクロール処理を行うのに先立って、クロック段階を引き上げておけるので、スクロール処理の立ち上がりの円滑化を図ることができるという効果を奏する。
 なお、表示画面がスクロール可能でなければ、アプリケーション機能側から、OS機能側に、縮退動作を行うよう要求してもよい。
  (ハードウェア的実現およびソフトウェア的実現)
 また、上述した携帯端末機1の制御部10の各ブロックは、集積回路(ICチップ)上に形成された論理回路によってハードウェア的に実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェア的に実現してもよい。
 後者の場合、上述したように、上記携帯端末機1は、各機能を実現するプログラムの命令を実行するCPU、上記プログラムを格納したROM(Read Only Memory)、上記プログラムを展開するRAM(Random Access Memory)、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである上記携帯端末機1の制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、上記携帯端末機1に供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
 上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ類、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD-ROM(Compact Disc Read-Only Memory)/MOディスク(Magneto-Optical disc)/MD(Mini Disc)/DVD(Digital Versatile Disc)/CD-R(CD Recordable)/ブルーレイディスク(Blu-ray Disc:登録商標)等の光ディスクを含むディスク類、ICカード(メモリカードを含む)/光カード等のカード類、マスクROM/EPROM(Erasable Programmable Read-Only Memory)/EEPROM(登録商標)(Electrically Erasable and Programmable Read-Only Memory)/フラッシュROM等の半導体メモリ類、あるいはPLD(Programmable logic device)やFPGA(Field Programmable Gate Array)等の論理回路類などを用いることができる。
 また、上記携帯端末機1を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークは、プログラムコードを伝送可能であればよく、特に限定されない。例えば、インターネット、イントラネット、エキストラネット、LAN(Local Area Network)、ISDN(Integrated Services Digital Network)、VAN(Value-Added Network)、CATV(Community Antenna television/Cable Television)通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な媒体であればよく、特定の構成または種類のものに限定されない。例えば、IEEE(Institute of Electrical and Electronic Engineers)1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL(Asymmetric Digital Subscriber Line)回線等の有線でも、IrDA(Infrared Data Association)やリモコンのような赤外線、Bluetooth(登録商標)、IEEE802.11無線、HDR(High Data Rate)、NFC(Near Field Communication)、DLNA(Digital Living Network Alliance)、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
  (付記事項)
 本発明は、以下のとおり表現することも可能である。
 本発明に係る画面表示装置は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定手段と、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付手段と、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御手段と、を備える構成である。
 本発明に係る画面表示装置の制御方法は、表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置の制御方法において、上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御ステップと、を含む方法である。
 上記構成では、表示部において、表示部の画面表示領域より大きな表示画像が、スクロール表示される。
 スクロール表示とは、表示部において、表示部の表示領域より大きな表示画像を上下左右に動かしながら部分的に表示する表示方式のことである。上記表示画像は、表示部の画面に表示するために生成される画像データである。表示画像は、例えば、ウェブブラウザで閲覧可能な縦長のWebページ、上下方向または左右方向に項目を一覧として並べたリスト、上下左右任意の方向にスクロール可能な地図などである。
 なお、上記スクロール表示には、次のような処理が含まれる。
 また、画面のスクロール状態を変更する操作入力には、例えば、
 i) 静止している画面において、画面のスクロールを開始する、または、慣性スクロールを開始することを指示する操作入力
 ii) スクロールを行っている画面において、慣性スクロールを行うことを指示する操作入力
 が含まれる。
 上記構成によれば、スクロール可能な画面が表示されている場合、上記操作入力を受け付けて、画面のスクロール状態を変更するときに、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止することができる。
 ここで、上記第2の状態において、“処理量に応じた性能で上記処理を行う”とは、例えば、処理量に応じて、CPU等をいわゆる「縮退状態」にさせて処理を行うことをいう。「縮退状態」とは、例えば、CPUに含まれる一部の機能を停止させたり、該CPUが動作する周波数(クロック段階)や動作コア数、電圧等を変更したりすることによって、消費電力と性能とを抑制している状態をいう。例えば、処理量が多いときには、処理性能を高めるため、高いクロック段階を設定することができる。CPUが大量の処理を実行している間は、クロック段階が高い状態が維持されてもよい。また、例えば、処理量が少ないときには、消費電力を抑えるため、低いクロック段階を設定することができる。
 また、上記第1の状態とは、縮退状態でない「通常の状態」のことを言う。「通常の性能」とは、通常の状態で発揮されるCPUの性能をいう。「通常の状態」では、「縮退状態」でないため所定の段階のクロック段階設定を行う。
 これにより、画面のスクロール状態を変更するような処理の発生、すなわち高い処理量の発生が予想される場面において、縮退状態を抑止して、上記処理を円滑に実行することができる。
 一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行する。画面のスクロール状態を変更するような処理の発生がない、すなわち、さほど処理量が高くならないと予想される場面では、縮退状態を維持して、消費電力の低減等を図ることができる。
 その結果、スクロール可能な画面に対するスクロール処理において、効果的に縮退動作を行って、円滑なスクロール処理を行うことができる。また、これにより画面の「もたつき」等が原因となりユーザの操作感を損なうことを防ぐことができる。
 本発明に係る画面表示装置では、上記操作入力は、画面のスクロールを開始することを指示する操作入力であることが好ましい。
 画面のスクロールを開始するときには、画面の静止時よりも、高い負荷がかかる。上記構成によれば、このような高い負荷がかかるような操作入力があったときに、いわゆる縮退動作の抑止を行って、装置の処理性能を高めることができる。
 本発明に係る画面表示装置では、画面のスクロール時に、スクロール後の画面を予め生成する事前画像生成手段と、上記所定の時間は、上記スクロール後の画面を生成するのにかかる時間を基準に定められていることが好ましい。
 画面のスクロール時には、スクロール後の画面を予め生成する処理が発生する。このような処理は、バッファ処理とも呼ばれる。このようなバッファ処理を実行するには高い負荷がかかる。
 上記構成によれば、縮退動作の抑止を行う時間が、バッファ処理にかかる時間を基準に定められている。このため、高い負荷がかかるような処理を行う期間において、装置の処理性能を高めておくことができる。
 本発明に係る画面表示装置では、上記表示部と一体に構成されたタッチパネルを備え、上記操作受付手段は、上記タッチパネルにおける操作入力を受け付けることが好ましい。
 上記構成によれば、タッチパネルの操作入力を契機に、縮退動作を抑止して、装置の処理性能を高めることができる。
 よって、スクロール可能な画面に対するスクロール処理において、効果的に縮退動作を行って、円滑なスクロール処理を行うことができる。
 その結果、タッチパネルの操作入力に対するスクロール処理の追従性・応答性を向上させることができる。言い換えれば、スクロール処理における「モタツキ」等を軽減することができる。
 本発明に係る画面表示装置では、上記操作入力は、所定の方向への画面の慣性スクロールを開始することを指示する操作入力であり、上記操作入力に応じて、上記慣性スクロールにおけるスクロール速度の減速処理が実行されることが好ましい。
 所定の方向への画面の慣性スクロールとは、それまでのスクロール操作入力により、スクロール状態が維持されるようなスクロール方式である。例えば、慣性スクロールでは、いわゆるフリック入力等により、スクロール状態が維持されるとともに、スクロールの速度が減速させられる。
 上記構成によれば、上記操作入力を契機に、縮退動作を抑止して、装置の処理性能を高めておいた状態で、慣性スクロールにおけるスクロール速度の減速処理を行うことができる。よって、慣性スクロール処理を円滑に実行することができる。
 本発明に係る画面表示装置では、上記操作入力は、上記タッチパネルにおける操作入力の位置に応じた画面のスクロールを行うことを指示する操作入力であり、上記タッチパネルにおける操作入力の位置が、所定時間内に所定距離だけ移動したか否かを判定する移動判定手段を備え、上記状態制御手段は、さらに、上記移動判定手段の判定結果に応じて上記抑止を行うことが好ましい。
 タッチパネルにおける操作入力の位置が、所定時間内に所定距離だけ移動するような場合、その後、慣性スクロールを指示するフリック操作が行われる可能性が高いと予想できる。
 上記構成によれば、所定の方向への画面の慣性スクロールを開始することを指示する操作入力が行われると予想される場合、予め装置の処理性能を高めておくことができる。よって、慣性スクロール処理を円滑に実行することができる。
 本発明に係る画面表示装置では、上記移動判定手段は、上記操作入力の位置が、上記表示部の表示領域の端部にあるか否かを判定することが好ましい。
 タッチパネルにおける操作入力の位置が、所定時間内に所定距離だけ移動した場合で、さらにその位置が、上記表示部の表示領域の端部にある場合は、フリック操作が行われる可能性がより高いと予想できる。上記構成によれば、予想の精度を向上させることができる。
 なお、上記画面表示装置はコンピュータによって実現してもよい。この場合には、コンピュータを上記画面表示装置の各手段として動作させることにより、上記画面表示装置をコンピュータで実現させるプログラム、およびこれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。
 また、上記プログラムは、所定の性能で処理を実行する第1の状態と、処理量に応じた性能で上記処理を実行する第2の状態との間の状態遷移を制御する画面表示装置の制御システムに対して、以下の(1)、(2)の条件で要求を行うアプリケーション機能として実現されていてもよい。
(1)操作入力を受け付けたときにスクロール可能な画面が表示されている場合、上記第1の状態で動作する要求を行う。
(2)操作入力を受け付けたときにスクロール可能な画面が表示されていない場合、上記第2の状態で動作する要求を行う。
 本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
 本発明は、スマートフォンをはじめ、タブレット端末、ノート型パーソナルコンピュータ、その他の画面表示装置等に適用できる。
1   携帯端末機(画面表示装置)
10  制御部
101 操作判定部(操作受付手段)
102 画面判定部(画面判定手段)
103 抑止指示部(状態制御手段)
104 縮退動作設定部(状態制御手段)
105 スクロール処理部(事前画像生成手段)
106 経過時間判定部(状態制御手段)
107 解除指示部(状態制御手段)
108 移動判定部(移動判定手段)
35  タッチパネル表示部
35A 操作部
35B 表示部
50  記憶部
51  バッファメモリ

Claims (11)

  1.  表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置において、
     上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定手段と、
     画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付手段と、
     上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御手段と、を備えることを特徴とする画面表示装置。
  2.  上記操作入力は、画面のスクロールを開始することを指示する操作入力であることを特徴とする請求項1に記載の画面表示装置。
  3.  画面のスクロール時に、スクロール後の画面を予め生成する事前画像生成手段と、
     上記所定の時間は、上記スクロール後の画面を生成するのにかかる時間を基準に定められていることを特徴とする請求項2に記載の画面表示装置。
  4.  上記表示部と一体に構成されたタッチパネルを備え、
     上記操作受付手段は、上記タッチパネルにおける操作入力を受け付けることを特徴とする請求項1から3のいずれか1項に記載の画面表示装置。
  5.  上記操作入力は、所定の方向への画面の慣性スクロールを開始することを指示する操作入力であり、
     上記操作入力に応じて、上記慣性スクロールにおけるスクロール速度の減速処理が実行されることを特徴とする請求項4に記載の画面表示装置。
  6.  上記操作入力は、上記タッチパネルにおける操作入力の位置に応じた画面のスクロールを行うことを指示する操作入力であり、
     上記タッチパネルにおける操作入力の位置が、所定時間内に所定距離だけ移動したか否かを判定する移動判定手段を備え、
     上記状態制御手段は、さらに、上記移動判定手段の判定結果に応じて上記抑止を行うことを特徴とする請求項5に記載の画面表示装置。
  7.  上記移動判定手段は、上記操作入力の位置が、上記表示部の表示領域の端部にあるか否かを判定することを特徴とする請求項6に記載の画面表示装置。
  8.  表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置の制御方法において、
     上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、
     画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、
     上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態から、処理量に応じた性能で上記処理を実行する第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行させる状態制御ステップと、を含むことを特徴とする画面表示装置の制御方法。
  9.  表示部の表示領域より大きな表示画像を、スクロール表示可能な画面表示装置を動作させるためのプログラムであって、
     上記表示部にて表示している画面がスクロール可能か否かを判定する画面判定ステップと、
     画面のスクロール状態を変更する操作入力をユーザから受け付ける操作受付ステップと、
     上記操作入力を受け付けたときに、スクロール可能な画面が表示されている場合、所定の性能で処理を実行する第1の状態と、処理量に応じた性能で上記処理を実行する第2の状態との間の状態遷移を制御する画面表示装置の制御システムに対して、上記第1の状態から、上記第2の状態へ遷移することを、所定の時間、抑止する一方で、スクロール可能な画面が表示されていない場合、上記第2の状態で処理を実行することを要求する状態制御要求ステップと、を含む処理をコンピュータに実行させるためのプログラム。
  10.  請求項1から7のいずれか1項に記載の画面表示装置を動作させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
  11.  請求項9または10に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
PCT/JP2013/053729 2012-02-16 2013-02-15 画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体 WO2013122216A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US14/357,880 US20140285530A1 (en) 2012-02-16 2013-02-15 Screen display device, method for controlling same, program and computer-readable recording medium
EP13749164.3A EP2816461A4 (en) 2012-02-16 2013-02-15 SCREEN DISPLAY DEVICE, METHOD FOR CONTROLLING THE SAME, PROGRAM, AND COMPUTER-READABLE RECORDING MEDIUM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012032177A JP5770654B2 (ja) 2012-02-16 2012-02-16 画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体
JP2012-032177 2012-02-16

Publications (1)

Publication Number Publication Date
WO2013122216A1 true WO2013122216A1 (ja) 2013-08-22

Family

ID=48984325

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/053729 WO2013122216A1 (ja) 2012-02-16 2013-02-15 画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体

Country Status (4)

Country Link
US (1) US20140285530A1 (ja)
EP (1) EP2816461A4 (ja)
JP (1) JP5770654B2 (ja)
WO (1) WO2013122216A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015043165A (ja) * 2013-08-26 2015-03-05 富士通株式会社 情報処理装置、制御プログラム及び制御方法
JP2017526261A (ja) * 2014-07-25 2017-09-07 ザ・スウォッチ・グループ・リサーチ・アンド・ディベロップメント・リミテッド 複数の通信インタフェースを有するビーコン

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3052945A4 (en) * 2013-10-01 2017-05-03 Quantum Interface, Llc Apparatuses for controlling electrical devices and software programs and methods for making and using same
JP6300604B2 (ja) 2014-04-01 2018-03-28 キヤノン株式会社 触感制御装置、触感制御方法及びプログラム
JP6379816B2 (ja) * 2014-07-31 2018-08-29 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法、及びプログラム
US10444819B2 (en) * 2015-06-19 2019-10-15 Intel Corporation Techniques to control computational resources for an electronic device
US20230393726A1 (en) * 2022-06-02 2023-12-07 Shopify Inc. Methods and apparatuses for providing condensable user interface

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001527678A (ja) * 1997-05-22 2001-12-25 エリクソン インコーポレイテッド タッチスクリーン入力の適応的サンプリング
JP2010039791A (ja) 2008-08-05 2010-02-18 Toshiba Corp 携帯端末装置
WO2010097885A1 (ja) 2009-02-24 2010-09-02 株式会社東芝 携帯端末
JP2011039709A (ja) * 2009-08-07 2011-02-24 Canon Inc 表示制御装置、方法及びプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63163532U (ja) * 1987-04-15 1988-10-25
US8125456B2 (en) * 2007-01-03 2012-02-28 Apple Inc. Multi-touch auto scanning
KR20100136156A (ko) * 2009-06-18 2010-12-28 삼성전자주식회사 터치스크린을 구비하는 휴대 단말기의 화면 스크롤 방법 및 장치
JP4703754B2 (ja) * 2009-10-05 2011-06-15 株式会社東芝 遠隔制御装置
JP2011191577A (ja) * 2010-03-16 2011-09-29 Aisin Aw Co Ltd 地図表示装置、地図表示方法及びプログラム
JP2012049586A (ja) * 2010-08-24 2012-03-08 Panasonic Corp 表示端末装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001527678A (ja) * 1997-05-22 2001-12-25 エリクソン インコーポレイテッド タッチスクリーン入力の適応的サンプリング
JP2010039791A (ja) 2008-08-05 2010-02-18 Toshiba Corp 携帯端末装置
WO2010097885A1 (ja) 2009-02-24 2010-09-02 株式会社東芝 携帯端末
JP2011039709A (ja) * 2009-08-07 2011-02-24 Canon Inc 表示制御装置、方法及びプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2816461A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015043165A (ja) * 2013-08-26 2015-03-05 富士通株式会社 情報処理装置、制御プログラム及び制御方法
JP2017526261A (ja) * 2014-07-25 2017-09-07 ザ・スウォッチ・グループ・リサーチ・アンド・ディベロップメント・リミテッド 複数の通信インタフェースを有するビーコン

Also Published As

Publication number Publication date
JP5770654B2 (ja) 2015-08-26
JP2013168088A (ja) 2013-08-29
EP2816461A1 (en) 2014-12-24
US20140285530A1 (en) 2014-09-25
EP2816461A4 (en) 2015-10-28

Similar Documents

Publication Publication Date Title
WO2013122216A1 (ja) 画面表示装置、その制御方法、プログラム、およびコンピュータ読み取り可能な記録媒体
US9086792B2 (en) Display control apparatus and control method thereof
JP5852017B2 (ja) マルチタスキングを実行する装置及び方法
KR102010955B1 (ko) 프리뷰 제어 방법 및 이를 구현하는 휴대 단말
US20160283059A1 (en) Terminal and method for setting menu environments in the terminal
KR101969424B1 (ko) 촬영된 이미지를 표시하는 촬영 장치 및 그 촬영 방법
US20180150211A1 (en) Method for adjusting photographing focal length of mobile terminal by using touchpad, and mobile terminal
JP2020514813A (ja) 撮影方法及び端末
EP2657829A2 (en) Method of adjusting size of window and electronic device therefor
US11747953B2 (en) Display method and electronic device
TW201241690A (en) Information processing device, method of processing information, and computer program storage device
JP5743847B2 (ja) 携帯端末および低感度領域設定プログラム
KR20140128146A (ko) 디스플레이 방법 및 그 방법을 처리하는 전자 장치
US11843715B2 (en) Photographing method and terminal
GB2535592A (en) Image capturing apparatus, control method therefor, program, and storage medium
KR102174740B1 (ko) 사용자 단말 장치 및 그 제어 방법
US20150363091A1 (en) Electronic device and method of controlling same
JP2010257012A (ja) 情報端末装置および入力制御方法
US20150172552A1 (en) Method of performing previewing and electronic device for implementing the same
WO2019129092A1 (zh) 一种降帧率拍照方法、移动终端及存储介质
KR102128919B1 (ko) 전자기기, 전자기기의 제어 방법, 및 기억매체
JP2015132888A (ja) 表示制御装置及び表示制御方法、プログラム、並びに記憶媒体
JP5946326B2 (ja) 情報処理端末、情報処理端末の制御プログラム、コンピュータ読み取り可能な記録媒体、および情報処理端末の制御方法
CN110113525B (zh) 拍摄预览方法、装置、存储介质及移动终端
JP2010103956A (ja) 携帯電話

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13749164

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2013749164

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14357880

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE