WO2018122896A1 - 電子機器における情報の表示方法および操作方法 - Google Patents

電子機器における情報の表示方法および操作方法 Download PDF

Info

Publication number
WO2018122896A1
WO2018122896A1 PCT/JP2016/088625 JP2016088625W WO2018122896A1 WO 2018122896 A1 WO2018122896 A1 WO 2018122896A1 JP 2016088625 W JP2016088625 W JP 2016088625W WO 2018122896 A1 WO2018122896 A1 WO 2018122896A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
electronic device
image
displayed
control
Prior art date
Application number
PCT/JP2016/088625
Other languages
English (en)
French (fr)
Inventor
佐々野　雅哉
Original Assignee
千葉 信行
ささのやドットコム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 千葉 信行, ささのやドットコム株式会社 filed Critical 千葉 信行
Priority to PCT/JP2016/088625 priority Critical patent/WO2018122896A1/ja
Publication of WO2018122896A1 publication Critical patent/WO2018122896A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Definitions

  • the present invention relates to a method for displaying and operating information in an electronic device.
  • Patent Document 1 describes a game apparatus using a control pad and a motion sensor such as a gyro sensor. This game apparatus is capable of new and more intuitive control by combining a control pad and a motion sensor (for example, a gyro sensor).
  • a general usage of a mobile terminal such as a smartphone or tablet is to operate a screen (touch panel) with the fingertip of the other hand while holding the casing with one hand.
  • a screen touch panel
  • an operation with one hand increases the risk of dropping the portable terminal due to insufficient gripping of the housing. For this reason, it is desirable to operate the touch panel with both hands.
  • many recent portable terminals are equipped with a gyro sensor or an acceleration sensor that detects rotation and inclination in the three-axis directions of the X axis, the Y axis, and the Z axis. When such a sensor is used, it is possible to construct a game such as that described in Patent Document 1 in which an object displayed on the screen is operated by tilting the device.
  • the operation method is the GUI switch displayed on the screen It only manipulates the image.
  • the present invention has been invented in view of the above circumstances, and realizes a display method of information independent of a GUI switch, an operation method therefor, and these methods in a portable terminal (electronic device) such as a smartphone or a tablet. It is an object to provide a system for the purpose.
  • the present invention has the following configuration. That is, When displaying information with a size exceeding the display area of the display by scrolling in the vertical direction or scrolling in the horizontal direction, The vertical scrolling or the horizontal scrolling is performed by changing the posture of an electronic device equipped with a display.
  • this invention has the following structures. That is, Information that includes postings to SNS by unspecified users is displayed by scrolling vertically or horizontally to display information that exceeds the display area of the display, An information display method characterized in that the display of information by scrolling is temporarily stopped or stoppable on a posting basis according to a change in posture of an electronic device equipped with a display.
  • this invention has the following structures. That is, In electronic devices with touch panels, On the display screen configured by a touch panel, a pointer that moves according to a change in the attitude of the electronic device is provided, A method for operating information, wherein the pointer is used to select and operate information displayed on the display screen.
  • An operation method in an electronic device including a sensor capable of detecting a change in a physical quantity acting on a housing provided with an image display means, a control means, and an operation means,
  • the display means is configured to display the image based on control by the control means, and to control an image to be displayed based on operation by the operation means,
  • the control of the image to be displayed is configured to be executable based on detection information by the sensor.
  • this invention has the following structures. That is, An operation method in an electronic device including a touch panel capable of displaying an image, a sensor capable of detecting a change in a physical quantity acting on a housing on which the touch panel is mounted, and a control unit, The touch panel displays the image based on control by the control unit, detects an operation performed on the touch panel, and displays an image to be displayed on the touch panel based on the detected operation on the touch panel. Configured to control, An operation method characterized in that control of the image to be displayed can be executed based on detection information by the sensor.
  • An operation method in an electronic device including a touch panel capable of displaying an image, a sensor capable of detecting a change in a physical quantity acting on a housing on which the touch panel is mounted, and a control unit,
  • the touch panel is configured to display the image based on control by the control unit, and to control an image to be displayed on the touch panel based on an operation of a GUI switch image displayed on the touch panel.
  • An operation method characterized in that control of the image to be displayed can be executed based on detection information by the sensor.
  • An image display method in an electronic device including a sensor capable of detecting a tilt of a housing provided with an image display means, a control means, and an operation means,
  • the display means is configured to display the image based on control by the control means, and to control an image to be displayed based on operation by the operation means,
  • the control of the image to be displayed is configured to be executable based on the detection information by the sensor, and the displayed image is maintained in the initial posture when the housing is inclined with respect to the set initial posture. It is characterized by controlling the inclination so as to.
  • the present invention has an effect that an operation similar to that in the case of using an operation switch prepared in advance can be performed by an operation of only one hand holding an electronic device.
  • it has an effect that scroll display of information displayed on the screen can be controlled by an operation with only one hand of the electronic device.
  • the present invention has an effect that detailed operations related to image and video display displayed on an electronic device can be performed without operating an operation switch such as a GUI.
  • FIG. 1 is a block diagram illustrating a main configuration of an electronic apparatus 1 according to the present embodiment.
  • the electronic device 1 is formed as a portable terminal device (mobile terminal) such as a smartphone or a tablet terminal provided with a touch panel 2.
  • the touch panel 2 is a device that includes a display unit 3 such as a liquid crystal display (LCD) that displays an image, and a touch sensor 4 that detects the contact and proximity of a fingertip to the image display surface.
  • LCD liquid crystal display
  • the touch sensor 4 detects contact of the fingertip with the surface of the touch panel 2 by a method of detecting a change in capacitance, a pressure-sensitive method of detecting a physical press due to contact, or a combination thereof.
  • the electronic device 1 can control the information to be displayed by touching the touch panel 2 with a fingertip or the like.
  • the touch panel 2 is configured to input an operation and display information under the control of an arithmetic processor 5 such as a CPU, a storage means such as a RAM 6 and a ROM 7, and a control means 8 having an interface with each means. ing.
  • the information displayed on the touch panel 2 is not limited to information stored in the storage unit in advance, and includes information generated by a program and information acquired via a communication module (Communication means) 9.
  • Information acquired via the communication module 9 includes various messages such as messages posted by SNS (social networking service), electronic book data, HTML, TV broadcast data, video streaming data, etc. Includes information and form.
  • the electronic device 1 is equipped with a sensor 10. The sensor 10 detects a physical action that directly acts on the electronic device 1 and a surrounding environment and situation and outputs the detected action to the control means 8.
  • the sensor 10 includes a gyro sensor 11, an acceleration sensor 12, a magnetic force sensor 13, a position sensor 14, a light sensor 15, and a microphone. There are 16 mags.
  • the gyro sensor 11 is an element-type device mounted inside a casing that constitutes the external appearance of the electronic device 1, and detects and outputs rotation (tilt) about the X, Y, and Z axes.
  • the acceleration sensor 12 is configured as a three-axis acceleration sensor, and can measure the acceleration in the three directions of the X-axis, Y-axis, and Z-axis with a single device, and detect vibrations and shocks applied to the housing. It can be done.
  • the gyro sensor 11 and the acceleration sensor 12 are both configured as small devices called MEMS (Micro Electro Mechanical Systems), and both are posture detection sensors that can detect a change in posture of the electronic device 1. It can be used.
  • the magnetic sensor 13 is a device that mainly detects geomagnetism and detects the direction.
  • the position sensor 14 is a device for acquiring a coordinate position on the ground surface using so-called GPS.
  • the optical sensor 15 is a device that mainly detects ambient brightness, and can be configured by a CMOS sensor mounted on the electronic apparatus 1. As an example, light entering the CMOS sensor can be blinked by closing or opening a detection window of the CMOS sensor with a fingertip, thereby enabling an operation instruction to the electronic device 1 to be performed.
  • Each of the above means is a means provided in a general portable terminal such as a smartphone used as the electronic device 1.
  • One of the main functions of the electronic device 1 is to display various information such as still images, moving images, and texts on the touch panel 2 and to output sound simultaneously when there is sound.
  • the information and content to be displayed are overwhelmingly often acquired via the Internet, and in addition to the case of starting and viewing an appropriate player or viewer according to the form of the content, a browser that is an Internet browsing software is also available. Viewing is performed using.
  • the program used for viewing is often preinstalled in the electronic device 1. Further, in the case where it is not installed in advance, it is generally configured so that it can be obtained from the Internet and used. In order to execute a unique function, a dedicated viewing program may be created and installed.
  • FIG. 2 is an explanatory diagram of an SNS post article (hereinafter referred to as “post”, “information”, “post article”, etc., as appropriate) represented as one of contents browsed by the touch panel 2 of the electronic device 1.
  • SNS includes various services such as Facebook (registered trademark of Facebook Incorporated), Twitter (registered trademark of Twitter Incorporated), and news sites that can be posted by users.
  • this SNS includes services such as LINE (trademark of LINE Corporation) mainly for communication between users such as chat, blog, and message exchange between users.
  • information posted by the user is posted on the touch panel 2.
  • This post also includes commercial-purpose posts posted by social networking operators and companies for the purpose of product advertisements and guidance to other sites.
  • Each of these posts is posted as individual display elements 100 (100a, 100b, 100c, 100d9) Arranged so as to be continuously displayed together with the information of the poster, posting time, text, image, URL, and the like. Published as an article.
  • this posted article includes GUIs (101a, 101b, 101c) for performing actions on posts such as “Like”, “Comment”, “Share”, etc. added on the system side.
  • Posts posted to the SNS from unspecified posters are edited as data 110 that can be browsed by the API in the server, transmitted to the electronic device 1, and can be browsed by the touch panel 2.
  • the data 110 is edited as information in which a plurality of display elements 100 are continuously arranged in the frame 102 set to be vertically long, and is transmitted to the electronic device 1. Since the individual display elements 100 are continuously arranged in the frame 102 according to the posting time, the electronic device 1 can browse the posted articles in the order of the posting time.
  • the data 110 has a shape such that the display elements 100 are continuously connected.
  • the data 110 is much longer along the vertical direction (or horizontal direction) than the screen size of the touch panel 2, and data is displayed in the display area 103. All of 110 cannot be displayed. For this reason, in order to browse the display elements 100, the individual display elements 100 are browsed while being scrolled.
  • This scrolling is performed by moving the fingertip in contact with the touch panel 2 in the direction in which the display element 100 is desired to be sent. Further, the scrolling speed is determined based on the speed and direction of the touched finger, and the scrolling is finished while decelerating at a certain rate from the time when the operation with the finger is finished.
  • a scroll stop position is not considered at all in a system for browsing posted articles while scrolling as described above. That is, the posted article is cut off because the display element 100 stops across the outer edge of the display area 103. In this case, in order to view the display element 100 in that portion, it is necessary to move the display element 100 into the display area 103 by the operation of the fingertip.
  • the display element 100 in the frame 102 when the display element 100 in the frame 102 is scrolled as described above, the display element 100 is stopped in accordance with the outer edge of the display area 103. According to this method, it is not necessary to correct the position of the display element 100 by operating the fingertip after scrolling. As an example, when the operation of the fingertip is stopped, the scroll is stopped while decelerating, and the outer edge of the display area 103 is placed on the upper edge or lower edge of the frame 102 on condition that the speed is lower than a certain speed. It is configured to stop with the edges aligned. By configuring in this way, it becomes possible to prevent the display element 100 from being completely cut off.
  • a skip operation such as sending one frame or two frames by using the display element 100 as one display unit by adjusting the scroll speed with the fingertip can be performed.
  • a skip operation such as sending one frame or two frames by using the display element 100 as one display unit by adjusting the scroll speed with the fingertip can be performed.
  • the frame 102 is an element that defines an area for setting the arrangement range of display elements, and is information recognized by a browser or a display program.
  • the display element 100 arranged in the frame 102 is provided with range information that defines the start (upper edge) and end (lower edge) of the display element.
  • this range information can be composed of tags indicating the range of elements described as ⁇ div> and ⁇ / div> or other tags having the same function.
  • tags indicating the range of elements is automatically given by an API program or the like on a server that transmits information posted by the user to the electronic device 1.
  • the display element 100 and the frame 102 described above can be detected by an application program or a program executed on a browser. If this range information is used, the stop position of the display element 100 after scrolling can be determined according to the display area 103 of the electronic device 1. When this is applied when the scrolling speed is reduced, the display element 100 can be arranged at a predetermined position on the display area 103 set in advance as the scrolling is stopped. Thereby, it is possible to prevent the display element 100 from stopping in a state of straddling the outer edge of the display area 103.
  • the scroll stop position on the display area 103 is determined based on the range information defining the range of the display element 100.
  • boundary information 106 is provided between adjacent display elements 100, The stop position may be determined based on the boundary information 106. In this case, the boundary information 106 may be configured to be visible or may be configured as invisible information.
  • FIG. 3 shows each posture (1a, 1b, 1c, 1d, 1e) of the electronic device 1 detected by the gyro sensor 11 or the acceleration sensor 12.
  • the posture 1a is a posture of the electronic device 1 in which the touch panel 2 is arranged vertically in the vertical direction (Y-axis direction).
  • the posture 1b is a posture of the electronic device 1 in a state where the touch panel 2 is tilted forward about the X axis.
  • the posture 1c is a posture of the electronic device 1 in a state where the touch panel 2 is tilted backward about the X axis.
  • the attitude 1d is an attitude of the electronic device 1 in a state where the touch panel 2 is tilted to the left about the Z axis.
  • the posture 1e is a posture of the electronic device 1 in a state where the touch panel 2 is tilted to the right about the Z axis.
  • the gyro sensor 11 or the acceleration sensor 12 outputs information corresponding to each of the postures 1a to 1e described above to the control unit 8. Based on this information, the electronic device 1 can detect the posture, and display control of the display element 100 displayed in the display area 103 can be performed by the change in the posture. In this display control, for example, when the electronic device 1 is tilted from the posture 1a to the posture 1e and then returned to the original posture, the displayed display element 100 is scrolled upward by one post and the display area 103 is displayed. Disappears from. Then, the display element 100 on which the next post is posted appears from below and is arranged so as to replace this lost post.
  • the scroll movement stops at a position where the vicinity of the upper edge 104 of the display area 103 and the upper edge of the display element 100 are close to each other. That is, the display element 100 is arranged in such a manner that the display element 100 does not straddle the upper edge 104 that is the outer edge of the display area 103, and the entire display area of the display area 103 is completely cured from the beginning of the posting. Accordingly, there is an effect that it is not necessary to manually move the position of the display element 100 on which the post to be viewed is posted to an easily viewable position.
  • the scroll stop position may be displayed so that the lower edge 105 of the display area 103 and the lower end of the display element 100 are aligned. it can.
  • the electronic device 1 is tilted to the right once (after being tilted from the posture 1a to the posture 1e) and returned to the original posture, the upper edge 104 of the display area 103 is aligned with the upper edge 104 of the display area 103,
  • display control can be performed such that the lower edge 105 of the display area 103 is aligned with the lower edge 105 of the display area 103.
  • the display element 100 is arranged so that a post can be viewed from the beginning of the article, and by tilting it to the right again, the remaining part including the unread part can be browsed.
  • the display element 100 is arranged.
  • the electronic device 1 may be configured to continuously tilt by causing the electronic device 1 to continue to be tilted and to stop scrolling by returning to the original posture.
  • the display element 100 is displayed at an arrangement position that allows easy browsing without straddling the outer edge of the display area 103.
  • the posted articles can be scrolled from the top to the bottom of the display area 103.
  • the posted articles are sent to a position where they can be easily read, and the articles posted sequentially can be displayed on the display area 103 by repeating this.
  • the scrolling can be continued by tilting the electronic device 1 and stopped by returning to the original posture.
  • electronic device 1 can perform scrolling (switching of posted articles) displayed on display area 103 by changing the attitude of electronic device 1.
  • the gist of the present embodiment is that a physical action applied to the electronic device 1 is detected by a sensor, and the detected information is used as a trigger of an operation that can be executed on the electronic device 1 to perform a predetermined operation. It is to let you do. This may be executed by being included in an application program or browser software executed by the electronic device 1 or may be executed by an operating program (OS) that operates the electronic device 1. Further, the above-described relationship between the tilt direction of the electronic device 1 and the operation of the display information is merely an example, and is not limited to the above example.
  • the inclination direction of the electronic device 1 and the mode of information to be displayed can be set in the program, and are determined according to the specifications of the system to be configured. Further, in the above example, the information displayed on the display area 103 is scrolled by tilting the electronic device 1, and the vertical or horizontal direction of the display area 103 is matched with the scroll direction. However, as in the embodiment described below, even if the electronic device 1 is tilted, the scroll direction for the upper display area 103 is tilted in the direction opposite to the tilt direction, thereby scrolling the viewer. You may comprise so that the direction may not change.
  • the above example detects a physical action on the electronic device 1 and directly controls a display operation such as scrolling based on the detected information.
  • a display operation such as scrolling based on the detected information.
  • a pointer 107 is provided on the display area 103 in the same manner as an electronic device using a mouse.
  • the pointer 107 is formed with an arrow-like design as an example, and is provided so as to be movable on the display area 103.
  • Smartphones and tablet terminals perform operations such as GUI directly by touching a touch panel, and are configured to be used without an input device such as a mouse or an input pad. For this reason, it is general that no instruction means such as the pointer 107 displayed on the screen is provided.
  • the electronic device is not premised on the use of the input device, the pointer 107 that is not usually required is provided and displayed, and the physical to the electronic device 1 that detected the pointer 107 is physically displayed. The operation is performed based on the action, and various operations are performed on the electronic device.
  • the pointer 107 can be moved up and down and left and right on the display area 103. That is, the same operation as operating the pointer 107 using the input device can be performed by an operation such as tilting the electronic apparatus 1 and displayed on the display area 103 in the same manner as using a mouse or the like.
  • the GUI can be selected and operated.
  • the electronic apparatus 1 according to the present embodiment has an operation and an effect that the display of various information on the display area 103 can be directly or indirectly operated by a physical operation received from the outside. .
  • the inclination of the electronic device 1 is determined based on the Z-axis direction shown in FIG. 2 is described, but it is not always necessary to use the Z-axis direction as a reference.
  • the front / rear and left / right inclinations may be detected based on the posture of the electronic device 1 being in a stationary state.
  • the vibration and sound of the tap are detected by the acceleration sensor or the microphone 16 or the like. And based on this detection result, you may control the posting display of SNS mentioned above, the program run on the electronic device 1, etc.
  • information acquired from various sensors included in the electronic device 1 may be used in combination with or replaced with the above-described system for displaying SNS posts.
  • FIG. 4 is an explanatory diagram of the electronic device 1 in which a moving image playback player (hereinafter referred to as “player”) is displayed on the touch panel 2.
  • the player is provided as an application program that can be executed on the electronic device 1 as an example.
  • the player plays back a moving image file stored on the Internet in addition to playing back data stored in the electronic device 1.
  • a moving image file displaying some content is supplied to the electronic device 1 as streaming data, and a display operation is performed according to an operation of a GUI switch image (hereinafter referred to as “GUI”) displayed on the touch panel.
  • GUI GUI switch image
  • the GUI is configured as an operation means for performing an operation input to the electronic device 1 like a physical switch.
  • a reproduction start switch 20 As a GUI for performing the display operation, a reproduction start switch 20, a reproduction stop switch 21, a reproduction position advance switch 22, a reproduction position return switch 23, and a reproduction position designation switch 24 that also serves as a reproduction position display are provided.
  • the reproduction stop switch 21 functions as the reproduction start switch 20 in a state where reproduction of the moving image is stopped.
  • the reproduction start switch 20 is a switch for continuously reproducing and displaying moving image data
  • the reproduction stop switch 21 is a switch for stopping moving image reproduction.
  • the moving image data is streaming data that is sequentially played back in units of a certain amount of playback units.
  • the playback position feed switch 22 is advanced so that the playback start position is skipped at regular intervals for each playback unit, and the playback position is advanced to play back a moving image.
  • the playback position return switch 23 returns the playback start position for each playback unit, and plays back a moving image from a playback position that is back in time.
  • the playback position designation switch 24 also serves as a display unit that displays the total playback time of the video as a single meter with the playback start position of the video as the left end and the playback end position as the right end. By designating a position, reproduction is started from that part.
  • the reproduced time is displayed in the meter as a filled portion 25, and the unreproduced time is displayed as a white portion 26.
  • the boundary between the filled portion and the white portion represents the playback position of the moving image.
  • the display of the moving image is controlled by operating the various GUIs displayed on the screen.
  • the reproduction of the moving image is controlled based on the information acquired from the sensor 10 included in the electronic device 1.
  • the reproduction of the moving image is controlled based on the attitude of the electronic device 1 using the gyro sensor 11 which is one of the sensors 10.
  • moving image display control using the sensor 10 hereinafter referred to as “motion control mode”
  • moving image display control using the gyro sensor 11 will be described.
  • FIG. 5 shows each posture of the electronic device 1 detected by the gyro sensor 11.
  • Posture A represents a state in which the electronic device 1 is in a horizontal posture so that the touch panel is horizontally long along the horizontal direction, and the touch panel is in a horizontal posture.
  • the motion control mode is entered.
  • the posture when the mode use switch 30 is operated is stored as an initial state, and the gyro sensor 11 detects the front and rear, left and right inclinations of the electronic device 1 based on this posture.
  • the horizontal direction of the touch panel along the horizontal direction with respect to the posture A is the X axis, and the front surface of the touch panel faces the horizontal direction.
  • the direction (perpendicular to the touch panel) is set as the Y axis, and the vertical direction is set as the Z axis.
  • the gyro sensor 11 detects the tilt posture of the electronic device 1 with reference to the coordinate axes.
  • the posture B represents a state in which the electronic device 1 is tilted forward about the X axis. In this case, the gyro sensor 11 detects the rotation direction and the inclination angle.
  • the posture C represents a state in which the electronic device 1 is tilted backward about the X axis. In this case, the gyro sensor 11 detects the rotation direction and the inclination angle.
  • the posture D represents a state in which the electronic device 1 is tilted leftward about the Z axis. In this case, the gyro sensor 11 detects the rotation direction and the inclination angle.
  • the posture E represents a state where the electronic device 1 is tilted rightward about the Z axis. In this case, the gyro sensor 11 detects the rotation direction and the inclination angle.
  • FIG. 6 is an explanatory diagram of the posture of the electronic device 1 in the motion control mode and the control content according to the posture.
  • control assigned to the GUI is executed based on the attitude of the electronic device 1.
  • the display content of the image may be controlled in accordance with the change in the attitude of the electronic device 1 while the GUI is not displayed.
  • the GUI may be displayed on the screen so that it can be used.
  • the mode use switch 30 displayed on the screen is operated, whereby the motion control mode and the non-motion control mode can be selectively switched.
  • the mode use switch 30 is a switch that selectively enables the motion control mode from the control mode (non-motion control mode) that uses only the GUI as described above, but sets the initial posture of the electronic device 1 at the same time. It is also a switch to do. That is, the posture when the mode use switch 30 is operated is stored as an initial posture, and the electronic apparatus 1 is controlled based on the left and right and front and rear tilt angles with reference to the initial posture. If it is desired to change the initial posture, the non-motion control mode is set once and then the motion control mode is set again.
  • the postures detectable by the gyro sensor 11 are set to five postures A to E as shown in FIG. 5 as an example. That is, the posture A detected by the gyro sensor 11 is set as an initial posture, the posture B is inclined forward, the posture C is inclined backward, the posture D is inclined left, and the posture E is inclined right.
  • the reproduction of the moving image is controlled according to each posture detected by the gyro sensor 11.
  • the mode use switch 30 is operated in the posture A state. As a result, the motion control mode is entered and the posture A is stored as the initial posture.
  • the control unit 8 tilts the housing of the electronic device 1 forward in the direction of the posture B with the posture A as a reference, the control unit 8 takes the posture B on the condition that it is rotated to a set angle based on the detection information of the gyro sensor 11. It is determined that the state has been reached.
  • the control unit 8 recognizes that the angle of the housing of the electronic device 1 is in the posture B state, the control unit 8 starts the reproduction of the moving image in the same manner as when the reproduction start switch 20 is operated.
  • the gyro sensor 11 detects this tilt and outputs it to the control means 8.
  • the control means 8 stops the reproduction of the moving image in the same manner as the reproduction stop switch 21 is operated.
  • the gyro sensor 11 detects this tilt and outputs it to the control means 8, and the control means 8 replays the reproduction position based on this information. Similar to the operation of the return switch 23, a process of rewinding the moving image being played back is performed. Further, when the electronic device 1 is tilted rightward to the posture E state with reference to the state of the posture A, the gyro sensor 11 detects this tilt and outputs it to the control unit 8, and the control unit 8 based on this information reproduces the reproduction position. Similarly to the operation of the feed switch 22, the playback position of the moving image being played back is advanced.
  • the image display control method performs a plurality of controls such as stop, play, forward, and return of the moving image being played back without using both hands of the electronic device 1 held with one hand. This is made possible by a very simple method of changing the direction of inclination.
  • the first aspect is a method in which a process for executing a motion control mode is incorporated in advance in a player integrally packaged as an application program. This method is suitable when a player having a motion control mode is mounted in the electronic device 1 in advance.
  • the second mode is a method of providing a program capable of executing the motion control mode separately from the player and enabling the motion control mode to be executed when the player is used as an add-on program for the player.
  • an add-on program capable of cooperating with the player is provided, and a motion control mode is performed as an additional function of the player.
  • a program such as a script language that can be executed by the browser is provided, and a process for executing a motion control mode is installed in the program.
  • the motion control mode can be applied to the player who plays a moving image as described above in various modes.
  • the motion control mode as described above can be used not only in a moving image playback player but also in various programs that display other content data.
  • the electronic device 1 includes a portable terminal that has a built-in television tuner so that it can receive radio waves transmitted from a television station and view them on the screen.
  • Such a portable terminal stores a TV viewing program, and is adapted to select a TV station to be viewed and adjust the volume by executing the program.
  • This is for receiving and displaying broadcast radio waves, but it can be considered that the content data is substantially the same principle as that for displaying data received as streaming data from the server.
  • there are no functions such as rewind and forward.
  • FIG. 7 shows a viewing screen 40 of a television mounted on the electronic device 1.
  • the viewing screen 40 has a video area 41 that displays a viewing video at the center, and a channel bar 42 that displays a plurality of television stations so as to be selectable at the right end.
  • the channel bar 42 indicates a channel being viewed by a ⁇ mark 43 as illustrated as an example.
  • the channel to be viewed is selected by a method such as moving the GUI-marked ⁇ mark 43 with a fingertip, or touching an individual channel display frame arranged in the channel bar 42 with a fingertip. It has become. Further, the channel to be selected can be automatically moved with the direction in which the channel number increases (downward) as the forward direction and the direction in which the channel number decreases (upward) as the reverse direction.
  • the channel par 42 is not limited to a mode in which the channel is displayed along the vertical direction, and may be provided in various modes such as a display along the left-right direction or an annular display.
  • a GUI volume control switch 44 that also serves as a display unit for displaying the volume of the sound being output, and a mode use switch 45 for enabling the motion control mode are provided.
  • the channel selection and volume adjustment can be performed by changing the attitude of the electronic device 1. For example, when the mode use switch 45 is touched, the attitude of the electronic device 1 is detected and stored by the gyro sensor 11. Then, for example, when the mode use switch 45 is touched in the state of the posture A shown in FIG. 5, the posture A in which the display on the touch panel is vertical in the horizontally long state is detected and stored.
  • the channel selected on the channel bar moves in the forward direction and the next channel is selected.
  • the selected channel is moved from “4ch” to “5ch”. If the posture B rotated to the left is maintained, the selected channel on the channel bar continues to move along the forward direction, and when the posture is returned, the broadcast of the currently selected channel is received. And display it on the screen.
  • the channel selected on the channel par moves in the direction opposite to the forward direction and the channel is selected. Is done. For example, the selected channel is moved from “4ch” to “5ch”.
  • the selected channel on the channel bar continues to move in the reverse direction sequentially, and when the posture is returned, the broadcast of the currently selected channel is received. Display on the screen.
  • the channel bar described above is not necessarily displayed, and the channel may be switched without a display means such as a channel bar.
  • the volume of the sound output from the speaker is increased.
  • the electronic apparatus 1 is tilted from the posture A state to the posture B state, the sound volume output from the speaker is reduced.
  • the volume can be adjusted by the inclination of the electronic apparatus 1.
  • the rate at which the volume is increased or decreased may be changed according to the angle of the electronic device 1 to be tilted. That is, it is possible to perform volume control such that the volume is slowly increased or decreased when the tilt angle is small, and the volume is rapidly changed when the tilt angle is increased.
  • the volume adjustment using the motion control mode may function only while the mode use switch is touched. If comprised in this way, even if the electronic device 1 is tilted unintentionally, it will become possible to avoid inconveniences such as outputting a loud sound. Further, the volume adjustment switch is often provided in the form of a small slide bar so as not to disturb the image being viewed, but it is quite troublesome to operate such a small switch with a fingertip. On the other hand, in this embodiment, control such as increase / decrease in volume can be performed by a simple operation such as tilting the electronic device 1.
  • the motion control mode described above can be used as an alternative switch function when the user wants to operate the electronic device 1 while holding the electronic device 1 with one hand or when a small switch that is difficult to operate is mounted. It is. Further, since the gyro sensor only detects the tilt of the electronic device 1, it can be said to be an optimal means for inputting various controls instead of giving a physical shock to the electronic device. is there.
  • the operation method using the motion control described above can be used for display control of various contents displayed on the screen other than the above-described uses.
  • it can also be used for services such as “STREET VIEW” (trademark registered internationally by Google Inc.) for displaying photographs or videos of various places while moving the viewpoint.
  • STREET VIEW trademark registered internationally by Google Inc.
  • tilting the electronic device to the left turns the viewpoint to the left
  • tilting the electronic device to the right turns the viewpoint to the right
  • tilting the electronic device forward moves the viewpoint to the front By tilting backward, it is possible to display such that the viewpoint moves backward.
  • the electronic device When the content displayed on the screen is an electronic book, if the electronic device is tilted to the left or tilted backward, the displayed viewing page is advanced to the next page, and the electronic device is tilted to the right or forward Display control such as returning the displayed viewing page to the previous page and displaying it can be performed.
  • the content to be displayed on the screen is an HTML file displayed using a browser
  • the screen being browsed is scrolled upward
  • the electronic device is tilted backward
  • the content is viewed.
  • tilt the electronic device to the right to move the screen display to the right.
  • it is possible to perform viewing such as enlarging display or reduction display of the portion being viewed.
  • various display controls according to the characteristics of the contents can be performed by the motion control mode.
  • the display content is such that the character displayed on the screen is moved forward, backward, jumped, or rotated by the motion control mode.
  • Control can be performed.
  • a character is created with 3D data, or a plurality of character images viewed from various directions are prepared so that the image can be viewed as a stereoscopic image. In the case of such content, it is possible to perform control such that the state of the character viewed from various viewpoints is displayed on the screen according to the motion control mode.
  • the electronic device having a touch panel has been described as an example.
  • the present invention can also be implemented in an electronic device having a simple display device that is not a touch panel.
  • a physical switch for operating the electronic device is provided in a portion other than the display device.
  • control corresponding to a physical switch can be performed based on the detection content of the sensor.
  • an operation of swinging the electronic device up and down or left and right while being tilted is detected by a combination of the gyro sensor 11 and the acceleration sensor 12, and various controls are performed based on the detection information.
  • Good That is, by combining information detected by various sensors, a plurality of types of operation instructions can be input to the electronic device as compared with the case where each sensor is used alone.
  • the display unit 3 of the electronic device 1 includes an image stored in advance in the storage unit or an image generated by a program, a moving image file, an electronic book data, HTML, television broadcast data, video streaming.
  • Various images including moving images such as data can be displayed. Controlling the display of various images using a sensor is as described above. However, if displayed as it is, the image displayed for the viewer watching the screen is also tilted together with the electronic device 1. In order to solve such a phenomenon, the following control can be performed in this embodiment.
  • FIG. 8 is an explanatory diagram showing an example of a screen display control method that solves the above phenomenon.
  • the screen display content is controlled using the gyro sensor 11 which is one of the sensors.
  • the playback position of the moving image can be postponed and the TV station to be viewed can be selected.
  • this control method for example, when the electronic device 1 is tilted at an angle ⁇ from the reference posture as in the posture D, the change in the posture is detected by the gyro sensor 11, and the image displayed in the display means 3 is electronically displayed. Control is performed such that the display is tilted by the same angle amount in the direction opposite to the tilt of the device 1. That is, even if the electronic device 1 is tilted, the displayed image and the orientation of the angle of view are maintained in the original state.
  • the image or the moving image displayed even when the electronic device 1 is inclined is relative to the viewer.
  • the positional relationship does not change. For this reason, it has the effect
  • the tilt control is performed so as to maintain the state in which the displayed image is displayed in the initial posture.
  • the tilt detection can be controlled not only based on the tilt in a plane parallel to the display screen but also based on the total tilt including the front-rear direction with respect to the display screen. Is adopted.
  • the present invention can be used for electronic devices such as smartphones and tablet terminals, operation methods for electronic devices, operation systems, and programs created therefor.

Abstract

スマートフォンやタブレット等の携帯端末（電子機器）において、ＧＵＩスイッチに依存しない情報の表示方法やそのための操作方法等の提供等を課題とするものである。 【解決手段】　タッチパネル２を備えたディスプレイの表示領域を超えた大きさの情報の表示を、縦方向へのスクロール若しくは横方向へのスクロールによって行う場合において、前記縦方向へのスクロール若しくは横方向へのスクロールを、ディスプレイ３を搭載した電子機器１の姿勢の変化によって行うように構成したことを特徴とする。前記情報は、不特定の利用者によるSNSに対する投稿を含むものである。　

Description

[規則26に基づく補充 19.01.2017]　電子機器における情報の表示方法および操作方法
　本発明は、電子機器における情報の表示方法および操作方法に関するものである。
　現在、タッチパネルを用いた多数の電子機器が知られている。特にスマートフォンやタブレットといった形態の電子機器の場合には、SNSへの投稿、動画、静止画、ゲーム画面、ＨＴＭＬ等を表示する表示画面に、これら各種画像の表示を制御するためのＧＵＩが表示されている。多くは、物理的なキーボードやスイッチを用いること無くタッチパネルに表示したＧＵＩを操作スイッチとして、タッチパネルに表示された情報、画像等の表示制御を行っている。
　また、特許文献１には、コントロールパッドとジャイロセンサ等の動きセンサを用いたゲーム装置が記載されている。このゲーム装置は、コントロールパッドと動きセンサ（例えば、ジャイロセンサ）を組み合わせることで、新規でより直感的な制御が可能であるというものである。
特開２０１３－１７２９６２号公報
　スマートフォンやタブレットの携帯端末の一般的な使い方は、一方の手で筐体を把持しながら、他方の手の指先を画面（タッチパネル）を操作するというものである。片手で筐体を把持しながら同じ手の指先で操作を行う場合もあるが、これは簡単な操作を行う場合や、両手が使えない状況で操作を行うといった場合が多い。しかし、片手での操作は、筐体の把持が不十分となり携帯端末を落下させるリスクが高くなる。このため、タッチパネルの操作は両手で行うことが望ましい。
　一方、近年の携帯端末は、Ｘ軸、Ｙ軸、Ｚ軸の３軸方向における回転や傾きを検出するジャイロセンサや加速度センサを搭載したものが多い。このようなセンサを使用すると、特許文献１に記載されているような、装置を傾けることによって画面内に表示されたオブジェクトを操作するようなゲームを構成することが可能になる。
　現在一般に流通しているスマートフォンやタブレット等の形態端末は、ネットワークを介して取得した情報や、プログラムによって生成した様々な情報を表示できるにもかかわらず、その操作方法は画面上に表示したＧＵＩスイッチ画像を操作するのみである。
　本発明は当該事情に鑑み発明されたものであって、スマートフォンやタブレット等の携帯端末（電子機器）において、ＧＵＩスイッチに依存しない情報の表示方法やそのための操作方法、およびこれらの方法を実現するためのシステムの提供等を課題とするものである。
　上記課題を解決するために本発明は以下の構成を有する。すなわち、
　ディスプレイの表示領域を超えた大きさの情報の表示を縦方向へのスクロール若しくは横方向へのスクロールによって行う場合において、
　前記縦方向へのスクロール若しくは横方向へのスクロールを、ディスプレイを搭載した電子機器の姿勢の変化によって行うように構成したことを特徴とする。
　また、本発明は以下の構成を有する。すなわち、
　不特定の利用者によるSNSに対する投稿を含んだ情報を、縦方向へのスクロール若しくは横方向へのスクロールによって、ディスプレイの表示領域を超えた大きさの情報を表示するものであって、
　ディスプレイを搭載した電子機器の姿勢の変化によって、前記スクロールによる情報の表示を投稿単位で一次的に停止若しくは停止可能に構成したことを特徴とする情報の表示方法。
　また、本発明は以下の構成を有する。すなわち、
　タッチパネルを備えた電子機器において、
　タッチパネルによって構成される表示画面上に、前記電子機器の姿勢の変化によって移動するポインタを設け、
　当該ポインタによって、表示画面上に表示した情報の選択、操作を行うように構成したことを特徴とする情報の操作方法。
　また、本発明は以下の構成を有する。すなわち、
　画像の表示手段を設けた筐体に作用する物理量の変化を検出可能なセンサと
　制御手段と操作手段を備えた電子機器における操作方法であって、
　前記表示手段は、前記制御手段による制御に基づいて前記画像の表示を行うとともに、前記操作手段による操作に基づいて表示する画像を制御するよう構成し、
　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする。
　また、本発明は以下の構成を有する。すなわち、
　画像の表示が可能なタッチパネルと当該タッチパネルを搭載した筐体に作用する物理量の変化を検出可能なセンサと制御手段を備えた電子機器における操作方法であって、
　前記タッチパネルは、前記制御手段による制御に基づいて前記画像の表示を行うとともに、当該タッチパネルに対して行われた操作の検知を行い、当該検知したタッチパネルに対する操作に基づいて当該タッチパネルに表示する画像を制御するよう構成し、
　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする操作方法。
　また、本発明は以下の構成を有する。すなわち、
　画像の表示が可能なタッチパネルと当該タッチパネルを搭載した筐体に作用する物理量の変化を検出可能なセンサと制御手段を備えた電子機器における操作方法であって、
　前記タッチパネルは、前記制御手段による制御に基づいて前記画像の表示を行うとともに、当該タッチパネルに表示したＧＵＩスイッチ画像の操作に基づいて当該タッチパネルに表示する画像を制御するよう構成し、
　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする操作方法。
　また、本発明は以下の構成を有する。すなわち、
　画像の表示手段を設けた筐体の傾斜を検出可能なセンサと制御手段と操作手段を備えた電子機器における画像の表示方法であって、
　前記表示手段は、前記制御手段による制御に基づいて前記画像の表示を行うとともに、前記操作手段による操作に基づいて表示する画像を制御するよう構成し、
　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成するとともに、設定した初期姿勢に対して前記筐体が傾斜した場合に、表示している画像を前記初期姿勢を維持するように傾斜制御することを特徴とする。
　本発明は、電子機器を把持した片手のみの動作によって、予め用意されている操作スイッチを用いる場合と同様の操作を行うことができるという効果を有するものである。特に、電子機器の片手のみの操作によって、画面に表示した情報のスクロール表示の制御を行うことができるという効果を有するものである。
　また、本発明は電子機器に表示する画像や映像表示に関する細かい操作を、ＧＵＩ等の操作スイッチの操作によることなく行うことが出来るという効果を有するものである。
本実施例に係る電子機器の主な構成を表したブロック図である。 タッチパネル上に表示する情報の説明図である。 ジャイロセンサによって検出される電子機器の姿勢の一例を表した説明図である。 タッチパネル上に動画再生プレイヤーを表示した電子機器の説明図である。 ジャイロセンサによって検出される電子機器の各姿勢の説明図である。 モーション制御モード時における電子機器の姿勢と制御内容の説明図である。 モーション制御モードを利用したテレビの視聴画面の説明図である。 モーション制御モードを利用した他の実施例に関する説明図である。
　以下、本発明を実施するための形態について図を用いて説明する。
　図１は本実施例に係る電子機器１の主な構成を表したブロック図である。電子機器１は、一例として、タッチパネル(Touch panel)２を備えたスマートフォンやタブレット端末等の携帯型の端末装置（携帯端末）として形成されたものである。
　タッチパネル２は、画像表示を行う液晶表示装置(LCD)等の表示手段（ディスプレイ）３と、画像表示面に対する指先の接触や近接を検出するタッチセンサ(Touch sensor)４を内蔵したデバイスである。タッチセンサ４は、静電容量の変化を検出する方式、接触による物理的な押圧を検出する感圧式、若しくはこれらを組み合わせた方法によりタッチパネル２表面に対する指先の接触等を検出するものである。電子機器１は、タッチパネル２に対する指先の接触等によって、表示する情報の制御等を行うことができるようになっている。
　タッチパネル２は、CPU等の演算プロセッサ５、RAM６やROM７等の記憶手段および各手段とのインターフェイスを備えた制御手段(Controler)８による制御によって、操作の入力および情報の表示を行うように構成されている。タッチパネル２に表示する情報は、予め記憶手段に記憶されているものに限らず、プログラムによって生成される情報や、通信モジュール(Communication means)９を介して取得した情報が含まれる。通信モジュール９を介して取得する情報には、不特定多数の利用者がSNS(social networking service)に投稿したメッセージ、電子書籍用デー夕、HTML、テレビ放送デー夕、動画ストリーミングデータ等の各種の情報、形態を含むものである。
　また、電子機器１はセンサ１０を搭載している。センサ１０は、電子機器１に直接的に作用する物理的な作用や、周辺の環境や状況を検出して制御手段８に対して出力するものである。
　センサ１０には、ジャイロセンサ(Gyro sensor)１１、加速度センサ(Acceleration sensor)１２、磁力センサ(Magnetic force sensor)１３、位置センサ(Position sensor)１４、光センサ(Light sensor)１５、マイク(Microphone)１６等がある。
　ジャイロセンサ１１は、電子機器１の外観を構成する筐体内部に搭載された素子型のデバイスであり、Ｘ軸、Ｙ軸およびＺ軸を中心とした回動（傾斜）を検出して出力するものである。加速度センサ１２は、3軸加速度センサーとして構成されたものであり、X軸・Y軸・Z軸の3方向の加速度を1つのデバイスで測定でき、筐体に加えられた振動や衝撃等も検出できるものである。
　また、上記ジャイロセンサ１１および加速度センサ１２は、ともにMEMS（Micro Electro Mechanical Systems）と称されるような小型のデバイスとして構成されており、ともに電子機器１の姿勢の変化を検出できる姿勢検出センサとして使用可能である。
　磁力センサ１３は、主として地磁気を感知して方位を検出するデバイスである。位置センサ１４は、所謂ＧＰＳを利用して地表における座標位置を取得するためのデバイスである。光センサ１５は、主として周囲の明るさを検出するデバイスであり、電子機器１が搭載するＣＭＯＳセンサによって構成することができる。一例として、ＣＭＯＳセンサの検出窓を指先で塞いだり開けたりすることでＣＭＯＳセンサに入る光を明滅させることができ、これにより電子機器１に対する操作指示を行うことが可能となっている。
　上記の各手段は、電子機器１として用いるスマートフォン等の一般的な携帯端末が備えている手段である。電子機器１の主要な機能の一つは、静止画、動画、テキスト等の各種情報をタッチパネル２に表示し、音声がある場合には音声を同時に出力することである。表示する情報やコンテンツは、インターネットを介して取得する場合が圧倒的に多く、コンテンツの形態に応じて適宜のプレイヤ若しくはビューワを起動して視聴等する場合の他、インターネットの閲覧ソフトであるブラウザを利用して視聴が行われる。
　視聴するコンテンツが標準的な仕様に準拠したデータファイルの場合、視聴に使用するプログラムは電子機器１に予め搭載されている場合が多い。また、予め搭載していない場合には、一般的にインターネット上から取得して使用できるように構成される。なお、独自の機能を実行させるために、専用の視聴用プログラムを作成して搭載する場合もある。
　図２は、電子機器１のタッチパネル２によって閲覧するコンテンツの一つとして表した、SNSの投稿記事（以下適宜「投稿」、「情報」、「投稿記事」等という）の説明図である。SNSには、Facebook（フェイスブック・インコーポレイテッドの登録商標）、Twitter（トゥイッターインコーポレイテッドの登録商標）や、利用者による投稿が可能なニュースサイトなど各種のサービスがある。また、このSNSにはLINE（ＬＩＮＥ株式会社の商標）といった、主に利用者同士のチャット、ブログ、メッセージの交換といった利用者同士のコミュニケーションを目的としたサービスが含まれる。
　図２に示しているように、タッチパネル２には利用者が投稿した情報が掲載される。この投稿には、商品広告や他サイトへの誘導を目的としたSNS運営者や企業によって投稿される商用目的の投稿も含まれる。これらの各投稿は、連続的に表示可能に配置される個々の表示要素１００（１００ａ、１００ｂ、１００ｃ、１００ｄ・・・）として、投稿者の情報や投稿時刻、文章、画像、ＵＲＬ等とともに投稿記事として掲載される。また、この投稿記事には、システム側で付加する「いいね」「コメントする」「シェアする」等といった投稿に対するアクションを行わせるＧＵＩ（１０１ａ、１０１ｂ、１０１ｃ）が含まれている。
　不特定の投稿者からSNSに投稿された投稿記事は、サーバ内のAPIによって閲覧可能なデータ１１０として編集され、電子機器１に送信されタッチパネル２によって閲覧可能になる。データ１１０は、縦長に設定したフレーム１０２内に複数の表示要素１００を連続的に配置した情報として編集され電子機器１に対して送信される。個々の表示要素１００は、投稿時刻に応じてフレーム１０２内に連続的に配置されるので、電子機器１では投稿された時刻の順序で投稿記事を閲覧できるようになっている。
　データ１１０は、表示要素１００を連続的に繋げたような形になっており、タッチパネル２の画面サイズと比較して縦方向（若しくは横方向）に沿って遙かに長く、表示領域１０３にデータ１１０の全てを表示することはできない。このため、表示要素１００を閲覧するには、スクロールさせながら個々の表示要素１００を閲覧させるようになっている。
　このスクロールは、タッチパネル２に接触させた指先を、表示要素１００を送りたい方向に向かって移動させることで行われる。また、接触させた指の速度や方向に基づいてスクロールの速度を決定し、指による操作が終了した時点から一定の割合で減速しながらスクロールを終了する。
　従来、上記のようなスクロールをさせながら投稿記事を閲覧させるシステムでは、スクロールの停止位置は全く考慮されていなかった。すなわち、表示要素１００が表示領域１０３の外縁を跨いで停止することで、投稿記事が切れた状態になっていた。この場合、その部分の表示要素１００を見るには、指先の操作によって表示領域１０３内に表示要素１００を移動させる必要があった。
　本発明の一つの実施例では、上記のように、フレーム１０２内の表示要素１００をスクロールさせた場合に、表示領域１０３の外縁に合わせて表示要素１００を停止させるようになっている。この方法によれば、スクロールさせた後に指先の操作によって表示要素１００の位置を修正する必要がなくなる。
　一例としては、指先の操作を停止した場合には減速しながらスクロールを停止するように構成するとともに、一定速度以下になったことを条件に、表示領域１０３の外縁をフレーム１０２の上縁若しくは下縁を合わせて停止させるように構成する。このように構成することで、表示要素１００が途中で見切れてしまうことを防止することが可能になる。
　また、このような表示システムを構成すると、指先によるスクロール速度の調整によって表示要素１００を一つの表示単位として一コマ送ったり、二駒コマ送ったりといったスキップ操作も可能になる。もちろん、指先の操作によって、表示領域１０３の境界を跨ぐように表示要素１００を表示させることは可能である。
　SNSのような投稿された複数の情報を表示する場合、前述したように予め設定されているフレーム１０２があり、このフレーム１０２内に表示要素１００が配置される。フレーム１０２は、表示要素の配置範囲を設定する領域を定義する要素であり、ブラウザや表示用のプログラムによって認識される情報である。
　このフレーム１０２内に配置する表示要素１００には、表示要素の始まり（上縁）と終わり（下縁）を定義する範囲情報が設けられている。この範囲情報は、HTMLファイルであれば<div>、</div>として記述されるような要素の範囲を示すタグ若しくは同様の作用を有する他のタグで構成することができる。もちろん、専用のアプリケーションプログラムによって投稿記事の表示を行う場合には、アプリケーションプログラムによって認識可能な専用の情報を定義し付与してもよい。このような要素の範囲を示す情報は、利用者が投稿した情報を電子機器１に対して送信するサーバ上のAPIプログラム等によって自動的に付与されるものである。
　前述した表示要素１００およびフレーム１０２は、アプリケーションプログラムやブラウザ上で実行されるプログラムによって検出することができる。この範囲情報を利用すると、スクロールさせた後の表示要素１００の停止位置を、電子機器１の表示領域１０３に合わせて定めることが可能になる。これを、スクロールの速度が低下した時点で適用すると、スクロールの停止とともに、予め設定した表示領域１０３上の所定位置に表示要素１００を配置することが可能になる。これにより、表示要素１００が表示領域１０３の外縁を跨ぐ状態で停止するのを抑止することが可能になる。
　なお、本実施の形態では、表示要素１００の範囲を定義する範囲情報に基づいて表示領域１０３上におけるスクロールの停止位置を定めたが、隣接する表示要素１００の間に境界情報１０６を設け、この境界情報１０６に基づいて停止位置を定めるようにしてもよい。この場合境界情報１０６は、視認可能に構成してもよいし不可視の情報として構成してもよい。
　図３は、ジャイロセンサ１１若しくは加速度センサ１２によって検出される電子機器１の各姿勢（１ａ、１ｂ、１ｃ、１ｄ、１ｅ）を表している。
　姿勢１ａは、タッチパネル２が垂直方向（Ｙ軸方向）に沿って縦長の配置となるようにした電子機器１の姿勢である。
　姿勢１ｂは、タッチパネル２がＸ軸を中心に前傾した状態の電子機器１の姿勢である。
　姿勢１ｃは、タッチパネル２がＸ軸を中心に後傾した状態の電子機器１の姿勢である。
　姿勢１ｄは、タッチパネル２がＺ軸を中心に左側に傾斜した状態の電子機器１の姿勢である。
　姿勢１ｅは、タッチパネル２がＺ軸を中心に右側に傾斜した状態の電子機器１の姿勢である。
　ジャイロセンサ１１若しくは加速度センサ１２は、上述した各姿勢１ａ～１ｅに応じた情報を制御手段８に対して出力する。この情報に基づいて、電子機器１は姿勢を検知することができ、この姿勢の変化によって、表示領域１０３に表示される表示要素１００の表示制御が行えるようになっている。
　この表示制御では、例えば、電子機器１を姿勢１ａから姿勢１ｅに傾けた後に元の姿勢に戻すと、表示されていた表示要素１００が１投稿分だけ上側に向かってスクロール移動しながら表示領域１０３から消失する。そして、この消失した投稿と入れ替わるように、次の投稿を掲載した表示要素１００が下方から現れて配置される。この際、表示領域１０３の上縁１０４付近と表示要素１００の上縁が近接した位置でスクロール移動が停止する。すなわち、表示要素１００は、表示領域１０３の外縁である上縁１０４を跨がず、表示領域１０３内に投稿の冒頭部分から概ね全体が治まるような形で表示要素１００の配置が行われる。これによって、閲覧しようとする投稿を掲載した表示要素１００の位置を、見やすい位置まで逐一手動で移動させる必要が無いという効果を有している。
　また、上記の場合において、投稿された記事が表示領域１０３を超えたものである場合、スクロールの停止位置を、表示領域１０３の下縁１０５と表示要素１００の下端を合わせるように表示することができる。
　この際、電子機器１を１回右に傾けた後（姿勢１ａから姿勢１ｅに傾けた後）に元の姿勢に戻すと、表示領域１０３の上縁１０４に表示要素１００の上縁を合わせ、もう一度電子機器１を右に傾けて元の姿勢に戻すと、表示領域１０３の下縁１０５に表示要素１００の下端を合わせるような表示制御を行うことができる。すなわち、電子機器１を１回右に傾けることによって、記事の冒頭から投稿が閲覧できるように表示要素１００を配置し、もう一度右に傾けることによって、未読部分を含む残りの部分を閲覧できるように表示要素１００を配置するというものである。これにより、電子機器１を右側に振るような動作を繰り返すことで、順次投稿された記事を送りながら閲覧できるようになる。
　また、電子機器１を傾け続けることでスクロールを連続して行わせ、もとの姿勢に戻すことでスクロールを停止するように構成してもよい。このスクロールの停止の際には、前述したように、表示領域１０３の外縁を跨ぐことなく閲覧しやすい配置位置で表示要素１００を表示する。
　また、上記の動作とは逆に、電子機器１を左に１回傾けた場合（姿勢１ａから姿勢１ｄに傾ける）、表示領域１０３の上方から下に向かって投稿記事をスクロール表示させることができる。この場合も、電子機器１を左に傾けるたびに投稿された記事を読みやすい位置まで送り、これを繰り返すことで順次投稿された記事を表示領域１０３上に表示させることができる。
　また、電子機器１を傾け続けることでスクロールを連続させ、もとの姿勢に戻すことでスクロールを停止させるように構成することができる。これらの動作は、スクロールの方向が異なるだけで、上述した例と実質的に同様である。
　また、図２に示しているように「いいね」１０１ａ、「コメントする」１０１ｂ、「シェアする」１０１ｃ等といった投稿に対するアクションが可能である場合、これを電子機器１の傾きによって行わせることができる。
　図２に示した例で説明すると、表示要素１００ｃが表示されている場合に、電子機器１を後方（姿勢１ｃ）に傾けて元の姿勢（姿勢１ａ）に戻すと、「いいね」１０１ａを操作したのと同様のアクションを投稿に対して行うことができる。また、電子機器１を前方（姿勢１ｂ）に傾けて元の姿勢（姿勢１ａ）に戻すと、「いいね」１０１ａを解除したのと同様のアクションを投稿に対して行うことができる。
　また、電子機器１を後方（姿勢１ｃ）に傾けて続けると、「いいね」１０１ａにさらにオプションがある場合にはそれを表示し、そのオプションを選択するように構成することができる。
　上記の通り、本実施の形態に係る電子機器１は、表示領域１０３に表示された投稿のスクロール（投稿記事の切り替え）を電子機器１の姿勢の変化によって行うことができるものである。
　本実施の形態の要旨は、電子機器１に対して加えられた物理的な作用をセンサによって検知し、この検知した情報を電子機器１上で実行可能な動作のトリガとして使用し、所定の動作を行わせることである。これは、電子機器１で実行するアプリケーションプログラムやブラウザソフトに含める形で実行させてもよいし、電子機器１を動作させるオペレーティングプログラム（ＯＳ）によって実行させる形であってもよい。
　また、上述した電子機器１の傾斜方向と表示情報の操作の関係は、単なる一例を示したものであり上記の例に限らない。電子機器１の傾斜方向と表示する情報の態様は、プログラム内において設定することができるものであり、構成するシステムの仕様に応じて定められるものである。
　さらに、上記の例は電子機器１を傾けることによって表示領域１０３上に表示した情報をスクロールさせるものであるが、表示領域１０３の上下方向若しくは左右方向とスクロール方向を一致させたものである。しかしながら、次に説明する実施例のように、電子機器１を傾斜させても、上表示領域１０３に対するスクロール方向を電子機器１を傾斜方向とは逆の方向に傾斜させることにより、見る者に対するスクロール方向が変化していないように構成してもよい。
　次に、他の実施例について説明する。
　上記の例は、電子機器１に対する物理的な作用を検知し、この検知した情報に基づいて、スクロールといった表示動作を直接制御するものである。これに対して、同じく電子機器１に対する物理的な作用の検知に基づいて、上記とは異なる態様で電子機器１の操作を行うことが可能である。
　これには、例えば表示領域１０３の上に、マウスを使用する電子機器と同様に表示領域１０３上にポインタ１０７を設ける。ポインタ１０７は一例として矢印状のデザインで形成され表示領域１０３上において移動可能に設けられる。
　スマートフォンやタブレット端末は、タッチパネルに触れることによって直接ＧＵＩ等の操作等を行うものであり、マウスや入力パッド等の入力デバイスが無くても使えるように構成されている。このため、ポインタ１０７のような画面上に表示される指示手段は設けないのが一般的である。
　これに対して、本実施例では入力デバイスの使用を前提としていない電子機器でありながら、通常は設ける必要のないポインタ１０７を設けて表示し、このポインタ１０７を検出した電子機器１に対する物理的な作用に基づいて操作を行い電子機器に対はて各種の動作を行わせるようになっている。
　前述した図２を用いてこの実施例を説明すると、例えば電子機器１を基準位置に対して右側に傾けた場合、ポインタ１０７を下方に移動させ表示領域１０３の下縁１０５に接触させる。ポインタ１０７が下縁１０５に接触すると、これを表示要素１００に対するスクロール移動を行わせる操作であると判断し、表示領域１０３上に表示されている表示要素１００を連続的に上方に向かって移動させる。
　また、電子機器１を左側に傾けた場合、ポインタ１０７を上方に移動させ表示領域１０３の上縁１０４に接触させる。ポインタ１０７が上縁１０４に接触すると、これを表示要素１００に対するスクロール移動を行わせる操作であると判断し、表示領域１０３上において、各表示要素１００を連続的に下方に向かって移動させる。
　また、左右方向に傾斜とともに前後方向の傾斜を総合すると、表示領域１０３上においてポインタ１０７を上下、左右に移動させることができる。
　すなわち、入力デバイスを用いてポインタ１０７を操作するのと同様の作用を、電子機器１を傾斜させる等の操作によって行うことができ、マウス等を使用するのと同様に表示領域１０３上に表示されるＧＵＩの選択や操作を行うことを可能にしている。
　このように、本実施例に係る電子機器１は、表示領域１０３上における各種情報の表示を、外部から受ける物理的な作用によって、直接若しくは間接的に操作できるという作用、効果を有している。
　なお、上記の例は、電子機器１の傾斜を図２に示したＺ軸方向を基準に判断する場合を説明したが、必ずしもＺ軸方向を基準にする必要は無い。
　例えば、利用者が通常よく使う姿勢を記憶してこれを基準とし、この基準に対して前後左右の傾斜を検出してもよい。また、電子機器１が一定時間静止に近い状態を保っている場合に、その静止に近い状態の姿勢を基準として前後左右の傾斜を検出してもよい。
　その他、電子機器に対する物理的な作用として、電子機器１を構成する筐体を軽くタップ（叩く）するような行為を行った場合に、そのタップの振動や音を加速度センサ若しくはマイク１６等によって検出し、この検出結果に基づいて上述したSNSの投稿表示や、電子機器１上で実行されるプログラム等を制御してもよい。その他、電子機器１が備える各種のセンサから取得する情報を、前述したSNSの投稿を表示するシステムと組み合わせ、若しくは置き換えて使用してもよいものである。
　さらに他の実施例について説明する。
　図４は、タッチパネル２上に動画再生プレイヤー（以下「プレイヤー」という）を表示した電子機器１の説明図である。プレイヤーは、一例として電子機器１上で実行可能なアプリケーションプログラムとして提供されるものである。
　プレイヤーは、電子機器１内に記憶したデータを再生する場合の他、インターネット上に保存されている動画ファイルを再生するものである。何らかのコンテンツを表示する動画ファイルは、ストリーミングデータとして電子機器１に供給され、タッチパネル上に表示されるＧＵＩスイッチ画像（以下「ＧＵＩ」という）の操作に従って表示操作が行われるものである。ＧＵＩは、物理的なスイッチと同様に電子機器１に対して操作入力を行う操作手段として構成されたものである。
　表示操作を行うＧＵＩとしては、再生開始スイッチ２０、再生停止スイッチ２１、再生位置送りスイッチ２２、再生位置戻しスイッチ２３、再生位置の表示を兼ねた再生位置指定スイッチ２４が設けられている。再生停止スイッチ２１は、動画の再生が停止している状態では再生開始スイッチ２０として機能する。再生開始スイッチ２０は、動画データを連続的に再生表示させるスイッチであり、再生停止スイッチ２１は動画再生を停止させるスイッチである。
　また、動画データは、一定量の再生単位毎に順次再生を行わせるストリーミングデータであり、再生位置送りスイッチ２２、再生位置戻しスイッチ２３若しくは再生位置指定スイッチ２４を操作すると、再生単位毎に再生位置を指定できるようになっている。特に、再生位置送りスイッチ２２は、再生単位毎に再生開始位置を一定間隔でスキップするように先送りし、再生位置を進めて動画の再生を行わせるものである。また、再生位置戻しスイッチ２３は、再生単位毎に再生開始位置を戻し、時間的に遡った再生位置から動画の再生を行わせるものである。
　再生位置指定スイッチ２４は、動画の再生開始位置を左端および再生終了位置を右端として動画の全再生時間を一本のメーターのように表した表示部を兼ねており、当該表示部上の任意の位置を指定することで、その部位から再生を開始させるように構成したものである。
　本実施例では、再生済みの時間を塗りつぶし部分２５としてメーター中に表示し、未再生時間を白抜き部２６として表示している。この塗りつぶし部分と白抜き部の境界が、動画の再生位置を表している。
　動画を再生する場合、画面上に表示されている前記各種のＧＵＩを操作することにより、動画の表示を制御するようになっている。本実施例では、このようなＧＵＩの操作による動画の表示制御に加えて、電子機器１が備えるセンサ１０から取得した情報に基づいて、動画の再生を制御するようになっている。具体的には、センサ１０の一つであるジャイロセンサ１１を用いた電子機器１の姿勢に基づいて、動画の再生を制御するようになっている。
　以下、センサ１０を使用した動画の表示制御（以下「モーション制御モード」という。）の一例として、ジャイロセンサ１１を用いた動画の表示制御について説明する。
　図５は、ジャイロセンサ１１によって検出される電子機器１の各姿勢を表している。
　姿勢Ａは、タッチパネルが水平方向に沿って横長の配置となるように電子機器１を横向きの姿勢にし、かつタッチパネルが水平方向を向く姿勢にした状態を表している。
　電子機器１が任意の姿勢のときに後述するモード使用スイッチ３０の操作が行われるとモーション制御モードに入る。この際、モード使用スイッチ３０が操作された時の姿勢を初期状態として記憶し、この姿勢を基準としてジャイロセンサ１１が電子機器１の前後、左右の傾斜を検出する。
　一例として、電子機器１が姿勢Ａの状態である場合にモード使用スイッチ３０が操作されると、姿勢Ａを基準として水平方向に沿ったタッチパネルの横長方向をＸ軸、水平方向を向くタッチパネルの正面方向（タッチパネルに対する直角方向）をＹ軸、上下方向をＺ軸として設定する。その後、この座標軸を基準として電子機器１の傾斜姿勢をジャイロセンサ１１によって検出するようになっている。
　姿勢Ｂは、電子機器１をＸ軸を中心として前方に傾けた状態を表している。この場合、ジャイロセンサ１１はこの回転方向と傾斜角度を検出する。
　姿勢Ｃは、電子機器１をＸ軸を中心として後方に傾けた状態を表している。この場合、ジャイロセンサ１１はこの回動方向と傾斜角度を検出する。
姿勢Ｄは、電子機器１をＺ軸を中心として左方向に傾けた状態を表している。この場合、ジャイロセンサ１１はこの回動方向と傾斜角度を検出する。
姿勢Ｅは、電子機器１をＺ軸を中心として右方向に傾けた状態を表している。この場合、ジャイロセンサ１１はこの回動方向と傾斜角度を検出する。
　図６は、モーション制御モードにおける電子機器１の姿勢と、姿勢に応じた制御内容の説明図である。
　モーション制御モードでは、電子機器１の姿勢に基づいてＧＵＩに割り当てられている制御を実行する。なお、モーション制御モードの場合、必ずしもＧＵＩを画面上に表示しておく必要はなく、ＧＵＩを非表示にしたまま電子機器１の姿勢の変動に応じて画像の表示内容の制御を行えば良い。当然ながら、モーション制御モードの場合でも、ＧＵＩを使用可能となるように画面上に表示させておいても差し支えない。
　本実施例では、一例として画面上に表示したモード使用スイッチ３０を操作することで、モーション制御モードと非モーション制御モードを選択的に切り替えることができるようになっている。
　モード使用スイッチ３０は、上記のようにＧＵＩのみを使用する制御モード（非モーション制御モード）から、モーション制御モードを選択的に使用可能にするスイッチであるが、同時に電子機器１の初期姿勢を設定するスイッチでもある。すなわち、モード使用スイッチ３０が操作された時の姿勢を初期姿勢として記憶し、この初期姿勢を基準とした左右および前後の傾斜角度に基づいて電子機器１を制御する。この初期姿勢を変更したい場合には、一度非モーション制御モードにした後に、再度モーション制御モードにすればよい。
　本実施例では、ジャイロセンサ１１によって検出可能な姿勢を、一例として図５に示したように姿勢Ａ～Ｅの５種類に設定している。すなわち、ジャイロセンサ１１によって検出する姿勢Ａを初期姿勢、姿勢Ｂを前方傾斜、姿勢Ｃを後方傾斜、姿勢Ｄを左傾斜、姿勢Ｅを右傾斜として設定している。そして、当該ジャイロセンサ１１が検出した各姿勢に応じて動画の再生を制御するようになっている。
　モーション制御モードでプレイヤーを操作するには、例えば姿勢Ａの状態でモード使用スイッチ３０を操作する。これにより、モーション制御モードに移行するとともに初期姿勢として姿勢Ａが記憶される。
　制御手段８は、上記姿勢Ａを基準として電子機器１の筐体を姿勢Ｂの方向に前方傾斜させると、ジャイロセンサ１１の検出情報に基づき、設定した角度まで回動したことを条件として姿勢Ｂの状態に至ったことを判断する。制御手段８は、電子機器１の筐体の角度が姿勢Ｂの状態になったことを認識すると、再生開始スイッチ２０が操作されたのと同様に動画の再生を開始する。
　また、これと同様に姿勢Ａの状態を基準として電子機器１を姿勢Ｃの状態まで後方傾斜させると、ジャイロセンサ１１はこの傾斜を検出して制御手段８に出力する。制御手段８はこの情報に基づき再生停止スイッチ２１が操作されたのと同様に動画の再生を停止する。また、姿勢Ａの状態を基準として電子機器１を姿勢Ｄの状態まで左傾斜させると、ジャイロセンサ１１はこの傾斜を検出して制御手段８に出力し、制御手段８はこの情報に基づき再生位置戻しスイッチ２３が操作されたのと同様に再生中の動画を巻き戻すような処理を行う。
　また、姿勢Ａの状態を基準として電子機器１を姿勢Ｅの状態まで右傾斜させると、ジャイロセンサ１１はこの傾斜を検出して制御手段８に出力し、制御手段８はこの情報に基づき再生位置送りスイッチ２２が操作されたのと同様に再生中の動画の再生位置を先送りする。
　ＧＵＩのみを使用する従来の制御方法では、一方の手で電子機器１を把持し、他方の手でタッチパネルを操作する必要があった。すなわち、両手を使用することを前提として操作方法が設定されていた。
　これに対して本実施例に係る画像表示の制御方法は、再生している動画の停止、再生、先送り、戻しといった複数の制御を、両手を使用することなく、片手で把持した電子機器１の傾斜方向を変えるという極めて簡単な方法で可能にしている。
　電子機器１に、上記のようなモーション制御モードを搭載するには幾つかの態様がある。第１の態様は、アプリケーションプログラムとして一体的にパッケージされているプレイヤーに、予めモーション制御モードを実行するプロセスを組み込んでおく方法である。電子機器１に、予めモーション制御モードを備えたプレイヤーを搭載しておく場合には、この方法が適している。
　第２の態様は、プレイヤーとは別にモーション制御モードを実行可能なプログラムを設け、プレイヤーに対するアドオンプログラムとして、プレイヤー使用時にモーション制御モードを実行可能にする方法である。これは、準標準的に電子機器１に搭載されているプレイヤーがある場合、このプレイヤーとの連携が可能なアドオンプログラムを設け、プレイヤーの追加機能としてモーション制御モードを行わせるものである。
　第３の態様は、ブラウザ上で動画を再生するような場合、スクリプト言語のようなブラウザで実行可能なプログラムを設け、このプログラムにモーション制御モードを実行するプロセスを搭載するものである。
　本実施の形態に係る画像表示のコントロール方法は、上記のように動画を再生するプレイヤーに、各種の態様でモーション制御モードを適用することが可能である。なお、上記のようなモーション制御モードは、動画の再生プレイヤーのみならず、他のコンテンツデータを表示する各種プログラムにおいても使用することができるものである。以下、他の適用例の一部を簡単に説明する。
　テレビ放送の場合
　電子機器１には、テレビチューナーを内蔵し、テレビ局から送信された電波を受信して画面上で視聴できるように構成した携帯端末がある。このような携帯端末はテレビ視聴用のプログラムを記憶しており、当該プログラムの実行によって視聴するテレビ局の選局、音量の調節等を行うようになっている。これは、放送されている電波を受信して表示するものであるが、コンテンツデータとしては実質的にサーバからストリーミングデータとして受信したものを表示する場合とほぼ同一の原理であると考えて良い。ただし、放送電波を受信して表示する場合には、巻き戻しや先送りといった機能は無い。
　図７は、電子機器１に搭載されているテレビの視聴画面４０を示している。この視聴画面４０は、中央に視聴映像を表示する映像領域４１を有し、右端に複数のテレビ局を選択可能に表示したチャンネルバー４２を設けている。
　チャンネルバー４２は、一例として図示しているような△マーク４３によって視聴中のチャンネルを示すようになっている。視聴するチャンネルは、ＧＵＩ化されている△マーク４３を指先で移動させたり、チャンネルバー４２内に配置されているＧＵＩ化された個別のチャンネル表示枠を指先で触れる等の方法で選択するようになっている。また、チャンネルの番号が増加する方向（下方向）を順方向、チャンネルの番号が減る方向（上方向）を逆方向として選択するチャンネルを自動的に移動させることができるようになっている。なお、チャンネルパー４２は、上下方向に沿ってチャンネルを表示する形態に限らず、左右方向に沿って表示させたり、円環状に表示するなど種々の態様で設けても差し支えない。
　また、出力中の音の大きさを表示する表示部を兼ねたＧＵＩ化された音量調整スイッチ４４と、モーション制御モードを使用可能にするためのモード使用スイッチ４５を設けている。
　テレビの視聴画面４０においてモーション制御モードを使用すると、視聴するチャンネルの選局や音量の調節を電子機器１の姿勢の変化によって行わせるように構成することができる。例えば、モード使用スイッチ４５に触れるとジャイロセンサ１１によって電子機器１の姿勢が検出され記憶される。そして、例えば図５に示した姿勢Ａの状態でモード使用スイッチ４５に触れると、タッチパネルの表示直を横長の状態で垂直にした姿勢Ａが検出され記憶される。
　一例として、姿勢Ａの状態から左方向に回動させて姿勢Ｄの状態まで電子機器１を傾けると、チャンネルバー上で選択されているチャンネルが順方向に移動して次のチャンネルが選択される。例えば選択しているチャンネルを「４ｃｈ」から「５ｃｈ」に移動させる。また、左方向に回動させた姿勢Ｂの状態を維持すると、チャンネルバー上における選択チャンネルが順方向に沿って順次移動を続け、姿勢を戻すとその時点で選択されているチャンネルの放送を受信して画面上に表示する。
　また、姿勢Ａの状態から右方向に回動させて姿勢Ｅの状態まで電子機器１を傾けると、チャンネルパー上で選択されているチャンネルが順方向とは逆の方向に移動してチャンネルが選択される。例えば選択しているチャンネルを「４ｃｈ」から「５ｃｈ」に移動させる。また、右方向に回動させた姿勢Ｅの状態を維持すると、チャンネルバー上における選択チャンネルが逆方向に順次移動を続け、姿勢を戻すとその時点で選択されているチャンネルの放送を受信して画面上に表示する。
　なお、モーション制御モードを実施する場合には、必ずしも前述したチャンネルバーを表示する必要はなく、チャンネルバーのような表示手段の無い状態でチャンネルの切り替えを行えるようにしても差し支えない。
　また、姿勢Ａの状態から後方に回動させて姿勢Ｃの状態まで電子機器１を傾けると、スピーカーから出力している音声の音量を増加させるようになっている。また、姿勢Ａの状態から前方に回動させて姿勢Ｂの状態まで電子機器１を傾けると、スピーカーから出力している音声の音量を減少させるようになっている。このように、電子機器１の傾きによって音量の調整が行えるようになっている。
　さらに、傾ける電子機器１の角度に応じて、音量の増加若しくは減少させる割合を変化させるようにしてもよい。すなわち、傾ける角度が小さい場合にはゆっくり音量が増減し、傾ける角度を大きくすると音量を急激に変化させるといった音量制御が可能になる。
　なお、このモーション制御モードを使用した音量の調節は、モード使用スイッチに触れている間だけ機能するようにしてもよい。このように構成すると、意図せず電子機器１を傾けてしまっても、大音量の音が出力される等といった不都合を回避することができるようになる。
　また、音量調整スイッチは視聴中の映像を邪魔しないように、小さなスライドバーのような形態で設ける場合が多いが、このような小さなスイッチを指先で操作することはかなり面倒なものである。これに対して、この実施例では音量の増減といった制御を電子機器１を傾斜させるといった簡単な操作で行うことができるものとなっている。
　上記のモーション制御モードは、主に電子機器１を片手で把持したまま電子機器１を操作したい場合や、操作しにくい小さなスイッチが搭載されている場合の代替的なスイッチ機能として用いることができるものである。
　また、ジャイロセンサは電子機器１の傾きを検出するだけであるから、物理的な衝撃等を電子機器に対して与えることがなく、各種の制御を代替入力するための最適な手段と言えるものである。
　以上説明したモーション制御を利用した操作方法は、前述した用途以外に画面に表示する様々なコンテンツの表示制御に利用することができるものである。
　例えば「ＳＴＲＥＥＴ　ＶＩＥＷ」（Ｇｏｏｇｌｅ　Ｉｎｃ．の国際登録された商標）のような、視点を移動させながら様々な場所の写真若しくは映像表示するサービスにも用いることができるものである。この場合、電子機器を左側に傾斜させると視点を左側に旋回し、電子機器を右側に傾斜させると視点を右側に旋回し、電子機器を前方に傾斜させると視点を前方に移動し、電子機器を後方に傾斜させると視点を後方に移動するような表示を行わせることが出来る。
　また、画面に表示するコンテンツが電子書籍の場合には、電子機器を左側に傾斜若しくは後方に傾斜させると表示している視聴ページを次のページに進め、電子機器を右側若しくは前方に傾斜させると表示している視聴ページを前のページに戻して表示させる等の表
示制御を行わせることが出来る。
　また、画面に表示するコンテンツがブラウザを利用して表示するＨＴＭＬファイルの場合、電子機器を前方に傾斜させると閲覧している画面を上方にスクロールし、電子機器を後方に傾斜させると閲覧している画面を下方にスクロールし、電子機器を左側に傾斜させると画面の表示を左側に移動させ、電子機器を右側に傾斜させると画面の表示を右側に移動させるといった表示制御を行わせることができる。また、他のＧＵＩスイッチとモーション制御を併用して、閲覧している部分を拡大表示したり縮小表示するなどの視聴も行わせることが出来る。
　また、様々なコンテンツに応じて専用のビューワープログラムを設ける場合には、モーション制御モードによってコンテンツの特性に合わせた様々な表示制御を行わせることが出来る。
　例えば、画面内でキャラクターが移動するように表示した動画若しくはゲーム画像のようなコンテンツの場合には、モーション制御モードによって画面内に表示したキャラクターを進行、後退、ジャンプ、回転させるような表示内容の制御を行うことができる。
　また、キャラクターを３Ｄデータで作成している場合若しくは各種の方向から見たキャラクターの画像を複数枚用意することによって立体感を有する画像として視聴できるように構成した場合がある。このようなコンテンツの場合、モーション制御モードによって様々な視点から見たキャラクターの状態を画面に表示するような制御を行うことができる。
　また、上記の実施例はタッチパネルを有する電子機器を例として説明したが、本発明はタッチパネルではない単純な表示装置を有する電子機器においても実施可能なものとなっている。タッチパネルを持たない電子機器では、表示装置以外の部分にこの電子機器を操作する物理的スイッチが設けられている。このような電子機器にモーション制御モードを搭載すると、物理的スイッチに対応した制御をセンサの検出内容に基づいて行うことができるようになる。
　また、電子機器を傾けた状態で上下若しくは左右に振るといった動作を、ジャイロセンサ１１と加速度センサ１２の組み合わせによって検出して、その検出情報に基づいて各種の制御を行わせるように構成してもよい。すなわち、各種のセンサによって検出した情報を組み合わせることで、各センサ単体で使用する場合と比較して、さらに複数種類の操作指示を電子機器に対して入力することができるようになる。
　前述したように、電子機器１の表示手段３には、予め記憶手段に記憶されている画像若しくはプログラムによって生成される画像、動画ファイル、電子書籍用デー夕、ＨＴＭＬ、テレビ放送デー夕、動画ストリーミングデータ等の動画を含む各種画像を表示することができる。そして、センサを利用して各種画像の表示を制御することは前述した通りであるが、そのままでは画面を見ている視聴者に対して表示している画像も電子機器１とともに傾いてしまう。このような現象を解決するために、本実施例では以下のような制御を行うことが出来る。
　図８は、上記の現象を解決した画面表示の制御方法の一例を表した説明図を表している。前述した例では、センサの一つであるジャイロセンサ１１を利用して画面表示内容を制御するものであった。一例として図３に示す姿勢Ｄ、姿勢Ｅのように電子機器１を左右に傾けると、動画の再生位置を先送りしたり、視聴するテレビ局の選局を行えるものである。
　この制御方法では、例えば姿勢Ｄのように電子機器１を基準の姿勢から角度θ傾けた場合に、この姿勢の変化をジャイロセンサ１１に検出させ、表示手段３内に表示している画像を電子機器１の傾斜とは反対の方向に、同じ角度量だけ傾斜させて表示する制御を行う。すなわち、電子機器１は傾斜しても、表示している画像や画角の姿勢は元の状態を維持するようになっている。
　このような電子機器１の傾斜に伴う画像や両角の角度補正を伴う画面表示の制御方法を行うと、電子機器１が傾斜しても表示される画像や動画像の視穂者に対する相対的な位置関係は変化しない。このため、電子機器１の傾斜に連動させて顔を傾けたりすることなく、視聴を継続させることができるという作用、効果を有するものとなっている。
また、モード使用スイッチ３０若しくは他に設けたＧＵＩスイッチを利用して、画像表示の初期姿勢を定義することが可能である。この場合、電子機器１を傾斜させた任意の姿勢を初期姿勢として定義し、初期姿勢の状態から電子機器１が傾いても初期姿勢と同様の向きで画像表示を行わせることが可能である。
　本実施例では、上記のように設定した初期姿勢に対して前記筐体が傾斜した場合に、表示している画像を前記初期姿勢において表示していた状態を維持するように傾斜制御することを特徴とする。
なお、傾斜の検出は表示画面と平行な平面内における傾斜だけではなく、表示画面に対する前後方向を含めた総合的な傾斜に基づいて制御することも可能であり、仕様に応じて適宜最適な方法を採用する。
　以上説明したセンサを利用した操作方法は、コンテンツ画像の表示制御を中心として説明したものであるが、画像の表示に関わらずスイッチを用いた各種操作を代替させることができるものである。
　また、以上説明した各種の実施例は、種々組み合わせて実施することが出来るものであり、特許請求の範囲に記載した事項を逸脱しない範囲において種々の態様を包含し、それに応じて適宜応用可能なものである。
　本発明は、スマートフォンやタブレット端末等の電子機器、電子機器の操作方法、操作システムおよびこれらのために作成されるプログラムに利用可能である。
１ 電子機器
２ タッチパネル
３ 表示手段
４ タッチセンサ
５ 演算プロセッサ
８ 制御手段
９ 通信モジュール
１０ センサ
１１ ジャイロセンサ
１２ 加速度センサ
１３ 磁力センサ
１４ 位置センサ
１５ 光センサ
１００ 表示要素
１０２ フレーム
１０３ 表示領域
１０４ 上縁
１０５ 下縁
１０６ 境界情報
１０７ ポインタ
　

Claims (10)

  1. 　ディスプレイの表示領域を超えた大きさの情報の表示を縦方向へのスクロール若しくは横方向へのスクロールによって行う場合において、
    　前記縦方向へのスクロール若しくは横方向へのスクロールを、ディスプレイを搭載した電子機器の姿勢の変化によって行うように構成したことを特徴とする情報の表示方法。
  2. 　不特定の利用者によるSNSに対する投稿を含んだ情報を、縦方向へのスクロール若しくは横方向へのスクロールによって、ディスプレイの表示領域を超えた大きさの情報を表示するものであって、
    　ディスプレイを搭載した電子機器の姿勢の変化によって、前記スクロールによる情報の表示を投稿単位で一次的に停止若しくは停止可能に構成したことを特徴とする情報の表示方法。
  3. 　前記電子機器の姿勢の変化が、当該記電子機器に搭載されている加速度センサ若しくはジャイロセンサによって取得されるものであることを特徴とする１又は請求項２記載の情報の表示方法。
  4. 　タッチパネルを備えた電子機器において、
    　タッチパネルによって構成される表示画面上に、前記電子機器の姿勢の変化によって移動するポインタを設け、
    　当該ポインタによって、表示画面上に表示した情報の選択、操作を行うように構成したことを特徴とする情報の操作方法。
  5. 　画像の表示手段を設けた筐体に作用する物理量の変化を検出可能なセンサと制御手段と操作手段を備えた電子機器における操作方法であって、
    　前記表示手段は、前記制御手段による制御に基づいて前記画像の表示を行うとともに、前記操作手段による操作に基づいて表示する画像を制御するよう構成し、
    　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする操作方法。
  6. 　画像の表示が可能なタッチパネルと当該タッチパネルを搭載した筐体に作用する物理量の変化を検出可能なセンサと制御手段を備えた電子機器における操作方法であって、
    　前記タッチパネルは、前記制御手段による制御に基づいて前記画像の表示を行うとともに、当該タッチパネルに対して行われた操作の検知を行い、当該検知したタッチパネルに対する操作に基づいて当該タッチパネルに表示する画像を制御するよう構成し、
    　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする操作方法。
  7. 　画像の表示が可能なタッチパネルと当該タッチパネルを搭載した筐体に作用する物理量の変化を検出可能なセンサと制御手段を備えた電子機器における操作方法であって、
    　前記タッチパネルは、前記制御手段による制御に基づいて前記画像の表示を行うとともに、当該タッチパネルに表示したＧＵＩ画像の操作に基づいて当該タッチパネルに表示する画像を制御するよう構成し、
    　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成したことを特徴とする操作方法。
  8. 　前記筐体に作用する物理量が、筐体の姿勢の変化であることを特徴とする請求項５乃至７の何れか一項記載の操作方法。
  9. 　前記表示する画像が、放送電波を受信したテレビ映像、インターネットを介して取得したストリーミング動画ファイル、ブラウザによって表示するＨＴＭＬファイル、ビューワーによって表示する電子書籍データであることを特徴とする請求項５乃至８記載の操作方法。
  10. 　画像の表示手段を設けた筐体の傾斜を検出可能なセンサと制御手段と操作手段を備えた電子機器における画像の表示方法であって、
    　前記表示手段は、前記制御手段による制御に基づいて前記画像の表示を行うとともに、前記操作手段による操作に基づいて表示する画像を制御するよう構成し、
    　当該表示する画像の制御を、前記センサによる検出情報に基づいて実行可能に構成するとともに、設定した初期姿勢に対して前記筐体が傾斜した場合に、表示している商像を前記初期姿勢を維持するように傾斜制御することを特徴とした画像の表示方法。
    　
    　
PCT/JP2016/088625 2016-12-26 2016-12-26 電子機器における情報の表示方法および操作方法 WO2018122896A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/088625 WO2018122896A1 (ja) 2016-12-26 2016-12-26 電子機器における情報の表示方法および操作方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/088625 WO2018122896A1 (ja) 2016-12-26 2016-12-26 電子機器における情報の表示方法および操作方法

Publications (1)

Publication Number Publication Date
WO2018122896A1 true WO2018122896A1 (ja) 2018-07-05

Family

ID=62708183

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/088625 WO2018122896A1 (ja) 2016-12-26 2016-12-26 電子機器における情報の表示方法および操作方法

Country Status (1)

Country Link
WO (1) WO2018122896A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280461A (ja) * 2006-04-04 2007-10-25 Sony Corp 再生装置、ユーザインターフェイス制御方法、プログラム
JP2007323637A (ja) * 2006-05-30 2007-12-13 Samsung Electronics Co Ltd イメージ検索方法及び装置
JP2010079785A (ja) * 2008-09-29 2010-04-08 Equos Research Co Ltd 端末装置
JP2011059781A (ja) * 2009-09-07 2011-03-24 Sony Corp 情報表示装置、情報表示方法及びプログラム
JP2012142001A (ja) * 2012-02-21 2012-07-26 Sony Corp 表示装置
WO2013084662A1 (ja) * 2011-12-09 2013-06-13 日本電気株式会社 表示装置
JP2014109866A (ja) * 2012-11-30 2014-06-12 Toshiba Corp 機器操作装置及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280461A (ja) * 2006-04-04 2007-10-25 Sony Corp 再生装置、ユーザインターフェイス制御方法、プログラム
JP2007323637A (ja) * 2006-05-30 2007-12-13 Samsung Electronics Co Ltd イメージ検索方法及び装置
JP2010079785A (ja) * 2008-09-29 2010-04-08 Equos Research Co Ltd 端末装置
JP2011059781A (ja) * 2009-09-07 2011-03-24 Sony Corp 情報表示装置、情報表示方法及びプログラム
WO2013084662A1 (ja) * 2011-12-09 2013-06-13 日本電気株式会社 表示装置
JP2012142001A (ja) * 2012-02-21 2012-07-26 Sony Corp 表示装置
JP2014109866A (ja) * 2012-11-30 2014-06-12 Toshiba Corp 機器操作装置及びプログラム

Similar Documents

Publication Publication Date Title
US11816303B2 (en) Device, method, and graphical user interface for navigating media content
CN108235086B (zh) 视频播放控制方法、装置及相应的终端
KR102085181B1 (ko) 데이터 전송 방법, 데이터 수신 방법, 및 디바이스
US10477006B2 (en) Method, virtual reality system, and computer-readable recording medium for real-world interaction in virtual reality environment
US10187520B2 (en) Terminal device and content displaying method thereof, server and controlling method thereof
US9628744B2 (en) Display apparatus and control method thereof
US10817243B2 (en) Controlling a user interface based on change in output destination of an application
JP5912014B2 (ja) ３ｄリモートコントローラ用のｇｕｉアプリケーション
US20150193036A1 (en) User terminal apparatus and control method thereof
US20150193103A1 (en) User terminal apparatus and control method thereof
KR102350933B1 (ko) 영상표시장치
CN107113468B (zh) 一种移动计算设备以及实现的方法、计算机存储介质
US11604535B2 (en) Device and method for processing user input
KR102378570B1 (ko) 휴대 장치 및 휴대 장치의 화면 변경방법
CN103019536A (zh) 演示期间交互地缩放内容
EP2439627A2 (en) Electronic device having movement-based user input and method
KR20140133353A (ko) 디스플레이 장치 및 그 ui 화면 제공 방법
CN112230914B (zh) 小程序的制作方法、装置、终端及存储介质
JP2016528575A (ja) ディスプレイ装置及びそのｕｉ提供方法
JP6082190B2 (ja) プログラム、情報処理装置、画像表示方法及び表示システム
JP2013250772A (ja) プログラム、情報処理装置、画像表示方法及び表示システム
WO2018122896A1 (ja) 電子機器における情報の表示方法および操作方法
WO2013164351A1 (en) Device and method for processing user input
WO2015174466A1 (ja) 端末装置、制御方法、およびプログラム
JP6568795B2 (ja) 電子機器の操作方法および画像の表示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16925073

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16925073

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018558514

Country of ref document: JP

Kind code of ref document: A