WO2013186964A1 - 操作表示装置、プログラム - Google Patents

操作表示装置、プログラム Download PDF

Info

Publication number
WO2013186964A1
WO2013186964A1 PCT/JP2013/001371 JP2013001371W WO2013186964A1 WO 2013186964 A1 WO2013186964 A1 WO 2013186964A1 JP 2013001371 W JP2013001371 W JP 2013001371W WO 2013186964 A1 WO2013186964 A1 WO 2013186964A1
Authority
WO
WIPO (PCT)
Prior art keywords
processing unit
graphic
analysis processing
article
display
Prior art date
Application number
PCT/JP2013/001371
Other languages
English (en)
French (fr)
Inventor
富一 今井
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to CN201380030490.3A priority Critical patent/CN104350457A/zh
Priority to US14/406,943 priority patent/US9921669B2/en
Priority to EP13804627.1A priority patent/EP2863292A4/en
Publication of WO2013186964A1 publication Critical patent/WO2013186964A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source

Definitions

  • the present invention relates to an operation display device that controls a load using a touch panel, and a program for realizing the function of the operation display device using a computer.
  • the touch panel is placed on the screen of the display unit, and the operation content is specified in association with the display content of the display unit. Therefore, when simulating operation knobs that move straight or rotate with a touch panel, a figure representing the operation knob is displayed on the display, and the figure changes as the operation object such as a fingertip or pen tip that touches the touch panel moves. It will be.
  • the display content of the display unit is set so that the position of the operation knob figure changes on a straight line defined as the movement range of the operation knob.
  • the position of the operation knob figure is changed.
  • it is configured to change with the movement of the operation article.
  • the display contents of the display are set so that the figure of the operation knob rotates around a predetermined rotation center.
  • the rotational position of is changed in accordance with the movement of the operation article.
  • the operation knob using the touch panel is not an actual structure and the surface of the touch panel is a flat surface, the touch of touching the operation knob with the control knob cannot be distinguished from the touch of other parts of the touch panel. Therefore, in order to move the operation article so as not to leave the operation knob, the user needs to move the operation article while visually confirming the position of the operation knob.
  • the present invention is an apparatus that adjusts a control amount of a load using a touch panel, and allows the user to change the control amount without visually checking the touch panel, and as a result, an operation that improves the convenience of the user. It is an object to provide a display device, and further to provide a program that realizes the function of the operation display device using a computer.
  • the operation display device outputs a signal indicating an operation figure for adjusting a control amount instructed to a load, and a signal indicating a contact position of an operation object superimposed on a screen of the display.
  • An operation unit an analysis processing unit that receives the signal from the operation unit and analyzes the operation content of the operation item by associating the contact position of the operation item with the operation unit with the operation graphic; and the analysis process
  • a display processing unit for determining the shape and position of the operation graphic to be displayed on the display unit according to the operation content analyzed by the unit, and the control amount is adjusted according to the operation content analyzed by the analysis processing unit.
  • the analysis processing unit is configured to release the operation object from the operation device when a position where the operation object starts to contact the operation device is within an operation region set in the operation graphic.
  • the operation content is determined as the adjustment operation while the contact position of the operation article is within the tracking range, and the operation content is determined while the contact position of the operation article is outside the tracking range. It is desirable to determine the movement operation.
  • the analysis processing unit makes contact with the operation device when the position at which the operation object starts to contact the operation device is within the operation region set in the operation graphic. If the operation article does not move until a predetermined determination time elapses after the start, it is desirable to prohibit displacement of the operation graphic in a period until the operation article is detached from the operation device.
  • the analysis processing unit associates the control amount instructed to the load control unit with the position when the position where the operation object starts to contact the operation device is within the tracking range. In addition, it is desirable to instruct the display processing unit to associate the shape of the operation graphic with the control amount.
  • the operation graphic is a straight operation unit including a slider that moves on a straight line, and the tracking range includes the entire region of the movement locus along the movement locus of the slider. It is desirable to be set to.
  • the operation graphic is a rotation operation unit including a dial that rotates around a rotation center and a dot that indicates a rotation position, and the tracking range corresponds to the movement locus of the dot. It is desirable to set so as to encompass the entire area of the movement locus.
  • the analysis processing unit sets the rotation ratio so that the rotation angle of the dial is smaller than the rotation angle of the operation article.
  • the analysis processing unit determines that the operation content is the adjustment operation, and the operation object continues to rotate in a period until the operation object is detached from the operation device. It is desirable that the displacement of the operation graphic is prohibited and the control amount is adjusted according to the rotation angle of the operation article.
  • the analysis processing unit instructs the display processing unit to return the operation graphic to an initial position when the operation object comes out of contact with the operation unit and then leaves the operation unit. Is desirable.
  • the program according to the present invention outputs a signal indicating the contact position of the operation object superimposed on the display of the display on which the operation graphic for adjusting the control amount instructing the load to the computer is displayed.
  • An operation unit that receives the signal from the operation unit, and analyzes an operation content of the operation item by relating a contact position of the operation item to the operation unit with the operation graphic, and the analysis
  • a display processing unit for determining the shape and position of the operation graphic to be displayed on the display unit according to the operation content analyzed by the processing unit, and the analysis processing unit displays the operation content in the operation graphic.
  • the display processing unit has a function of classifying a movement operation that changes a position and an adjustment operation that adjusts the control amount, and the contact position of the operation article with respect to the operation device is the position of the operation graphic.
  • the contact position of the operation article is intended to function as a device for displacing the operating graphic to fit the tracking range.
  • the present invention is not limited to a program, and may be a computer-readable recording medium that records the program.
  • the user in a device that adjusts the control amount of a load using a touch panel, the user can change the control amount without visually observing the touch panel. There is an advantage of improving.
  • the operation display device includes a display device 20 formed of a flat panel display, an operation device 30 formed of a touch panel arranged on the screen of the display device 20, display contents of the display device 20, and the operation device 30. And an arithmetic and control unit 10 for determining the input to.
  • the display 20 displays an operation graphic 21 described later.
  • the operation device 30 outputs a signal indicating the contact position of the operation article 31 with respect to the operation device 30 to the arithmetic control device 10.
  • the flat panel display used for the display device 20 is a dot matrix type, and is selected from a liquid crystal display, an organic EL display, and the like.
  • the touch panel constituting the operation device 30 may be any of a resistance film type, a capacitance type, an ultrasonic type, and an optical type, but it is desirable to select a resistance film type or a capacitance type with a simple configuration.
  • the operation device 30 is operated using an operation article (contact body) 31 such as a fingertip or a pen tip.
  • the arithmetic and control unit 10 has a function of controlling the load 40 according to the display content of the display device 20 and the operation content to the operation device 30 (operation to the operation device 30). Therefore, the arithmetic and control unit 10 includes the interface unit 11 that connects the display device 20, the operation device 30, and the load 40.
  • the interface unit 11 includes communication interface units (communication I / F) 112, 113, and 114 that connect the display unit 20, the operation unit 30, and the load 40, respectively.
  • the arithmetic and control unit 10 instructs the display processing unit 12 that determines the display content of the display device 20, the analysis processing unit 13 that analyzes the operation content to the operation device 30 (operation to the operation device 30), and the load 40 to operate.
  • the load control unit 14 is provided.
  • the analysis processing unit 13 has, as basic functions, a function for detecting the timing and position of pen-down (ie, contact) and pen-up (ie, detachment) of the operation article 31 with respect to the operation device 30, and the position of the operation article 31 during pen-down.
  • the analysis processing unit 13 receives a signal indicating the contact position of the operation article 31 with respect to the operation device 30 from the operation device 30 and detects the contact position of the operation object 31 with respect to the operation device 30.
  • an operation detection function called “pinch” or “flick” is not considered in this embodiment because it is unnecessary.
  • the display processing unit 12 displays the operation graphic 21 for adjusting the control amount instructed to the load 40 on the screen of the display 20.
  • the display processing unit 12 also displays the shape of the operation graphic 21 displayed on the screen of the display device 20 based on the operation content (operation to the operation device 30) of the operation device 30 analyzed by the analysis processing unit 13. Has the function of determining the position.
  • the load control unit 14 adjusts the control amount instructed to the load 40 in accordance with the operation content analyzed by the analysis processing unit 13 (operation analyzed by the analysis processing unit 13).
  • the arithmetic and control unit 10 is realized by a combination of an appropriately configured interface unit 11 and a microcomputer, but can be configured using a processor that operates according to a program in addition to the microcomputer.
  • the arithmetic control device 10, the display device 20, and the operation device 30 can be integrated by a single casing, and the load control unit 14 and the communication I / F 114 of the arithmetic control device 10 are separated. It can also be housed in a separate housing and separated into two housings.
  • the arithmetic control device 10, the display device 20, and the operation device 30 may be used not in a dedicated device but in an existing device including a touch panel and a processor such as a smart phone or a tablet terminal. In this case, a configuration is adopted in which a program that realizes the following functions is installed in an existing device, and communication is performed with a device that includes the load control unit 14 and the communication I / F 114.
  • the operation graphic 21 in this embodiment includes a straight operation unit 211 and a rotation operation unit 212.
  • the rectilinear operation unit 211 includes a rectangular slider 2111 and a guide 2112 that regulates the movement range of the slider 2111 on a straight line. That is, the slider 2111 moves on a straight line defined by the guide 2112.
  • the rotation operation unit 212 includes a circular dial 2121 that rotates around the center, and dots 2122 that indicate a guideline (rotation position) of the rotation angle of the dial 2121.
  • the analysis processing unit 13 analyzes the operation content on the operation device 30 (operation on the operation device 30) in association with the operation graphic 21 displayed on the display device 20. First, the analysis processing unit 13 receives a signal indicating the contact position of the operation article 31 with respect to the operation device 30 from the operation device 30 and detects the contact position of the operation object 31 with respect to the operation device 30. Then, the analysis processing unit 13 analyzes the operation content of the operation article 31 (operation of the operation article 31) by associating the contact position of the operation article 31 with the operation device 30 with the operation graphic 21. That is, the analysis processing unit 13 analyzes the operation performed by the operation article 31 on the operation device 30 by associating the contact position detected by the operation device 30 with the operation graphic 21.
  • the analysis processing unit 13 distinguishes between an operation for moving the slider 2111 upward and an operation for moving the slider 2111 downward.
  • the operation graphic 21 represents the rotation operation unit 212
  • the analysis processing unit 13 distinguishes an operation for rotating the dial 2121 clockwise and an operation for rotating counterclockwise.
  • the analysis processing unit 13 indicates the operation contents of the user with respect to the operation device 30 by a moving operation for changing the position of the operation graphic 21 without changing the shape of the operation graphic 21 and a change in the control amount of the load 40. Therefore, it has a function of classifying it into an adjustment operation for changing the shape of the operation graphic 21. That is, the analysis processing unit 13 classifies operations of the operation article 31 (operations performed by the operation article 31 on the operation device 30) into movement operations and adjustment operations.
  • the adjustment operation is an operation of moving the slider 2111 or rotating the dial 2121, whereas the movement operation displaces the straight operation unit 211 or the rotation operation unit 212 within the screen of the display 20. Means the operation to be performed.
  • the analysis processing unit 13 determines that the operation content of the operation article 31 (operation of the operation article 31) is an adjustment operation, and when the operation article 31 starts moving after the pen down, Track 31 locations. While the operation article 31 moves within the tracking range Dt defined for the slider 2111 or the dial 2121, the position of the slider 2111 or the dial 2121 is changed so as to follow the position of the operation article 31.
  • the tracking range Dt includes the entire range in which the slider 2111 can move along the movement path of the slider 2111 with respect to the slider 2111, and the dot 2122 moves along the movement path of the dot 2122 with respect to the dial 2121. Includes the entire range of possible.
  • the tracking range Dt is determined by the position of the operation graphic 21.
  • the tracking range Dt is a range virtually set in the analysis processing unit 13 and is not displayed on the screen of the display device 20, but is displayed so as to be distinguished from other regions on the screen of the display device 20. Then, it becomes a standard at the time of moving the operation thing 31.
  • the tracking range Dt set for the slider 2111 is set along the moving direction of the slider 2111, and the length in the direction orthogonal to the moving direction of the slider 2111 (the width of the straight operation unit 211) is larger than that of the slider 2111.
  • the tracking range Dt set for the straight operation unit 211 is rectangular.
  • the tracking range Dt set for the dial 2121 is set along the rotation direction of the dial 2121 and is set in a band shape wider than the diameter of the dot 2122. That is, the tracking range Dt set for the dial 2121 has a donut shape.
  • the position of the operation article 31 deviates from the tracking range Dt. Even so, the operation graphic 21 is automatically displaced to the position of the operation article 31. That is, after the user starts operating the slider 2111 or the dial 2121, the operation graphic 21 moves following the position of the operation article 31 even if the movement path of the operation article 31 meanders. It is possible to continuously change the control amount. In other words, the user can adjust the control amount of the load 40 without observing the screen of the display device 20 after starting the operation by aligning the operation article 31 with the position of the slider 2111 or the dial 2121. become.
  • the display processing unit 12 returns the operation graphic 21 to the initial position when the analysis processing unit 13 detects pen-up and detects the end of the operation on the operation graphic 21. That is, when the operation article 31 comes into contact with the operation device 30 and then leaves the operation device 30, the analysis processing unit 13 instructs the display processing unit 12 to return the operation graphic 21 to the initial position, and the display processing unit 12 Then, the operation graphic 21 is returned to the initial position. By returning the position of the operation graphic 21 to the initial position, the operation graphic 21 is always displayed at the same position on the screen of the display 20.
  • the analysis processing unit 13 recognizes the moving operation and the adjusting operation by setting the tracking range Dt accompanying the operation graphic 21, but the operation object from the pen-down position is used.
  • the movement operation and the adjustment operation may be recognized using the 31 movement directions.
  • the analysis processing unit 13 determines that the operation content of the operation article 31 (operation of the operation article 31) is the adjustment operation at the time of the pen down as described above. However, when the pen-down position of the operation article 31 deviates from the operation area, the operation content of the operation article 31 (operation of the operation article 31) is determined as a moving operation. That is, when the pen-down position of the operation article 31 deviates from the operation area set for the slider 2111 or the dial 2121, the analysis processing unit 13 moves the slider 2111 or the dial 2121 to the position where the pen-down is detected. .
  • the analysis processing unit 13 instructs the display processing unit 12 to move the slider 2111 or the dial 2121 to the position of the operation article 31 without changing the control amount of the load 40.
  • the analysis processing unit 13 tracks the contact position of the operation article 31 during the period until the operation article 31 is detached from the operation instrument 30 when the position where the operation article 31 starts to contact the operation instrument 30 is within the operation area. While within the range Dt, the operation content of the operation article 31 (operation of the operation article 31) is determined as an adjustment operation. On the other hand, while the contact position of the operation article 31 is outside the tracking range Dt, the analysis processing unit 13 determines that the operation content of the operation article 31 (operation of the operation article 31) is a movement operation.
  • the analysis processing unit 13 detects whether or not the operation article 31 has come into contact with the operation device 30 (S11), and when pen-down is detected, determines whether or not the position where the operation article 31 has touched is within the operation area. (S12). If the position of the pen-down is within the operation range (S12: Y), the analysis processing unit 13 adjusts the operation content (operation of the operation object 31) of the operation object 31 without displacing the position of the operation graphic 21. If it is recognized (S13) and the pen-down position is outside the operation range (S12: N), the operation content of the operation article 31 (operation of the operation article 31) is recognized as a moving operation for displacing the operation graphic 21 ( S14). When the analysis processing unit 13 detects pen-up after detecting pen-down (S11), the display processing unit 12 returns the operation graphic 21 to the initial position (S15).
  • the rule for moving the operation graphic 21 is to move the operation graphic 21 selected in advance, to give priority to the operation graphic 21, and to move the operation graphic 21 according to the distance from the pen-down position. For example.
  • the analysis processing unit 13 may select an operation that does not move the operation graphic 21 even when the operation article 31 moves. Such an operation selection may be performed using the time from the pen-down of the operation article 31 to the start of movement of the operation article 31.
  • the analysis processing unit 13 allows the displacement of the operation graphic 21 when the movement of the operation article 31 is detected within a predetermined determination time from the pen down, and the operation object 31 does not move beyond the determination time from the pen down.
  • the process may be selected so as to prohibit the movement of the operation graphic 21. That is, when the position where the operation article 31 starts to contact the operation device 30 is within the operation region, the operation object 31 does not move until the determination time elapses after the operation object 31 starts contacting the operation device 30.
  • the analysis processing unit 13 prohibits the displacement of the operation graphic 21 during the period until the operation article 31 is detached from the operation device 30.
  • the operation is the same as the conventional one, but the control amount is adjusted according to the movement of the operation article 31 without moving the operation graphic 21 as described later. You may do it. Note that the processing selection result is valid only during the period up to the pen-up of the operation article 31.
  • the operation graphic 21 is displaced to the contact position of the operation article 31.
  • the analysis processing unit 13 measures the elapsed time from the pen down, and when the pen up is performed within a predetermined determination period, the analysis graphic 21 is displayed. It has a function of extending the time until returning to the initial position.
  • the control amount of the load 40 can be adjusted at the position where the operation graphic 21 is moved.
  • the display processing unit 12 returns the operation graphic 21 to the initial position in the same manner as the above-described operation.
  • the above-described configuration is a technique common to the rectilinear operation unit 211 and the rotation operation unit 212.
  • techniques applicable to the rectilinear operation unit 211 and the rotation operation unit 212 will be described.
  • the slider 2111 is displayed on a part of the screen of the display device 20 for the straight operation unit 211.
  • the width of the slider 2111 is increased. It is desirable to make the width approximately the same as the screen of the display 20. That is, the entire screen of the display 20 is within the tracking range Dt, and the process of moving the operation graphic 21 as the straight operation unit 211 becomes unnecessary.
  • the resolution related to the rotation angle of the dial 2121 depends on the accuracy with which the operation device 30 detects the contact position of the operation article 31. However, depending on the use of the operation display device, it may be required to further increase the resolution related to the rotation angle of the dial 2121.
  • the analysis processing unit 13 has a function of reducing the rotation angle of the dial 2121 with respect to the rotation angle of the operation article 31 by a predetermined rotation ratio.
  • the rotation angle of the dial 2121 is adjusted more precisely than the accuracy of detecting the contact position of the operation article 31 by setting the rotation ratio so that the dial 2121 rotates once while the operation article 31 rotates three times. It becomes possible to do.
  • the rotation ratio is set so that the rotation angle of the dial 2121 is smaller than the rotation angle of the operation article 31, it is difficult to rotate the operation article 31 according to the dial 2121, and the position of the operation article 31 is positioned at the dial 2121. It becomes easy to deviate from the tracking range Dt defined in (1). In particular, if the user does not see the dial 2121 displayed on the display device 20, the position of the operation article 31 tends to deviate from the tracking range Dt.
  • the operation graphic 21 is moved when the contact position of the operation object 31 deviates from the tracking range Dt.
  • the operation graphic 21 is If the object 31 moves with the rotation of the object 31, the movement of the operation graphic 21 becomes complicated, and there is a possibility that the convenience is impaired. Therefore, when the rotation ratio is set so that the rotation angle of the dial 2121 is smaller than the rotation angle of the operation article 31, the analysis processing unit 13 desirably performs the following processing.
  • the analysis processing unit 13 determines that the contact position of the operation article 31 deviates from the tracking range Dt while the rotation of the operation article 31 continues after the adjustment operation for changing the control amount of the load 40 is started. In addition, without determining the operation content of the operation article 31 (operation of the operation article 31) as a moving operation, the determination that the operation content (operation of the operation article 31) is an adjustment operation is continued. In this case, since the analysis processing unit 13 does not determine the operation content of the operation article 31 (operation of the operation article 31) as a movement operation, the position of the operation graphic 21 is not changed, and only the dial 2121 is rotated. Become. For example, as shown in FIG.
  • the analysis processing unit 13 determines that the operation content of the operation article 31 (operation of the operation article 31) is an adjustment operation and does not change the position of the dial 2121.
  • Whether or not the operation article 31 is rotated is determined by detecting the moving direction of the operation article 31. For example, if the position of the dot 2122 before the start of the operation is the position shown in FIG. 3, when the operation article 31 is rotated, it is moved upward or downward. That is, whether or not the operation article 31 is rotating can be estimated from the relationship between the detection position at each time point of the operation article 31 and the detection positions several times before and after. Further, whether or not the operation article 31 is continuously moving can be determined by measuring the moving speed. Therefore, the analysis processing unit 13 determines whether or not the adjustment operation to be rotated is continued by using the position change and the moving speed of the operation article 31.
  • the rotation ratio may be set so that the rotation angle of the dial 2121 is larger than the rotation angle of the operation article 31.
  • the rotation ratio can be set according to the type of the load 40 if the rotation ratio can be adjusted.
  • a moving operation for moving the operation graphic 21 is possible, and therefore, a part of the operation graphic 21 may not fit within the display range of the screen of the display device 20 due to the movement operation. . Therefore, it is desirable that the analysis processing unit 13 limit the movement range of the operation graphic 21 so that the operation graphic 21 falls within the display range of the display 20.
  • the operation display device preferably notifies the user by a beep sound or the like when the operation graphic 21 does not fit in the display range of the screen.
  • the operation display device of the present embodiment stores programs for executing various functions.
  • the program is a program for causing a computer to function as a device including the arithmetic control device 10 (the display processing unit 12, the analysis processing unit 13, and the load control unit 14), the display device 20, and the operation device 30. Further, the operation display device can acquire the program using a computer-readable recording medium that records the program.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

 操作表示装置は、表示器と操作器と演算制御装置とを備える。演算制御装置は、操作物の操作内容を解析する解析処理部と、解析処理部が解析した操作内容に応じて表示器に表示させる操作用図形の形状および位置を定める表示処理部とを備える。解析処理部は、操作物の操作内容を、操作用図形の位置を変化させる移動操作と、制御量を調節する調節操作とに分類する機能を有する。表示処理部は、操作器への接触位置が操作用図形の位置で定まる追跡範囲を逸脱していると、操作物の接触位置が追跡範囲に収まるように操作用図形を変位させる。

Description

操作表示装置、プログラム
 本発明は、タッチパネルを用いて負荷を制御する操作表示装置、およびコンピュータを用いて操作表示装置の機能を実現するためのプログラムに関するものである。
 従来から、負荷の運転および停止、負荷の制御量の調節などの操作を、タッチパネルにより行う技術が提案されている。たとえば、日本国公開特許第2011-171179号公報の段落[0040]には、調光および調色を可能にする調光コントローラにおいて、直進移動と回転移動とを可能にした操作つまみをタッチパネルで実現することが記載されている。
 タッチパネルは、表示器の画面に重ねて配置されており、表示器の表示内容に関連付けて操作内容が規定される。したがって、直進移動や回転移動を行う操作つまみをタッチパネルで模擬する場合、表示器に操作つまみを表す図形を表示し、タッチパネルに触れる指先やペン先などの操作物の移動に伴って図形を変化させることになる。
 たとえば、直進移動する操作つまみを模擬するには、操作つまみの移動範囲として定められた直線上で操作つまみの図形の位置が変化するように、表示器の表示内容が設定される。この場合、操作つまみの図形が表示されている位置に操作物を触れた後に、操作物を操作つまみの図形から離れないようにして前記直線に沿って移動させると、操作つまみの図形の位置が操作物の移動に伴って変化するように構成されるのが一般的である。
 また、回転移動する操作つまみを模擬するには、操作つまみの図形が定められた回転中心の周りで回転するように、表示器の表示内容が設定される。この場合、操作つまみの図形が表示されている位置に操作物を触れた後に、操作物を操作つまみの図形から離れないようにして前記回転中心の周りで弧状に移動させると、操作つまみの図形の回転位置が操作物の移動に伴って変化するように構成されるのが一般的である。
 ところで、タッチパネルを用いた操作つまみは現実の構造物ではなく、タッチパネルの表面は平面であるから、操作物を操作つまみに触れた感触は、タッチパネルの他の部位に触れた感触とは区別できない。したがって、操作物を操作つまみから離れないように移動させるには、利用者が操作つまみの位置を目視して確認しながら、操作物を移動させることが必要になる。
 一方、調光や調色を行うための操作は、照明装置の点灯状態を目視して確認しながら行う必要がある。そのため、利用者は、タッチパネルを用いた装置によって調光や調色を行おうとすると、操作物の位置と照明装置の点灯状態との両方を目視しなければならず、利用者に対する負担が大きくなるという問題が生じる。
 本発明は、タッチパネルを用いて負荷の制御量を調節する装置において、利用者がタッチパネルを目視しなくとも制御量を変化させることを可能にし、結果的に、利用者の利便性を向上させる操作表示装置を提供することを目的とし、さらにコンピュータを用いてこの操作表示装置の機能を実現するプログラムを提供することを目的とする。
 本発明に係る操作表示装置は、負荷に指示する制御量を調節するための操作用図形が表示される表示器と、前記表示器の画面に重ねられ操作物の接触位置を示す信号を出力する操作器と、前記操作器から前記信号を受け取って前記操作器に対する前記操作物の接触位置を前記操作用図形と関係付けることにより前記操作物の操作内容を解析する解析処理部と、前記解析処理部が解析した前記操作内容に応じて前記表示器に表示させる前記操作用図形の形状および位置を定める表示処理部と、前記解析処理部が解析した前記操作内容に応じて前記制御量を調節する負荷制御部とを備え、前記解析処理部は、前記操作内容を、前記操作用図形の位置を変化させる移動操作と、前記制御量を調節する調節操作とに分類する機能を有し、前記操作物の前記操作器に対する接触位置が前記操作用図形の位置により定まる追跡範囲を逸脱している場合に、前記操作内容を前記移動操作と判断し、前記表示処理部は、前記解析処理部が前記操作内容を前記移動操作と判断すると前記操作物の接触位置が前記追跡範囲に収まるように前記操作用図形を変位させることを特徴とする。
 この操作表示装置において、前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記操作用図形に設定した操作領域内であるとき、前記操作物が前記操作器から離脱するまでの期間において、前記操作物の接触位置が前記追跡範囲内である間は前記操作内容を前記調節操作と判断し、前記操作物の接触位置が前記追跡範囲外である間は前記操作内容を前記移動操作と判断することが望ましい。
 この操作表示装置において、前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記操作用図形に設定した操作領域内であるとき、前記操作物が前記操作器に接触を開始した後に所定の判定時間が経過するまで前記操作物が移動しなければ、前記操作物が前記操作器から離脱するまでの期間において、前記操作用図形の変位を禁止することが望ましい。
 この操作表示装置において、前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記追跡範囲内であるとき、前記負荷制御部に指示する前記制御量を当該位置に対応させ、かつ前記操作用図形の形状を前記制御量に対応付けるように前記表示処理部に指示することが望ましい。
 この操作表示装置において、前記操作用図形は、一直線上を移動するスライダを備えた直進操作部であって、前記追跡範囲は、前記スライダの移動軌跡に沿って当該移動軌跡の全域を包含するように設定されていることが望ましい。
 この操作表示装置において、前記操作用図形は、回転中心の周りを回転するダイアルおよび回転位置を示すドットを備えた回転操作部であって、前記追跡範囲は、前記ドットの移動軌跡に沿って当該移動軌跡の全域を包含するように設定されていることが望ましい。
 この前記解析処理部は、前記操作物の回転角度よりも前記ダイアルの回転角度を小さくするように回転比を設定することが望ましい。
 この操作表示装置において、前記解析処理部は、前記操作内容を前記調節操作と判断した後に、前記操作物が前記操作器から離脱するまでの期間において、前記操作物が回転を継続している間は、前記操作用図形の変位を禁止し、前記操作物の回転角度に応じて前記制御量を調節することが望ましい。
 この操作表示装置において、前記解析処理部は、前記操作物が前記操作器に接触した後に、前記操作器から離脱すると、前記操作用図形を初期位置に戻すように前記表示処理部に指示することが望ましい。
 本発明に係るプログラムは、コンピュータを、負荷に指示する制御量を調節するための操作用図形が表示される表示器と、前記表示器の画面に重ねられ操作物の接触位置を示す信号を出力する操作器と、前記操作器から前記信号を受け取って前記操作器に対する前記操作物の接触位置を前記操作用図形と関係付けることにより前記操作物の操作内容を解析する解析処理部と、前記解析処理部が解析した前記操作内容に応じて前記表示器に表示させる前記操作用図形の形状および位置を定める表示処理部とを備え、前記解析処理部が、前記操作内容を、前記操作用図形の位置を変化させる移動操作と、前記制御量を調節する調節操作とに分類する機能を有し、前記表示処理部が、前記操作物の前記操作器に対する接触位置が前記操作用図形の位置により定まる追跡範囲を逸脱している場合に、前記操作物の接触位置が前記追跡範囲に収まるように前記操作用図形を変位させる装置として機能させるものである。本発明は、プログラムに限らず、当該プログラムを記録したコンピュータ読み取り可能な記録媒体であってもよい。
 本発明の構成によれば、タッチパネルを用いて負荷の制御量を調節する装置において、利用者がタッチパネルを目視しなくとも制御量を変化させることを可能にし、結果的に、利用者の利便性を向上させるという利点がある。
 本発明の好ましい実施形態をより詳細に記載する。本発明の他の特徴および利点は、以下の詳細な記載および添付図面に関連して一層よく理解されるものである。
実施形態を示す構成図である。 実施形態の動作説明図である。 実施形態の使用例を示す図である。
 以下に説明する実施形態は、直進移動する第1の操作部(以下、「直進操作部」という)と、回転移動する第2の操作部(以下、「回転操作部」という)とを備える例を用いて説明するが、直進操作部と回転操作部との一方のみを備える構成であってもよい。
 操作表示装置は、図1のように、フラットパネルディスプレイからなる表示器20と、表示器20の画面に重ねて配置されたタッチパネルからなる操作器30と、表示器20の表示内容および操作器30に対する入力の判断を行う演算制御装置10とを備える。表示器20は、後述の操作用図形21を表示する。操作器30は、操作器30に対する操作物31の接触位置を示す信号を演算制御装置10に出力する。
 表示器20に用いるフラットパネルディスプレイは、ドットマトリクス型であって、液晶ディスプレイ、有機ELディスプレイなどから選択される。操作器30を構成するタッチパネルは、抵抗膜式、静電容量式、超音波式、光学式のいずれでもよいが、構成の簡単な抵抗膜式や静電容量式を選択することが望ましい。操作器30は、指先またはペン先のような操作物(接触体)31を用いて操作される。
 演算制御装置10は、表示器20の表示内容および操作器30への操作内容(操作器30への操作)に従って負荷40を制御する機能を有する。したがって、演算制御装置10は、表示器20、操作器30、負荷40を接続するインターフェイス部11を備える。インターフェイス部11は、表示器20、操作器30、負荷40のそれぞれを接続する通信インターフェイス部(通信I/F)112、113、114を備える。
 また、演算制御装置10は、表示器20の表示内容を決める表示処理部12、操作器30への操作内容(操作器30への操作)を解析する解析処理部13、負荷40に動作を指示する負荷制御部14を備える。解析処理部13は、基本機能として、操作器30に対する操作物31のペンダウン(すなわち、接触)とペンアップ(すなわち、離脱)のタイミングおよび位置を検出する機能と、ペンダウン中の操作物31の位置を検出する機能とを有する。言い換えると、解析処理部13は、操作器30に対する操作物31の接触位置を示す信号を操作器30から受け取って、操作器30に対する操作物31の接触位置を検出する。なお、ピンチやフリックと称する操作の検出機能は、本実施形態では不要であるから考慮しない。
 表示処理部12は、負荷40に指示する制御量を調節するための操作用図形21を表示器20の画面に表示させる。また、表示処理部12は、解析処理部13が解析した操作器30への操作内容(操作器30への操作)に基づいて表示器20の画面に表示している操作用図形21の形状および位置を決定する機能を有する。負荷制御部14は、解析処理部13が解析した操作内容(解析処理部13が解析した操作)に応じて、負荷40に指示する制御量を調節する。
 演算制御装置10は、適宜構成のインターフェイス部11とマイコンとの組合せにより実現されるが、マイコン以外にもプログラムに従って動作するプロセッサを用いて構成することも可能である。また、演算制御装置10と、表示器20と、操作器30とは1つの筐体により一体化することが可能であり、演算制御装置10のうちの負荷制御部14および通信I/F114を別の筐体に収納して2個の筐体に分離することも可能である。さらに、演算制御装置10と表示器20と操作器30とを、専用の装置ではなく、スマートホンやタブレット端末のようにタッチパネルおよびプロセッサを備える既存の装置に用いてもよい。この場合、既存の装置に以下の機能を実現するプログラムを搭載させ、負荷制御部14および通信I/F114を備える装置との間で通信する構成が採用される。
 本実施形態における操作用図形21は、直進操作部211と回転操作部212とからなる。直進操作部211は、矩形状のスライダ2111と、スライダ2111の移動範囲を一直線上に規定するガイド2112とを備える。つまり、スライダ2111は、ガイド2112で規定された一直線上を移動する。また、回転操作部212は、中心の周りに回転する円形のダイアル2121と、ダイアル2121の回転角度の目安(回転位置)を示すドット2122とを備える。
 したがって、操作用図形21が直進操作部211である場合、ガイド2112の範囲内におけるスライダ2111の位置の変化が形状の変化になる。また、操作用図形21が回転操作部212である場合、回転操作部212の回転角度が変化してダイアル2121の回転中心に対するドット2122の位置の変化が形状の変化になる。
 解析処理部13は、操作器30への操作内容(操作器30への操作)を表示器20に表示されている操作用図形21に関係付けて解析する。まず、解析処理部13は、操作器30に対する操作物31の接触位置を示す信号を操作器30から受け取って、操作器30に対する操作物31の接触位置を検出する。そして、解析処理部13は、操作器30に対する操作物31の接触位置を操作用図形21と関係付けることにより、操作物31の操作内容(操作物31の操作)を解析する。つまり、解析処理部13は、操作器30が検出した接触位置を操作用図形21と関係付けることにより、操作物31が操作器30に対して行った操作を解析する。操作用図形21が上下に移動する直進操作部211を表す場合、解析処理部13は、スライダ2111を上向きに移動させる操作と下向きに移動させる操作とを区別する。また、操作用図形21が回転操作部212を表す場合、解析処理部13は、ダイアル2121を右回りに回転させる操作と左回りに回転させる操作とを区別する。
 このような互いに逆向きの操作を行うことにより、負荷40に指示する制御量を調節することが可能になる。たとえば、負荷40が調色および調光が可能な照明装置である場合、スライダ2111の移動あるいはダイアル2121の回転を行うことにより、照明装置からの光出力の増減や、照明装置からの光色の調節が可能になる。負荷40は、照明装置に限らず、冷暖房装置、電動カーテン、電動シャッタなどであってもよい。操作表示装置は、負荷40が冷暖房装置であれば、設定温度の調節や風量の調節に用いられ、負荷40が電動カーテンや電動シャッタであれば、開閉量の調節に用いられる。
 解析処理部13は、操作器30に対する利用者の操作内容を、操作用図形21の形状を変化させずに操作用図形21の位置を変化させる移動操作と、負荷40の制御量の変化を示すために操作用図形21の形状を変化させる調節操作とに分類する機能を有する。つまり、解析処理部13は、操作物31の操作(操作物31が操作器30に対して行った操作)を移動操作と調節操作とに分類する。調節操作は、上述したように、スライダ2111の移動やダイアル2121の回転を行う操作であるのに対して、移動操作は、表示器20の画面内において直進操作部211あるいは回転操作部212を変位させる操作を意味する。言い換えると、移動操作は、解析処理部13が解析した操作内容(解析処理部13が解析した操作)が操作用図形21に関する操作であることを意味し、調節操作は、解析処理部13が解析した操作内容(解析処理部13が解析した操作)が負荷40の制御量に関する操作であることを意味する。
 解析処理部13は、操作物31のペンダウンを検出すると、ペンダウンの位置が、スライダ2111あるいはダイアル2121に対応付けた操作領域内か否かを判断する。操作領域は、操作用図形21に設定されており、通常は、表示器20においてスライダ2111あるいはダイアル2121が表示されている領域内を意味するが、この領域よりもやや広く設定されていてもよい。
 解析処理部13は、ペンダウンの位置が操作領域内であるときには、操作物31の操作内容(操作物31の操作)を調節操作と判断し、ペンダウン後に操作物31が移動を開始すると、操作物31の位置を追跡する。操作物31がスライダ2111あるいはダイアル2121に対して規定した追跡範囲Dtの範囲内を移動している間は、操作物31の位置に追従するように、スライダ2111あるいはダイアル2121の位置を変化させる。
 追跡範囲Dtは、スライダ2111に対してはスライダ2111の移動軌跡に沿ってスライダ2111が移動可能な範囲の全域を包含し、ダイアル2121に対してはドット2122の移動軌跡に沿ってドット2122が移動可能な範囲の全域を包含する。追跡範囲Dtは、操作用図形21の位置により定まる。なお、追跡範囲Dtは、解析処理部13に仮想的に設定された範囲であって、表示器20の画面には表示されないが、表示器20の画面において他の領域とは区別するように表示すれば、操作物31を移動させる際の目安になる。
 スライダ2111に対して設定される追跡範囲Dtは、スライダ2111の移動方向に沿って設定され、スライダ2111の移動方向に直交する方向の長さ(直進操作部211の幅)が、スライダ2111よりも広い帯状に設定される。つまり、直進操作部211に対して設定される追跡範囲Dtは長方形状になる。また、ダイアル2121に対して設定される追跡範囲Dtは、ダイアル2121の回転方向に沿って設定され、ドット2122の直径よりも広い帯状に設定される。つまり、ダイアル2121に対して設定される追跡範囲Dtはドーナツ状になる。
 表示処理部12は、解析処理部13からペンダウン後の操作物31の移動範囲が追跡範囲Dtの内側であることが通知されていると、操作用図形21の位置を変化させず、スライダ2111あるいはダイアル2121の位置を操作物31に追従させて移動させる。
 一方、ペンダウン後の操作物31の移動範囲が追跡範囲Dtの外側に逸脱したことを解析処理部13が表示処理部12に通知すると、表示処理部12は、操作用図形21の位置を変位させる。このとき、負荷40に対する制御量を維持した状態で、スライダ2111あるいはドット2122の位置が操作物31の位置に合わせられる。言い換えると、操作物31の操作器30に対する接触位置(操作器30が検出した接触位置)が追跡範囲Dtを逸脱している場合に、解析処理部13は、操作物31の操作内容(操作物31の操作)を移動操作と判断する。そして、解析処理部13が当該操作内容(当該操作)を移動操作と判断すると、表示処理部12は、操作物31の接触位置が追跡範囲Dtに収まるように、操作用図形21を変位させる。
 したがって、利用者が、スライダ2111あるいはダイアル2121に操作物31を接触させた後、操作用図形21を見ずに操作物31を移動させることにより、操作物31の位置が追跡範囲Dtから逸脱しても、操作用図形21は操作物31の位置に自動的に変位する。つまり、利用者がスライダ2111あるいはダイアル2121の操作を開始した後は、操作物31の移動経路が蛇行したとしても、操作用図形21が操作物31の位置に追従して移動するから、負荷40の制御量を継続的に変化させることが可能になる。言い換えると、利用者は、操作物31をスライダ2111あるいはダイアル2121の位置に合わせて操作を開始した後は、表示器20の画面を目視していなくとも負荷40の制御量を調節することが可能になる。
 表示処理部12は、解析処理部13がペンアップを検出して操作用図形21に対する操作の終了を検出すると、操作用図形21を初期位置に復帰させる。つまり、操作物31が操作器30に接触した後に操作器30から離脱すると、解析処理部13は、操作用図形21を初期位置に戻すように表示処理部12に指示し、表示処理部12は、操作用図形21を初期位置に復帰させる。操作用図形21の位置を初期位置に復帰させることにより、常時は、表示器20の画面上の同じ位置に操作用図形21が表示されることになる。
 なお、表示器20の1画面に複数の操作用図形21が表示されている状態において、いずれかの操作用図形21の操作を開始すると、当該操作用図形21が移動することによって他の操作用図形21に重複する可能性がある。したがって、解析処理部13は、いずれかの操作用図形21が操作中である期間は、他の操作用図形21に対する操作を無効にしておくことが望ましい。
 また、上述した構成では、解析処理部13は、操作用図形21に付随して追跡範囲Dtを設定することにより、移動操作と調節操作とを認識しているが、ペンダウンの位置からの操作物31の移動方向を用いて移動操作と調節操作とを認識してもよい。
 たとえば、スライダ2111については、解析処理部13は、操作物31が画面の上下方向に移動する場合には、操作物31の操作が調節操作であり、操作物31が他の方向に移動する場合には、操作物31の操作が移動操作であると判断できる。そこで、解析処理部13は、スライダ2111の位置から操作物31が移動する方向について角度による範囲を定め、操作物31の移動方向が上下方向に近い範囲(たとえば、90±10度、270±10度)であれば、操作物31の操作が調節操作であると判断し、それ以外は、操作物31の操作が移動操作であると判断してもよい。同様に、ダイアル2121については、解析処理部13は、ドット2122に対応する位置の接線方向に対する角度範囲を規定すれば、調節操作と移動操作とを区別することが可能である。
 ところで、解析処理部13は、操作物31のペンダウンの位置が操作領域内であると、上述のように、ペンダウンの時点で操作物31の操作内容(操作物31の操作)を調節操作と判断するが、操作物31のペンダウンの位置が操作領域を逸脱しているときは、操作物31の操作内容(操作物31の操作)を移動操作と判断する。つまり、解析処理部13は、操作物31のペンダウンの位置が、スライダ2111あるいはダイアル2121に対して設定した操作領域から逸脱している場合、ペンダウンを検出した位置にスライダ2111あるいはダイアル2121を移動させる。このとき、解析処理部13は、負荷40の制御量を変化させず、操作物31の位置にスライダ2111あるいはダイアル2121を移動させる指示を表示処理部12に対して行う。解析処理部13は、操作物31が操作器30に接触を開始した位置が操作領域内であるとき、操作物31が操作器30から離脱するまでの期間において、操作物31の接触位置が追跡範囲Dt内である間、操作物31の操作内容(操作物31の操作)を調節操作と判断する。一方、操作物31の接触位置が追跡範囲Dt外である間、解析処理部13は、操作物31の操作内容(操作物31の操作)を移動操作と判断する。
 以上の動作を図2にまとめて示す。すなわち、解析処理部13は、操作物31が操作器30に接触したか否かを検出し(S11)、ペンダウンを検出すると、操作物31が接触した位置が操作領域内か否かを判断する(S12)。解析処理部13は、ペンダウンの位置が操作範囲内であれば(S12:Y)、操作用図形21の位置を変位させずに操作物31の操作内容(操作物31の操作)を調節操作と認識し(S13)、ペンダウンの位置が操作範囲外であれば(S12:N)、操作物31の操作内容(操作物31の操作)を、操作用図形21を変位させる移動操作と認識する(S14)。また、解析処理部13がペンダウンの検出後にペンアップを検出すると(S11)、表示処理部12は、操作用図形21を初期位置に戻す(S15)。
 なお、表示器20の画面に複数の操作用図形21が存在している場合は、いずれか1つの操作用図形21のみが移動するようにルールを設定しておく必要がある。操作用図形21を移動させるルールとしては、あらかじめ選択した操作用図形21を移動させること、操作用図形21に優先順位を付与すること、ペンダウンの位置との距離に応じて操作用図形21を移動させることなどが挙げられる。
 上述した動作例では、操作物31のペンダウンの位置が操作範囲であって、その後に操作物31が移動すると、負荷40の制御量が調節されているが、操作物31のペンダウンの位置が追跡範囲Dtであるときに、ペンダウンの位置に応じて制御量を定めてもよい。つまり、ペンダウンの位置がスライダ2111の移動範囲あるいはダイアル2121の回転範囲である場合、ペンダウン前に表示器20に表示されている制御量からペンダウンの位置で表される制御量まで飛躍させてもよい。言い換えると、解析処理部13は、操作物31が操作器30に接触を開始した位置が追跡範囲Dt内であるとき、制御量を当該位置に対応させ、かつ操作用図形21の形状を制御量に対応付けるように表示処理部12に指示する。
 解析処理部13にこの処理を付加すれば、負荷40の制御量を連続的に変化させる操作を行うことなく、負荷40の制御量を目標値付近に瞬時に合わせる操作が可能になる。この動作を付加する場合、解析処理部13は、操作物31のペンダウンの位置について、操作範囲内と、追跡範囲Dtの範囲内と、追跡範囲Dtの範囲外とに分類することが必要である。
 また、上述した動作例では、利用者が、スライダ2111あるいはダイアル2121に設定された操作領域に操作物31を触れた後に、操作物31を移動させると、操作物31の接触位置が追跡範囲Dtを逸脱したときに、解析処理部13は、操作用図形21の位置を変位させている。この動作に対して、解析処理部13は、操作物31が移動しても操作用図形21を移動させない動作を選択可能にしてもよい。このような動作の選択は、操作物31のペンダウンから操作物31の移動開始までの時間を用いて行えばよい。
 すなわち、解析処理部13は、ペンダウンから所定の判定時間内に操作物31の移動を検出したときは操作用図形21の変位を許容し、ペンダウンから判定時間を超えて操作物31が移動しないときは操作用図形21の移動を禁止するように処理を選択すればよい。つまり、操作物31が操作器30に接触を開始した位置が操作領域内であるとき、操作物31が操作器30に接触を開始した後に判定時間が経過するまで操作物31が移動しなければ、操作物31が操作器30から離脱するまでの期間において、解析処理部13は、操作用図形21の変位を禁止する。操作用図形21の移動を禁止した場合は、従来と同様の動作になるが、後述する動作のように、操作用図形21を移動させずに操作物31の移動に応じて制御量を調節するようにしてもよい。なお、処理の選択結果は、操作物31のペンアップまでの期間のみ有効にしておく。
 ところで、上述した動作では、表示器20の画面上の適宜の位置に操作物31を触れたときに、操作用図形21を操作物31の接触位置に変位させている。この場合、操作物31のペンアップに伴ってただちに操作用図形21が初期位置に復帰すると、操作用図形21を移動させたことが無意味になる。そこで、解析処理部13は、操作物31のペンダウンが操作領域外で行われた場合、ペンダウンからの経過時間を計時し、ペンアップが規定の判定期間内に行われると、操作用図形21を初期位置に復帰させるまでの時間を延長する機能を有する。操作用図形21が初期位置に復帰しない間に操作を開始すれば、操作用図形21を移動させた位置で負荷40の制御量を調節することが可能になる。また、負荷40の制御量の調節を終了し、解析処理部13がペンアップを検出すると、表示処理部12は、上述した動作と同様に操作用図形21を初期位置に復帰させる。
 上述した構成は、直進操作部211と回転操作部212とに共通の技術であるが、以下では直進操作部211と回転操作部212との個々に適用可能な技術を説明する。
 直進操作部211については、上述の例では、スライダ2111が表示器20の画面の一部に表示されているが、画面に1個の直進操作部211だけを表示する場合、スライダ2111の幅を表示器20の画面と略同幅にすることが望ましい。すなわち、表示器20の画面の全面が追跡範囲Dtの範囲内になり、直進操作部211としての操作用図形21を移動させる処理が不要になる。
 また、回転操作部212については、上述した例では、ダイアル2121の回転角度に関する分解能が、操作器30が操作物31の接触位置を検出する精度に依存している。しかしながら、操作表示装置の用途によっては、ダイアル2121の回転角度に関する分解能をさらに高めることが要求される場合もある。
 そこで、バーニアダイアルのように回転比を変化させる機能を解析処理部13に付加することが望ましい。すなわち、解析処理部13は、操作物31の回転角度に対してダイアル2121の回転角度を所定の回転比だけ小さくする機能を有する。たとえば、操作物31が3回回転する間にダイアル2121が1回回転するように回転比を設定することにより、操作物31の接触位置を検出する精度よりも精密にダイアル2121の回転角度を調節することが可能になる。
 操作物31の回転角度よりもダイアル2121の回転角度を小さくするように回転比を設定している場合、操作物31をダイアル2121に合わせて回転させることは難しく、操作物31の位置がダイアル2121に規定した追跡範囲Dtを逸脱しやすくなる。とくに、表示器20に表示されたダイアル2121を利用者が目視していなければ、操作物31の位置は追跡範囲Dtから逸脱しやすくなる。
 上述した動作では、操作物31の接触位置が追跡範囲Dtから逸脱したときに操作用図形21を移動させているが、操作物31を複数回回転させる操作を行う場合、操作用図形21が操作物31の回転に伴って移動すると操作用図形21の動きが複雑になり、却って利便性を損なう可能性がある。そのため、操作物31の回転角度に対してダイアル2121の回転角度が小さくなるように回転比を設定している場合は、解析処理部13は以下の処理を行うことが望ましい。
 すなわち、解析処理部13は、負荷40の制御量を変化させる調節操作が開始された後に操作物31の回転が継続している間は、操作物31の接触位置が追跡範囲Dtから逸脱しても、操作物31の操作内容(操作物31の操作)を移動操作と判断せずに、当該操作内容(操作物31の操作)を調節操作とする判断を継続する。この場合、解析処理部13が操作物31の操作内容(操作物31の操作)を移動操作と判断しないから、操作用図形21の位置は変化せず、ダイアル2121の回転のみが行われることになる。たとえば、図3に示すように、ダイアル2121を右回りに回転させる調節操作が開始された後は、破線で示す軌跡Rtのように、操作物31を回転する操作が継続している間は、解析処理部13は、操作物31の操作内容(操作物31の操作)を調節操作と判断してダイアル2121の位置を変化させないのである。
 操作物31を回転させているか否かは、操作物31の移動方向の検出により判定される。たとえば、操作開始前のドット2122の位置が図3に示す位置であれば、操作物31を回転させるときには、上向きまたは下向きに移動させることになる。つまり、操作物31が回転しているか否かは、操作物31の各時点の検出位置に対して前後数回の検出位置との関係により推定することが可能である。また、操作物31が継続して移動しているか否かは移動速度の計測により判断可能である。したがって、解析処理部13は、操作物31の位置変化および移動速度を用いることにより回転させる調節操作が継続しているか否かを判断する。
 なお、操作物31の回転角度よりもダイアル2121の回転角度が大きくなるように回転比を設定してもよい。解析処理部13に回転比を設定する場合、回転比の調節を可能にしておけば、負荷40の種類に応じた回転比の設定が可能になる。
 上述したように、本実施形態は、操作用図形21を移動させる移動操作が可能であるから、移動操作によって操作用図形21の一部が表示器20の画面の表示範囲に収まらなくなる場合がある。したがって、解析処理部13は、操作用図形21が表示器20の画面の表示範囲に収まるように操作用図形21の移動範囲を制限することが望ましい。あるいはまた、操作表示装置は、操作用図形21が画面の表示範囲に収まらなくなる場合に、ビープ音などによって利用者に通知することが望ましい。
 なお、本実施形態の操作表示装置は、各種の機能を実行するためのプログラムを格納している。当該プログラムは、コンピュータを、演算制御装置10(表示処理部12、解析処理部13、負荷制御部14)と表示器20と操作器30とを備える装置として機能させるためのプログラムである。また、操作表示装置は、当該プログラムを記録したコンピュータ読み取り可能な記録媒体を用いて、当該プログラムを取得することができる。
 本発明を好ましい実施形態によって記載したが、本発明の本来の精神および範囲、すなわち請求の範囲を逸脱することなく、当業者によってさまざまな修正および変形が可能である。

Claims (10)

  1.  負荷に指示する制御量を調節するための操作用図形が表示される表示器と、
     前記表示器の画面に重ねられ操作物の接触位置を示す信号を出力する操作器と、
     前記操作器から前記信号を受け取って前記操作器に対する前記操作物の接触位置を前記操作用図形と関係付けることにより前記操作物の操作内容を解析する解析処理部と、
     前記解析処理部が解析した前記操作内容に応じて前記表示器に表示させる前記操作用図形の形状および位置を定める表示処理部と、
     前記解析処理部が解析した前記操作内容に応じて前記制御量を調節する負荷制御部とを備え、
     前記解析処理部は、前記操作内容を、前記操作用図形の位置を変化させる移動操作と、前記制御量を調節する調節操作とに分類する機能を有し、前記操作物の前記操作器に対する接触位置が前記操作用図形の位置により定まる追跡範囲を逸脱している場合に、前記操作内容を前記移動操作と判断し、
     前記表示処理部は、前記解析処理部が前記操作内容を前記移動操作と判断すると前記操作物の接触位置が前記追跡範囲に収まるように前記操作用図形を変位させる
     ことを特徴とする操作表示装置。
  2.  前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記操作用図形に設定した操作領域内であるとき、前記操作物が前記操作器から離脱するまでの期間において、前記操作物の接触位置が前記追跡範囲内である間は前記操作内容を前記調節操作と判断し、前記操作物の接触位置が前記追跡範囲外である間は前記操作内容を前記移動操作と判断する
     ことを特徴とする請求項1記載の操作表示装置。
  3.  前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記操作用図形に設定した操作領域内であるとき、前記操作物が前記操作器に接触を開始した後に所定の判定時間が経過するまで前記操作物が移動しなければ、前記操作物が前記操作器から離脱するまでの期間において、前記操作用図形の変位を禁止する
     ことを特徴とする請求項1又は2記載の操作表示装置。
  4.  前記解析処理部は、前記操作物が前記操作器に接触を開始した位置が前記追跡範囲内であるとき、前記負荷制御部に指示する前記制御量を当該位置に対応させ、かつ前記操作用図形の形状を前記制御量に対応付けるように前記表示処理部に指示する
     ことを特徴とする請求項1~3のいずれか1項に記載の操作表示装置。
  5.  前記操作用図形は、一直線上を移動するスライダを備えた直進操作部であって、前記追跡範囲は、前記スライダの移動軌跡に沿って当該移動軌跡の全域を包含するように設定されている
     ことを特徴とする請求項1~4のいずれか1項に記載の操作表示装置。
  6.  前記操作用図形は、回転中心の周りを回転するダイアルおよび回転位置を示すドットを備えた回転操作部であって、前記追跡範囲は、前記ドットの移動軌跡に沿って当該移動軌跡の全域を包含するように設定されている
     ことを特徴とする請求項1~4のいずれか1項に記載の操作表示装置。
  7.  前記解析処理部は、前記操作物の回転角度よりも前記ダイアルの回転角度を小さくするように回転比を設定する
     ことを特徴とする請求項6記載の操作表示装置。
  8.  前記解析処理部は、前記操作内容を前記調節操作と判断した後に、前記操作物が前記操作器から離脱するまでの期間において、前記操作物が回転を継続している間は、前記操作用図形の変位を禁止し、前記操作物の回転角度に応じて前記制御量を調節する
     ことを特徴とする請求項7記載の操作表示装置。
  9.  前記解析処理部は、前記操作物が前記操作器に接触した後に、前記操作器から離脱すると、前記操作用図形を初期位置に戻すように前記表示処理部に指示する
     ことを特徴とする請求項1~8のいずれか1項に記載の操作表示装置。
  10.  コンピュータを、
     負荷に指示する制御量を調節するための操作用図形が表示される表示器と、
     前記表示器の画面に重ねられ操作物の接触位置を示す信号を出力する操作器と、
     前記操作器から前記信号を受け取って前記操作器に対する前記操作物の接触位置を前記操作用図形と関係付けることにより前記操作物の操作内容を解析する解析処理部と、
     前記解析処理部が解析した前記操作内容に応じて前記表示器に表示させる前記操作用図形の形状および位置を定める表示処理部とを備え、
     前記解析処理部が、前記操作内容を、前記操作用図形の位置を変化させる移動操作と、前記制御量を調節する調節操作とに分類する機能を有し、
     前記表示処理部が、前記操作物の前記操作器に対する接触位置が前記操作用図形の位置により定まる追跡範囲を逸脱している場合に、前記操作物の接触位置が前記追跡範囲に収まるように前記操作用図形を変位させる
     装置として機能させるプログラム。
PCT/JP2013/001371 2012-06-13 2013-03-05 操作表示装置、プログラム WO2013186964A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201380030490.3A CN104350457A (zh) 2012-06-13 2013-03-05 操作显示装置以及程序
US14/406,943 US9921669B2 (en) 2012-06-13 2013-03-05 Apparatus and program for a touch input tracking figure for operation
EP13804627.1A EP2863292A4 (en) 2012-06-13 2013-03-05 OPERATION DISPLAY DEVICE AND PROGRAM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012134258A JP5877374B2 (ja) 2012-06-13 2012-06-13 操作表示装置、プログラム
JP2012-134258 2012-06-13

Publications (1)

Publication Number Publication Date
WO2013186964A1 true WO2013186964A1 (ja) 2013-12-19

Family

ID=49757819

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/001371 WO2013186964A1 (ja) 2012-06-13 2013-03-05 操作表示装置、プログラム

Country Status (5)

Country Link
US (1) US9921669B2 (ja)
EP (1) EP2863292A4 (ja)
JP (1) JP5877374B2 (ja)
CN (1) CN104350457A (ja)
WO (1) WO2013186964A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2016027305A1 (ja) * 2014-08-19 2017-05-25 Jr東日本メカトロニクス株式会社 情報処理装置、情報処理方法及びプログラム

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9769227B2 (en) 2014-09-24 2017-09-19 Microsoft Technology Licensing, Llc Presentation of computing environment on multiple devices
US10448111B2 (en) 2014-09-24 2019-10-15 Microsoft Technology Licensing, Llc Content projection
US10635296B2 (en) 2014-09-24 2020-04-28 Microsoft Technology Licensing, Llc Partitioned application presentation across devices
US20160088060A1 (en) * 2014-09-24 2016-03-24 Microsoft Technology Licensing, Llc Gesture navigation for secondary user interface
US10025684B2 (en) 2014-09-24 2018-07-17 Microsoft Technology Licensing, Llc Lending target device resources to host device computing environment
JP6458750B2 (ja) * 2016-03-02 2019-01-30 京セラドキュメントソリューションズ株式会社 表示操作装置およびプログラム
CN106354418B (zh) * 2016-11-16 2019-07-09 腾讯科技(深圳)有限公司 一种基于触摸屏的操控方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0667796A (ja) * 1992-08-20 1994-03-11 Sony Corp 入力装置
JPH11212726A (ja) * 1998-01-29 1999-08-06 Omron Corp 入力装置
WO2006027924A1 (ja) * 2004-09-03 2006-03-16 Matsushita Electric Industrial Co., Ltd. 入力装置
JP2006139615A (ja) * 2004-11-12 2006-06-01 Access Co Ltd 表示装置、メニュー表示プログラムおよびタブ表示プログラム
JP2008508600A (ja) * 2004-07-30 2008-03-21 アップル インコーポレイテッド タッチ・センシティブ入力デバイスのためのモード・ベースのグラフィカル・ユーザ・インタフェース
JP2010079773A (ja) * 2008-09-29 2010-04-08 Hitachi Ltd 操作方法
JP2011171179A (ja) 2010-02-19 2011-09-01 Panasonic Electric Works Co Ltd 調光コントローラ

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1655094A (zh) 2004-02-13 2005-08-17 联想(北京)有限公司 一种对计算机进行遥控操作的方法
WO2006020304A2 (en) 2004-07-30 2006-02-23 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US7552402B2 (en) * 2006-06-22 2009-06-23 Microsoft Corporation Interface orientation using shadows
US9740386B2 (en) * 2007-06-13 2017-08-22 Apple Inc. Speed/positional mode translations
JP2009123004A (ja) * 2007-11-15 2009-06-04 Panasonic Corp 携帯電子機器の入力装置、携帯電子機器
JP4990753B2 (ja) * 2007-12-28 2012-08-01 パナソニック株式会社 電子機器の入力装置及び入力操作処理方法、並びに入力制御プログラム
JP4979570B2 (ja) * 2007-12-28 2012-07-18 パナソニック株式会社 電子機器の入力装置及び入力操作処理方法、並びに入力制御プログラム
KR20100123108A (ko) * 2009-05-14 2010-11-24 삼성전자주식회사 휴대 단말기의 아이콘 위치 이동 운용 방법 및 이를 지원하는 휴대 단말기
US9262073B2 (en) * 2010-05-20 2016-02-16 John W. Howard Touch screen with virtual joystick and methods for use therewith
US20120030624A1 (en) * 2010-07-30 2012-02-02 Migos Charles J Device, Method, and Graphical User Interface for Displaying Menus
CN201947341U (zh) 2010-12-02 2011-08-24 上海华勤通讯技术有限公司 具有智能遥控功能的手机
CN102262818B (zh) 2011-07-08 2013-03-27 广东美的电器股份有限公司 利用手机控制的空调器及其控制方法
JP5246974B2 (ja) * 2012-01-25 2013-07-24 パナソニック株式会社 電子機器の入力装置及び入力操作処理方法、並びに入力制御プログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0667796A (ja) * 1992-08-20 1994-03-11 Sony Corp 入力装置
JPH11212726A (ja) * 1998-01-29 1999-08-06 Omron Corp 入力装置
JP2008508600A (ja) * 2004-07-30 2008-03-21 アップル インコーポレイテッド タッチ・センシティブ入力デバイスのためのモード・ベースのグラフィカル・ユーザ・インタフェース
WO2006027924A1 (ja) * 2004-09-03 2006-03-16 Matsushita Electric Industrial Co., Ltd. 入力装置
JP2006139615A (ja) * 2004-11-12 2006-06-01 Access Co Ltd 表示装置、メニュー表示プログラムおよびタブ表示プログラム
JP2010079773A (ja) * 2008-09-29 2010-04-08 Hitachi Ltd 操作方法
JP2011171179A (ja) 2010-02-19 2011-09-01 Panasonic Electric Works Co Ltd 調光コントローラ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2863292A4 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2016027305A1 (ja) * 2014-08-19 2017-05-25 Jr東日本メカトロニクス株式会社 情報処理装置、情報処理方法及びプログラム

Also Published As

Publication number Publication date
EP2863292A4 (en) 2015-07-08
CN104350457A (zh) 2015-02-11
US9921669B2 (en) 2018-03-20
JP5877374B2 (ja) 2016-03-08
US20150177860A1 (en) 2015-06-25
EP2863292A1 (en) 2015-04-22
JP2013257794A (ja) 2013-12-26

Similar Documents

Publication Publication Date Title
WO2013186964A1 (ja) 操作表示装置、プログラム
US10949082B2 (en) Processing capacitive touch gestures implemented on an electronic device
EP3191929B1 (en) Disambiguation of keyboard input
JP4734435B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
TWI544375B (zh) 觸控功能辨識方法及電子裝置
JP2018049646A (ja) タッチ圧力及びタッチ面積による動作対象の臨時操作方法及び端末機
JP2010211500A (ja) 操作装置
JP2019061563A (ja) 電子機器
US20140068524A1 (en) Input control device, input control method and input control program in a touch sensing display
JP5654932B2 (ja) ユーザインタフェース装置、表示装置による操作受付方法及びプログラム
KR101667425B1 (ko) 터치윈도우 확대축소 기능을 갖는 모바일장치 및 터치윈도우의 확대축소 방법
WO2014083929A1 (ja) タッチパネルにおける文書スクロール方法、装置及びコンピュータ・プログラム
TWI480792B (zh) 電子裝置的操作方法
JP2016184428A (ja) 電子機器
CN108958514B (zh) 一种电子设备
KR20140067861A (ko) 터치 스크린 디스플레이 상에서의 객체 스크롤 방법 및 장치
JP5769841B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP2018023792A (ja) ゲーム装置及びプログラム
EP2750016A1 (en) Method of operating a graphical user interface and graphical user interface
TW200941307A (en) Extended cursor generating method and device
JP6126639B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置及びゲームプログラム。
TWI522895B (zh) 介面操作方法與應用該方法之可攜式電子裝置
TWI623876B (zh) 用於控制顯示裝置、電腦程式產品、資料載體與資訊技術設備的方法及控制裝置的用途
JP5523381B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
US11474625B1 (en) Pressure gesture

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13804627

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14406943

Country of ref document: US

Ref document number: 2013804627

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE