CN114600069A - 输入系统、输入方法以及程序 - Google Patents

输入系统、输入方法以及程序 Download PDF

Info

Publication number
CN114600069A
CN114600069A CN202080075076.4A CN202080075076A CN114600069A CN 114600069 A CN114600069 A CN 114600069A CN 202080075076 A CN202080075076 A CN 202080075076A CN 114600069 A CN114600069 A CN 114600069A
Authority
CN
China
Prior art keywords
input device
input
sound
acquired
sheet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080075076.4A
Other languages
English (en)
Other versions
CN114600069B (zh
Inventor
中山哲法
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of CN114600069A publication Critical patent/CN114600069A/zh
Application granted granted Critical
Publication of CN114600069B publication Critical patent/CN114600069B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H18/00Highways or trackways for toys; Propulsion by special interaction between vehicle and track
    • A63H18/02Construction or arrangement of the trackway
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H5/00Musical or noise- producing devices for additional toy effects other than acoustical
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00Acoustics not otherwise provided for
    • G10K15/04Sound-producing devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

改进对于印刷有将位置信息编码而得到的图案的片材的输入接口。输入系统包含:片材(31),印刷有将位置编码而得到的图案(71);输入设备(20),包含对所述图案进行摄影的相机(24);取得部件,基于所述相机所摄影的图像中包含的图案,取得所述输入设备的位置以及朝向;以及执行部件,基于由所述取得部件取得的位置以及朝向执行处理。

Description

输入系统、输入方法以及程序
技术领域
本发明涉及输入系统、输入方法以及程序。
背景技术
在片材上印刷有将位置信息编码而得到的图案的现有输入系统中,对由笔尖等上设置的相机摄影的图案进行解码来取得位置信息。位置信息表示片材内的坐标,被取得的位置信息表示笔尖等所指的片材上的位置。输入系统判定被取得的位置信息被包含在预先决定的多个区域之中的哪个中,并输入与判定出的区域相应的信息。输入的信息被用于其后的处理。
在专利文献1中公开了:由输入设备中内置的相机对印刷有游戏选择区域的纸进行读取,与该读取结果相应地开始游戏。
现有技术文献
专利文献
专利文献1:国际公布第2018/025467号
发明内容
发明要解决的课题
在以往的输入方法中,通过一次操作能够输入的信息量少。为了增加信息量,例如需要增加区域的数量。
本发明鉴于上述课题而作出,其目的在于,提供改进对于印刷有将位置信息编码而得到的图案的片材的输入接口的技术。
用于解决课题的手段
为了解决上述课题,本发明所涉及的输入系统包含:片材(sheet),印刷有将位置编码而得到的图案(pattern);输入设备,包含对所述图案进行摄影的相机;取得部件,基于所述相机所摄影的图像中包含的图案,取得所述输入设备的位置以及朝向;以及执行部件,基于由所述取得部件取得的位置以及朝向执行处理。
此外,本发明所涉及的输入方法包含:取得从图像辨识的输入设备的位置以及朝向的步骤,其中所述图像是对印刷有将位置编码而得到的图案的片材进行摄影而得到的图像,而且是由所述输入设备摄影的图像;以及基于被取得的所述位置以及朝向执行处理的步骤。
此外,本发明所涉及的程序使计算机作为如下部件发挥功能:取得部件,取得从图像辨识的输入设备的位置以及朝向,其中所述图像是对印刷有将位置编码而得到的图案的片材进行摄影而得到的图像,而且是由所述输入设备摄影的图像;以及执行部件,基于被取得的所述位置以及朝向执行处理。
根据本发明,改进了对于印刷有将位置信息编码而得到的图案的片材的输入接口。
在本发明的一方式中也可以是,所述执行部件输出声音,基于被取得的所述位置以及朝向,决定与用户的操作相应地被输出的声音的参数。
在本发明的一方式中也可以是,所述片材包含设定区域,所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,决定与所述用户的操作相应地被输出的声音的种类、高度、音量之中的一个。
在本发明的一方式中也可以是,所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,决定与所述用户的操作相应地被输出的声音的种类、高度、音量之中的一个,并输出被决定的声音。
在本发明的一方式中也可以是,所述片材还包含多个演奏区域,所述执行部件在所述输入设备的位置是所述多个演奏区域的其中一个的情况下,输出与包含所述输入设备的位置在内的演奏区域相应的高度的声音,所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,变更被输出的所述声音的种类、高度、音量、音阶(音階のスケール)之中的一个。
在本发明的一方式中也可以是,所述执行部件与被取得的所述位置处于规定的区域内的期间中的被取得的所述朝向的变化量相应地,决定被输出的声音的参数。
在本发明的一方式中也可以是,所述执行部件在被取得的所述位置处于规定的范围中的情况下,基于所述输入设备所取得的输入设备相对于片材的朝向,决定被输出的声音的参数。
在本发明的一方式中也可以是,所述执行部件基于被取得的所述位置以及朝向选择信息,基于被选择的所述信息执行处理。
附图说明
图1是表示第一实施方式所涉及的操作系统的一例的图。
图2是表示操作系统的硬件结构的图。
图3是表示输入设备的底面的图。
图4是表示片材以及输入设备的一例的图。
图5是表示片材的一例的图。
图6是概略地表示片材上的图案的图。
图7是表示操作系统所实现的功能的框图。
图8是表示操作系统的处理的概要的流程图。
图9是表示片材的其他一例的图。
图10是表示片材的其他一例的图。
图11是表示针对设定区域的处理的一例的流程图。
图12是表示针对键盘区域的处理的一例的流程图。
图13是表示针对节奏区域的处理的一例的流程图。
图14是表示针对字符区域取得输入信息并输出声音的处理的一例的流程图。
图15是表示针对水龙头区域取得输入信息的处理的一例的流程图。
图16是表示第二实施方式所涉及的片材的一例的图。
图17是表示取得输入信息并对输入设备进行控制的处理的一例的图。
图18是表示罩的一例的图。
具体实施方式
在以下,基于附图针对本发明的实施方式进行说明。对出现的结构元素之中的具有相同功能的结构元素附加相同的标号,并省略其说明。在本发明的实施方式中,用户保持能够自行的输入设备,此外通过对区域进行指示来输入信息。此外,与被输入的信息相应地执行处理。
[第一实施方式]
图1是表示第一实施方式所涉及的操作系统的一例的图。本发明所涉及的操作系统包含设备控制装置10、位置输入设备20a、20b、控制器17和卡带18。位置输入设备20a、20b是具有相机24的能够自行的设备,都具有相同的功能。在以下只要不需要特别区分,就将这些位置输入设备20a、20b记作位置输入设备20。设备控制装置10经由无线对位置输入设备20进行控制。设备控制装置10具有凹部32,如果位置输入设备20被嵌入凹部32,则设备控制装置10对位置输入设备20进行充电。控制器17是取得用户所进行的操作的输入装置,通过线缆与设备控制装置10连接。卡带18内置非易失性存储器。
图2是表示本发明的实施方式所涉及的操作系统的硬件结构的一例的图。设备控制装置10包含处理器11、存储部12、通信部13、输入输出部14。位置输入设备20包含处理器21、存储部22、通信部23、相机24、两个电机25。设备控制装置10既可以是为了控制位置输入设备20而优化的专用的装置,也可以是通用的计算机。
处理器11依照存储部12中储存的程序而动作,对通信部13、输入输出部14等进行控制。处理器21依照存储部22中储存的程序而动作,对通信部23、相机24、电机25等进行控制。上述程序被储存在卡带18内的闪速存储器等能够由计算机读取的存储介质中提供,但也可以经由互联网等网络提供。
存储部12由设备控制装置10所内置的DRAM及非易失性存储器、以及卡带18内的非易失性存储器等构成。存储部22由DRAM以及非易失性存储器等构成。存储部12、22储存上述程序。此外,存储部12、22储存从处理器11、21或通信部13、23等输入的信息或运算结果。
通信部13、23由用于与其他机器通信的集成电路或天线等构成。通信部13、23例如具有依照蓝牙(Bluetooth)(注册商标)协议而相互通信的功能。通信部13、23基于处理器11、21的控制,将从其他装置接收到的信息向处理器11、21或存储部12、22输入,并向其他装置发送信息。另外,通信部13也可以具有经由LAN等网络与其他装置通信的功能。
输入输出部14包含:取得来自控制器17等输入设备的信息的电路、以及对声音输出设备或图像显示设备等输出设备进行控制的电路。输入输出部14从输入设备取得输入信号,并将该输入信号被变换而得到的信息向处理器11或存储部12输入。此外,输入输出部14基于处理器11等的控制,使扬声器输出声音,使显示设备输出图像。
电机25是被处理器21控制旋转方向、旋转量以及旋转速度的所谓伺服电机。
相机24被配置为对位置输入设备20的下方进行摄影,其对位置输入设备20被放置于的片材31(参考图4、图5)上印刷的图案71(参考图6)进行摄影。在本实施方式中,在片材31上印刷有在红外线的频域被辨识的图案71,相机24对该红外线的图像进行摄影。
图3是表示位置输入设备20的一例的图。图3是从下观察位置输入设备20的图。位置输入设备20还包含电源开关250、开关222、两个车轮254。两个车轮254各自被分配一个电机25,电机25对被分配的车轮254进行驱动。
图4是表示片材31以及位置输入设备20a、20b的一例的图。如图4所示,在位置输入设备20上安装有罩75。罩75具有不会妨碍相机24对片材31摄影、且能够使用户容易辨识位置输入设备20的方向那样的形状。在图4的例中,罩75盖在位置输入设备20上,覆盖位置输入设备20的除了下表面以外的部分。图18是表示罩75的一例的图,是表示罩75的正面以及侧面的图。图18所示的罩75从位置输入设备20a的上方覆盖。用户能够容易地根据罩75来辨识位置输入设备20的正面。
在图4的例中,用户用右手握持位置输入设备20a,并用左手握持位置输入设备20b。并且,如果用户将位置输入设备20放置于片材31上的区域,则与该区域相应的信息被输入,与该被输入的信息相应的声音从设备控制装置10输出。
图5是表示片材31的一例的图。在片材31上印刷有用户能够视觉确认的图像。在图5所示的片材31a之上,设置有多个设定区域41a~41i、多个键盘区域43、多个节奏区域44和多个和弦区域45,此外,用户能够视觉确认这些区域。在片材31上还印刷有能够由相机24读取的图案71。
图6是概略地表示片材31上的图案71的图。在片材31上,规定的大小(例如0.2mm见方)的图案71以矩阵状排列。图案71各自是将该图案71被配置于的位置的坐标编码而得到的图像。对片材31分配了被编码的坐标能够表现的坐标空间之中的与片材31的大小对应的区域。在本实施方式所涉及的操作系统中,位置输入设备20的相机24对被印刷于片材31等的图案71进行摄影,位置输入设备20或者设备控制装置10对该图案71进行解码来取得坐标。由此,辨识位置输入设备20在片材31等之上的位置。此外,位置输入设备20或者设备控制装置10通过对由相机24摄影的图像内的图案71的斜率进行检测,来检测位置输入设备20的方向(例如相对于基准方向的角度A)。
多个键盘区域43在横方向上排列配置。键盘区域43是用于指示输出演奏音的区域。如果位置输入设备20被配置于键盘区域43,则声音被输出。位置输入设备20被放置于的键盘区域43越靠右侧,则被输出的声音越高。
多个节奏区域44被配置于图5中键盘区域43的上侧。节奏区域44是用于指示输出演奏音的区域。如果位置输入设备20被配置于节奏区域44的其中一个之上,则从设备控制装置10输出与该被配置于的节奏区域44对应的声音。
多个和弦区域45被配置于图5中节奏区域44的右侧。和弦区域45是用于指示输出演奏音的区域。如果位置输入设备20被配置于和弦区域45的其中一个之上,则从设备控制装置10输出与该被配置于的和弦区域45对应的高度的和弦。
多个设定区域41a~41i是用于取得对位置输入设备20被配置于键盘区域43或者节奏区域44时输出的声音的参数进行设定的指示的区域。在以下,在不需要区分的情况下将其称为设定区域41。设定区域41对应于被输出的声音的参数。如果位置输入设备20被配置于多个设定区域41的其中一个之上,则针对与该被配置于的设定区域41对应的参数,设定与该位置输入设备20的方向相应的值。
设定区域41a是用于指定被输出的声音的音量的参数的区域,设定区域41b是用于对位置输入设备20被配置于键盘区域43时输出的声音的高度的参数进行调整的区域。设定区域41d是用于设定针对与多个键盘区域43相对应的声音的音阶(音階のスケール)(例如大调、小调、五声、琉球音阶(音階)的其中一个)的参数的区域。设定区域41h、41i、41g各自是用于对位置输入设备20被配置于键盘区域43、节奏区域44、和弦区域45时输出的声音的种类的参数进行设定的区域。
在本实施方式所涉及的操作系统中,如果用户将握持的位置输入设备20配置于片材31上的区域,则与该被配置于的区域以及位置输入设备20的朝向相应的信息被输入,与该被输入的信息相应地输出声音。在以下,针对该操作系统的动作进行说明。
图7是表示操作系统所实现的功能的框图。操作系统在功能上包含位置取得部51、信息输入部52、应用执行部58、声音输出部59。信息输入部52在功能上包含区域判定部53、输入信息决定部55。这些功能主要通过设备控制装置10中包含的处理器11执行存储部12中储存的程序、并经由通信部13对位置输入设备20进行控制来实现。此外,位置取得部51等的功能的一部分也可以通过位置输入设备20中包含的处理器21执行存储部22中储存的程序、经由通信部23与设备控制装置10交互数据并对相机24或电机25进行控制来实现。
位置取得部51从由相机24摄影的图像辨识将坐标编码而得到的图案71,根据该图案71所示的坐标,取得位置输入设备20所位于的坐标和位置输入设备20的朝向。
信息输入部52基于由位置取得部51取得的位置以及朝向,取得由用户输入的输入信息。信息输入部52中包含的区域判定部53判定位置输入设备20的位置被包含在哪个区域中。信息输入部52中包含的输入信息决定部55基于包含位置输入设备20的位置的区域,决定输入信息。此外,输入信息决定部55在包含位置输入设备20的位置的区域是预先决定的区域的情况下,基于该区域、以及该位置输入设备20的朝向,决定输入信息。输入信息决定部55基于位置输入设备20之中的一方的位置是否被包含在某区域中、以及位置输入设备20之中的另一方的位置是否被包含在另一个区域中,决定输入信息。
应用执行部58基于被取得的输入信息,执行处理。应用执行部58基于被取得的输入信息,决定声音的参数。应用执行部58中包含的声音输出部59输出与被设定的参数相应的声音。
在以下针对该操作系统所执行的处理更详细地进行说明。图8是表示操作系统的处理的概要的流程图。在以下,为了易于说明,将位置输入设备20a记作第一设备,将位置输入设备20b记作第二设备。反复执行图8所示的处理。
首先,位置取得部51判定第一设备是否对片材31的表面进行了摄影(步骤S101)。位置取得部51可以基于第一设备的相机24所摄影的图像中是否存在图案71所特有的图像元素,来判定第一设备是否对片材31的表面进行了摄影。在第一设备对片材31的表面进行了摄影的情况下(步骤S101:是),位置取得部51取得作为第一设备在片材31上的位置的第一位置、以及第一设备的方向(步骤S102),区域判定部53对包含被取得的第一位置的区域进行检测(步骤S103)。位置取得部51在步骤S102中,基于由第一设备的相机24摄影的图案71在图像内的斜率,取得第一设备的朝向。区域判定部53在步骤S103中,基于将多个区域各自与片材31上的坐标范围相关联的信息、以及第一位置的坐标,选择包含第一位置的区域。
对于第二设备,也进行相当于步骤S101~S103的处理。在第二设备对片材31的表面进行了摄影的情况下(步骤S104:是),位置取得部51取得作为第二设备在片材31上的位置的第二位置、以及第二设备的方向(步骤S105),区域判定部53对包含被取得的第二位置的区域进行检测(步骤S106)。
区域判定部53所判定的区域可以不仅是处于单一片材31上的设定区域41a~41i、键盘区域43、节奏区域44、和弦区域45。区域判定部53也可以判定第一位置或者第二位置是否被包含在其他片材31上的区域中。在相互不同的片材31上,印刷有将相互不同的范围的坐标编码而得到的图案71。由此,即使在多个片材31上配置有区域,也仅根据第一位置或者第二位置的坐标就能够判定区域。
图9是表示片材31的其他一例的图。在图9所示的片材31b之上,设置有多个字符区域46、多个切换区域47、以及自由区域42,此外,用户能够视觉确认这些区域。用户将位置输入设备20配置于图8所示的片材31b之上,并指示字符区域46以及切换区域47,由此操作系统使与被指示的区域对应的字符的声音输出。
多个字符区域46是用于选择字符的区域。字符区域46的数量比能够输入的字符的种类的数量少。具体而言,字符区域46是显示日语的主要表示清音的字符的区域。字符区域46不是表示浊音、半浊音、拗音本身的区域,而能够通过后述的切换区域47与字符区域46的组合来输入浊音、半浊音、拗音或者它们的组合。
多个切换区域47是用于输入比字符区域46的数量多的种类的字符的区域。被输入的信息(例如字符)的候选值的集合(候选集合)存在多个,候选集合的数量是切换区域47的数量加1而得到的数量。多个字符区域46各自与某候选集合中包含的多个候选值的其中一个相对应。此外也与其他候选集合中包含的多个候选值的其中一个相对应。如果在切换区域47中配置有一个位置输入设备20的状态下,由其他位置输入设备20指示了多个字符区域46的其中一个,则选择与切换区域47对应的候选集合中包含的多个候选值之中的、与被指示的字符区域46对应的候选值,来作为输入信息。在此,多个切换区域47具体包含:表示浊音的区域、表示半浊音的区域、表示拗音的区域、表示促音的区域、表示浊音和拗音的组合的区域、以及表示半浊音和拗音的区域。针对与这些区域有关的处理在后面叙述。
片材31b中包含的自由区域42是用于在位置输入设备20被配置于其上时输入与该位置输入设备20在平面上的位置相应的设定值的区域。在图9的自由区域42上通过虚线记载了x轴Lx以及y轴Ly,但这些也可以不记载。在自由区域42中,也可以能够基于一个输入设备20的x方向的移动以及y方向的移动来设定多个项目。例如也可以是,与输入设备20的位置的y坐标相应地决定被输出的声音的音高(ピッチ),与x坐标相应地决定对于L/R扬声器的混音的音量。在这样的例中,不使用位置输入设备20的朝向,在自由区域42中,能够由一个位置输入设备20实现相当于与x轴方向的移动对应的滑块以及与y轴方向对应的滑块这两个滑块的输入。
图10是表示片材31的其他一例的图。在图10所示的片材31c之上,设置有水龙头区域48和玻璃杯区域49,此外,用户能够视觉确认这些区域。水龙头区域48是用于根据被配置于其上的位置输入设备20的旋转量来取得是否虚拟地向玻璃杯注水的指示的区域。玻璃杯区域49是用于使虚拟地注水后的玻璃杯的声音输出的区域。针对与这些区域有关的处理在后面叙述。
如果通过步骤S101至S106,检测出包含第一位置的区域以及包含第二位置的区域之中的至少一方,则信息输入部52通过与包含第一位置的区域的种类相应的处理来取得输入信息,声音输出部59输出声音(步骤S107)。信息输入部52通过与包含第二位置的区域的种类相应的处理来取得输入信息,声音输出部59输出声音(步骤S108)。在以下,针对步骤S107的处理的详细情况、即与区域的种类相应的处理进行说明。步骤S108的处理仅将步骤S107中的第一设备的第一位置及方向以及第二设备的第二位置及方向改变为第二设备的第二位置及方向以及第一设备的第一位置及方向即可,因此省略详细的说明。
图11是表示针对设定区域41的处理的一例的流程图。图11是表示在步骤S107中第一位置被包含在设定区域41中的情况下取得输入信息并输出声音的处理。
首先,输入信息决定部55与包含第一位置的设定区域41相应地,取得表示位置输入设备20的方向与输入值的对应的对应信息(步骤S301)。对应信息也可以包含多个项目,各项目是将方向的范围与输入值相关联的项目。输入值为与设定区域41对应的参数的设定值。对应信息按每个设定区域41a~41i被预先准备。接着,输入信息决定部55基于被取得的对应信息和第一设备的方向,取得输入值(步骤S302)。输入信息决定部55例如在对应信息所包含的项目之中的具有包含第一设备的方向在内的范围的项目中,取得与该范围相关联的输入值。
如果取得了输入值,则应用执行部58针对与第一位置所属的设定区域41对应的参数,设定被取得的输入值(步骤S303)。
例如,如果第一设备被配置于图5的设定区域41a,则与其方向相应地设定音量。其方向与片材31的基准方向所成的角度A越小,则音量可以越大。如果第一设备被配置于设定区域41b,则与其方向相应地,在键盘区域43之中的其中一个被指示时被输出的声音的高度(基准音的高度)变化。此外,在维持键盘区域43相互的相对的声音的高度之差的同时,与方向相应地设定键盘区域43各自的高度。
如果第一设备被配置于设定区域41d,则应用执行部58可以与该第一设备被配置于的方向相应地,设定针对与多个键盘区域43相对应的声音的音阶(音階のスケール)(例如大调、小调、五声、琉球音阶(音階)之中的一个)。如果第一设备被配置于设定区域41h、41i、41g,则应用执行部58可以与该第一设备被配置于的方向相应地,分别设定在位置输入设备20被配置于键盘区域43、节奏区域44、和弦区域45时输出的声音的种类。
通过使用方向来取得输入值,能够减少信息的输入所需的区域。此外,位置输入设备20的旋转使人联想到旋钮的操作,因此用户也能够更加直观地输入值。
如果针对参数设定了输入值,则声音输出部59输出该参数的确认用的声音(步骤S304)。通过输出确认用的音,用户能够容易地辨识当前的设定,设定变得更加容易。
图12是表示针对键盘区域43的处理的一例的流程图。图12是表示在步骤S107中第一位置被包含在键盘区域43中的情况下取得输入信息并输出声音的处理。
首先,输入信息决定部55根据包含第一位置的键盘区域43,取得用于识别是哪个键盘区域43的信息(步骤S401)。输入信息决定部55基于第一设备的方向,取得声音的高度有无变更(步骤S402)。输入信息决定部55更具体而言,在第一设备的方向相对于片材的基准方向向右侧倾斜了规定的角度以上的情况下,取得将声音的高度升高半音的指示来作为输入信息。此外,输入信息决定部55也可以在第一设备的方向相对于片材31的基准方向向左侧倾斜了规定的角度以上的情况下,取得将声音的高度降低半音的指示来作为输入信息。
并且,应用执行部58基于音阶(スケール)及基准音的高度、以及被取得的识别信息及声音的高度有无变更,决定要输出的声音的高度(步骤S403)。更具体而言,应用执行部58基于音阶(スケール)和键盘区域43的识别信息求出相对的声音的高度,基于求出的相对的声音的高度和基准音的高度求出要输出的声音的绝对的高度,进而在声音的高度有变更的情况下使声音的高度以半音变化。应用执行部58中包含的声音输出部59输出具有被决定的高度、且作为参数被设定的声音的种类以及音量的声音(步骤S404)。
通过这些处理,能够使用对键盘区域43进行指示时的位置输入设备20的方向,将被输出的声音的高度提高或者降低半音。由此,能够简化键盘区域43的设计。另外,应用执行部58也可以与位置输入设备20的方向相应地决定被输出的声音的长度(与被输出的声音对应的音符的种类)。例如,儿童用户难以准确地调整将位置输入设备20放置于键盘区域43的时间,因此通过使用方向,能够使儿童用户更容易地指示声音的长度。
图13是表示针对节奏区域44的处理的一例的流程图。图13是表示在步骤S107中第一位置被包含在节奏区域44中的情况下取得输入信息并输出声音的处理。
首先,输入信息决定部55基于以前通过设定区域41i设定的参数,取得表示多个节奏区域44各自与节奏音的种类的对应的信息(节奏集合)(步骤S501)。存在多个节奏集合,多个节奏区域44各自与某节奏集合中包含的多个节奏音的种类的其中一个相对应。此外,多个节奏区域44各自也与其他节奏集合中包含的多个节奏音的种类的其中一个相对应。节奏音的种类例如是鼓、打击乐、太鼓、动物的鸣叫声等,与设定区域41i被指示时的位置输入设备20的方向相应地设定用于选择节奏集合的参数。
输入信息决定部55基于被取得的集合,取得与包含第一位置的节奏区域44对应的节奏音的种类作为输入信息(步骤S502)。并且,声音输出部59以被设定的音量输出被取得的种类的节奏音(步骤S503)。
图14是表示针对字符区域46的处理的一例的流程图。图14表示在步骤S107中第一位置被包含在字符区域46中的情况下取得输入信息并输出声音的处理。
首先,输入信息决定部55判定第二位置是否被包含在多个切换区域47的其中一个中(步骤S601)。在第二位置未被包含在任一切换区域47中的情况下(步骤S601:否),输入信息决定部55选择多个候选集合之中的默认的候选集合(步骤S602)。多个字符区域46各自与某候选集合中包含的多个候选值的其中一个相对应。此外也与其他候选集合中包含的多个候选值的其中一个相对应。
另一方面,在第二位置被包含在多个切换区域47的其中一个中的情况下(步骤S601:是),输入信息决定部55选择多个候选集合之中的与包含第二位置的切换区域47相应的候选集合(步骤S603)。如果选择了某候选集合,则输入信息决定部55从被选择的候选集合,取得与包含第一位置的字符区域46对应的候选地作为输入值(步骤S604)。此外,输入信息决定部55基于第一设备的方向,取得被输出的声音的种类以及音高的指示(步骤S605)。更具体而言,输入信息决定部55可以将角度A的360度的范围分割为两个范围,在第一设备的角度A处于一方的范围的情况下,作为声音的种类取得男性的声音作为指示,在角度A处于另一方的范围的情况下,作为声音的种类取得女性的声音作为指示。此外,输入信息决定部55可以基于各个范围中的基准角度与角度A之差,取得声音的音高的指示。
并且,声音输出部59根据被取得的声音的种类以及音高,输出与被取得的输入值对应的声音(步骤S606)。
能够使用切换区域47来切换输入值的候选集合,即使字符区域46较少,也能够输入种类较多的信息。此外,在图14所示的处理中,通过将位置输入设备20保持放置于切换区域47,能够切换候选集合。根据位置输入设备20放置于的切换区域47,用户能够始终确认哪个候选集合的信息(例如浊音或半浊音的字符)被输入,因此在通过指示被印刷的区域来输入信息的情况下,能够更直观地进行输入。此外,通过使用位置输入设备20的方向,能够容易地调整声音的音高。
另外,在至此为止的说明中,省略了自由区域42中的处理的记载。在步骤S107中第一位置被包含在自由区域42中的情况下,输入信息决定部55取得表示通过自由区域42设定的参数的项目与位置的关系的位置对应信息,基于该位置对应信息、以及被取得的第一设备的位置(x坐标以及y坐标),取得输入值。并且,应用执行部58针对该参数的项目设定被取得的输入值。
图15是表示针对水龙头区域48的处理的一例的流程图。图15是表示在步骤S107中第一位置被包含在水龙头区域48中的情况下取得输入信息并输出声音的处理。在该处理中,与第一设备的方向的变化量相应地执行处理。
首先,输入信息决定部55判定上次取得的第一位置是否被包含在水龙头区域48中(步骤S701)。在上次的第一位置未被包含在水龙头区域48中的情况下(步骤S701:否),输入信息决定部55存储当前的第一设备的方向作为初始方向(步骤S702)。
在上次的第一位置被包含在水龙头区域48中的情况下(步骤S701:是),输入信息决定部55基于初始方向与当前的第一设备的方向之差(方向的变化量),取得流水模式的开启或者关闭的指示(步骤S703)。更具体而言,输入信息决定部55在方向的变化量为阈值以上的情况下取得流水模式的开启的指示,在方向的变化量小于阈值的情况下取得流水模式的关闭的指示。
并且,在取得了流水模式的开启的指示的情况下,应用执行部58使流水模式开启,声音输出部59输出水流动的声音(步骤S704)。此外,应用执行部58与流水模式开启的期间相应地,决定在玻璃杯区域49被指示的情况下输出的声音的高度(步骤S705)。
在玻璃杯区域49被指示的情况下输出的声音(输出音),相当于敲打有水的玻璃杯时输出的声音。通常的玻璃杯中水量越多则发出越高的声音,因此流水模式的期间越长,则输出音也越高。在印刷有水龙头的水龙头区域48配置位置输入设备20并改变方向的操作,与拧水龙头的操作类似,因此用户能够直观地进行操作。
另外,设定值也可以与位置输入设备20的方向的变化量相应地增减。例如,输入信息决定部55也可以与设定区域41a、41b之上的输入设备20的旋转量相应地,分别决定音量的变化量以及键盘区域43的键(key)(例如基准音)的高度的增减。应用执行部58也可以基于被决定的该增减、以及上次设定的音量或者键的高度,设定音量或者键盘区域43的键的高度。通过例如音量这样的设定值与输入设备20的旋转量相应地变化,能够进行直观的操作。此外,通过图11所示的处理也能够得到该效果。
[第二实施方式]
在第二实施方式中,针对使用两个位置输入设备20来输入信息的结构,主要说明与第一实施方式的差异点。在第一实施方式的图14的例中,与两个位置输入设备20被放置于的位置相应地输入字符,但在第二实施方式中,输入与字符不同的信息、例如指示。
图16是表示第二实施方式所涉及的片材31d的一例的图。在图16所示的片材31d上印刷有9×9的方格80。此外,其四角之中的一个是第一判定区域81,另一个是第二判定区域82。在图16的例中,由应用执行部58执行位置输入设备20在片材31d上行驶的游戏的处理。应用执行部58从预先储存在存储部12中的多个初始状态的其中一个开始游戏,与用户的操作相应地,变更内部的变量的值或位置输入设备20的位置。初始状态下的位置输入设备20的初始位置也被预先决定,在游戏开始时,位置输入设备20向初始位置自行。
图17是表示取得输入信息并对位置输入设备20进行控制的处理的一例的图,是对应于图8的步骤S107以及S108的处理。输入信息决定部55在第一位置被包含在第一判定区域81中(步骤S901:是),且第二位置被包含在第二判定区域82中(步骤S902:是)的情况下,取得重新开始指示作为输入值(步骤S903)。此外,在第一位置未被包含在第一判定区域81中(步骤S901:否),或者第二位置未被包含在第二判定区域82中(步骤S902:否)的情况下,输入信息决定部55与包含第一位置以及第二位置的区域相应地取得输入值(步骤S904)。另外也可以是,在第一位置被包含在第二判定区域82中,且第二位置被包含在第一判定区域81中的情况下,也取得重新开始指示作为输入值。
并且,在取得了重新开始指示作为输入值的情况下(步骤S906:是),应用执行部58对当前执行的游戏的变量进行初始化,进行控制以使位置输入设备20向初始位置移动(步骤S907)。另一方面,在未取得重新开始指示作为输入值的情况下(步骤S906:否),应用执行部58继续执行游戏的处理(步骤S908)。
在第二实施方式中,通过将两个位置输入设备20配置于特殊的位置,能够输入信息。由此,能够更有效地活用片材31上的区域。
在至此为止的说明中,位置输入设备20能够自行,但也可以不能自行。此外,本发明也可以不仅用于声音的输出或游戏的重新开始,而且用于通用的信息的输入。

Claims (10)

1.一种输入系统,包含:
片材,印刷有将位置编码而得到的图案;
输入设备,包含对所述图案进行摄影的相机;
取得部件,基于所述相机所摄影的图像中包含的图案,取得所述输入设备的位置以及朝向;以及
执行部件,基于由所述取得部件取得的位置以及朝向来执行处理。
2.如权利要求1所述的输入系统,
所述执行部件输出声音,基于被取得的所述位置以及朝向,决定与用户的操作相应地被输出的声音的参数。
3.如权利要求2所述的输入系统,
所述片材包含设定区域,
所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,决定与所述用户的操作相应地被输出的声音的种类、高度、音量之中的一个。
4.如权利要求3所述的输入系统,
所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,决定与所述用户的操作相应地被输出的声音的种类、高度、音量之中的一个,并输出被决定的声音。
5.如权利要求3所述的输入系统,
所述片材还包含多个演奏区域,
所述执行部件在所述输入设备的位置是所述多个演奏区域的其中一个的情况下,输出与包含所述输入设备的位置在内的演奏区域相应的高度的声音,
所述执行部件在所述输入设备的位置被包含在所述设定区域中的情况下,基于被取得的所述朝向,变更被输出的所述声音的种类、高度、音量、音阶之中的一个。
6.如权利要求2至5中任一项所述的输入系统,
所述执行部件与被取得的所述位置处于规定的区域内的期间中的被取得的所述朝向的变化量相应地,决定被输出的声音的参数。
7.如权利要求2至5中任一项所述的输入系统,
所述执行部件在被取得的所述位置处于规定的范围中的情况下,基于所述输入设备所取得的、输入设备相对于片材的朝向,决定被输出的声音的参数。
8.如权利要求1所述的输入系统,
所述执行部件基于被取得的所述位置以及朝向来选择信息,基于被选择的所述信息来执行处理。
9.一种输入方法,包含:
取得从图像辨识的、输入设备的位置以及朝向的步骤,其中所述图像是对印刷有将位置编码而得到的图案的片材进行摄影而得到的图像,而且是由所述输入设备摄影的图像;以及
基于被取得的所述位置以及朝向来执行处理的步骤。
10.一种用于使计算机作为如下部件发挥功能的程序:
取得部件,取得从图像辨识的、输入设备的位置以及朝向,其中所述图像是对印刷有将位置编码而得到的图案的片材进行摄影而得到的图像,而且是由所述输入设备摄影的图像;以及,
执行部件,基于被取得的所述位置以及朝向来执行处理。
CN202080075076.4A 2019-11-08 2020-09-24 输入系统、输入方法以及存储介质 Active CN114600069B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019203467 2019-11-08
JP2019-203467 2019-11-08
PCT/JP2020/036076 WO2021090592A1 (ja) 2019-11-08 2020-09-24 入力システム、入力方法およびプログラム

Publications (2)

Publication Number Publication Date
CN114600069A true CN114600069A (zh) 2022-06-07
CN114600069B CN114600069B (zh) 2024-04-30

Family

ID=75849898

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080075076.4A Active CN114600069B (zh) 2019-11-08 2020-09-24 输入系统、输入方法以及存储介质

Country Status (3)

Country Link
JP (1) JP7340031B2 (zh)
CN (1) CN114600069B (zh)
WO (1) WO2021090592A1 (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103913969A (zh) * 2012-12-28 2014-07-09 株式会社东芝 图像形成装置以及图像形成装置中的确认音产生方法
WO2018025467A1 (ja) * 2016-08-04 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、および、情報媒体
CN108509161A (zh) * 2017-02-28 2018-09-07 柯尼卡美能达株式会社 信息处理系统以及信息处理装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2045504A (en) * 1978-12-28 1980-10-29 Gaber H S Musical toys
US6695668B2 (en) * 2001-01-29 2004-02-24 Kevin Gerard Donahue Toy vehicle and method of controlling a toy vehicle from a printed track
JP2010240345A (ja) * 2009-04-02 2010-10-28 Koto:Kk 移動体玩具
CN107993495B (zh) * 2017-11-30 2020-11-27 北京小米移动软件有限公司 故事机及其控制方法、装置及存储介质、故事机播放系统
JP3215614U (ja) * 2017-12-20 2018-04-05 安譜國際股▲分▼有限公司 教育玩具

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103913969A (zh) * 2012-12-28 2014-07-09 株式会社东芝 图像形成装置以及图像形成装置中的确认音产生方法
WO2018025467A1 (ja) * 2016-08-04 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、および、情報媒体
CN108509161A (zh) * 2017-02-28 2018-09-07 柯尼卡美能达株式会社 信息处理系统以及信息处理装置

Also Published As

Publication number Publication date
JP7340031B2 (ja) 2023-09-06
WO2021090592A1 (ja) 2021-05-14
JPWO2021090592A1 (zh) 2021-05-14
CN114600069B (zh) 2024-04-30

Similar Documents

Publication Publication Date Title
US8085242B2 (en) Input control device and image forming apparatus
WO2014061626A1 (ja) タッチパネル式入力装置、その制御方法、および、プログラム
CN105814628B (zh) 用于基于装置信息来执行语音识别的方法和设备
JP5790176B2 (ja) 画像処理装置および画像処理プログラム
KR20040088062A (ko) 표시 화면상에 나타낸 복수개의 점들의 좌표값 및 그변화를 검출할 수 있는 검출기를 구비하는 정보 처리 장치
WO2014203301A1 (ja) 情報表示端末
US20160360051A1 (en) Image forming apparatus, method for controlling operation screen of image forming apparatus
US8376851B2 (en) Storage medium having game program stored therein and game apparatus
US20140189581A1 (en) Information processing apparatus, information processing method, and program
US11816270B2 (en) Electronic device that operates according to user's hand gesture, and image forming apparatus
JP5418973B2 (ja) 数値データ入力装置、画像形成装置およびプログラム
CN114600069B (zh) 输入系统、输入方法以及存储介质
JP2003345506A (ja) 操作入力装置および画像形成装置
JP5834529B2 (ja) 入力装置および入力制御プログラム
JP2021077113A (ja) 入力システム、入力方法およびプログラム
KR20120014068A (ko) 정보 처리 장치 및 이를 위한 프로그램이 저장된 기록매체
CN107438158A (zh) 唤醒控制装置、图像处理设备和唤醒控制方法
JP2011232988A (ja) 入力装置及び入力制御プログラム
KR101067612B1 (ko) 음성을 이용한 화면의 디스플레이 상태 제어장치 및 그 제어방법
WO2021033242A1 (ja) 画像認識装置、画像認識方法、及び、画像認識プログラム
US9041947B2 (en) Display apparatus, electronic apparatus, and image forming apparatus that hides non-specified images at the same hierarchical level as a specified image
CN108833731A (zh) 电子系统、电子设备以及便携式终端
JP2010011891A (ja) ゲーム制御プログラムおよびゲーム装置
JP2011175516A (ja) 入力装置及び入力制御プログラム
JPS6132109A (ja) 数値制御装置におけるデ−タ設定画面表示方式

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant