CN109661646A - 用于交互式阅读的系统、装置和方法 - Google Patents

用于交互式阅读的系统、装置和方法 Download PDF

Info

Publication number
CN109661646A
CN109661646A CN201780054139.6A CN201780054139A CN109661646A CN 109661646 A CN109661646 A CN 109661646A CN 201780054139 A CN201780054139 A CN 201780054139A CN 109661646 A CN109661646 A CN 109661646A
Authority
CN
China
Prior art keywords
response
audible
clue
display
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780054139.6A
Other languages
English (en)
Inventor
T·弗曼
H·杰克逊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wanjiecheng Gift Co Ltd
Marketing Store Worldwide LP
Original Assignee
Wanjiecheng Gift Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wanjiecheng Gift Co Ltd filed Critical Wanjiecheng Gift Co Ltd
Publication of CN109661646A publication Critical patent/CN109661646A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/062Combinations of audio and printed presentations, e.g. magnetically striped cards, talking books, magnetic tapes with printed texts thereon
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00Acoustics not otherwise provided for
    • G10K15/04Sound-producing devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8545Content authoring for generating interactive applications
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B17/00Teaching reading

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Signal Processing (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Security & Cryptography (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

用于促进交互式阅读的系统、装置和方法可以包括具有在其上的程序或应用程序的电子设备。在一个实施例中,应用程序可以识别与外部数据源组合的、通过大声阅读故事和/或执行一个或多个动作而产生的一个或多个线索。

Description

用于交互式阅读的系统、装置和方法
相关申请的交叉引用
本申请要求2016年7月13日提交的题为“用于交互式阅读的系统和方法(Systemand Method for Interactive Reading)”的美国临时申请No.62/361,644的优先权,该临时申请通过引用以其整体并入本文。
背景技术
提供对音频线索或大声阅读进行响应的设备是已知的。例如,美国公开No.2006/0073444公开了书本的读者使用编码标记设备来电子地扫描书本中的标记,以在该设备上选择适当的跟踪(track)。此外,美国公开No.2009/0246749公开了便携式投影仪和包括紫外光的光信号的使用。
发明内容
当前公开的技术克服了上述和其他现有技术中的缺点,并提供了附加的优点。例如,在一个实施例中,当前公开的技术不要求书本或其他阅读材料在其上或其中具有任何电子标识符。在一个实施例中,当前公开的技术采用触摸屏显示器,该触摸屏显示器可以显示已经由来自一个或多个用户的口语词语所激活的内容并与之交互。
在一个实施例中,本公开总体上涉及启用或促进交互式阅读的系统和方法。在一个特定实施例中,计算机应用程序帮助孩子沉浸于书本或故事中。读者或观者的想象力可以被拉伸或扩展,从而创建独特的体验和氛围,而不会减损对书本或故事的阅读。当大声阅读故事时,应用程序可以通过声音、颜色、动作等来使书本的场景和氛围变得栩栩如生,所有这些声音、颜色、动作等都可以从该应用程序创建。可以响应于经由设备获得的外部数据源来触发和改变这些场景(其可以包括声音效果、静态图形、动画等),所述外部数据源诸如,读者的移动、地理位置、一天中的时间、季节性事件的自动日历、假日和庆祝活动、以及其他可变的外部数据源。这种体验可以鼓励孩子继续阅读并给孩子阅读的理由。读者还能够为他们自己的出版物创建它们自己的场景。
在另一实施例中,本公开涉及可以被配置成提供交互式阅读体验的系统。该系统可以包括:麦克风,所述麦克风被配置成将声音转换成至少一个电信号;扬声器,所述扬声器被配置成将至少一个电信号转换成声音;显示器,所述显示器被配置成将至少一个电信号转换成一个或多个视觉表示;一个或多个处理器,所述一个或多个处理器可操作地连接到所述麦克风、所述扬声器和所述显示器;以及一个或多个存储器,所述一个或多个存储器可操作地耦合到所述一个或多个处理器并且具有存储在其上的计算机可读指令,当由所述一个或多个处理器中的至少一个执行时,所述计算机可读指令致使所述一个或多个处理器通过所述麦克风接收由于个体大声阅读预定稿本而产生的多个有区别的可听线索,并且通过所述扬声器和显示器中的至少一个产生多个响应,所述多个响应中的每个响应基于多个可听线索中的一个。
在又另一实施例中,本公开涉及具有存储在其上的计算机可读代码的非瞬态计算机可读介质,当由一个或多个计算设备执行时,所述计算机可读代码致使所述一个或多个计算设备:由所述一个或多个计算设备中的至少一个接收由于个体大声阅读预定稿本而产生的第一可听线索;由所述一个或多个计算设备中的至少一个,基于所述第一可听线索通过电子设备来产生第一响应;由所述一个或多个计算设备中的至少一个接收由于个体大声阅读预定稿本而产生的第二可听线索,所述第二可听线索与所述第一可听线索不同;以及由所述一个或多个计算设备中的至少一个,基于所述第二可听线索通过所述电子设备来产生第二响应,所述第二响应与所述第一响应不同。
在又进一步的实施例中,本公开涉及由一个或多个计算设备实施的用于创建交互式阅读体验的方法。所述方法可包括由一个或多个计算设备中的至少一个接收由于个体大声阅读预定稿本而产生的一个或多个线索;以及由所述一个或多个计算设备中的至少一个基于所述一个或多个线索中的每一个线索来产生响应。同所述一个或多个线索中的第一线索相关联的响应可以与同所述一个或多个线索中的第二线索相关联的响应不同。
附图说明
当结合附图阅读时,将更好地理解前述发明内容以及本发明的以下详细描述。出于说明本发明的目的,在附图中示出各个说明性实施例。然而,应理解本发明不限于所示的精确布置和手段。在附图中:
图1示出了根据本公开的实施例的多个组件和步骤;
图2示出了根据本公开的实施例的多个组件和步骤;
图3示出了根据本公开的实施例的多个组件和步骤;
图4示出了根据本公开的实施例的若干步骤;
图5示出了根据本公开的实施例的多个组件和步骤;
图6示出了可用于执行本文中所公开的过程的示例性计算设备;以及
图7示出了根据本公开的实施例的若干步骤。
具体实施方式
在下面的描述中使用特定术语是仅为了方便而不是进行限制。本文中所使用的某些词语指示参考的附图中的方向。除非本文中具体阐述,术语“一个”、“一”和“该”不限于一个元件,而是应当解释为意味着“至少一个”。术语包括上述词语、其缩写以及具有类似含义的词语。
详细参照附图,其中相同的附图标记始终表示相同的元件,图1-7示出了被设计成促进或鼓励交互式阅读的系统和方法。该系统和方法可以包括电子设备,诸如,手持移动电话或平板电脑或其他计算设备,该电子设备具有在其上的或可对其进行访问的程序或应用程序。电子设备的应用程序和/或一个或多个部分可以将通过大声阅读故事而产生的一个或多个可听线索与数据点(多个)一起识别,以随后生成对其的响应。换句话说,电子设备的应用程序和/或一个或多个部分可以采用语音识别技术(例如,语音识别芯片、麦克风、扬声器、以及通用或专用处理器或集成电路),该语音识别技术可以“收听”可听线索,该可听线索在被说出时,触发应用程序以通过电子设备自动地播放或启动特定内容。特定内容被设计成与故事和环境相关。
在一个实施例的操作中,当用户或读者大声阅读故事时,应用程序可以标识和/或识别一个或多个可听线索(例如,声音、词语、短语、句子、转调(inflection)等)以及一个或多个感测到的或接收到的数据点或其他外部信息,并产生一个或多个对其的响应。一个或多个响应可以是在电子设备的屏幕上显示图像、动画、视频和/或游戏、和/或通过计算机设备的一个或多个扬声器产生可听噪声或歌曲、振动、闪光和/或类似物。一个或多个响应可以补充或增强故事,并增添或增加读者/观者参与。一个或多个响应可以受外部数据源的影响,以针对用户的环境而更加个性化。
可以从书本、杂志、出版物、报纸、电子书、网站、计算机应用程序、游戏(例如,棋盘游戏)、广告牌等阅读故事。电子设备不限于手持移动电话或平板电脑。而是,电子设备可以是膝上型计算机、台式计算机、电视、可穿戴电子设备(例如,智能手表)等。虽然电子设备的应用程序和/或一个或多个部分可以识别可听线索,但是替代地或附加地,电子设备的应用程序和/或一个或多个部分可以识别视觉线索(例如,通过电子设备的相机)和/或物理线索(例如,电子设备的摇晃或扭曲)。视觉和/或物理线索可以触发来自应用程序和/或电子设备的响应。
图1和图2示出了本公开的实施例。例如,当短语“各种各样的瓶子和罐子”被大声阅读时,电子设备的应用程序和/或一个或多个部分可以标识和/或感测它,并且可以致使电子设备的扬声器发出罐子发出的嘎嘎(rattling)和叮叮当当(clanking)的声音。替代地或附加地,在应用程序感测到成分被大声阅读之后,电子设备的应用程序和/或一个或多个部分可以致使扬声器发出咕噜(glugging)和嘎嘎噪声。当成分被大声阅读时,电子设备的应用程序和/或一个或多个部分可以致使计算机电子的显示看起来充满液体以及显示蒸汽、示出鳄鱼的图片和/或显示旋转图像。当然,可以创建或执行多个响应(其示例如上所述)中的任何一个。在一个实施例中,每个响应可以持续仅几秒钟,使得当阅读故事时可以串联地播放多个响应。
在一个实施例中,可以为每个故事创建多个触发器或响应组。因此,在每次阅读故事时,应用程序都可以处理故事的不同元素或使故事的不同元素变得栩栩如生。例如,第一次阅读特定故事时,电子设备的应用程序和/或一个或多个部分可以生成十分之三的响应。当第二次阅读相同的故事时,电子设备的应用程序和/或一个或多个部分可以记住(例如,通过存储器)已经生成了哪三个响应并且可以生成附加的或替代的响应。
在一个实施例中,当使用不同的数据点(例如,不同的地理位置、一天中不同的时间、不同的季节、不同的个体或读者、大声阅读该故事的不同的速度、读者的不同的语音转调等)来阅读相同的故事时,应用程序可以产生该响应的一个或多个变型。例如,可以由经由设备获得的外部数据源来触发和改变一个或多个场景和/或声音,所述外部数据源诸如,读者的移动、读者的语音转调、地理位置、一天中的时间、季节性事件的自动日历、假日和庆祝活动、以及其他可变的外部数据源。
该实施例的一个示例将是用户阅读关于角色正试图骑马逃离的冒险。设备可利用马驰骋的声音来作出响应,但是驰骋声音的步调(pace)和/或音量可能会受到设备的移动的影响,即设备快速移动或手机的快速摇晃导致更快的驰骋。该实施例的另一示例包括在12月份期间经由向设备馈送当前日期而在后台播放节日音乐。
图3示出了本公开的另一实施例,其引导用户或读者在电子设备上完成或查看某些活动。例如,当短语“现在轮到你”被大声阅读时,电子设备的应用程序和/或一个或多个部分可以致使电子设备的显示器示出可以通过用户触摸显示器的特定部分来操纵或移动的一系列控制杆和按钮。在感测到用户触摸按钮中的一个或多个时,应用程序可以致使显示器播放动画视频和/或致使扬声器发出声音和/或歌曲。视频可以根据用户或读者选择的按钮或控制杆而不同。
图4示出了本公开的总体被指示为400的方法的实施例。用户或读者可以购买或获得产品,诸如,书本和/或(Happy)(步骤402)。产品可以包括信息或引导(例如,在指令卡、书本或玩具上),以供用户将应用程序安装或下载(例如,从因特网)到电子设备上(步骤404)。用户可能需要或可能不需要注册或登录到应用程序(步骤406)。用户可以通过选择或点击电子设备的显示器上的一个或多个图标来开始交互式阅读练习(步骤408)。替代地,应用程序可以自动加载。在任何一种情况下,应用程序都可以准备好收听或感测来自用户或读者的线索。
图5示出了本公开的一旦已经加载或激活应用程序的方法的实施例。最初地,电子设备的应用程序和/或一个或多个部分可以致使电子设备的显示器提示用户或读者选择故事(步骤502)。在一个实施例中,可以基于预定时间段(例如,每周)来限制可用或显示的故事列表。例如,在第一周期间两个故事是可用的,并且此后每周两个附加的故事是可用的。对于每周,应用程序可以加载故事特定资产或信息。
一旦故事被选定,电子设备的应用程序和/或一个或多个部分可以致使电子设备的显示器向用户或读者提供指令或提示(步骤504)。提示的一个示例是缓慢地并且清楚地大声阅读故事中的每个词语以获得最佳结果。用户随后可以选择“开始”或“启动”按钮以致使应用程序开始“收听”可听线索。当然,用户或读者可以使用显示器上的适当控制来向前跳过或返回。交互式阅读方法可以如以上所描述的以及图1-3中所示的那样继续。
以上描述的系统和/或方法中的一个或多个可利用软件来实施或包括软件,例如,在一个或多个电子设备610上执行的模块(参见图6)。当然,本文所描述的模块示出了各种功能并且不限于限制任何实施例的结构和功能。而是,可通过根据各种设计考虑的更多或更少的模块来不同地划分并执行各个模块的功能。
每个电子设备610可包括一个或多个处理设备611,一个或多个处理设备611被设计成处理以非瞬态方式存储在一个或多个存储设备613上的指令,例如计算机可读指令(即,代码)。通过处理指令,处理设备(多个)611可执行本文所公开的步骤和/或功能中的一个或多个。每个处理设备可以是真实的或虚拟的。在多处理系统中,多个处理单元可以执行计算机可执行指令以提高处理能力。存储设备(多个)613可以是任何类型的非瞬态存储设备(例如,光学存储设备、磁存储设备、固态存储设备等)。存储设备(多个)613可以是可移动或不可移动的,并且包括磁盘、磁带或磁带盒、CD-ROM、CD-RW、DVD、或可用于存储信息的任何其它介质。替代地,指令可被存储在一个或多个远程存储设备中,例如,通过网络或因特网访问的存储设备。
每个电子设备610附加地可具有存储器612、一个或多个输入控制器616、一个或多个输出控制器615、和/或一个或多个通信连接640。存储器612可以是易失性存储器(例如,寄存器、缓存、RAM等)、非易失性存储器(例如,ROM、EEPROM、闪存等)、或它们的一些组合。在至少一个实施例中,存储器612可存储实施所描述的技术的软件。
互连机构614(诸如,总线、控制器或网络)可操作地耦合计算设备610的各组件,包括处理器(多个)611、存储器612、存储设备(多个)613、输入控制器(多个)616、输出控制器(多个)615、通信连接(多个)640、和任何其他设备(例如,网络控制器、声音控制器等)。输出控制器(多个)615可操作地耦合至(例如,经由有线或无线连接)一个或多个输出设备620(例如,监视器、电视机、移动设备屏幕、触摸显示器、打印机、扬声器等),以这种方式,输出控制器(多个)615可转换设备上的显示(例如,响应于执行的模块)。输入控制器(多个)616可操作地耦合至(例如,有线或无线连接)输入设备630(例如,鼠标、键盘、触摸板、滚动球、触摸显示器、笔、游戏控制器、声音输入设备、扫描设备、数字相机等),以这种方式,可从用户接收输入。
通信连接(多个)640启用通过通信介质与另一计算实体的通信。通信介质传达诸如计算机可执行指令、音频或视频信息、或已调制数据信号中的其他数据之类的信息。已调制数据信号是使其特征中的一个或多个以在信号中编码信息的方式设置或改变的信号。作为示例而非限制,通信介质包括利用电学、光学、RF、红外、声学或其他载体来实施的有线或无线技术。
图6将电子设备610、输出设备620、以及输入设备630作为独立的设备示出仅为了易于标识的目的。然而,电子设备610、显示设备(多个)620、和/或输入设备(多个)630可以是独立的设备(例如,通过导线连接至监视器和鼠标的个人计算机),可被集成在单个设备(例如,具有触摸显示器的移动设备,诸如智能手机或平板)中,或设备的任何组合(例如,可操作地耦合至触摸屏显示设备的计算设备、附连至单个显示设备和输入设备的多个计算设备等)。电子设备610可以是一个或多个服务器,例如网络服务器群、集群服务器环境、或在远程计算设备上运行的云服务(多个)。数据源650可以将诸如来自一个或多个外部源的数据提供给设备610。数据源650可以在设备610的外部,并且可以由诸如因特网之类的通信方法提供或被耦合至诸如因特网之类的通信方法。
图7示出了本公开的总体被指示为700的方法的实施例。可以将数据源或多个数据源(n)输入到设备中(步骤702)。替代地,设备可以从一个或多个数据源接收数据。设备可以连续地从数据源(多个)接收和/或收听事件或信息(步骤704)。设备可以将事件或信息与存储在设备上的事件或信息进行比较(步骤706)。如果所存储的事件/信息与接收到的数据事件/信息之间存在匹配,则设备随后可以处理或发起针对数据源的当前状态的所保存的响应,以产生新的且唯一的响应(步骤708和步骤710)。设备随后可以输出最终的响应,可以视觉地、听觉地和/或物理地呈现该最终的响应(步骤712)。
与现有技术的系统和方法相反,本公开的系统和方法不要求用户将电话保持在特定位置或取向中以激活增强现实和/或书本内的标记。本公开的系统和方法不依赖于预先打印的目标。本公开的系统和方法也不限于依赖于电子设备的相机来感测线索,因为作为对仅依赖于相机的附加或替代,本公开可以采用音频或运动传感器来感测来自用户的线索。本公开的系统和方法可以有效地扩展用户对故事的兴趣,因为应用程序可以对相同的线索产生不同的反应。
本领域的技术人员将认识到,可以对以上描述的实施例作出改变,而不背离本发明的宽泛发明概念。因此,应理解,本公开不限于所公开的特定实施例,而是旨在覆盖如由所附权利要求所限定的本公开的精神和范围内的修改。

Claims (22)

1.一种被配置成提供交互式阅读体验的系统,所述系统包括:
麦克风,所述麦克风被配置成将声音转换成至少一个电信号;
扬声器,所述扬声器被配置成将至少一个电信号转换成声音;
显示器,所述显示器被配置成将至少一个电信号转换成一个或多个视觉表示;
一个或多个处理器,所述一个或多个处理器可操作地连接到所述麦克风、所述扬声器和所述显示器;以及
一个或多个存储器,所述一个或多个处理器可操作地耦合到所述一个或多个处理器并且具有存储在其上的计算机可读指令,当由所述一个或多个处理器中的至少一个执行时,所述计算机可读指令致使所述一个或多个处理器:
通过所述麦克风接收多个有区别的可听线索,所述多个有区别的可听线索是由于个体大声阅读预定稿本而发出的;以及
通过所述扬声器和所述显示器中的至少一者来产生多个响应,所述多个响应中的每个响应基于多个可听线索中的一个。
2.如权利要求1所述的系统,其特征在于,通过所述扬声器和所述显示器中的至少一者串行地表现所述多个响应。
3.如权利要求1或2所述的系统,其特征在于,当由所述一个或多个处理器中的至少一个执行时,所述一个或多个存储器致使所述一个或多个处理器:
接收除所述多个可听线索之外的数据,所述数据包括从全球定位系统(GPS)定位器、运动传感器、时钟和日历中的至少一者生成的信息;以及
基于所述数据产生一个或多个响应,
其中,基于所述数据的所述一个或多个响应中的至少一个与基于所述多个可听线索的所述多个响应中的每一个有区别。
4.如权利要求1或2所述的系统,其特征在于,所述多个可听线索包括所述个体大声阅读中的至少一个声音、词语、短语、句子和语音转调。
5.如权利要求1或2所述的系统,其特征在于,所述多个响应包括以下项中的至少一项:(i)所述显示器上的图像、(ii)所述显示器上的动画、(iii)从所述扬声器发出的声音、(iv)振动、(v)摇晃、和(vi)闪光。
6.如权利要求1或2所述的系统,其特征在于,所述预定稿本是书本、杂志、出版物和网站中的一项。
7.如权利要求1或2所述的系统,进一步包括:
相机,所述相机被配置成记录或捕获一个或多个图像或视频,所述相机可操作地连接到所述一个或多个处理器,
其中,当由所述一个或多个处理器中的至少一个执行时,所述一个或多个存储器致使所述一个或多个处理器:
从电子设备周围的外部环境接收一个或多个视觉线索;以及
通过所述扬声器和所述显示器中的至少一者产生一个或多个响应,所述一个或多个响应中的每一个基于所述一个或多个视觉线索。
8.如权利要求1所述的系统,其特征在于,对所述预定稿本的连续完整的阅读导致不同的响应。
9.一种非瞬态计算机可读介质,所述非瞬态计算机可读介质具有存储在其上的计算机可读代码,当由一个或多个计算设备执行时,所述计算机可读代码致使所述一个或多个计算设备:
由所述一个或多个计算设备中的至少一个接收由于个体大声阅读预定稿本而产生的第一可听线索;
由所述一个或多个计算设备中的至少一个,基于所述第一可听线索通过电子设备来产生第一响应;
由所述一个或多个计算设备中的至少一个接收由于所述个体大声阅读预定稿本而产生的第二可听线索,所述第二可听线索与所述第一可听线索不同,所述第二可听线索在所述第一可听线索的接收之后被接收;以及
由所述一个或多个计算设备中的至少一个,基于所述第二可听线索通过所述电子设备来产生第二响应,所述第二响应与所述第一响应不同。
10.如权利要求9所述的介质,其特征在于,所述第一响应包括在所述电子设备的显示器上示出的一个或多个第一图像或动画,并且其中,所述第二响应包括在所述电子设备的所述显示器上示出的一个或多个第二图像或动画。
11.如权利要求9或10所述的介质,其特征在于,所述第一响应是从所述电子设备的扬声器播放的一个或多个第一声音,并且其中,所述第二响应包括从所述电子设备的所述扬声器播放的一个或多个第二声音。
12.如权利要求9或10所述的介质,其特征在于,当由所述一个或多个计算设备执行时,致使所述一个或多个计算设备:
接收除所述一个或多个可听线索之外的数据,所述数据包括来自全球定位系统(GPS)定位器、运动传感器、和时钟中的至少一者的信息;以及
基于所述数据产生一个或多个第三响应。
13.如权利要求12所述的介质,其特征在于,所述一个或多个数据源包括至少一个全球定位系统(GPS)定位器、运动传感器、和时钟。
14.如权利要求9所述的介质,其特征在于,所述一个或多个可听线索包括声音、词语、短语、句子、和语音变调中的至少一者。
15.一种由一个或多个计算设备实施的用于创建交互式阅读体验的方法,所述方法包括:
a)由所述一个或多个计算设备中的至少一个接收由于个体大声阅读预定稿本而产生的一个或多个线索;以及
b)由所述一个或多个计算设备中的至少一个,基于所述一个或多个线索中的每一个线索来产生响应。
其中,同所述一个或多个线索中的第一线索相关联的响应与同所述一个或多个线索中的第二线索相关联的响应不同。
16.如权利要求15所述的方法,其特征在于,所述响应中的至少一个是通过扬声器表现的可听响应。
17.如权利要求15或16所述的方法,其特征在于,所述响应中的至少一个是通过显示器表现的视觉响应。
18.如权利要求15或16所述的方法,进一步包括:
在步骤a)之前,由所述一个或多个计算设备中的至少一个将应用程序下载到电子设备;以及
在步骤a)之前,由所述一个或多个计算设备中的至少一个启动所述电子设备上的所述应用程序。
19.如权利要求15或16所述的方法,进一步包括:
由所述一个或多个计算设备中的至少一个,基于所述一个或多个线索中的每一个线索来产生物理响应。
20.如权利要求19所述的方法,其特征在于,所述物理响应包括所述电子设备的振动和摇晃中的至少一者,并且其中,所述视觉响应包括闪光、显示器上的图像、和所述显示器上的视频中的至少一者。
21.如权利要求15或16所述的方法,进一步包括:
接收除所述多个可听线索之外的数据,所述数据包括从全球定位系统(GPS)、运动传感器、时钟和日历中的至少一者生成的信息。
22.如权利要求21所述的方法,进一步包括:
将接收到的数据与所存储的信息进行比较;以及
在所述数据与所述所存储的信息之间匹配的情况下,基于所述数据产生一个或多个响应。
CN201780054139.6A 2016-07-13 2017-07-13 用于交互式阅读的系统、装置和方法 Pending CN109661646A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662361644P 2016-07-13 2016-07-13
US62/361,644 2016-07-13
PCT/US2017/041836 WO2018013752A1 (en) 2016-07-13 2017-07-13 System, apparatus and method for interactive reading

Publications (1)

Publication Number Publication Date
CN109661646A true CN109661646A (zh) 2019-04-19

Family

ID=60952738

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780054139.6A Pending CN109661646A (zh) 2016-07-13 2017-07-13 用于交互式阅读的系统、装置和方法

Country Status (5)

Country Link
US (1) US11527167B2 (zh)
EP (1) EP3485368A4 (zh)
JP (1) JP2019527887A (zh)
CN (1) CN109661646A (zh)
WO (1) WO2018013752A1 (zh)

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002215176A (ja) * 2001-01-22 2002-07-31 Casio Comput Co Ltd 音楽配信システム、音楽配信方法、記録媒体、及びプログラム
CN1362682A (zh) * 2000-12-28 2002-08-07 卡西欧计算机株式会社 电子书籍数据传递设备、电子书籍设备和记录媒介
US20040117190A1 (en) * 2002-12-17 2004-06-17 Microsoft Corporation Computer system and method for enhancing experience using networked devices
EP1912193A1 (en) * 2006-10-02 2008-04-16 Koninklijke Philips Electronics N.V. Interactive storyteller system
WO2009150592A1 (en) * 2008-06-12 2009-12-17 Koninklijke Philips Electronics N.V. System and method for generation of an atmosphere
GB201019162D0 (en) * 2009-11-25 2010-12-29 Hallmark Cards Context based interactive toy
US20110246888A1 (en) * 2009-03-03 2011-10-06 Karen Drucker Interactive Electronic Book Device
US20130072080A1 (en) * 2009-11-25 2013-03-21 Hallmark Cards, Incorporated Context-based interactive plush toy
US20130297599A1 (en) * 2009-11-10 2013-11-07 Dulcetta Inc. Music management for adaptive distraction reduction
US20130307855A1 (en) * 2012-05-16 2013-11-21 Mathew J. Lamb Holographic story telling
CA2830051A1 (en) * 2012-10-12 2014-04-12 Hallmark Cards, Incorporated Context-based interactive plush toy
US20140195222A1 (en) * 2013-01-07 2014-07-10 Microsoft Corporation Speech Modification for Distributed Story Reading
CN104994921A (zh) * 2013-01-07 2015-10-21 微软技术许可有限责任公司 用于分布式故事阅读的视觉内容修改
US20150302651A1 (en) * 2014-04-18 2015-10-22 Sam Shpigelman System and method for augmented or virtual reality entertainment experience
JP2016510132A (ja) * 2013-02-15 2016-04-04 コルヴァード・ラーニング・システムズ・エルエルシー インタラクティブな学習システム
US20160154624A1 (en) * 2014-12-01 2016-06-02 Lg Electronics Inc. Mobile terminal and controlling method thereof
JP2016126773A (ja) * 2014-12-29 2016-07-11 イマージョン コーポレーションImmersion Corporation 視線追跡に基づく触覚効果を生成するシステム及び方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002205291A (ja) * 2000-10-23 2002-07-23 Sony Corp 脚式ロボット及び脚式ロボットの行動制御方法、並びに記憶媒体
JP2005024815A (ja) * 2003-07-01 2005-01-27 Ryuichiro Yamazaki 言語学習システムとその装置、方法、プログラム、及びこのプログラムを記録する記録媒体
US20060073444A1 (en) 2004-09-23 2006-04-06 Rines Robert H Method of and apparatus for supplementing the reading of selected passages of printed material in a book or the like by voice or acoustic pronouncement of coded indicia provided in the book at such passages, remotely to access the playing of corresponding coded tracks of pre-recorded video/audio supplemental material respectively related to the selected passages
US20080057480A1 (en) 2006-09-01 2008-03-06 K12 Inc. Multimedia system and method for teaching basal math and science
US20100068683A1 (en) * 2008-09-16 2010-03-18 Treasure Bay, Inc. Devices and methods for improving reading skills
US10249205B2 (en) 2015-06-08 2019-04-02 Novel Effect, Inc. System and method for integrating special effects with a text source
US20190088158A1 (en) * 2015-10-21 2019-03-21 Bee3Ee Srl. System, method and computer program product for automatic personalization of digital content
US10225431B2 (en) * 2016-12-15 2019-03-05 Liberty Pipeline Services, LLC System and method for importing scanned construction project documents

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1362682A (zh) * 2000-12-28 2002-08-07 卡西欧计算机株式会社 电子书籍数据传递设备、电子书籍设备和记录媒介
JP2002215176A (ja) * 2001-01-22 2002-07-31 Casio Comput Co Ltd 音楽配信システム、音楽配信方法、記録媒体、及びプログラム
US20040117190A1 (en) * 2002-12-17 2004-06-17 Microsoft Corporation Computer system and method for enhancing experience using networked devices
EP1912193A1 (en) * 2006-10-02 2008-04-16 Koninklijke Philips Electronics N.V. Interactive storyteller system
WO2009150592A1 (en) * 2008-06-12 2009-12-17 Koninklijke Philips Electronics N.V. System and method for generation of an atmosphere
US20110246888A1 (en) * 2009-03-03 2011-10-06 Karen Drucker Interactive Electronic Book Device
US20130297599A1 (en) * 2009-11-10 2013-11-07 Dulcetta Inc. Music management for adaptive distraction reduction
US20130072080A1 (en) * 2009-11-25 2013-03-21 Hallmark Cards, Incorporated Context-based interactive plush toy
GB201019162D0 (en) * 2009-11-25 2010-12-29 Hallmark Cards Context based interactive toy
US20130307855A1 (en) * 2012-05-16 2013-11-21 Mathew J. Lamb Holographic story telling
CA2830051A1 (en) * 2012-10-12 2014-04-12 Hallmark Cards, Incorporated Context-based interactive plush toy
US20140195222A1 (en) * 2013-01-07 2014-07-10 Microsoft Corporation Speech Modification for Distributed Story Reading
CN104994921A (zh) * 2013-01-07 2015-10-21 微软技术许可有限责任公司 用于分布式故事阅读的视觉内容修改
JP2016510132A (ja) * 2013-02-15 2016-04-04 コルヴァード・ラーニング・システムズ・エルエルシー インタラクティブな学習システム
US20150302651A1 (en) * 2014-04-18 2015-10-22 Sam Shpigelman System and method for augmented or virtual reality entertainment experience
US20160154624A1 (en) * 2014-12-01 2016-06-02 Lg Electronics Inc. Mobile terminal and controlling method thereof
JP2016126773A (ja) * 2014-12-29 2016-07-11 イマージョン コーポレーションImmersion Corporation 視線追跡に基づく触覚効果を生成するシステム及び方法

Also Published As

Publication number Publication date
WO2018013752A1 (en) 2018-01-18
EP3485368A1 (en) 2019-05-22
JP2019527887A (ja) 2019-10-03
EP3485368A4 (en) 2020-01-08
US20190251854A1 (en) 2019-08-15
US11527167B2 (en) 2022-12-13

Similar Documents

Publication Publication Date Title
CN109690632B (zh) 用于实现用户与出版物之间的计算机模拟现实交互的系统和方法
US20220148271A1 (en) Immersive story creation
US20130076788A1 (en) Apparatus, method and software products for dynamic content management
JP6505117B2 (ja) 模写によるデジタル携帯情報端末の対話、および応答時のリッチなマルチメディア
US20160012136A1 (en) Simultaneous Local and Cloud Searching System and Method
US20160203645A1 (en) System and method for delivering augmented reality to printed books
CN106663219A (zh) 处理与机器人的对话的方法和系统
CN106951881B (zh) 一种三维场景呈现方法、装置及系统
CN111383631B (zh) 一种语音交互方法、装置及系统
CN108228132A (zh) 促进用户录制的音频的创建和回放
CN104994921A (zh) 用于分布式故事阅读的视觉内容修改
CN104956317A (zh) 用于分布式故事阅读的语音修改
CN108664536B (zh) 互动式影音分享方法及系统
US20210168460A1 (en) Electronic device and subtitle expression method thereof
US20230245587A1 (en) System and method for integrating special effects to a story
Bashova et al. Visual novel
CN109661646A (zh) 用于交互式阅读的系统、装置和方法
CN116974507A (zh) 虚拟对象交互方法、装置、计算机设备、存储介质和程序产品
CN1846227A (zh) 电子设备与电子设备中的响应信息输出方法
KR20170130326A (ko) 음향 효과 제공시스템
CN108028025A (zh) 电子闪卡方法和系统
KR20170129979A (ko) 음향 효과 제공시스템
US10824866B2 (en) System, method, and apparatus for augmented reality implementation
CN111790158A (zh) 游戏场景的编辑方法、装置、电子设备及可读存储介质
Hewitt et al. The New Media Frontier (Foreword by Hugh Hewitt): Blogging, Vlogging, and Podcasting for Christ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40007791

Country of ref document: HK