CN106856504B - 公共网络中发送或接收公共广播和触觉数据的方法及装置 - Google Patents

公共网络中发送或接收公共广播和触觉数据的方法及装置 Download PDF

Info

Publication number
CN106856504B
CN106856504B CN201611130088.4A CN201611130088A CN106856504B CN 106856504 B CN106856504 B CN 106856504B CN 201611130088 A CN201611130088 A CN 201611130088A CN 106856504 B CN106856504 B CN 106856504B
Authority
CN
China
Prior art keywords
haptic
signal
processor
channel
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201611130088.4A
Other languages
English (en)
Other versions
CN106856504A (zh
Inventor
道格拉斯·G·比林顿
罗伯特·A·拉克鲁瓦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of CN106856504A publication Critical patent/CN106856504A/zh
Application granted granted Critical
Publication of CN106856504B publication Critical patent/CN106856504B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • H04W88/022—Selective call receivers
    • H04W88/023—Selective call receivers with message or information receiving capability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18—Service support devices; Network management devices
    • H04W88/184—Messaging devices, e.g. message centre

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Circuits Of Receivers In General (AREA)

Abstract

本发明公开了触觉效应信号的公共网络传输。一种用于接收公共广播和触觉效应的装置，该装置包括具有至少第一通信信道和第二通信信道的接收器，第一信道用于接收非触觉信号的无线传输，并且第二信道用于接收触觉信号的无线传输。换能器与接收器电通信，换能器用于接收和呈现通过第一信道广播的公共消息。触觉效应致动器与该接收器电通信，所述触觉致动器响应于所述触觉信号以生成触觉效应。

Description

公共网络中发送或接收公共广播和触觉数据的方法及装置
技术领域
本发明涉及触觉效应的传输，尤其涉及触觉效应在公共通信网络上的传输。
背景技术
公共消息传送系统可以向公众提供有价值的信息。这种信息可能传达公众应该直接和迅速地注意的紧急信息。其他消息传送可以提供一般公众可能选择采取行动或忽略的信息，例如哪些道路在一天的某些时间承担较轻的交通量。其他消息传送可以提供例如关于本地地标的感兴趣信息的一般信息，其对于普通接收者可能感兴趣或可能不感兴趣。
发明内容
概括地说，本发明针对在公共通信网络中的单独信道上的消息和触觉效应的广播。
在一个方面，一种用于接收公共广播和触觉效应的装置包括具有至少第一通信信道和第二通信信道的接收器，该第一信道用于接收非触觉信号的无线传输，并且所述第二信道用于接收触觉信号的无线传输。换能器与接收器电通信，换能器用于接收和呈现通过第一信道广播的公共消息。触觉效应致动器与所述接收器电通信，所述触觉致动器响应于该触觉信号以产生触觉效应。
在另一方面，一种用于在公共通信网络上的信道上发送触觉数据的装置包括多信道无线发射器。处理器通信地耦接到所述多信道无线发射器，其中处理器用于响应于输入触发而操作以选择公共消息和触觉数据，其中多信道无线发射器用于在多个信道中的第一无线信道上发送所选择的公共消息，并且用于在多个信道中的第二无线信道上发送该触觉数据。
在另一方面，一种方法在公共网络上递送触觉效应数据。该方法包括在第一无线通信信道上发送非触觉信号，该非触觉信号包含公共消息；以及在第二无线通信信道上传送触觉信号，该触觉信号包含与公共消息相关联的一组触觉数据。
附图说明
图1A是根据本发明的各种实施例的用于使用多信道传输方案来无线传输具有触觉效应的公共消息的系统的示意图。
图1B是根据本发明的各种实施例的用于使用逻辑信道传输方案的子信道来无线传输具有触觉效应的公共消息的系统的示意图。
图2是示出根据本发明的各种实施例的公共广播单元和接收器单元的基本部件的示意图。
图3是根据本发明的各种实施例的公共广播单元的示意图。
图4是根据本发明的各种实施例的接收器单元的示意图。
图5是根据本发明的各种实施例的用于无线传输具有触觉效应的公共消息的包括触觉效应服务器的系统的示意图。
图6是示出根据本发明的各种实施例的具有触觉效应的公共广播的流程的流程图。
具体实施方式
将参考附图详细描述各种实施例，其中，在几个视图各处，相同的附图标记表示相同的部件和组件。对各种实施例的参考不限制所附权利要求的范围。另外，本说明书中阐述的任何示例不旨在是限制性的，而是仅仅阐述了所附权利要求的许多可能实施例中的一些。
在适当时，以单数使用的术语也将包括复数，反之亦然。除非另有说明或“一个或多个”的使用明显不适当，本文中“一(a)”的使用意指“一个或多个”。除非另有说明，使用“或”表示“和/或”。“包括(comprise)”、“包括 (comprises)”、“包括(comprising)”、“包括(include)”以及“包括(includes)”的使用是可互换的，并且不旨在限制。术语“例如”也不旨在是限制性的。例如，术语“包括”应当表示“包括但不限于”。
本文公开了用于与公共信息和触觉效应相关的信号的传输的系统、装置及方法。非触觉公共信息信号和触觉信号可以在与公共通信网络中的单独信道上发送。在各种实施例中，公共通信网络包括用于将完全或主要为了通信目的所提供的信号发送到公众的成员的信号传输系统。传输系统可以包括装置、软件、数据及用于通信的传输频率。通常用于公共通信网络的频率包括VHF和UHF 公共服务和安全频带、紧急频带、海洋频带、天气频带及公共服务频带中的频率。公共通信网络中的频率的其它示例包括用于车对车(V2V)和车对基础设施(V2I)通信系统的DSRC频谱(专用短程通信；5850-5925MHz)中的频率；以及用于电子收费系统和其他收费系统的FasTrak(915MHz)所使用的频率。在一些实施例中，公共通信网络包括为包括联邦、州、国家或地方政府、机构及委员会的政府或准政府实体所保留的广播频率。在其他实施例中，广播频率由私有实体使用或拥有。
公共通信网络可以用于发送携带任何类型的非触觉信息(例如消息或其他类型的数据)的非触觉信号。示例包括传达关于交通、收费、天气、旅游、事件、公共安全和紧急情况以及安珀警报(Amber Alert)的信息的消息。其他示例包括用于远程控制诸如汽车、飞机、船只及其他类型的车辆和装置的数据或事件信号。这样的非触觉信号可以携带任何类型的非触觉信息，其可以具有诸如语音、视频或文本的各种不同的形式。
如本文所公开的，公共通信网络还可以用于与触觉效应相关的信号的传输，触觉效应是传递给人的触觉。触觉效应通常体现诸如提示、通知或更复杂信息的消息。这样的触觉信号可以包含任何类型的触觉数据，诸如递送或发起触觉效应的递送的指令、定义要递送的触觉效应的数据，或者将通过触觉效应递送的消息。该传输还可以包含被接收，处理及用于控制产生触觉效应的致动器的模拟信号。触觉效应的示例包括诸如强制反馈、振动和运动的力。
触觉信号可以在与用于传输非触觉信号的信道不同的一个或多个信道上发送。另外，该信道可以是用于传输数据或信号的任何类型的路径，并且可以包括例如频率带宽的主信道、主信道内的子信道，或者逻辑信道或者逻辑子信道，例如单独段的载波信号。因此，术语“信道”可以指信道、子信道或逻辑信道。
另外，在各种实施例中，公共通信网络可以用于城市范围、州范围、全国范围、全球或在任何其他限定的地理区域中。因此，触觉效应和其他信息可以在限定区域中的公共通信网络上发送。
公共消息和触觉效应两者的递送可以具有多种用途。另外，在一个或多个信道上传送的触觉数据可以与在一个或多个不同信道上传送的非触觉信息相关或协调。替换地，触觉数据可以与在其他通道上发送的任何非触觉信息无关或不相关。
在一些示例应用中，触觉效应可以用于已经使用诸如FasTrak、V2V及 V2I的公共网络的汽车市场中。在FasTrak的情况下，存在包括客户车辆内的收发器的公共数据网络。可以将触觉效应添加到现有的收费数字轨道以向驾驶员实时发送交通更新和警报。公共消息和触觉效应基于车辆位于何处或其驶向何处来向驾驶员或车辆乘客告知实时交通警报。触觉效应可以被传递到车辆乘客的电子装置或车辆本身。消息和触觉效应的这种特定用途帮助驾驶员避免危险、事故、交通减速等。另一示例性用途包括从道路传感器收集本地交通速度信息、触觉地增强该信息及将增强的信息选择性地传递给驾驶员。
触觉效应还可以与公共消息传递协作使用，使得无论何时驾驶员接近某种类型的目的地(例如餐馆、加油站或任何其他预定目的地)，驾驶员可以对警报请求进行编程。触觉效应的示例可以包括振动驾驶员的座椅、方向盘或车辆上的其他结构。触觉效应还可与紧急安全警报一起使用；驶向多车事故的驾驶员可以被发送停止或减慢的视觉、音频和触觉警告，以提供足够的时间来避免事故。驾驶员可能错过音频和视觉警告，但是触觉警告可能几乎立即被感觉到并被识别，从而有助于确保道路安全。
汽车应用中的触觉警报可以被建立为广播到发射器的某一范围内的车辆的本地警报。通过使用软件应用来选择待传送的警报的类型以及伴随这些警报的触觉效应的类型，任何类型的交通更新、状态或警报可以是本地的和选择性的(通过广播器或接收器)。
在V2V或V2I网络的情况下，触觉效应例如可以包括通信的部件。通信信号中的触觉效应编码可以是任意的，其可以是直接编码(例如，控制信号、高带宽、“将该信号应用于座椅致动器”)、索引编码(例如，“播放触觉效应 FX1”，其中触觉效应FX1被本地存储并且再现在车内)或参考编码(例如，“在汽车中播放‘前方事故’警告信标，其可以包括具有触觉部件的多媒体通信)。在另一个参考编码示例中，来自外部源(例如，前方的另一车辆，本地道路施工信标、无线电塔)的通用交通/道路状况消息被正确地解释(例如，在汽车中)以提供最适合于车辆的状况和触觉能力的适当的触觉效应。
尽管提供了与对汽车的触觉效应相关的传输的示例，但是在公共通信网络上的信道上的触觉效应的传输可以具有除了汽车和运输之外的应用。
在图1A和1B中示出了用于具有触觉效应的公共消息的无线传输的系统 100的示例性实施例。图1A将系统100描绘为包括公共广播单元102、接收器单元104(驻留在公共可用电子装置中或耦接到公共可用电子装置)及触觉致动器106。图1A进一步描绘了利用携带非触觉信号的第一无线信道108和携带触觉信号的第二信道110从广播单元102到接收单元104的多信道传输。在一个示例实施例中，非触觉信号和触觉信号在单独的通道上基本同时地传输，而在替代实施例中，非触觉和触觉信号的传输的定时是交错的，例如非触觉信号在触觉信号在第二信道110上传送之前或之后在第一信道108上传送。单独的信道108和110可以在频率范围内彼此相邻，或者可以由频率范围中的其它信道分开。此外，信道108和110可以具有相同或不同的带宽。
图1B将系统100类似地描绘为包括公共广播单元102、接收器单元104 及触觉致动器106。然而，在该示例性实施例中，非触觉信号和触觉信号被放置到子通道或逻辑信道用于传输到接收器。子信道或逻辑信道通常由单个信号 112通过诸如调制的技术来承载。
图2提供了用于具有触觉效应的公共广播的系统的另一示例实施例。系统 200包括公共广播单元202，接收器单元204及触觉致动器206。如图所示，公共广播单元202包括消息处理器220、触觉处理器222、可选的多路复用器 224及耦接到天线230的无线发射器226(或收发器)。消息处理器220用于执行编程指令以生成代表期望的公共消息的输出。期望的公共消息包括音频、视频或文本格式的非触觉信号。触觉处理器222用于执行编程指令以生成代表用于产生在公共消息的广播之前、之后或期间广播的触觉效应的指令的输出。注意的是，虽然消息处理器220和触觉处理器222在图中被识别为两个单独的元件，但是单个处理器可以用于执行这两个功能。
在示例实施例中，消息处理器220和触觉处理器224的输出被输入到发射器226。在该实施例中，发射器226用于经由天线230在如上面参考图1A所描述的分离的无线信道上发送非触觉信号和触觉信号。
在另一示例实施例中，消息处理器220和触觉处理器224的输出被输入到多路复用器(MUX)224，多路复用器(MUX)224操作以将非触觉信号和触觉信号放入在信号载波上待发送的子信道或逻辑信道。例如，如果使用频分复用，则MUX 224将非触觉和触觉信号放置在单独的载波信号上，每个载波信号在公共传输的带宽内具有单独的频率范围。每个载波信号在单独的子信道中。在另一示例中，如果使用时分复用，则MUX 224将非触觉公共信号和触觉信号插入到载波信号的单独时隙中。单独的时间段形成携带不同信号的单独的逻辑信道。其他可能的实施例可以使用其他复用技术。经复用的非触觉信号和触觉信号作为多信道信号输入到发射器226。在该实施例中，发射器226用于然后经由天线230发送如上面参考图1B所述的多信道、经复用的公共消息/触觉指令信号。
在另一示例中，对公共消息和触觉数据进行编码的数据是在分离的数据包中，使得携带公共消息的数据包形成逻辑信道，并且携带触觉数据的数据包形成单独的逻辑信道。公共消息和触觉消息也可以被包括在单个数据包中，该单个数据包具有在形成一个逻辑信道的数据包的一部分中的公共消息和在形成不同的逻辑信道的数据包的不同部分中的触觉消息。在这些实施例中，数据包将具有识别用于该数据包的有效载荷是否是用于公共消息或者触觉数据的数据的报头，使得接收器可以相应地处理数据包。数据包报头还可以包括例如数据包长度和地址的其他信息。地址的使用可以使得系统能够递送公共消息和触觉数据以选择接收器。在使用中，数据包通常在载波112上被调制，然后由发射器226发送。
接收器单元204类似地包括消息处理器240、触觉处理器242以及可选的解复用器244和耦接到天线250的无线接收器246(或收发器)。无线接收器 246用于经由天线250接收来自公共广播单元202的发送。在无线接收器246 在分离的无线信道上接收非触觉信号和触觉信号时，如上面参照图1A所述，接收器246用于将接收到的非触觉信号输入到消息处理器240，并将接收到的触觉信号输入到触觉处理器242。替换地，如上面参照图1B所示，在接收器 246在无线信道上接收到经复用的多信道非触觉信号/触觉信号时，接收到的传输被输入到解复用器244，解复用器244操作以将结合的传输分离成其公共消息和触觉效应分量，以分别输入到消息处理器240和触觉处理器242。
接收器单元204的消息处理器240用于响应于接收到的非触觉信号执行编程指令并产生相应的音频、视频或文本公共消息；音频公共消息可以例如通过公共可用的电子设备的扬声器252通过公共消息传送设备传送，而视频或文本公共消息可以例如传送到公共可用的电子设备的显示屏幕254。接收器单元 204的触觉处理器242用于响应于接收到的触觉指令执行编程指令，并且通过在公共可用的电子设备内或耦接到公共可用的电子设备的一个或多个触觉致动器206的适当激活来产生相应的触觉效应。注意的是，虽然消息处理器240 和触觉处理器242在图中被识别为两个单独的元件，但是单个处理器可以用于执行这两个功能。
图3提供了用于具有触觉效应的公共广播的系统的公共广播单元的又一示例实施例。图3的公共广播单元300包括由总线302创建的主传输路径，存储器304、处理器306、编码器/解码器(CODEC)308、复用器(MUX)310、网络接口卡(NIC)312、具有天线316的无线收发器314以及从例如麦克风、数字音轨、数字视频数据、模拟或数字传感器、按钮、选择器开关等接收输入的模拟和/或数字输入接口318耦接到该总线302。
存储器304可以包括非易失性存储器和RAM(随机存取存储器)，并且用于存储处理器306用于在其上执行的程序指令和数据。在各种其它类型的内容之中，存储器304的内容包括音频和/或视频文件320、触觉数据322、处理器可执行的事件检测模块324以及处理器可执行的触觉事件确定模块326。
音频和视频文件320包括音频(例如，其可以通过麦克风328的实时馈送来记录或提供)、视频或文本公共消息，由此响应于事件检测模块324检测到公共消息事件，处理器306选择适当的用于传输的公共消息。公共消息事件的检测由识别已经通过收发器314接收的各种可能的触发器输入(例如，诸如来自传感器、手动输入、语音输入、按钮致动，选择器开关致动等的触发器输入) 的事件检测模块324来实现，该收发器314的无线网络接入由NIC 312或通过输入接口318启用。
在检测到公共消息事件时，事件检测模块324不仅与处理器306结合操作以获取适当的公共消息音频、视频或文本文件320，而且其还与触觉事件确定模块326结合操作以确定什么类型的触觉事件与所选择的公共消息相关。参见例如数据库327配置，其中公共消息事件329与公共消息331对应，公共消息 331与触觉事件数据333对应；在不脱离本发明的精神或范围的情况下可以使用其他组织结构。一旦触觉事件确定模块326已经选择伴随公共消息的触觉事件的类型，则触觉事件确定模块访问触觉数据322以获得引起期望的触觉效应所需的指令。
所选择的非触觉信号和所选择的触觉信号然后由收发器314在如先前关于图1A所描述的单独的无线信道上无线地发送，或者如本文所述，消息和触觉指令通过MUX 310被放置在单独的子信道或逻辑信道中，用于传输。 CODEC 308用于在由收发器314进行传输之前压缩所选择的公共消息和触觉指令。
模拟和/或数字输入接口318根据需要可以是多用途的或专用的。在一个示例实施例中，输入接口318启用用于事件检测的触发器输入的直接进入。在另一示例实施例中，输入接口启用用于实况馈送的音频或视频公共消息数据、实时消息或在存储器304中的存储的输入。
公共广播单元300已经被描述为示例性实施例，然而，应当注意的是，公共广播单元300的总体配置可以被修改以适合特定的应用或情况。例如，在公共广播单元300的任何激活是立即发送预定公共消息或发送实况馈送消息的触发事件(例如，不需要识别应该发送哪个公共消息)的配置中，事件检测模块324可以作为不必要的而被删除。类似地，在公共广播单元300的任何激活是立即发送预定触觉信号的触发事件的配置中，触觉事件确定模块326可以作为不必要的而被删除。替换地，事件检测模块324和触觉事件确定模块326 中的一个或两个可以被使用，但不设置在公共广播单元300中；相反，模块 324和326可以设置在远程位置中(例如，在远程服务器中或在接收器单元中)，用于由公共广播单元远程访问。同样地，音频/视频文件320或触觉数据322 可以远程地容纳在接收器单元处的远程服务器中。此外，如果不需要或不期望压缩，则用于在传输之前压缩信号的CODEC 308可以不是必要的。如果非触觉信号和触觉信号的复用不是必要的，则可以不包括MUX310。如果对广播单元的输入是不必要的或不期望的，例如在公共广播单元的加电(powering up) 是激活非触觉信号和触觉信号的传输所需的唯一触发器输入的配置中，则模拟 /数字接口318可以不是必要的。在不脱离本发明的精神或范围的情况下，可以使用对公共广播单元300的各种部件的包括或省略的其它变化。
图4提供了具有触觉效应的用于公共广播的系统的接收器单元的另一个示例实施例。图4的接收器单元400包括由总线402创建的主传输路径，存储器404、处理器406、编码器/解码器(CODEC)408、解复用器(DEMUX) 410，网络接口卡(NIC)412、具有天线416的无线收发器414、可连接到诸如扬声器420或视频显示器421的公共消息传递装置的模拟和/或数字输出接口418，以及驱动致动器422的驱动电路424耦接到总线402。
存储器404可以包括非易失性存储器和RAM(随机存取存储器)，并且用于存储处理器406用于在其上执行的程序指令和数据。其无线网络接入由NIC 412启用的无线收发器414用于接收来自图3的公共广播单元300的传输。如前所述，参见图1A，该传输可以包括多信道传输，其中非触觉信号在第一无线信道上传输，并且触觉信号在第二无线信道上传输，或者参见图1B，该传输可以包括多信道信号，其中非触觉信号和触觉信号已经为了单一传输而被复用。在后一种情况下，DEMUX 410用于将经复用的传输分离成其公共消息和触觉指令分量部分。CODEC 408用于解压缩先前压缩的传输。
接收到的公共消息和触觉指令的传输可以包含处理器406需要接收器单元400通过例如扬声器420和/或可视显示器421来广播公共消息和通过利用驱动器电路424驱动触觉致动器422来引起触觉效应的基本上所有必要的指令和数据。在另一示例实施例中，所接收的传输可以仅包括公共消息指示符和触觉指令指示符。在该上下文中，存储器404优选地包括一个或多个音频和/或视频文件426、触觉数据428、事件检测模块430及触觉事件确定模块432；各种文件426和数据428可以以例如图3的数据库327的适当的数据库结构来组织。同样地，公共消息指示符可以直接指向要广播的特定音频或视频文件 426，或者公共消息指示符可以由事件检测模块430用作触发器输入，使得事件检测模块430能够确定适当的公共消息音频、视频或文本文件进行广播。类似地，触觉指令指示符可以指向特定的触觉数据428以经由驱动电路424和触觉致动器422启用对于公共消息的触觉效应的产生。替换地，触觉指令指示符可以由触觉事件确定模块432使用来确定适当的触觉数据428，以经由驱动电路424和触觉致动器422启用与公共消息相关的触觉效应的产生。
与公共广播单元300一样，接收器单元400根据适合特定应用或情况进行修改。例如，如果事件检测模块430或触觉事件确定模块432的功能已经由公共广播单元300执行，则事件检测模块430或触觉事件确定模块432可以不是必要的。在另一示例中，在第二通道110上接收到的触觉信号包含触觉效应数据并且事件检测模块430确定是否接收到触觉信号，然后生成包含接收到的触觉数据的触觉控制信号。触觉控制信号被传送到驱动电路424。在另一个示例中，存储器404存储一组或多组触觉数据428。在接收器400在第二通道110 上接收到触觉信号时，触觉事件确定模块432根据所存储的触觉数据428确定触觉数据。在第二通道110上接收的触觉信号可以是用于生成触觉效应的触发器。包含所确定的触觉数据的触觉控制信号然后被生成并传送到驱动电路424。
如果接收器单元400确实使用模块430或432，则它们的位置可以远离接收器单元400。类似地，如果包含在那些文件/数据中的信息存在于来自公共广播单元300的传输，则音频/视频文件426和触觉数据428可以不是必要的。替换地，可以在由接收器单元400进行无线或有线访问的远程位置处提供音频 /视频文件426和触觉数据428。如果由接收器单元400接收的传输未被预先压缩，则CODEC 408可以不是必要的。如果所接收的传输先前没有被复用，则解复用器410可以不是必要的。在不脱离本发明的精神或范围的情况下，可以使用对接收器单元400的各种部件的包括或省略的其它变化。
图5示出了用于具有触觉效应的公共消息的无线传输的系统500的另一个示例实施例。在该配置中，具有触觉致动器506的公共广播单元502和/或接收器单元504经由云端耦接到触觉效应服务器510。触觉效应服务器510包含用于在变化的强度水平(例如，低、中或高强度)下产生多种类型的不同触觉效应的例如触觉数据的指令库。同样地，触觉效应数据可以根据物理空间和/ 或存储器的可用性，存储在以下三个位置中的任何一个或全部：(1)广播单元 502；(2)接收器单元504；以及(3)触觉效应服务器510，从而启用触觉数据的直接、索引或者参考编码。触觉效应服务器510上的数据可以根据需要由公共广播单元502和接收器单元504中的一个或两个来访问从而获得产生期望的触觉效应的指令。
触觉效应服务器510可以替换地用于包括如上参照图3和4所述的音频/ 视频文件、触觉数据、事件检测模块或触觉事件确定模块中的任何一个或全部，并且包括数据库或其他组织结构。同样地，音频/视频文件、触觉数据以及模块中的每一个可以由公共广播单元502或接收器单元504中的一个或两个来访问。
关于本文所描述的实施例，应当注意的是，接收器单元被容纳在公共可用的电子设备中或耦接到公共可用的电子设备。公共可用的电子设备包括例如便携式装置、手持装置、玩具、游戏控制台、手持视频游戏系统、游戏手柄、游戏控制器、台式计算机、诸如蜂窝电话、智能电话、个人数字助理(PDA)、电子阅读器、便携式阅读设备、手持式阅读设备、膝上型计算机、平板计算机、数字音乐播放器、遥控器、医疗仪器等便携式多功能设备。在其他示例性实施例中，公共可用的电子设备可以嵌入在诸如车辆、腕表、其他首饰、手臂带、手套等的另一装置中。因此，在某些实施例中，公共可用的电子设备是可穿戴的。在一些实施例中，公共可用的电子设备可以嵌入在例如车辆的另一装置中，例如汽车的控制台、汽车座椅、方向盘、气体或制动踏板等。
此外，应当注意的是，触觉输出设备是能够输出一个或多个触觉效应的任何部件或部件的集合。例如，触觉输出设备可以是各种类型中的一种，包括但不限于偏心旋转质量(eccentric rotational mass，ERM)致动器、线性谐振致动器(linear resonantactuator，LRA)、压电致动器、音圈致动器、电活性聚合物(electro-active polymer，EAP)致动器、形状记忆合金、寻呼机、DC电动机、AC电动机、移动磁体致动器、E-核心致动器、智能凝胶、静电致动器、电触动致动器、可变形表面、静电摩擦(electrostatic friction，ESF)设备、超声波摩擦(ultrasonic friction，USF)设备或者执行触觉输出设备的功能或能够输出触觉效应的任何其它触觉输出设备或者部件的集合。多个触觉输出设备或不同尺寸的触觉输出设备可以用于提供一系列振动频率，其可以单独地或同时地被致动。各种实施例可以包括单个或多个触觉输出设备，并且可以具有相同类型或不同类型的触觉输出设备的组合。如果需要，选择适合于触觉致动器的类型的用于提供附加电流以驱动触觉致动器的驱动电路。
此外，应当注意的是，所描述的接收器单元的部件中的一些或全部实际上可以包括驻留在公共可用的电子设备内的部件。这些部件被用作接收器单元的元件以产生如上所述的公共消息和触觉效应，但是也用于执行公共可用的电子设备的各种其他功能操作。替换地，所描述的接收器单元的部件可以仅位于所包含的接收器单元部件内。
在图6的流程图中示出了实现具有触觉效应的公共消息的广播的一般过程600。过程600可以由例如政府或非政府源、私人或非私人源等通过公共广播单元的直接(例如，通过输入接口的按钮触发事件，单元的上电)或远程(例如，无线传输触发事件)激活来发起S10。在另一示例实施例中，具有触觉效应的公共消息的广播可以由例如传感器的设备来发起S10，该设备检测条件并将该条件作为触发器输入事件报告到公共广播单元。也可以使用本申请先前描述的其它触发器输入。
一旦触发事件已经发生，则公共广播单元响应于触发而操作以选择S20 对应的和/或适当的公共消息，以及选择S30与公共消息相关的触觉效应。在一个示例实施例中，选择触觉效应，使得公共消息更可能被注意或至少吸引额外的注意。例如，触觉事件的强度和类型可以根据公共消息的重要性而变化，例如，更加重要的消息利用更强烈和更刺耳的触觉事件来广播，更不重要的消息利用更柔软的感觉、更不强烈的触觉事件来广播。
非触觉信号和触觉信号然后从公共广播单元发送S40。如果非触觉信号和触觉信号经由单载波传输被发送，则非触觉信号和触觉信号在传输之前被复用到单独的子信道或逻辑信道S32。
通过其发送非触觉信号和触觉信号的单独通道通常在3kHz至300GHz 的无线电频谱内。然而，非触觉信号和触觉信号被发送的频率可以被更窄地集中。例如，非触觉信号和触觉信号可以在由联邦、州、国家或者地方政府、机构、委员会等保留用于广播的频率上发送。替换地，非触觉信号和触觉信号可以在私人持有的、许可的或保留的频带上发送。用于非触觉信号和触觉信号的传输频率的一些具体示例包括VHF和UHF公共服务频带、紧急频带、海洋频带、天气频带、其他公共服务频带(例如，交通、收费信息)等。非触觉信号和触觉信号的更多示例性传输包括在用于车对车(V2V)和/或车对基础设施 (V2I)通信系统的DSRC频谱(专用短程通信；5850-5925MHz)和由FasTrak 使用的用于电子收费的～915MHz上的传输。
如上所述，非触觉信号和触觉信号传输然后由在公共可用电子装置内或耦接到公共可用电子装置的接收器单元接收S50。如果传输是复用传输，则该传输被解复用S52以分离出公共消息和触觉效应分量。接收器单元然后操作以经由音频或视频显示器广播S60公共消息，并且通过驱动触觉致动器来引出触觉效应。触觉效应可以在公共消息的广播之前、期间或之后出现。
上述各种实施例仅以说明的方式提供，并且不应被解释为限制所附的权利要求。本领域技术人员将容易地认识到可以在不遵循本文示出和描述的示例性实施例和应用的情况下并且不脱离所附权利要求的真实精神和范围的情况下进行的各种修改和改变。

Claims (26)

1.一种用于接收公共广播和触觉数据的装置，包括：
接收器，被配置用于接收第一公共通信信道和第二公共通信信道，所述第一公共通信信道被配置用于携带包括消息的非触觉信号的第一无线广播传输，并且所述第二公共通信信道被配置用于携带与所述消息相关联的触觉信号的第二无线广播传输；
处理器，与所述接收器电通信，并且被配置用于接收和呈现由所述接收器接收的所述消息、接收所述触觉信号、并且基于所述触觉信号生成触觉驱动信号；以及
触觉效应致动器，与所述处理器电通信，并且被配置用于基于所述触觉驱动信号生成触觉效应。
2.根据权利要求1所述的装置，其中所述触觉信号包括第一频率并且所述非触觉信号包括第二频率。
3.根据权利要求1所述的装置，其中所述接收器进一步被配置用于接收包括载波频率的载波信号，并且所述触觉信号和所述非触觉信号在所述载波频率上被调制。
4.根据权利要求3所述的装置，其中所述触觉信号和所述非触觉信号在时间上分离或在时间上交错。
5.根据权利要求1所述的装置，其中所述第一公共通信信道是第一逻辑信道并且所述第二公共通信信道是第二逻辑信道，并且所述第一逻辑信道和所述第二逻辑信道被复用到多信道信号中。
6.根据权利要求1所述的装置，其中所述接收器被配置用于基本同时地接收所述第一无线广播传输和所述第二无线广播传输。
7.根据权利要求1所述的装置，进一步包括存储器，所述存储器包括可执行指令，所述可执行指令当被执行时使所述处理器用于：
确定所述触觉信号是否经由所述第二公共通信信道由所述处理器接收；以及
响应于确定所述触觉信号经由所述第二公共通信信道被接收，生成触觉控制信号，所述触觉控制信号包括触觉效应数据。
8.根据权利要求7所述的装置，进一步包括：
驱动电路，与所述处理器和所述触觉效应致动器电通信，所述驱动电路被配置用于：
接收来自所述处理器的所述触觉控制信号；以及
基于所述触觉控制信号的所述触觉效应数据，驱动所述触觉效应致动器。
9.根据权利要求7所述的装置，其中所述存储器进一步包括可执行指令，所述可执行指令当被执行时使所述处理器从一组或多组触觉数据中选择所述触觉效应数据。
10.根据权利要求9所述的装置，其中所述触觉效应数据与所述消息相关联。
11.根据权利要求1所述的装置，其中所述消息包括交通警报，并且所述触觉效应与所述交通警报相关联。
12.根据权利要求11所述的装置，其中所述交通警报被实时发送。
13.一种用于在公共通信网络上发送触觉数据的装置，包括：
处理器，通信地耦接到多信道无线发射器，所述处理器被配置用于：
检测事件；
响应于检测所述事件：
选择包括非触觉信号的消息；以及
选择包括触觉效应的触觉信号，所述触觉效应与所述消息相关联；以及
将所选择的消息和所选择的触觉信号提供给所述多信道无线发射器；以及
所述多信道无线发射器被配置用于：
在第一无线公共通信信道上发送所述所选择的消息；以及
在第二无线公共通信信道上发送所述所选择的触觉信号。
14.根据权利要求13所述的装置，其中所述触觉信号包括第一频率并且所述非触觉信号包括第二频率。
15.根据权利要求13所述的装置，其中所述多信道无线发射器进一步被配置用于发送包括载波频率的载波信号，所述触觉信号和所述非触觉信号在所述载波频率上被调制。
16.根据权利要求15所述的装置，其中所述触觉信号和所述非触觉信号在时间上分离或在时间上交错。
17.根据权利要求13所述的装置，进一步包括复用器，所述第一无线公共通信信道是第一逻辑信道并且所述第二无线公共通信信道是第二逻辑信道，所述第一逻辑信道和所述第二逻辑信道被所述复用器复用到多信道信号中。
18.根据权利要求13所述的装置，进一步包括：
存储器，包括可执行指令，所述可执行指令当被执行时使所述处理器用于：
从一组或多组触觉数据确定所述触觉效应，所述一组或多组触觉数据在所述第二无线公共通信信道上发送，并且所述消息在所述第一无线公共通信信道上发送。
19.根据权利要求18所述的装置，其中所述存储器进一步包括两个或更多个消息和两组或更多组触觉数据。
20.根据权利要求13所述的装置，其中所述处理器通信地耦接到包括至少一组触觉数据的远程服务器，以及存储器进一步包括可执行指令，所述可执行指令当被执行时使所述处理器获取所述至少一组触觉数据。
21.根据权利要求20所述的装置，其中所述存储器进一步包括可执行指令，所述可执行指令当被执行时使所述处理器用于：
基于所述事件识别所述消息；以及
至少部分基于对所述消息的识别，获取所述至少一组触觉数据。
22.一种在公共网络上递送触觉数据的方法，所述方法包括：
由处理器在第一无线公共通信信道上发送非触觉信号，所述非触觉信号包括消息；以及
由所述处理器在第二无线公共通信信道上发送触觉信号，所述触觉信号包括与所述消息相关联的一组触觉数据。
23.根据权利要求22所述的方法，进一步包括：
由复用器将所述非触觉信号和所述触觉信号复用到单个信号中，所述第一无线公共通信信道和所述第二无线公共通信信道是在所述单个信号内的逻辑信道。
24.根据权利要求22所述的方法，进一步包括：
由所述处理器在第一频率上发送所述非触觉信号；以及
由所述处理器在第二频率上发送所述触觉信号。
25.根据权利要求24所述的方法，进一步包括：
由所述处理器将所述非触觉信号和所述触觉信号调制到载波信号上；以及
由所述处理器经由所述载波信号发送所述非触觉信号和所述触觉信号。
26.根据权利要求22所述的方法，进一步包括：
由所述处理器从存储器获取该组触觉数据，该组触觉数据与所述消息相关联。
CN201611130088.4A 2015-12-09 2016-12-09 公共网络中发送或接收公共广播和触觉数据的方法及装置 Expired - Fee Related CN106856504B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/964,058 2015-12-09
US14/964,058 US10235848B2 (en) 2015-12-09 2015-12-09 Public network transmission of haptic effect signals

Publications (2)

Publication Number Publication Date
CN106856504A CN106856504A (zh) 2017-06-16
CN106856504B true CN106856504B (zh) 2020-10-30

Family

ID=57708288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611130088.4A Expired - Fee Related CN106856504B (zh) 2015-12-09 2016-12-09 公共网络中发送或接收公共广播和触觉数据的方法及装置

Country Status (5)

Country Link
US (2) US10235848B2 (zh)
EP (1) EP3179339A1 (zh)
JP (1) JP2017121043A (zh)
KR (1) KR20170068404A (zh)
CN (1) CN106856504B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140379588A1 (en) 2013-03-15 2014-12-25 Compology, Inc. System and method for waste managment
CN109475079B (zh) 2016-07-22 2023-03-14 哈曼国际工业有限公司 触觉驾驶引导系统
US10198076B2 (en) * 2016-09-06 2019-02-05 Neosensory, Inc. Method and system for providing adjunct sensory information to a user
CN110035808A (zh) * 2016-09-14 2019-07-19 声感股份有限公司 具有同步的多设备音频流传输系统
WO2018151770A1 (en) * 2017-02-16 2018-08-23 Neosensory, Inc. Method and system for transforming language inputs into haptic outputs
US10410515B2 (en) * 2017-03-31 2019-09-10 Jose Muro-Calderon Emergency vehicle alert system
US10744058B2 (en) 2017-04-20 2020-08-18 Neosensory, Inc. Method and system for providing information to a user
WO2018207817A1 (ja) * 2017-05-11 2018-11-15 株式会社ナノルクス 固体撮像装置、撮像システム及び物体識別システム
US11307661B2 (en) 2017-09-25 2022-04-19 Apple Inc. Electronic device with actuators for producing haptic and audio output along a device housing
US10757491B1 (en) 2018-06-11 2020-08-25 Apple Inc. Wearable interactive audio device
US11334032B2 (en) 2018-08-30 2022-05-17 Apple Inc. Electronic watch with barometric vent
US20200076866A1 (en) * 2018-08-30 2020-03-05 Immersion Corporation Systems, devices, and methods for streaming haptic effects
US11561144B1 (en) 2018-09-27 2023-01-24 Apple Inc. Wearable electronic device with fluid-based pressure sensing
US10798522B1 (en) 2019-04-11 2020-10-06 Compology, Inc. Method and system for container location analysis
JP7194292B2 (ja) 2019-04-17 2022-12-21 アップル インコーポレイテッド 無線位置特定可能タグ
US11467667B2 (en) 2019-09-25 2022-10-11 Neosensory, Inc. System and method for haptic stimulation
US11467668B2 (en) 2019-10-21 2022-10-11 Neosensory, Inc. System and method for representing virtual object information with haptic stimulation
US11079854B2 (en) 2020-01-07 2021-08-03 Neosensory, Inc. Method and system for haptic stimulation
US11497675B2 (en) 2020-10-23 2022-11-15 Neosensory, Inc. Method and system for multimodal stimulation
CN115551000A (zh) * 2021-06-30 2022-12-30 展讯通信（上海）有限公司 触觉数据的传输方法及相关产品
US11862147B2 (en) 2021-08-13 2024-01-02 Neosensory, Inc. Method and system for enhancing the intelligibility of information for a user
US11995240B2 (en) 2021-11-16 2024-05-28 Neosensory, Inc. Method and system for conveying digital texture information to a user

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102480612A (zh) * 2010-11-21 2012-05-30 余浪 用于传输视频数据和触觉数据的方法以及视频采集装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002183007A (ja) * 2000-12-18 2002-06-28 J-Phone East Co Ltd 限定的情報提供方法及びそのシステム
ATE400871T1 (de) * 2004-01-29 2008-07-15 Harman Becker Automotive Sys Multimodale dateneingabe
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
EP1936929A1 (en) 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
US7920490B2 (en) * 2007-05-30 2011-04-05 Melodytek Limited Systems and methods for wireless transmission and reception of data including frequency and channel code selection
KR20090041270A (ko) * 2007-10-23 2009-04-28 삼성전자주식회사 대중 교통 이용시 목적지 알람 제공 장치 및 방법
US7911328B2 (en) * 2007-11-21 2011-03-22 The Guitammer Company Capture and remote reproduction of haptic events in synchronous association with the video and audio capture and reproduction of those events
US8521078B2 (en) * 2008-03-21 2013-08-27 Qualcomm Incorporated Common interface protocol for sending FR-RDS messages in wireless communication systems
US20100188265A1 (en) 2009-01-23 2010-07-29 Hill Lawrence W Network Providing Vehicles with Improved Traffic Status Information
KR101615872B1 (ko) 2009-05-08 2016-04-27 삼성전자주식회사 휴대단말기의 햅틱 기능 전송 방법 및 시스템
US20130170450A1 (en) * 2011-12-29 2013-07-04 Qualcomm Incorporated Wireless broadcast/multicast service capacity over different link budgets and overlay networks
US8552847B1 (en) * 2012-05-01 2013-10-08 Racing Incident Pty Ltd. Tactile based performance enhancement system
US9304588B2 (en) * 2013-05-14 2016-04-05 Thieab AlDossary Tactile communication apparatus
US9369920B2 (en) * 2013-06-12 2016-06-14 Qualcomm Incorporated Degree reduction and degree-constrained combining for relaying a fountain code
US9158379B2 (en) * 2013-09-06 2015-10-13 Immersion Corporation Haptic warping system that transforms a haptic signal into a collection of vibrotactile haptic effect patterns
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102480612A (zh) * 2010-11-21 2012-05-30 余浪 用于传输视频数据和触觉数据的方法以及视频采集装置

Also Published As

Publication number Publication date
KR20170068404A (ko) 2017-06-19
US10235848B2 (en) 2019-03-19
JP2017121043A (ja) 2017-07-06
US20190236917A1 (en) 2019-08-01
CN106856504A (zh) 2017-06-16
US20170169673A1 (en) 2017-06-15
EP3179339A1 (en) 2017-06-14

Similar Documents

Publication Publication Date Title
CN106856504B (zh) 公共网络中发送或接收公共广播和触觉数据的方法及装置
CN102037458B (zh) 驾驶员起始的交通工具到交通工具匿名警告装置
US9959763B2 (en) System and method for coordinating V2X and standard vehicles
US9046375B1 (en) Navigation for a passenger on a public conveyance based on current location relative to a destination
CN107454554B (zh) 利用车辆对车辆通信的应急通道
EP2214148B1 (en) Method and system for generating traffic messages in the TPEG format
CN106843643B (zh) 页面处理方法及移动终端
JP5139126B2 (ja) 車車間通信システム並びに車載通信装置及び携帯通信装置
KR101746019B1 (ko) 디바이스와 차량 사이의 컨텍스트가 풍부한 통신
TW201009761A (en) Driver initiated vehicle-to-vehicle anonymous warning device
US20160165424A1 (en) Systems and Methods for Emergency Vehicle Proximity Warnings Using Digital Radio Broadcast
CN108260055B (zh) 再现系统及方法、终端装置及方法、计算机可读存储介质
US20100245581A1 (en) Warning display system
CN104978777A (zh) 对驾驶行为进行分析的系统、装置及方法
KR20190095198A (ko) 자율 주행 시스템과 그 미디어 재생 방법
KR20190101922A (ko) 차량용 인포테인먼트의 제어방법 및 제어장치
US8977330B2 (en) In-vehicle apparatus
US11202189B2 (en) Infotainment system for emergency rescue request notification and method thereof
US20150222756A1 (en) Pager add-on device for a mobile device
WO2014030027A1 (en) Audio unit and method for generating a safety critical audio signal
CN111918213A (zh) 一种智能车载互联系统
KR102558876B1 (ko) 교차로 통합 ldm 정보 처리 장치 및 방법
CN105225684A (zh) 一种在收听广播时收听交通信息或导航信息的方法
WO2018003285A1 (ja) 通信機、通信システム、通信プログラムおよび通信制御方法
CN214847723U (zh) 一种驾驶意向交互系统

Legal Events

Date Code Title Description
PB01 Publication
CB02 Change of applicant information

Address after: California, USA

Applicant after: Immersion Corp.

Address before: California, USA

Applicant before: Immersion Corp.

CB02 Change of applicant information
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201030

CF01 Termination of patent right due to non-payment of annual fee