CN114554295B - 通讯系统及其方法 - Google Patents

通讯系统及其方法 Download PDF

Info

Publication number
CN114554295B
CN114554295B CN202110005111.1A CN202110005111A CN114554295B CN 114554295 B CN114554295 B CN 114554295B CN 202110005111 A CN202110005111 A CN 202110005111A CN 114554295 B CN114554295 B CN 114554295B
Authority
CN
China
Prior art keywords
mask
signal
code
user device
optical code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110005111.1A
Other languages
English (en)
Other versions
CN114554295A (zh
Inventor
林昆贤
张立光
陈一元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial Technology Research Institute ITRI
Original Assignee
Industrial Technology Research Institute ITRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial Technology Research Institute ITRI filed Critical Industrial Technology Research Institute ITRI
Publication of CN114554295A publication Critical patent/CN114554295A/zh
Application granted granted Critical
Publication of CN114554295B publication Critical patent/CN114554295B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10712Fixed beam scanning
    • G06K7/10722Photodetector array or CCD scanning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14131D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14172D bar codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4825End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/06Remotely controlled electronic signs other than labels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Optical Communication System (AREA)

Abstract

本发明提供了一种通讯系统及其方法,先提供具有光码模块与面板的显示装置、第一遮罩、第二遮罩、以及具有荧幕的用户装置,且第一遮罩与第二遮罩分别位于面板的不同位置。接着,由光码模块提供光码信号至面板,且由第一遮罩与第二遮罩分别提供第一遮罩信号与第二遮罩信号。然后,由用户装置自面板撷取光码信号加上第一遮罩信号或第二遮罩信号,以依据光码信号与第一遮罩信号的组合得出第一代码、或者依据光码信号与第二遮罩信号的组合得出第二代码,进而在用户装置上显示第一代码或第二代码所对应的服务内容。

Description

通讯系统及其方法
技术领域
本发明是关于一种通讯技术,特别是指一种通讯系统及其方法。
背景技术
在现今全球有关显示装置的趋势上,数码看板的类的显示装置的市场营收逐渐成长,例如依据美国商业资讯(Business Wire)的研究指出,全球数码看板的市场在2015年的营收已达到了219亿美元。而且,数码看板的广告会影响购买决策,例如有68%的消费者表示数码看板的广告会影响购买决策,甚至有45%消费者指出这种数码看板与传统店家广告结合的传播形态将引发非计划性的购买。同时,智慧互动数码看板的时代的来临,数码看板为追求更完整的用户体验,一路从扩大荧幕的面积,演进到动态内容播放与中央控制系统,直到现阶段的智慧互动数码看板。
此外,蓝牙(bluetooth)无线通讯是目前较为常见的智能手机与数码看板之间的互动传输方式,但在实际应用上,却因为蓝牙的资讯传输没有方向性,使得目前数码看板的推动遇到了阻碍。
另外,目前数码看板可能同时播放多个广告,但单一背光板在同一时间只能发送单一或单组可见光信号。又,若使用多个背光板虽能同时发送多组可见光信号,但背光板的成本并不低廉,且整体数码看板的硬件架构也需重新设计,导致大幅提高数码看板的成本。
因此,如何提供一种创新的通讯技术,以让显示装置(如数码看板)同时兼具显示与资讯传递的功能,或避免提高显示装置(如数码看板)的成本,或者可在用户装置(如移动装置)的荧幕上显示用户感兴趣的服务内容(如广告内容),已成为本领域技术人员的一大研究课题。
发明内容
本发明的相关专利可参考申请人(发明人)的第TWI655867号(或同族的第CN109511014A号、第US10510377B2号)所提供的“结合光码与影片的系统及其方法”,以进一步了解本发明的相关技术内容。
本发明提供一种通讯系统及其方法,例如能让显示装置(如数码看板)同时兼具显示与资讯传递的功能,或能避免提高显示装置的成本,或者能在用户装置(如移动装置)的荧幕上显示用户感兴趣的服务内容(如广告内容)。
本发明的通讯系统包括:显示装置,其具有光码模块与面板,以由光码模块提供光码信号至面板;第一遮罩与第二遮罩,其分别位于显示装置的面板的第一位置与第二位置,以由第一遮罩与第二遮罩分别提供第一遮罩信号与第二遮罩信号;以及用户装置,其具有相机与荧幕,以由用户装置的相机自显示装置的面板撷取光码信号加上第一遮罩信号或第二遮罩信号,再由用户装置依据光码信号与第一遮罩信号的组合得出第一代码、或者依据光码信号与第二遮罩信号的组合得出第二代码,进而在用户装置的荧幕上显示第一代码或第二代码所对应的服务内容。
前述的用户装置包括:相机,其自显示装置撷取光码信号加上第一遮罩信号或第二遮罩信号;处理模块,其依据相机自显示装置所撷取的光码信号与第一遮罩信号的组合得出第一代码、或者依据光码信号与第二遮罩信号的组合得出第二代码;以及荧幕,其依据处理模块所得出的第一代码或第二代码显示相对应的服务内容。
本发明的通讯方法包括:提供具有光码模块与面板的显示装置、第一遮罩、第二遮罩、以及具有荧幕的用户装置,且第一遮罩与第二遮罩分别位于显示装置的面板的第一位置与第二位置;由显示装置的光码模块提供光码信号至面板,且由第一遮罩与第二遮罩分别提供第一遮罩信号与第二遮罩信号;以及由用户装置自显示装置的面板撷取光码信号加上第一遮罩信号或第二遮罩信号,以由用户装置依据光码信号与第一遮罩信号的组合得出第一代码、或者依据光码信号与第二遮罩信号的组合得出第二代码,进而在用户装置的荧幕上显示第一代码或第二代码所对应的服务内容。
因此,本发明的通讯系统及其方法利用光码信号的通讯具有方向性与不容易被遮蔽等优点,让显示装置能提供光码信号,以利显示装置同时兼具显示与资讯传递的功能。而且,显示装置的光码信号能结合多个遮罩的遮罩信号以得出多个代码,有利在用户装置的荧幕上显示代码所对应的服务内容。同时,显示装置可以具有一个面板,即可提供多个代码,有利于避免提高显示装置的成本,也能让用户通过用户装置选择感兴趣的服务内容。另外,本发明通过至少二遮罩的方式增加至少二遮罩信号或遮罩资讯,能让用户通过用户装置读取到感兴趣的资讯,有利于提升显示装置的服务效率。
为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合附图作详细说明。在以下描述内容中将部分阐述本发明的额外特征及优点,且此等特征及优点将部分自所述描述内容可得而知,或可借由对本发明的实践获得。应理解,前文一般描述与以下详细描述二者均为示例性及解释性的,且不欲约束本发明所欲主张的范围。
附图说明
图1A与图1B为本发明的通讯系统的架构示意图,其中图1B用于说明光码、遮罩与代码的关系;
图2为本发明图1A与图1B的通讯系统中关于服务内容的实施例示意图;
图3A与图4为本发明的通讯系统中关于显示装置与遮罩(如硬件遮罩)的实施例示意图;
图3B为本发明的光线透射遮罩(如硬件遮罩)的波形示意图;
图5为本发明的通讯系统中关于显示装置与遮罩(如软件遮罩)的实施例示意图;
图6为本发明的通讯方法的流程示意图;以及
图7为本发明的通讯方法的另一流程示意图。
附图标记说明
1 通讯系统
10 播放装置
20 显示装置
21 光码模块
22 驱动器
23 光源
24 面板
25 彩色滤光片
30 用户装置
31 相机
32 荧幕
33 处理模块
34 光码解码单元
35 遮罩解码单元
36 运算单元
40 服务器
A 光码信号
A′ 光码资讯
B1 第一遮罩信号
B1′ 第一遮罩资讯
B2 第二遮罩信号
B2′ 第二遮罩资讯
B3 第三遮罩信号
B3′ 第三遮罩资讯
C1 第一代码
C2 第二代码
C3 第三代码
D 服务内容
E 基板
L 光线
L1 全频光线
L2 可见光
L3 红外线光
M1 第一遮罩
M2 第二遮罩
M3 第三遮罩
P1 第一位置
P2 第二位置
P3 第三位置
S11至S13、S21至S31 步骤
V 影片。
具体实施方式
以下通过特定的具体实施例说明本发明的实施方式,本领域的技术人员可由本说明书所公开的内容了解本发明的其它有益效果,也可因而通过其它不同的具体等同实施例加以施行或运用。
图1A与图1B为本发明的通讯系统1的架构示意图,其中图1B用于说明光码、遮罩与代码的关系,图2为图1A与图1B的通讯系统1中关于服务内容D的实施例示意图,且服务内容D可为广告内容(广告资讯)、活动内容(活动资讯)、或多媒体内容(多媒体资讯)等。
如图1A与图1B所示,通讯系统1可包括依序连接或互相通讯的播放装置10、显示装置20、用户装置30、服务器40,并包括多个遮罩等。播放装置10可为用于影片V(节目)的播放器或传送器等,并能同步控制显示装置20的面板24与驱动器22,以通过同步面板24所显示的影片V的画面与驱动器22所驱动的光码模块21的光码信号A。显示装置20可为显示器、看板等,且看板可为数码看板、广告看板、电子看板等。用户装置30可为移动装置、可携式装置、穿戴式装置等,如智能手机、平板电脑、笔记型电脑、手提式电脑、智能手表等。服务器40可为云端服务器(云端平台)、网络服务器、网页服务器、远程服务器、电脑主机等。多个遮罩可包括至少二个(如二、三、四、五、六个或以上)遮罩,本发明例如以三个不同的遮罩为例(即第一遮罩M1、第二遮罩M2、第三遮罩M3),且第四个以上的遮罩(如第四遮罩、第五遮罩、第六遮罩等)皆可依照下列第一遮罩M1至第三遮罩M3的内容加以类推,故不再重复叙述。
显示装置20可具有光码模块21、至少一驱动器22、光源23与面板24等,且用户装置30可具有相机31、荧幕32与处理模块33等。例如,光码模块21可为光码产生器(如光码产生芯片/光码产生电路)、光码调变器(如光码调变芯片/光码调变电路)等,用以产生或调变光码信号A,也可为可见光产生器(如可见光产生芯片/可见光产生电路)、可见光调变器(如可见光调变芯片/可见光调变电路)等,用以产生或调变可见光信号,且光码信号A可为可见光信号。驱动器22可为光码驱动器(如光码驱动芯片/光码驱动电路)、光源驱动器(如光源驱动芯片/光源驱动电路)、或其组合。光源23可为背光源、光源产生器、光源发射器等。相机31可为或包括数码相机、相机镜头、摄像头等。处理模块33可为处理器(如中央处理器/微处理器)、处理芯片、处理电路、处理软件、或其组合等。
显示装置20的光码模块21可提供光码信号A至面板24(荧幕),且光码信号A可简称或通称为“光码”。驱动器22可为光码驱动器以驱动光码模块21来产生光码信号A,或者驱动器22可为光源驱动器以驱动光源23来发射光线L。光源23可发射光线L至第一遮罩M1与第二遮罩M2,以使第一遮罩M1与第二遮罩M2分别提供(产生)第一遮罩信号B1(如第一空间信号)与第二遮罩信号B2(如第二空间信号)。
第一遮罩M1与第二遮罩M2可分别位于显示装置20的面板24(荧幕)的第一位置P1与第二位置P2,以由第一遮罩M1与第二遮罩M2分别提供第一遮罩信号B1(如第一空间信号)与第二遮罩信号B2(如第二空间信号)。又,第一遮罩M1与第二遮罩M2可将显示装置20的面板24(荧幕)的版面(如广告版面)进行分割,并分别对影片V叠加隐藏的第一遮罩信号B1与第二遮罩信号B2,而不会对光码信号A(如可见光信号)造成影响。面板24的第一位置P1可表示面板24的第一空间、第一区块、第一栏位或第一版面(如第一广告栏位或第一广告版面)等,且面板24的第二位置P2可表示面板24的第二空间、第二区块、第二栏位或第二版面(如第二广告栏位或第二广告版面)等。
用户装置30的相机31可自显示装置20的面板24(荧幕)撷取光码信号A加上第一遮罩信号B1(如第一空间信号)或第二遮罩信号B2(如第二空间信号),再由用户装置30依据光码信号A与第一遮罩信号B1(如第一空间信号)的组合得出第一代码C1(如第一广告代码)、或者依据光码信号A与第二遮罩信号B2(如第二空间信号)的组合得出第二代码C2(如第二广告代码),以供后续在如图2所示用户装置30的荧幕32上显示第一代码C1所对应的服务内容D(如第一广告内容)或第二代码C2所对应的服务内容D(如第二广告内容)。
同样地,第三遮罩M3可位于显示装置20的面板24(荧幕)的第三位置P3,以由第三遮罩M3提供第三遮罩信号B3(如第三空间信号),且由用户装置30的相机31自显示装置20的面板24(荧幕)撷取光码信号A加上第三遮罩信号B3(如第三空间信号),再由用户装置30依据光码信号A与第三遮罩信号B3(如第三空间信号)的组合得出第三代码C3(如第三广告代码),进而在用户装置30的荧幕32上显示第三代码C3所对应的服务内容D(如第三广告内容)。又,第一遮罩M1至第三遮罩M3可将显示装置20的面板24(荧幕)的版面(如广告版面)进行分割,第三遮罩M3可对影片V叠加隐藏的第三遮罩信号B3而不会对光码信号A(如可见光信号)造成影响,且面板24的第三位置P3可表示面板24的第三空间、第三区块、第三栏位或第三版面(如第三广告栏位或第三广告版面)等。
服务器40可接收来自用户装置30的第一代码C1(如第一广告代码)、第二代码C2(如第二广告代码)或第三代码C3(如第三广告代码),以由服务器40依据第一代码C1、第二代码C2或第三代码C3提供相对应的服务内容D(如第一广告内容、第二广告内容或第三广告内容)至用户装置30,进而在用户装置30的荧幕32上显示相对应的服务内容D。
另外,用户装置30或处理模块33可具有光码解码单元34、遮罩解码单元35与运算单元36。例如,光码解码单元34可为光解码器、光解码芯片、光解码电路、光解码软件等,遮罩解码单元35可为遮罩解码器、遮罩解码芯片、遮罩解码电路、遮罩解码软件等,运算单元36可为算术逻辑单元(Arithmetic logic unit;ALU)、计算机、微电脑、运算软件、资讯分析软件等。
光码解码单元34可依据光码信号A解码出光码资讯A′,且遮罩解码单元35可分别依据第一遮罩信号B1、第二遮罩信号B2与第三遮罩信号B3各自解码出第一遮罩资讯B1′(如第一空间资讯)、第二遮罩资讯B2′(如第二空间资讯)与第三遮罩资讯B3′(如第三空间资讯)。
运算单元36可依据光码资讯A′与第一遮罩资讯B1′(如第一空间资讯)的组合运算出第一代码C1(如第一广告代码),或依据光码资讯A′与第二遮罩资讯B2′(如第二空间资讯)的组合运算出第二代码C2(如第二广告代码),或者依据光码资讯A′与第三遮罩资讯B3′(如第三空间资讯)的组合运算出第三代码C3(如第三广告代码)。例如,运算单元36可将光码资讯A′与第一遮罩资讯B1′的组合进行资讯分析或关联运算以得出第一代码C1,或将光码资讯A′与第二遮罩资讯B2′的组合进行资讯分析或关联运算以得出第二代码C2,或者将光码资讯A′与第三遮罩资讯B3′的组合进行资讯分析或关联运算以得出第三代码C3。
图3A与图4为本发明的通讯系统1中关于显示装置20与遮罩(如硬件遮罩)的实施例示意图,图3A的左侧与右侧分别为侧视图及前视图,且图3B为本发明的光线L透射遮罩(如硬件遮罩)的波形示意图,并参阅图1A至图1B予以说明。
如图3A与图4所示,第一遮罩M1、第二遮罩M2或第三遮罩M3可为硬件遮罩,并分别位于显示装置20的面板24(荧幕)的第一位置P1、第二位置P2或第三位置P3上,且第一遮罩M1、第二遮罩M2或第三遮罩M3可由红外线遮罩薄膜(thin film)、红外线滤光片(infraredcut filter;ICF)、红外线水浮印薄膜或偏振片(polarizer)等所制成。第一遮罩M1、第二遮罩M2或第三遮罩M3可具有不透红外线光L3的栅格结构(如红外线光L3的透射率趋近于0%),且栅格结构可形成于基板E上。同时,显示装置20可具有彩色滤光片25,且彩色滤光片25可位于面板24上、或面板24与基板E之间。
如图3A至图3B所示,为了避免干扰影片V的画面品质,可在能被全频光线L1所透射的基板E上覆盖或涂布一涂层,以采用光刻或蚀刻技术图案化涂层而形成具有不透红外线光L3的栅格结构,且不同的栅格结构依据需求组成不同的花纹遮罩图案而贴附于显示装置20的面板24(荧幕)上。
基板E能被全频光线L1所透射,且全频光线L1可包括或涵盖可见光L2与红外线光L3等。基板E上的第一遮罩M1、第二遮罩M2或第三遮罩M3(栅格结构)能被可见光L2所透射(如可见光L2的透射率趋近于90%至100%),且第一遮罩M1、第二遮罩M2或第三遮罩M3(栅格结构)能阻挡红外线光L3(如红外线光L3的透射率趋近于0%)。例如,全频光线L1的波长的范围为400nm(纳米)至1000nm,可见光L2的波长的范围为400nm至700nm,红外线光L3的波长的范围为760nm至1000nm。但是,本发明并不以此为限。
在图4或图5中,影片V可为具有多个(如三个)不同候选物件的一个影片,或者影片V可为具有多个(如三个)不同候选物件的多个(如三个)影片且一个影片具有一个候选物件。又,图4或图5左侧上方的候选物件(如女装或女子)、左侧中间的候选物件(如沙发或玩具熊)、左侧下方的候选物件(如机车或骑士),也可分别位于显示装置20的面板24(荧幕)的第一位置P1、第二位置P2、第三位置P3上,以使三个不同候选物件各自对应于第一遮罩M1、第二遮罩M2、第三遮罩M3。
当用户以用户装置30(如移动装置)的相机31(镜头)对准显示装置20的面板24所显示的候选物件进行扫描时,由于第一遮罩M1、第二遮罩M2或第三遮罩M3(如图4的硬件遮罩)的关系,在第一遮罩M1、第二遮罩M2或第三遮罩M3的图案部分(如栅格结构)的红外线光L3会被第一遮罩M1、第二遮罩M2或第三遮罩M3所阻挡(遮住),故用户装置30的相机31(镜头)能撷取到第一遮罩M1的第一遮罩信号B1、第二遮罩M2的第二遮罩信号B2或第三遮罩M3的第三遮罩信号B3。接着,用户装置30可对光码信号A与遮罩信号(如第一遮罩信号B1、第二遮罩信号B2或第三遮罩信号B3)进行信号分析或关联运算,以还原出用户装置30所扫描的候选物件(如用户感兴趣的广告)相对应的代码(如第一代码C1、第二代码C2或第三代码C3)。然后,用户装置30可将代码传送至服务器40(如云端服务器),以通过服务器40查询出代码所对应的服务内容D(如广告内容),再将服务内容D传回用户装置30,进而在用户装置30的荧幕32上显示服务内容D。
图5为本发明的通讯系统1中关于显示装置20与遮罩(如软件遮罩)的实施例示意图,并参阅图1A至图1B予以说明。
如图5所示,第一遮罩M1、第二遮罩M2或第三遮罩M3可为软件遮罩(即数码遮罩),且软件遮罩(数码遮罩)可为隐藏资讯。隐藏资讯可通过影像处理技术(如数码影像处理技术)而嵌入于显示装置20的面板24(荧幕)所显示的影片V中,例如将隐藏资讯叠加在影片V的透明层(alpha channel)中,并将影片V与隐藏资讯显示于显示装置20的面板24(荧幕)上,故隐藏资讯不会影响影片V的播放,又能提供(传递)第一遮罩资讯B1′、第二遮罩资讯B2′或第三遮罩资讯B3′(如空间资讯)。例如,软件遮罩可为影片隐形标记(invisiblemark)、快速响应码(QR code)、条码(barcode)、图形或记号等,但不以此为限。
当用户以用户装置30(如移动装置)的相机31(镜头)对准显示装置20的面板24所显示的候选物件进行扫描时,用户装置30可侦测影片V的透明层(如透明层的亮度)以撷取第一遮罩M1的第一遮罩信号B1、第二遮罩M2的第二遮罩信号B2或第三遮罩M3的第三遮罩信号B3。接着,用户装置30可对光码信号A与遮罩信号(如第一遮罩信号B1、第二遮罩信号B2或第三遮罩信号B3)进行信号分析或关联运算,以还原出用户装置30所扫描的候选物件(如用户感兴趣的广告)相对应的代码(如第一代码C1、第二代码C2或第三代码C3)。然后,用户装置30可将代码传送至服务器40(如云端服务器),以通过服务器40查询出代码所对应的服务内容D(如广告内容),再将服务内容D传回用户装置30,进而在用户装置30的荧幕32上显示服务内容D。
图6为本发明的通讯方法的流程示意图,并参阅图1A至图5予以说明。同时,此通讯方法的主要内容如下,其余内容相同于上述图1A至图5的说明,于此不再重复叙述。
如图6的步骤S11所示,提供具有光码模块21与面板24(荧幕)的显示装置20、第一遮罩M1、第二遮罩M2、以及具有相机31与荧幕32的用户装置30,且第一遮罩M1与第二遮罩M2分别位于显示装置20的面板24(荧幕)的第一位置P1与第二位置P2。
如图6的步骤S12所示,由显示装置20的光码模块21提供光码信号A至面板24(荧幕),且由第一遮罩M1与第二遮罩M2分别提供第一遮罩信号B1与第二遮罩信号B2。
如图6的步骤S13所示,由用户装置30的相机31自显示装置20的面板24(荧幕)撷取光码信号A加上第一遮罩信号B1或第二遮罩信号B2,以由用户装置30依据光码信号A与第一遮罩信号B1的组合得出第一代码C1、或者依据光码信号A与第二遮罩信号B2的组合得出第二代码C2,进而在用户装置30的荧幕32上显示第一代码C1或第二代码C2所对应的服务内容D。
此通讯方法也包括提供位于显示装置20的面板2(荧幕)的第三位置P3的第三遮罩M3,以由第三遮罩M3提供第三遮罩信号B3,且由用户装置30的相机31自显示装置20的面板24(荧幕)撷取光码信号A加上第三遮罩信号B3,再由用户装置30依据光码信号A与第三遮罩信号B3的组合得出第三代码C3,进而在用户装置30的荧幕32上显示第三代码C3所对应的服务内容D。
此通讯方法也包括由显示装置20的光源23发射光线L至第一遮罩M1、第二遮罩M2与第三遮罩M3,以使第一遮罩M1、第二遮罩M2与第三遮罩M3分别提供(产生)第一遮罩信号B1、第二遮罩信号B2与第三遮罩信号B3。
第一遮罩M1、第二遮罩M2或第三遮罩M3可为硬件遮罩,并分别位于显示装置20的面板24(荧幕)的第一位置P1、第二位置P2或第三位置P3上,且第一遮罩M1、第二遮罩M2或第三遮罩M3可由红外线遮罩薄膜、红外线滤光片、红外线水浮印薄膜或偏振片等所制成。又,第一遮罩M1、第二遮罩M2或第三遮罩M3(如硬件遮罩)的制法包括在基板E上涂布涂层,以采用光刻或蚀刻技术图案化涂层而形成具有不透红外线光L3的栅格结构,且不同的栅格结构依据需求组成不同的花纹遮罩图案而贴附于显示装置20的面板24(荧幕)上。
此外,第一遮罩M1、第二遮罩M2或第三遮罩M3也可为软件遮罩,软件遮罩为隐藏资讯,且隐藏资讯通过影像处理技术而嵌入于显示装置20的面板24(荧幕)所显示的影片V中。又,第一遮罩M1、第二遮罩M2或第三遮罩M3(如软件遮罩)可为影片隐形标记、快速响应码(QR code)、条码、图形或记号等。
此通讯方法也包括由用户装置30的光码解码单元34依据光码信号A解码出光码资讯A′,且由用户装置30的遮罩解码单元35分别依据第一遮罩信号B1、第二遮罩信号B2与第三遮罩信号B3各自解码出第一遮罩资讯B1′、第二遮罩资讯B2′与第三遮罩资讯B3′。同时,由用户装置30的运算单元36依据光码资讯A′与第一遮罩资讯B1′的组合运算出第一代码C1,或依据光码资讯A′与第二遮罩资讯B2′的组合运算出第二代码C2,或者依据光码资讯A′与第三遮罩资讯B3′的组合运算出第三代码C3。
此通讯方法也包括由服务器40接收来自用户装置30的第一代码C1、第二代码C2或第三代码C3,以由服务器依据第一代码C1、第二代码C2或第三代码C3提供相对应的服务内容D至用户装置30,进而在用户装置30的荧幕32上显示相对应的服务内容D。
图7为本发明的通讯方法的另一流程示意图,并参阅图1A至图1B予以说明。
如图7的步骤S21至步骤S22所示,由播放装置10播放影片V,且由显示装置20的面板24(荧幕)显示播放装置10所播放的影片V。
如图7的步骤S23至步骤S24所示,由播放装置10传送关联于光码信号A(即光码)的光码符记或光码符记参数,且由显示装置20的面板24(荧幕)依据不同时间(不同时间段落)的光码符记或光码符记参数显示光码信号A。
如图7的步骤S25至步骤S26所示,以用户装置30自显示装置20的面板24(荧幕)所显示的影片V撷取用户感兴趣的候选物件的光码信号A,且以用户装置30一并自显示装置20的面板24(荧幕)撷取遮罩信号(如第一遮罩信号B1、第二遮罩信号B2或第三遮罩信号B3)。例如,此候选物件可为图4或图5的右侧所示女装(女子)、沙发(玩具熊)、或机车(骑士)。
如图7的步骤S27至步骤S28所示,由用户装置30依据所撷取的光码信号A与遮罩信号(如第一遮罩信号B1、第二遮罩信号B2或第三遮罩信号B3)得到代码(如第一代码C1、第二代码C2或第三代码C3),以将代码传送至服务器40(如云端服务器或云端平台)。
如图7的步骤S29、步骤S30至步骤S31所示,由服务器40查询代码(如第一代码C1、第二代码C2或第三代码C3)所对应的服务内容D(如第一广告内容、第二广告内容或第三广告内容),以由服务器40回应代码所对应的服务内容D至用户装置30,进而在用户装置30的荧幕32上显示代码所对应的服务内容D。
综上,本发明的通讯系统及其方法至少具有下列特色、优点或技术效果。
一、本发明利用光码信号的通讯(如可见光信号的可见光通讯)具有方向性与不容易被遮蔽等优点,让显示装置(如数码看板)能提供光码信号(如可见光信号),以利显示装置同时兼具显示与资讯传递的功能。
二、本发明的显示装置的光码信号(光码资讯)能结合多个遮罩的遮罩信号(遮罩资讯)以得出多个代码(如广告代码),有利在用户装置的荧幕上显示代码所对应(用户感兴趣)的服务内容(如广告内容)。
三、本发明的显示装置可以具有一个面板,即可提供多个代码(如广告代码),有利于避免提高显示装置的成本,也能让用户通过用户装置选择感兴趣的服务内容(如广告内容)。
四、本发明通过至少二遮罩(如硬件遮罩或软件遮罩)的方式增加至少二遮罩信号或遮罩资讯(如空间资讯),能让用户通过用户装置(如智能手机)读取到感兴趣的资讯(如服务内容),有利于提升显示装置的服务效率(如广告效率或行销活动效率)。
上述实施例仅示例性说明本发明的原理、特点及其功效,并非用以限制本发明的可实施范畴,任何本领域的技术人员均能在不违背本发明的精神及范畴下,对上述实施例进行修饰与改变。任何使用本发明所揭示内容而完成的等效改变及修饰,均仍应为权利要求所涵盖。因此,本发明的权利保护范围应如权利要求书所列。

Claims (20)

1.一种通讯系统,其特征在于,包括:
显示装置,其具有光码模块与面板,以由该光码模块提供光码信号至该面板;
第一遮罩与第二遮罩,其分别位于该显示装置的面板的第一位置与第二位置,以由该第一遮罩与该第二遮罩分别提供第一遮罩信号与第二遮罩信号;以及
用户装置,其具有相机与荧幕,以由该用户装置的相机自该显示装置的面板撷取该光码信号加上该第一遮罩信号或该第二遮罩信号,再由该用户装置依据该光码信号与该第一遮罩信号的组合得出第一代码、或者依据该光码信号与该第二遮罩信号的组合得出第二代码,进而在该用户装置的荧幕上显示该第一代码或该第二代码所对应的服务内容。
2.根据权利要求1所述的通讯系统,其特征在于,该显示装置还具有光源,且该光源发射光线至该第一遮罩与该第二遮罩,以使该第一遮罩与该第二遮罩分别提供该第一遮罩信号与该第二遮罩信号。
3.根据权利要求1所述的通讯系统,其特征在于,该第一遮罩或该第二遮罩为硬件遮罩并位于该显示装置的面板上,且该第一遮罩或该第二遮罩由红外线遮罩薄膜、红外线滤光片、红外线水浮印薄膜或偏振片所制成。
4.根据权利要求1所述的通讯系统,其特征在于,该第一遮罩或该第二遮罩为硬件遮罩并具有不透红外线光的栅格结构。
5.根据权利要求1所述的通讯系统,其特征在于,该第一遮罩或该第二遮罩为软件遮罩,该软件遮罩为隐藏资讯,且该隐藏资讯通过影像处理技术而嵌入于该显示装置的面板所显示的影片中。
6.根据权利要求1所述的通讯系统,其特征在于,该第一遮罩或该第二遮罩为软件遮罩,且该软件遮罩为影片隐形标记、快速响应码、条码、图形或记号。
7.根据权利要求1所述的通讯系统,其特征在于,该系统还包括第三遮罩,其位于该显示装置的面板的第三位置,以由该第三遮罩提供第三遮罩信号,且由该用户装置的相机自该显示装置的面板撷取该光码信号加上该第三遮罩信号,再由该用户装置依据该光码信号与该第三遮罩信号的组合得出第三代码,进而在该用户装置的荧幕上显示该第三代码所对应的服务内容。
8.根据权利要求1所述的通讯系统,其特征在于,该用户装置还具有光码解码单元与遮罩解码单元,该光码解码单元依据该光码信号解码出光码资讯,且该遮罩解码单元分别依据该第一遮罩信号与该第二遮罩信号各自解码出第一遮罩资讯与第二遮罩资讯。
9.根据权利要求8所述的通讯系统,其特征在于,该用户装置还具有运算单元,其依据该光码资讯与该第一遮罩资讯的组合运算出该第一代码,或者依据该光码资讯与该第二遮罩资讯的组合运算出该第二代码。
10.根据权利要求1所述的通讯系统,其特征在于,该系统还包括服务器,其接收来自该用户装置的该第一代码或该第二代码,以由该服务器依据该第一代码或该第二代码提供相对应的该服务内容至该用户装置,进而在该用户装置的荧幕上显示相对应的该服务内容。
11.一种通讯方法,其特征在于,包括:
提供具有光码模块与面板的显示装置、第一遮罩、第二遮罩、以及具有荧幕的用户装置,且该第一遮罩与该第二遮罩分别位于该显示装置的面板的第一位置与第二位置;
由该显示装置的光码模块提供光码信号至该面板,且由该第一遮罩与该第二遮罩分别提供第一遮罩信号与第二遮罩信号;以及
由该用户装置自该显示装置的面板撷取该光码信号加上该第一遮罩信号或该第二遮罩信号,以由该用户装置依据该光码信号与该第一遮罩信号的组合得出第一代码、或者依据该光码信号与该第二遮罩信号的组合得出第二代码,进而在该用户装置的荧幕上显示该第一代码或该第二代码所对应的服务内容。
12.根据权利要求11所述的通讯方法,其特征在于,该方法还包括由该显示装置的光源发射光线至该第一遮罩与该第二遮罩,以使该第一遮罩与该第二遮罩分别提供该第一遮罩信号与该第二遮罩信号。
13.根据权利要求11所述的通讯方法,其特征在于,该第一遮罩或该第二遮罩为硬件遮罩并位于该显示装置的面板上,且该第一遮罩或该第二遮罩由红外线遮罩薄膜、红外线滤光片、红外线水浮印薄膜或偏振片所制成。
14.根据权利要求11所述的通讯方法,其特征在于,该第一遮罩或该第二遮罩为硬件遮罩,且该硬件遮罩的制法包括在基板上涂布涂层,以采用光刻或蚀刻技术图案化该涂层而形成具有不透红外线光的栅格结构。
15.根据权利要求11所述的通讯方法,其特征在于,该第一遮罩或该第二遮罩为软件遮罩,该软件遮罩为隐藏资讯,且该隐藏资讯通过影像处理技术而嵌入于该显示装置的面板所显示的影片中。
16.根据权利要求11所述的通讯方法,其特征在于,该第一遮罩或该第二遮罩为软件遮罩,且该软件遮罩为影片隐形标记、快速响应码、条码、图形或记号。
17.根据权利要求11所述的通讯方法,其特征在于,该方法还包括提供位于该显示装置的面板的第三位置的第三遮罩,以由该第三遮罩提供第三遮罩信号,且由该用户装置自该显示装置的面板撷取该光码信号加上该第三遮罩信号,再由该用户装置依据该光码信号与该第三遮罩信号的组合得出第三代码,进而在该用户装置的荧幕上显示该第三代码所对应的服务内容。
18.根据权利要求11所述的通讯方法,其特征在于,该方法还包括由该用户装置依据该光码信号解码出光码资讯,并分别依据该第一遮罩信号与该第二遮罩信号各自解码出第一遮罩资讯与第二遮罩资讯。
19.根据权利要求18所述的通讯方法,其特征在于,该方法还包括由该用户装置依据该光码资讯与该第一遮罩资讯的组合运算出该第一代码,或者依据该光码资讯与该第二遮罩资讯的组合运算出该第二代码。
20.根据权利要求11所述的通讯方法,其特征在于,该方法还包括由服务器接收来自该用户装置的该第一代码或该第二代码,以由该服务器依据该第一代码或该第二代码提供相对应的该服务内容至该用户装置,进而在该用户装置的荧幕上显示相对应的该服务内容。
CN202110005111.1A 2020-11-10 2021-01-04 通讯系统及其方法 Active CN114554295B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW109139242 2020-11-10
TW109139242A TWI759955B (zh) 2020-11-10 2020-11-10 通訊系統及其方法

Publications (2)

Publication Number Publication Date
CN114554295A CN114554295A (zh) 2022-05-27
CN114554295B true CN114554295B (zh) 2023-08-15

Family

ID=81453465

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110005111.1A Active CN114554295B (zh) 2020-11-10 2021-01-04 通讯系统及其方法

Country Status (3)

Country Link
US (1) US11361178B2 (zh)
CN (1) CN114554295B (zh)
TW (1) TWI759955B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007274278A (ja) * 2006-03-31 2007-10-18 Nec Personal Products Co Ltd 録画再生装置及びサービスサーバ
JP2008147987A (ja) * 2006-12-09 2008-06-26 Renesas Technology Corp 画像合成方法及び画像合成装置
JP2010008688A (ja) * 2008-06-26 2010-01-14 Sharp Corp 画像変換装置、画像変換方法、液晶表示装置、画像変換プログラム、及び、記録媒体
JP2017118318A (ja) * 2015-12-24 2017-06-29 株式会社 日立産業制御ソリューションズ 撮像装置及び撮像方法
CN109511014A (zh) * 2017-09-14 2019-03-22 财团法人工业技术研究院 结合光码与影片的系统及其方法
US10715183B1 (en) * 2019-10-25 2020-07-14 Capital One Services, Llc Data encoding with error-correcting code pursuant to colorspace schemes

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2373511C (en) * 1999-05-19 2014-07-08 Digimarc Corporation Methods and systems for controlling computers or linking to internet resources from physical and electronic objects
WO2009094043A1 (en) * 2008-01-21 2009-07-30 Kameraflage Inc. Methods and systems for displaying messages in a wide-spectrum display
WO2010055774A1 (ja) 2008-11-17 2010-05-20 日本電気株式会社 通信システム及び受信装置
US9229231B2 (en) * 2011-12-07 2016-01-05 Microsoft Technology Licensing, Llc Updating printed content with personalized virtual data
CN105074730A (zh) * 2012-10-10 2015-11-18 3Dtv广播有限公司 用于分发自动立体图像的系统
US9128580B2 (en) * 2012-12-07 2015-09-08 Honeywell International Inc. System and method for interacting with a touch screen interface utilizing an intelligent stencil mask
US9262954B2 (en) 2012-12-27 2016-02-16 Panasonic Intellectual Property Corporation Of America Visible light communication signal display method and apparatus
JP5715301B2 (ja) 2012-12-27 2015-05-07 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 表示方法および表示装置
TW201528803A (zh) 2014-01-10 2015-07-16 Waystorm Co Ltd 行動廣告推送系統及其操作行動電子裝置的方法
EP3111305A4 (en) * 2014-02-27 2017-11-08 Keyless Systems Ltd Improved data entry systems
WO2015130702A1 (en) * 2014-02-28 2015-09-03 Electro Scientific Industries, Inc. Optical mark reader
CN105469746B (zh) 2014-06-16 2019-02-26 青岛海信电器股份有限公司 一种液晶屏背光控制装置、液晶电视及mcu芯片
US20170097621A1 (en) * 2014-09-10 2017-04-06 Crestron Electronics, Inc. Configuring a control sysem
US20160086242A1 (en) * 2014-09-23 2016-03-24 Crestron Electronics, Inc. System and method for modeling a lighting control system
WO2016153936A1 (en) 2015-03-20 2016-09-29 Digimarc Corporation Digital watermarking and data hiding with narrow-band absorption materials
US10121513B2 (en) * 2016-08-30 2018-11-06 International Business Machines Corporation Dynamic image content overlaying
EP3340624B1 (en) 2016-12-20 2019-07-03 Axis AB Encoding a privacy masked image
DE102017110892A1 (de) * 2017-05-18 2018-11-22 Kurz Digital Solutions Gmbh & Co. Kg Verfahren zur Authentifizierung eines Gegenstands, insbesondere eines Sicherheitselements, sowie Sicherheitselement
KR102351498B1 (ko) * 2018-01-09 2022-01-14 삼성전자주식회사 데이터 처리 방법 및 그에 따른 전자 장치
US10542236B2 (en) * 2018-06-18 2020-01-21 Disney Enterprises, Inc. Image display system with visual filter

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007274278A (ja) * 2006-03-31 2007-10-18 Nec Personal Products Co Ltd 録画再生装置及びサービスサーバ
JP2008147987A (ja) * 2006-12-09 2008-06-26 Renesas Technology Corp 画像合成方法及び画像合成装置
JP2010008688A (ja) * 2008-06-26 2010-01-14 Sharp Corp 画像変換装置、画像変換方法、液晶表示装置、画像変換プログラム、及び、記録媒体
JP2017118318A (ja) * 2015-12-24 2017-06-29 株式会社 日立産業制御ソリューションズ 撮像装置及び撮像方法
CN109511014A (zh) * 2017-09-14 2019-03-22 财团法人工业技术研究院 结合光码与影片的系统及其方法
US10715183B1 (en) * 2019-10-25 2020-07-14 Capital One Services, Llc Data encoding with error-correcting code pursuant to colorspace schemes

Also Published As

Publication number Publication date
CN114554295A (zh) 2022-05-27
TWI759955B (zh) 2022-04-01
US11361178B2 (en) 2022-06-14
US20220147727A1 (en) 2022-05-12
TW202219730A (zh) 2022-05-16

Similar Documents

Publication Publication Date Title
US20220253200A1 (en) Systems and methods for docking virtual objects to surfaces
JP5742057B2 (ja) 公共ディスプレイからのナローキャスティングおよび関連配設
CN105264548B (zh) 用于生成增强现实体验的难以察觉的标签
US10362301B2 (en) Designing content for multi-view display
WO2022022036A1 (zh) 一种展示方法、装置、设备、存储介质及计算机程序
US8576276B2 (en) Head-mounted display device which provides surround video
US20140152869A1 (en) Methods and Systems for Social Overlay Visualization
US20120011454A1 (en) Method and system for intelligently mining data during communication streams to present context-sensitive advertisements using background substitution
CN103679204A (zh) 基于智能移动设备平台的图像识别与创作应用系统及方法
JP2015001875A (ja) 画像処理装置、画像処理方法、プログラム、印刷媒体及び印刷媒体のセット
US10924639B2 (en) System and method for polarization and wavelength gated transparent displays
TWI795762B (zh) 用於在現實場景中疊加直播人物影像的方法和電子設備
CN207457974U (zh) 一种基于ar技术的互动全息系统
Park et al. Invisible marker–based augmented reality
CN110663044A (zh) 用于提供产品放置的方法和设备
Khan et al. Rebirth of augmented reality-enhancing reality via smartphones
CN109754716A (zh) 用于显示器的双显示光源及双显示影像产生方法
Lo et al. Stats on-site—Sports spectator experience through situated visualizations
CN102982468A (zh) 一种基于彩码识别技术的广告系统及方法
KR20180080012A (ko) 소셜 네트워크 서비스를 이용한 실감형 음악연주 컨텐츠 생성·공유 장치 및 방법
CN114554295B (zh) 通讯系统及其方法
JP2022050365A (ja) 展示装置及び展示方法
CN110832525A (zh) 在对象上的增强现实广告
CN112684893A (zh) 信息展示方法、装置、电子设备及存储介质
CN107452288B (zh) 电子装置和电子广告的播放及互动方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant