CN1429019A - 装有声音识别功能的电视机及其控制方法 - Google Patents

装有声音识别功能的电视机及其控制方法 Download PDF

Info

Publication number
CN1429019A
CN1429019A CN02157441A CN02157441A CN1429019A CN 1429019 A CN1429019 A CN 1429019A CN 02157441 A CN02157441 A CN 02157441A CN 02157441 A CN02157441 A CN 02157441A CN 1429019 A CN1429019 A CN 1429019A
Authority
CN
China
Prior art keywords
word
sound
input
television set
housed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN02157441A
Other languages
English (en)
Other versions
CN1266926C (zh
Inventor
茨木俊男
小西雅人
須田浩之
福本毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1429019A publication Critical patent/CN1429019A/zh
Application granted granted Critical
Publication of CN1266926C publication Critical patent/CN1266926C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4821End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/4147PVR [Personal Video Recorder]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • H04N21/4583Automatically resolving scheduling conflicts, e.g. when a recording by reservation has been programmed for two programs in the same time slot
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Details Of Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Selective Calling Equipment (AREA)
  • Circuits Of Receivers In General (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

提供一种电视机,所装声音识别功能可在不受理用户所发声音的词语时,用能动作的上位概念词语进行动作,或者改变动作模式后进行动作。本发明的电视机判断当前动作模式下受理的音频码是否能动作,能动作时按该动作模式动作,不能动作时,存在能动作的位概念音频码,则按上位概念音频码动作,没有能动作的上位概念音频码,则进一步判断变换动作模式能动作,变换动作模式能动作,则按变换后的动作模式进行动作。

Description

装有声音识别功能的电视机及其控制方法
技术领域
本发明涉及装有声音识别功能的电视机及其控制方法。
背景技术
已有的电视机给例如遥控器的按键分配选台等使用频度高的动作。还根据按压遥控器的特定按键,在屏显示类别包括层次结构的菜单,利用追寻层次结构进行选择实现目的的动作。
用图22说明已有电视机中借助包括类别层次结构的菜单检索分类节目时的操作顺序。图22是已有电视机中按键式遥控器操作的分类节目检索画面转移图。
首先,显示装置显示上层类别(画面2201)。在画面2201选择“运动”,则显示装置显示运动的下层类别(画面2202)。在画面2202选择“棒球”时,电视机按“棒球”进行分类节目检索,并且显示装置显示检索结果一览表(画面2203)。
至于关机定时器的设定时间(电视机在规定时间(例如30分钟)后成为关机的关机定时器模式中的规定时间)或画面长度比设定(例如16∶9或4∶3)等参数,使用者可用设定用的在屏显示设定从多个值选择的一个值。更改这些设定值时,电视机按第1次动作事件(输入设定度值更改指令)在屏显示当前设定值。进行在屏显示期间,每次发生相同动作事件都用开关更改设定。例如,每次输入设定值更改指令,使画面上显示的关机定时器设定时间按规定步骤变化(例如每次输入设定值更改指令,使设定时间递增,设定时间达到最大值,则接着使其变为最小值)。未输入相同动作事件的状态持续例如3秒钟,则消除在屏显示。
上述已有电视机装上声音识别功能时,声音识别单元能识别词典(包括全部词语)中有的全部词语。然而,如果电视机按输入指令(含词语)完成动作,则例如用户错误输入当前模式中不适合的指令(含词语)时,电视机执行非所喜好的动作。例如,显示地面波电视节目时(地面波广播接收模式),不输入从地面波电视节目切换到卫星广播电视节目的特定指令(含词语),而仅用声音输入卫星广播电视节目的节目名称使显示切换到卫星广播电视节目(卫星广播接收模式),则用户可能不知道现在观看什么广播。
本发明的目的为:提供一种根据当前动作模式适当响应或不响应声音输入词语的装有声音识别功能的电视机。
本发明是鉴于上述问题而完成的,其目的为:提供一种电视机,其所装声音识别功能可根据对当前动作模式的判断结果实际进行动作,或将动作状况通知用户。
本发明的目的为:提供一种电视机,装有根据用户的选择响应或不响应声音输入词语的声音识别功能。
已有电视机的遥控器配置数量限定的按键。这些按键(例如用1、2、3等数值表示的按键)根据电视机在屏显示内容,分别对应于不同的选择分支。例如,各按键的数值含义为广播频道号,或含义为画面上所显示菜单中选择分支的选择号。用户要从按类别包括层次结构的丰富菜单选择例如希望的节目,则必须在层次结构的各种层或各种类别更改在屏显示内容,进行检索并找到希望的节目。因此,菜单越丰富,遥控器操作越复杂,存在操作费时的问题。
已有的电视机中,遥控器一定面积的操作面板能配置的开关数有限。开关数量过多,则存在用户从许多开关中找目的开关费时的问题。用个人计算机中使用的键盘对电视机输入指令,非常复杂,不实用。
包括声音识别单元而用声音输入词语的本发明电视机中,不受上述限制,可输入多种词语。
本发明有效利用这种声音识别功能。本发明目的为:提供一种装有声音识别功能的电视机,不必切换显示复杂的菜单,快速自动检测并显示希望的节目或接近希望的节目。
许多电视机在规定时间的画面上显示要求或允许用户输入指令(含词语)或者指导输入方法的画面(在屏显示)。
例如,用户按压声音输出程度升高键或降低健,则画面显示电视机声音输出程度。画面上显示声级的期间,用户按压升高键或降低键,可改变设定声音输出程度。
例如,假设用户发出“关于定时器”的声音,能改变关机定时器的设定时间、设定前关机定时器的设定时间为例如30分钟。用户发出“声音定时器”的声音,则在画面上显示当前声音定时器的设定值(30分钟)。在规定时间(例如3秒)内未输入后续设定更改词语,则该显示画面消失。用户仅能在显示该显示画面的期间输入设定改语。然而,发声时间和从发声到接着发声的时间通常远长于按压遥控器按压的时间和从按压按键到接着按压按键的时间。用户接着发“关机定时器”的声音略为迟后,则经过3秒钟(显示时间),在屏显示就消失。在屏显示消失后,即使用户发“关机定时器”的声音,关机定时器的设定时间也不变,这样用声音识别功能更改设定时,比按压开关更改设定时在设定更改方面费时。用声音识别功能更改设定的情况下,已有的在屏显示的显示时间太短。
然而,为了能用声音识别功能舒适地更改设定,使在屏显示的显示时间一律加长,则按压开关更改设定时,即使设定的更改完成,在屏显示也难消失,让用户着急。产生问题。
本发明目的为:提供一种电视机,所装声音识别功能在用声音识别功能更改设定时和用开关更改设定时,用户都能舒适地更改设定。
发明内容
为了解决上述课题,本发明包括以下结构。
本发明一个观点的装有声音识别功能的电视机,包括
输入声音并且识别所述声音包含的词语的声音识别部,以及
判断是否能按照所述词语以当前动作模式动作的判断部;
当前动作模式下能按照所述词语动作时,按照所述词语进行动作,当前动作模式下不能按照所述词语动作时,不按照所述词语动作。
“按照词语进行动作”包含执行相关词语的情况(例如按照“接通电源”的词语将电源接通)和执行实现该词语所需事件的情况(例如按照“足球”的词语选择并输入足球节目进行显示或产生可显示的足球节目一览表进行显示)。
本发明另一观点的上述装有包括识别功能的电视机,包括
可相互切换的第1输入模式和第2输入模式,
所述第1输入模式中进行本发明上述观点记载的动作,
所述第2输入模式中在不能按照所述词语以当前动作模式进行动作时,改变动作模式,按照所述词语进行动作。
举例说明以下情况:当前动作模式是地面波广播接收模式,用户在电视机输入“足球”的词语,当时地面波电视广播哪一频道都不广播足球赛。第1输出模式中,电视机什么都不显示。第2输入模式中,如果用卫星广播播发足球赛,则将动作模式切换到卫星广播接收模式,广播足球赛。
本发明又一观点的装有声音识别功能的电视机,包括
输入声音并且识别所述声音包含的词语的声音识别部,
判断是否能按照所述词语进行动作的判断部,
按类别划分的词典、按类别划分且包括层次结构的词典、或借助关键词使词语相互关联的词典,以及
检测部,该部在不能按照所述词语进行动作时,从所述词典检索属于与所述词语相同的类别且能动作的其他词语、是所述词语的上位概念词语且能动作的其他词语或借助关键词与所述词语关联且能动作的其他词语;
所述检索部检索到其他词语时按照所述词语进行动作。最好检索部检索当前动作模式中能动作的其他词语。
“按类别划分的词典”是指例如分别划分为运动、新闻报道等类别的节目一览表。“包括层次结构的词典”是指包括例如按上位概念划分的类别(例如运动等),并且至少一个上位概念类别(例如运动)包括多个按下位概念划分的类别(例如棒球、足球等)的词典(例如节目一览表)。层次的数目任意。“借助关键词使词语相互关联的词典”是指例如对各节目赋予关键词(例如运动、足球等)的节目一览表。借助关键词相关联的节目是指例如带有同一关键词的多个节目。
本发明再一观点的上述装有声音识别功能的电视机,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在当前动作模式下不能按照所述词语动作时,通知用户不能按照所述词语动作。
本发明再一观点的上述装有声音识别功能的电视机,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在改变动作模式后按照所述词语进行动作时,通知用户改变动作模式且按照所述词语动作。
本发明再一观点的上述装有声音识别功能的电视机,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在按照其他词语进行动作时,通知用户按照其他词语动作。
本发明再一观点的上述装有声音识别功能的电视机,还包括
在屏显示部和/或声音输出部,
在不能按照所述词语以当前动作模式进行动作时,所述在屏显示部和/或所述声音输出部显示所述第1输入模式和所述第2输入模式的选择菜单,并且按照用户选择的输入模式进行动作。
本发明再一观点的上述装有声音识别功能的电视机,包括
在规定时间显示要求或允许用户输入指令或者指导输入方法的画面的在屏显示部,
输入用户声音并且识别所述声音包含的词语的声音识别部,以及
用户按压开关使画面上显示的光标移动或者检测出触摸触频屏输入指令的操作部;
所述声音识别部输入词语时的所述显示时间长于所述操作输入部输入指令时的所述显示时间。
本发明再一观点的装有声音识别功能的电视机的控制方法,其中该电视机包括按类别划分的词典、按类别划分且包括层次结构的词典或借助关键词使词语相互关联的词典,所述方法包括下述步骤
输入声音并且识别所述声音包含的词语的声音识别步骤,
判断是否能按照所述词语进行动作的判断步骤,以及
检测步骤,该部在不能按照所述词语进行动作时,从所述词典检索属于与所述词语相同的类别且能动作的其他词语、是所述词语的上位概念词语且能动作的其他词语或借助关键词与所述词语关联且能动作的其他词语;
所述检索步骤检索到其他词语时按照所述词语进行动作的动作步骤。
本发明再一观点的装有声音识别功能的电视机的控制方法,包括下述步骤
在规定时间显示要求或允许用户输入指令或者指导输入方法的画面的在屏显示步骤,
输入用户声音并且识别所述声音包含的词语的声音识别步骤,以及
用户按压开关使画面上显示的光标移动或者检测出触摸触频屏输入指令的操作步骤;
所述声音识别步骤输入词语时的所述显示时间长于所述操作输入步骤输入指令时的所述显示时间。
本发明的新颖特征不外乎是所附权利要求书具体记载的特征,但关于结构和内容这两方面,从本发明以下结合附图解释时的详细说明会连同其他目的和特征得到更好理解和评价。
附图说明
图1表示本发明实施例的装有声音识别功能的电视机结构的框图。
图2表示本发明实施例1的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
图3表示本发明实施例2的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
图4表示本发明实施例2的装有声音识别功能的电视机中一例BS广播类别一览表的图(2层)。
图5是以层次结构示出一例图4中BS波段类别一览的图。
图6表示本发明实施例2的装有声音识别功能的电视机中一例BS广播类别一览的图(4层)。
图7表示本发明实施例3的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
图8表示本发明实施例5的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
图9表示本发明实施例5的装有声音识别功能的电视机中在屏显示处理部115的控制处理的流程图。
图10表示本发明实施例5的装有声音识别功能的电视机中地面波模拟广播与BS数字广播类别信息的不同和显示信息的图。
图11是显示本发明实施例5的装有声音识别功能的电视机中信息2时的画面转移图。
图12是显示本发明实施例5的装有声音识别功能的电视机中信息3时的画面转移图。
图13表示本发明实施例6的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
图14是显示本发明实施例6的装有声音识别功能的电视机中确认信息6时的画面转移图。
图15是本发明实施例7的装有声音识别功能的电视机中事件管理部113的控制处理流程图。
图16是本发明实施例7的装有声音识别功能的电视机的电视控制部114中对关机定时器时间设定事件的控制处理的流程图。
图17表示本发明实施例7的装有声音识别功能的电视机中遥控器的关机定时器时间设定操作的图。
图18表示本发明实施例7的控制中利用发声的关机定时器时间设定操作的图。
图19表示本发明实施例2的装有声音识别功能的电视机中一例类别词典的图。
图20是本发明实施例4的装有声音识别功能的电视机中利用声音输入的分类节目检索处理流程图。
图21表示本发明实施例4的装有声音识别功能的电视机中一例类别关键词一览的图。
图22是已有电视机中遥控器操作的分类节目检索画面转移图。
要考虑部分或全部附图按照以图解为目的的概括表现画出,未必受忠实描绘其中所示要素实际相对尺寸和位置的限制。
具体实施形态
下面,就具体示出的实施例,与附图一起阐述实施本发明的最佳形态。
实施例1
用图1、图2说明本发明实施例1的装有声音识别功能的电视机。
首先说明实施例1的装有声音识别功能的电视机的结构。图1表示本发明实施例1的结构的框图。
实施例1的装有声音识别功能的电视机的组成部分包含:解读来自红外线遥控器131的发送码的遥控器码解读部111、识别用户所发声音(词语)并且解读该词语的声音识别部112、接收地面波广播图像/声音信号的UV调谐器(UHF(特高频)和VHF(甚高频)调谐器)125、从UV调谐器125取得UV节目信息数据的UV节目信息数据取得部126、存储UV节目信息数据的UV节目信息数据存储器127、接收BS(广播卫星)数字广播图像/声音信号的BS数字调谐器122、从BS数字调谐器122取得BS数字节目信息数据的BS数字节目信息数据取得部123、存储BS数字节目信息数据的BS数字节目信息数据的存储器124、对UV调谐器和BS数字调谐器进行切换的图像/声音输入切换部120、输出来自图像/声音切换部120的声音信号的扬声器121、对图像/声音切换部120来的图像信号进行处理的图像信号处理部118、接收来自遥控器码解读部111或声音识别部112的事件(实施例中为指令(含词语)输入)并且判断事件发生源(遥控器码解读部111或声音识别部112)和事件种类(输入的指令(含词语)的事件管理部113、根据来自事件管理部113的事件控制电视机的控制部114、存储动作模式的存储装置116、进行时间管理的定时器控制部117、按来自电视控制部114的指示对来自BS数字节目信息数据124和来自UV节目信息数据存储器124的信息进行在屏显示的在屏显示处理部115、组合在屏显示处理部输出的在屏显示信号和图像信号处理部118输出的图像信号的图像组合处理部128和显示图像组合处理部128输出的图像信号的显示装置119。
而且,用控制信号线连接电视控制部114、图像信号处理部118、图像/声音输入切换部120、UV调谐器125、UV节目信息数据取得部126、BS数字调谐器122和BS数字节目信息数据取得部123。
下面说明以上那样构成的实施例1的装有声音识别功能的电视机中利用声音输入检索分类节目时的控制步骤。图2是本发明实施例1的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。
电视控制部114将声音识别部112中接收的词语作为音频码,等待其通过事件管理部113输入(S201)。音频码输入到电视控制部113输入(S201)。音频码输入到电视控制部114时(S201中的“是”),电视控制部114从存储装置6读出当前动作模式(S202)。例如,动作模式时地面波广播接收模式和卫星广播接收模式。例如当前动作模式是卫星广播接收模式。
然后,电视控制部114判断当前动作模式类别中是否有输入的词语(S203)。例如输入“足球”的词语,并判断包括BS数字节目信息数据存储器124所存放多个类别的卫星广播节目分类表是否包含足球的类别。当前动作模式类别一览表中不包含时(在当明动作模式下不能按照词语动作时)(S203中的“否”),电视控制部114不进行运作,返回到下一音频码输入等待状态。
当前动作模式类别中包括输入的词语时(S203中的“是”),电视控制部114判断当前工作模式下是否有该类别的节目(S204)。没有节目时(204中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
当前动作模式下有该类别的节目时(S204中的“是”),电视控制部114进行指示,使在屏显示处理部115制成该类别的节目表。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(例如足球节目表)(S205)。电视控制部114在存储装置116设定动作模式(地面波广播接收模式或卫星广播接收模式)(S206)后,返回下一音频码输入等待状态(S201)。
然后,用户从节目表指定特定的节目(例如丁联盟ガンバ大阪球赛)。电视控制部使BS数字调谐器122输入指定的节目,使图像/声音输入切换部选择指定的节目。所指定节目的图像信号在显示装置119显示,相关的声音信号从扬声器121输出。
用户直接发出节目名称的声音时,电视机以当前动作模式下能显示该节目,则直接显示该节目,如果不能显示,就不显示。
这样,根据本发明实施例1,则可判断当前动作模式,在按照识别的词语能动作时,进行动作,不能动作时,不进行动作。
实施例2
用图1、图3~图6说明本发明实施例2的装有声音识别功能的电视机。
首先,说明实施例2的装有声音识别功能的电视机的结构。示出本发明实施2的装有声音识别功能的电视机结构的框图(图1)与实施例相同,因而省略其详细说明。
下面,说明以上那样构成的实施例2的装有声音识别功能的电视机中,利用声音输入检索分类节目时的控制步骤。本实施例与实施例1在所当前动作模式的类别中无所接收词语时和当前动作模式下无相关类别节目时的处理方面不同。除这点外,本实施例与实施例1相同。图3是本发明实施例2的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。图3中,标注与图2相同符号的步骤(S201~S206)进行与图2相同的处理,因而省略说明。成为本实施例特征的部分标注新符号(S301~S306),进行说明。
在当前动作模式的类别一览表无步骤S203所输入词语时(S203中的“否”)和步骤S204中当前动作模式下无相关类别的节目时(S204中的“否”),电视控制部114转到判断输入的词语是否下层类别(S301)。具体而言,判断存储装置116存放的类别词典(图19(包含BS广播类别一览表和地面波广播类别一览表未登记的词语的大词典))是否存在输入的词语,并且判断该词语是否类别词典中下层类别。类别词典无输入的词语时或该词典有该词典语但处于上层类别时(S301中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
类别词典包括输入的词语且处于下层类别时(S301的“是”),电视控制部114判断当前动作模式的类别是否有输入词语的上层类别(S302)。当前动作模式的类别无该上层类别时(S302中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
当前动作模式的类别有该上层类别时(S302中的“是”),电视控制部114判断当前动作模式下是否有该上层类别的节目(S303)。无节目时(S303中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
有节目时(S303中的是“是”),电视控制部114进行指示,使在屏显示处理部115制成该上层类别的节目表,显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S304)。电视处理部114在存储装置116设定动作模式(S206)后,返回下一音频码输入等待状态(S201)。
然后,用户从节目表指定特定的节目。电视控制部使指定的节目输入,在显示装置119上显示。
下面用具体事例进行说明。
BS数字节目信息数据存储器124和UV节目信息数据存储器127包括各自的动作模式(卫星广播接收模式和地面波广播接收模式)的类别一览表。图4表示本发明实施例的装有声音识别功能的电视机中一例BS数字节目信息数据存储器存储的BS波段的类别一览表的图。图5是以层次结构示出一例图4中BS波段的类别一览表的图。如图4、图5中所示,类别由上层类别和下层类别组成。首先按上层类别划分,进而某上层类别划分成多个下层类别。
说明电视机接收当前BS波段的动作模式(卫星广播接收模式)时,分类节目检索中用户发“棒球”的声音的情况。
收到“棒球”这声音的声音识别部112经事件管理部113将“棒球”的音频码发送到电视控制部114。电视控制部114判断BS波段的类别中是否有“棒球”(图3的S203)。BS波段的类别一览表(图4)存在“棒球”(图3 S203中的“是”)。电视控制部114判断当前广播中是否有“棒球”电视节目(图3的204)。
现无该节目时(图3 S204中的“否”),判断“棒球”是否处于下层类别(图3的S301)。如图5中所示,“棒球”是上层类别“运动”的下层类别(图3 S301中的“是”)。BS波段的类别一览表中存在上层类别“运动”(图3 S302中的“是”)。电视控制部114判断当前广播中否有运动的电视节目(图3的S303。现有足球、蓝球等运动的电视节目时(图3 S303中的“是”),在显示装置119显示该运动的电视节目表。
BS数字节目信息数据存储器124和UV节目信息数据存储器127也可包括不仅将当前可接收节目的信息,而且将规定期间(例如从现在起8天的期间)能视听的节目划分成类别的节目一览表。用户直接发出节目名称的声音时,电视机在当前动作模式下降显示该节目,则直接显示该节目。不能在当前动作模式下显示该节目且节目是览表包含该节目名称,则显示属于该节目所属下位概念类别的节目一览表。没有属于该节目所属下位概念类别的节目,则显示属于该节目所属上位概念类别的节目一览表。
这样,根据本实施例,则可判断当前动作模式,并且在不能利用所识别词语进行动作时,利用所识别词语的上位概念进行动作。通常,用户如果不能找到特定节目或特定类别节目,多数情况下希望接着找到与该节目同一上位概念所包含的其他节目。未广播用户希望的节目时,用户不接着进行输入就能自动直接看到其相近内容的其他节目一览表。
实施例中,在不改变当前动作模式的条件下,显示用户能视听的节目或节目一览表。也可代之以不受当前动作模式的限制,显示用户能视听的节目或节目一览表。例如,用户发出“足球”这一词语的声音时,自动产生含地面波广播的足球节目和卫星广播的足球节目的节目-览表,在显示装置119上显示。当前动作模式是卫星广播接收模式时,用户输入选择地面波广播节目的指令(含词语)  (例如用户发出地面波广播节目名称),则自动变为地面波广播接收模式,显示该节目。
本实施例中,类别一览的层次结构是上层类别和下层类别的2层结构,但也可代之以3层以上。
说明例如图6所示4层的情况。利用遥控器按键的操作选择“J1”时,需要按照“运动”一“足球”一“国内足球”一“J1”这样,从上层类别开始依次选择4次。然而,利用声音选择“J1”时,突然发出“J1”的声音,一次就能选择。利用遥控器开关和显示器中指导画面的显示选择节目的已有技术电视机中,层次复杂则操作非常麻烦,存在不适用的问题。利用本实施例,则层次增多时,与其说用户容易缩小节目查找范围,不如说缩短进行选择所需要的时间。这样,层次越增多,利用声音的选择越有效。
类别数量随着层次增多而增多,则用户难以正确记忆该类别的名称。而且,当前广播中的电视节目没有该类别的可能性提高。本实施例的电视机中,如果用户记忆全部类别名称麻烦,则仅记忆上位概念的类别名称,用于声音输入,就能方便地进行节目检索。不存在所输入声音下位概念类别的电视节目,则自动显示属于上位概念类别的电视节目一览表。本实施例的电视机中,即使层次复杂,也不容易产生该复杂带来的弊病。
上述情况下,本实施例能进一步取得有用的效果。
实施例3
用图1、图7说明本发明实施例3的装有声音识别功能的电视机。
首先,说明实施例3的装有声音识别功能的电视机的结构。示出本发明实施例3的装有声音识别功能的电视机结构的框图(图1)与实施例1相同,因而省略详细说明。
下面,说明上述那样构成的实施例3的装有声音识别功能的电视机中,利用声音输入检索分类节目中的控制步骤。本实施例与实施例2在所当前动作模式的类别中无所接收词语时和当前动作模式下无相关类别节目时的处理方面不同。除这点外,本实施例与实施例2相同。图7是本发明实施例3的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。图7中,标注与图2相同符号的步骤(S201~S206)进行与图2相同的处理,因而省略说明。成为本实施例特征的部分标注新符号(S701~S704),进行说明。
在当前动作模式的类别一览表无步骤S203所输入词语时(S203中的“否”)和步骤S204中当前动作模式下无相关类别的节目时(S204中的“否”),电视控制部114转到判断其他动作模式的类别一览是否有输入的词语(S701)。没有其他动作模式的类别一览时(S701中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
其他动作模式的类别一览中有输入的词语时(S701的“是”),电视控制部114判断在其他动作模式下是否有该类别的节目(S702)。无节目时(S702中的“否”),电视控制部114不进行运作,返回下一音频码输入等待状态(S201)。
有节目时(S702)中的“是”)电视控制部114从当前动作模式变换到其他动作模式(S703),电视控制部114进行指示,使在屏显示处理部115按其他动作模式制成该类别的节目表。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S704)。电视控制部114在存储装置116设定动作模式(地面波广播接收模式或卫星广播接收模式)(S206)后,返回下一音频码输入等待状态(S201)。
然后,用户从节目表指定特定的节目。电视控制部输入指定的节目,并且在显示装置119上显示。
这样,根据本发明实施例,则可判断当前动作模式,并且在不能利用识别的词语进行动作时,改变动作模式,利用识别的词语进行动作。
本实施例中,在即使改变动作模式也不能动作时,可如实施例2那样,取为利用所识别词语的上位概念进行动作。又在实施例2中利用所识别词语的上位概念不能动作时,也可如本实施例那样,取为改变动作模式后利用所识别词语进行动作。
还可在电视机设置当前动作模式下不能执行声音输入的词语时不动作的第1输入模式以及当前动作模式下不能执行声音输入的词语而且改变动作模式就能执行时改变动作模式进行动作的第2输入模式,使电视机按用户选择的输入模式运作。
实施例4
用图1、图20、图21说明本发明实施例4的装有声音识别功能的电视机。
首先,说明实施例4的装有声音识别功能的电视机的结构。示出本发明实施4的装有声音识别功能的电视机结构的框图(图1)与实施例相同,因而省略其详细说明。
下面,说明以上那样构成的实施例4的装有声音识别功能的电视机中,利用声音输入检索分类节目时的控制步骤。本实施例与实施例4在所当前动作模式的类别中无所接收词语时和当前动作模式下无相关类别节目时的处理方面不同。除这点外,本实施例与实施例3相同。图20是本发明实施例4的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。图20中,标注与图2相同符号的步骤(S201~S206)进行与图2相同的处理,因而省略说明。成为本实施例特征的部分标注新符号(S2001~S2004),进行说明。
在当前动作模式的类别一览表无步骤S203所输入词语时(S203中的“否”)和步骤S204中当前动作模式下无相关类别的节目时(S204中的“否”),电视控制部114转到判断关键词一览(图21)是否有输入的词语(S2001)。关键词一览无该词语时(S2001中的“否”),电视控制部114不进行运作,返回下一音频码等待状态(S201)。
关键词一览有输入的词语时(S2001的“是”),电视控制部114判断当前动作模式的类别中是否有关键词(输入的词语)所属的类别(S2002)。当前动作模式的类别中无该类别时(S2002中的“否”),电视控制部114不进行动作,返回下一音频码输入等待状态(S201)。
当前动作模式的类别中有该类别时(S2002中的“是”),电视控制部114判断当前动作模式下是否有该类别的节目(S2003)。无节目时(S2003中的“否”),电视控制部114不进行动作,返回下一音频码输入等待状态(S201)。
有节目时(S2003中的“是”),电视控制部114进行指示,使在屏显示处理部制成该类别的节目表。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S2004)。电视控制部114在存储装置116设定动作模式(地面波广播接收模式或卫星广播接收模式)(S206)后,返回下一音频码输入等待状态(S201)。
然后,用户从节目表指定特定的节目。电视控制部输入指定的节目,在显示装置119上显示。
这样,根据本实施例,则可判断当前动作模式,并且在不能利用识别的词语进行动作时,利用将所识别词语作为关键词的类别进行动作。
本实施例中,即使借助将所识别词语作为关键词的类别也不能动作时,可如实施例2那样,利用所识别词语的上位概念进行动作。又在本实施例中,借助将所识别词语作为关键词的类别不能进行动作时,还可如实施例3那样,取为改变动作模式后利用所识别词语进行动作。
实施例5
用图1、图8~图12说明本发明实施例5的装有声音识别功能的电视机。
首先,说明实施例5的装有声音识别功能的电视机结构。示出本发明实施例5的装有声音识别功能的电视机结构的框图(图1)与实施例1相同,因而省略详细说明。
下面,说明以上那样构成的实施例5的装有声音识别功能的电视机中利用声音输入检索分类节目时的控制步骤。本实施例与实施例2和3在画面上显示分类节目检索处理状况方面不同。除此以外,本实施例与实施例2和3相同。图8是本发明实施例5的装有声音识别功能的电视机中利用声音输入的分类节目检索处理的流程图。图8中,标注与图3和图7相同符号的步骤(S201~S206、S301~S304、S701~S704)进行与图3和图7相同的处理。成为本实施例特征的部分添加新符号(S801~S804),进行说明。
步骤S204中在当前动作模式下有所输入词语的类别中的节目时(S204)中的“是”),电视控制部114对在屏显示处理部115通知信息1(表示按照用户词语进行动作,例如“检索‘足球’”这类的信息)和显示接通。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的信息1(S801)。电视控制部114进行指示,使在屏显示处理部115制成该类别的节目表。在屏显示处理部115根据例如BS数字节目信息数据存储器124存放的节目一览表产生节目表的画面。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S205)。电视控制部114在存储装置116设定动作模式(地面波广播接收模式或卫星广播接收模式)(S206)后,返回下一音频码输入等待状态(S201)。
当前动作模式下包括所输入词语(类别)的上层类别的节目时(S303中的“是”),电视控制部114对在屏显示处理部115通知信息2和显示接通,该登记处
表示对高于用户所输入词语(类别)的上位概念类别的节目表或含用户所输入节目的类别的节目表进行显示,是例如“无‘足球’”,检索“运动”这类的信息。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的信息2(S802)。电视控制部114进行指示,使在屏显示处理部115制成该上层类别的节目表。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S304)。电视控制部114在存储装置116设定动作模式(S206)后,返回下一音频码输入等待状态(S201)。
当前动作模式以外的动作模式中包括所输入词语的类别中的节目时(S702中的“是”),电视控制部114对在屏显示处理部115通知信息3和显示接通,该信息3表示对当前动作模式以外的其他动作模式中用户所输入类别的节目表进行显示,是例如“地面波广播无“新闻报道”,检索BS数字广播”这类的信息。
显示装置119显示从在屏显示处理部115经图像组合处理部128送来的信息3(S803)。电视控制部114从当前动作模式变换到其他动作模式(S703)。电视控制处理部114进行指示,使在屏显示处理部115按其他动作模式制成该类别的节目表。电视控制部114在存储装置116设定动作模式(地面波广播接收模式或卫星广播接收模式)(S206)后,返回下一音频码输入等待状态(S201)。
在步骤S801、S802和S803后,用户从节目表指定特定的节目。电视控制部输入指定的节目,在显示装置119上显示。
又,其他动作模式的类别一览无所输入词语(类别)时(S701中的“是”)和其他动作模式下无该类别的节目时,电视控制部114对在屏显示处理部115通知信息4和显示接通,该信息4表示各处均无用户输入的类别的节目,是例如“各处均无广播当前的“足球””这类的信息。电视控制部114在存储装置116设定动作模式(S206)后,返回下一音频码输入等待状态(S201)。
步骤S804中,进一步检索其他动作模式下所输入词语(类别)的上层类别节目,并且有节目时,在屏显示处理部115可产生并显示信息5(图中未示出),然后产生并显示其他动作模式中上位概念类别的节目表。该信息5表示对高于其他动作模式中用户所输入词语(类别)的上位概念类别节目表或含用户所输入节目的类别的节目表进行显示,是例如“无“足球””,检索BS数字广播的“运动””这类的信息。没有无其动作模式中所输入词语(类别)的上层类别的节目,则产生并显示信息4。
下面说明在屏显示处理部115的处理步骤。图9是本发明实施例5的装有声音识别功能的电视机中在屏显示处理部115的控制处理流程图。
在屏显示处理部115从电视控制部114收到显示关断的通知时(S901中的“是”、S902中的“是”),去除在屏显示(S903),返回等待来自电视控制部114的显示通知的状态。
反之,从电视控制部114收到显示接通的通知时(S901中的“是”、S902中的“否”),在显示装置119上在屏显示所通知的信息等(S904)后,返回等待来自电视控制部114的显示通知的状态。
没有来自电视显示部114的显示通知时(S901中的“否”),维持在屏显示的状态(接通或关断)。
现用图10~图12说明信息1~4。图10表示本发明实施例5的装有声音识别功能的电视机中地面波模拟广播与BS数字广播类别信息的不同和显示信息的图。
地面波模拟广播中,根据在UV节目信息数据取得部126取得的节目数据进行分类节目检索处理。BS数字广播中,根据BS数字节目信息数据取得部123取得的节目数据进行分类节目检索处理。地面波模拟广播与BS数字广播中,节目数据的数据结构不同。
说明显示信息1的情况。用户有放映地面波广播中发出“运动”的声音。显示装置119显示“检索“运动””的信息1。显示装置119显示“运动”的检索结果。
说明显示信息2的情况。图11是本发明实施例5的装有声音识别功能的电视机中显示信息20的画面转移图。用户在放映地面波广播中(画面1101)发出“足球”的声音。显示装置119显示“无足球”,检索“运动”的信息2(1002)(画面1102)。显示装置119显示“运动”的检索结果(画面1103)。
说明显示信息3的情况。图12是本发明实施例5的装有声音识别功能的电视机中显示信息3时的画面转移图。用户在放映地面波广播中(画面1201发出“新闻报道”的声音。显示装置119显示“地面波广播“无新闻报道”,切换到BS数字广播进行检索”的信息3(1003)(画面1202)。显示装置119显示“新闻报道”的检索结果(画面1203)。
说明显示信息4的情况。用户在放映地面波广播中发出“戏剧”的声音。在地面波广播、BS广播等全部动作模式中均无类别为“戏剧”的广播节目时,显示装置119显示“当明各处均不广播“戏剧””的信息4。
这样,根据本实施例,则可对不能按输入词语动作的理由和根据输入词语如何动作等进行在屏显示,并将其传给用户。
实施例6
用图1、图13~图14说明本发明实施例6的装有声音识别功能的电视机。
首先,说明实施例6的装有声音识别功能的电视机结构。示出本发明实施例6的装有声音识别功能的电视机结构的框图(图1)与实施例1相同,因而省略详细说明。
下面,说明以上那样构成的实施例5的装有声音识别功能的电视机中利用声音输入检索分类节目时的控制步骤。本实施例与实施例5在按变换后的动作模式能进行动作时的处理方面不同。除这点外,本实施与实施例5相同。图13是本发明实施例6的装有声音识别功能的电视机中利用声音的分类节目检索处理的流程图。图13中,标注与图8相同符号的步骤进行与图8相同的处理,因而省略说明。成为本实施例特征的部分标注新符号(S1301、S1302)进行说明。
当前工作模式中,不存在所输入词语的类别和相关上位概念类别,或者不存在属于这些类别的节目,但包括其动作模式(当前动作以外的动作模式)下所输入词语的类别中的节目时(S702中的“是”),电视控制部114对在屏显示处理部115通知确认消息6(导向用户是否允许改变动作模式的信息)和显示接通。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的确认消息6(S1301)。用户应答是否允许改变动作模式(例如发出“是”的声音)。电视控制部114判断用户是否允许改变动作模式(S1302)。
允许时(S1302)中的“是”),电视控制癌114从当前动作模式变换为其他动作模式(S703)。电视控制部114进行指示,使在屏显示处理部115按其他动作模式制成该类别的节目表。显示装置119显示从在屏显示处理部115经图像组合处理部128送来的节目表(S704)。电视控制部114在存储装置116设定动作模式(例如卫星广播接收模式)(S206)后,回到下一音频码输入等待状态(S201)。
用户不允许改变动作模式时(S1302中的“否”),电视控制部114不进行动作,返回下一音频码输入等待状态(S201)。
现用图14说明确认信息6。图14是本发明实施例6的装有声音识别功能的电视机中显示确认信息6的画面转移图。用户在对BS广播录像中(画面1401)发出的“动画、特技拍摄”的声音。显示装置119显示“正在对BS数字广播节目录像,是否中断以进行检索?”的确认信息6(画面1402)。用户发出“是”的声音时,显示装置119显示“动画、特技拍摄”的检索(画面1403)。
这样,根据本实施例,不是随意改变动作模式并按受理的词语进行动作,而是进行通知,以便用户确认是否可改变动作模式并按受理的词语进行动作,从而可提醒用户进行选择。
本实施例中,在变换动作模式时显示确认信息,但也可代之以按上层类别进行检索时显示确认信息。还可除本实施例的确认信息显示外,又在按上层类别检索时也显示确认信息。
实施例7
用图1、图15~图18说明本发明实施例7的装有声音识别功能的电视机。
首先,说明实施例7的装有声音识别功能的电视机的结构。示出本发明实施例7的装有声音识别功能的电视机结构的框图(图1)与实施例1相同,因而省略详细说明。
下面,说明以上那样构成的实施例7的装有声音识别功能的电视机中在屏显示时间的控制步骤。图15是本发明实施例7的装有声音识别功能的电视机中事件管理部113的控制处理流程图。
图15中,收到来自声音识别部112的事件时(S1501中的“是”、S1502中的“是”),事件管理部113对电视控制部114通知是声音识别部112发来的事件和该事件和种类(S1503)。事件管理部113返回等待来自遥控器解讯部111和声音识别部112的事件的状态(S1501)。
另一方面,收到来自遥控器解读部111的事件时(S1501中的“是”、S1502中的“否”),事件管理部113对电视控制部114通知是来自遥控器解读部111的事件和该事件的种hod(S1504)。事件管理部113返回等待来自遥控器解读部111和声音识别部112的事件的状态(S1501)。
图16是本发明实施例7的装有声音识别功能的电视机中电视控制部114对关机定时器时间设定事件的控制处理流程图。图16中,首先,电视控制部114从事件管理部113接收关机定时器的通知(S1601)。电视控制部114给在屏显示处理部115通知对关机定时器时间设定的显示模式和显示接通(S1602)。
电视控制部114将在屏显示消失时间(t)设定为0(初始值)(S1603)。电视控制部114判断是否声音输入指令(含词语)(S1604)。利用声音输入该输入指令(含词语)时(是来自声音识别部112的事件时)(S1604中的“是”),电视控制部114将在屏显示消失时间(t)设定为10秒(S1605)。利用遥控器带来该输入指令(含词语)时(是来自遥控器解讯部111的事件时)(S1604)中的“否”),电视控制部114将在屏显示消失时间(t)设定为3秒(S1606)。
电视控制部114根据从定时器控制部取得的时刻判断在屏显示消失时间是否已过(判断是否t=0)(S1607)。S1607中判断为在屏消失时间已超过时(t=0时)(S1607中的“是”),电视控制部114通知在屏显示处理部115关断显示(S1608)。
S1607中在屏显示消失时间未超过时(不是t=0时)(S1607中的“否”),电视控制部114判断是否有来自事件管理部113的新通知(S1609)。无来自事件管理部113的新通知时(S1609中的“否”),电视控制部114使在屏显示消失时间(t)递减(S1617),并返回等待在屏显示消失时间超过的状态(S1607)。
S1609中由来自事件管理部113的新通知时(S1609的“是”),电视控制部114判断事件种类是否关机定时器(S1610)。事件种类不是关机定时器时(S1610)的“否”),电视控制部114进行符合事件种类的事件处理(S1616)。
S1610中判断为事件种类是关机定时器时(S1610的“是”),电视控制部114使关机定时器的设定从当前的设定值改变为下一设定值(S1611)。电视控制部114通知在屏显示处理部115显示接通和对关机定时器的选定模式(S1612)。
电视控制部114判断是否声音输入指令(含词语)。利用声音输入该输入指令(含词语)时(来自声音识别部112的事件时)(S1613中的“是”),电视控制部114再次将在屏显示消失时间(t)设定为10秒(S1614)。遥控器带来该输入指令(含词语)时(是来自遥控器解读部111的事件时)(S163吕的“否”),电视控制部114再次将在屏显示消失时间(t)设定为3秒(S1615)。上述处理(S1614、S1615、S1616)后,电视处理部114使在屏显示消息时间(t)递减(S1617),并返回等待在屏显示消个时间超过的状态(S1607)。
图17上示出本发明实施例7的装有声音识别功能的电视机中遥控器的关机定时器时间设定操作的图。
设显示装置119显示无关机定时器时间设定用在屏显示的画面1711。这时,按压遥控器的关机定时器时间设定按键,则显示装置119使当明关机定时器设定值1701在屏显示(画面1712)。同时,事件发生源设定遥控器时的在屏显示消失时间(3秒)。
关机定时器的在屏显示顺(画面1712),再次按压遥控器的定时器时间设定按键时,对下一设定1702(30、60、90、0分钟)显示触发键(画面1713)。同时,事件发生源进行遥控器时的在屏显示消失时间(3秒)的设定。
于是,从所示按压关机定时器时间设定按键后经过3秒或末次按压关机定时器时间设定按键后经过3秒时,关机定时器设定时间的在屏显示消失(画面1714)。
图18表示本发明的装有声音识别功能的电视机中利用发声的关机定时器时间设定操作的图,用发声进行图17的遥控器按压处理。
设显示装置119显示无关机定时器在屏显示的画面1911。这时,发出“关机定时器”的声音,则显示装置119对当前关机定时器设定值1801进行在屏显示(画面1812)。同时,事件发生源设定声音识别时的在屏显示消失时间(10秒)。
关机定时器的在屏显示中(画面1812)再次发出“关机定时器”的声音时,对下一设定1802(30、60、90、0分钟)显示触发键(画面1813)。同时,事件发生源进行声音识别时的在屏显示消失时间(10秒)的设定。
于是,从首次发出“关机定时器”的声音后经过10秒或末次发出“关机定时器”的声音后经过10秒时,关机定时器设定时间的在屏显示消失(画面1814)。
本实施例中,作为事件的种类示出关机定时器的例子,但只要是在屏显示中每次接收事件用触发件改变设定并且经过一定时间后使在屏显示消失的事件,均可。至于消失时间,也不限于本实施例的值。例如分别任意设定声音输入时的在屏显示消失时间和开关输入时的在屏显示时间的装置,在声音输入时的在屏显示消失时间设定值大于开关输入时在屏显示时间设定值的情况下,也包含在本发明技术范围内。
这样,利用本发明,则可根据遥控器和发声等事件发生源设定在屏显示时间。
如以上说明那样,利用本发明,则能取得的有利效果为:可实现根据当前动作模式适当响应或不响应声音输入词语的装有声音识别功能的电视机。
根据本发明,能取得的有利效果为:可实现根据对当前动作模式判断的结果可实际进行动作或通知用户动作状况的装有声音识别功能的电视机。
根据本发明,能取得的有利效果为:可实现根据用户的选择对声音输入词语作出响应或不响应的装有声音识别功能的电视机。
根据本发明,能取得的有利效果为:能实现一种装有声音识别功能的电视机,可在不受理用户所发声音的词语时,不是完全不进行动作,而是按能动作的上位概念进行动作,或者改变动作模式后进行动作,或者通知用户不能动作的原因等,因而使用方便。
根据本发明,能取得的有利效果为:能实现一种装有声音识别功能的电视机,不必切换复杂的菜单进行显示,快速自动检测出希望的节目或接近希望的节目进行显示。
根据本发明,能取得的有利效果为:能实现一种装有声音识别功能的电视机,在用声音识别功能更改设定时和用按压开关更改设定时,用户都能舒适地改变设定。
据本发明,能取得的有利效果为:能提供一种装有声音识别功能的电视机,可设定与遥控器和发声等事件源相适应的在屏显示时间,因而使用方便。
以某种详细程度就较佳形态说明了本发明,但该较佳形态的当前揭示内容,其组成细节中当然可变化,可不脱离本发明权利要求书范围和思想实现各要素组合和顺序的变化。

Claims (10)

1.一种装有声音识别功能的电视机,其特征在于,包括
输入声音并且识别所述声音包含的词语的声音识别部,以及
判断是否能按照所述词语以当前动作模式动作的判断部;
当前动作模式下能按照所述词语动作时,按照所述词语进行动作,当前动作模式下不能按照所述词语动作时,不按照所述词语动作。
2.如权利要求1所述的装有声音识别功能的电视机,其特征在于,包括
可相互切换的第1输入模式和第2输入模式,
所述第1输入模式中进行权利要求1记载的动作,
所述第2输入模式中在不能按照所述词语以当前动作模式进行动作时,改变动作模式,按照所述词语进行动作。
3.一种装有声音识别功能的电视机,其特征在于,包括
输入声音并且识别所述声音包含的词语的声音识别部,
判断是否能按照所述词语进行动作的判断部,
按类别划分的词典、按类别划分且包括层次结构的词典、或借助关键词使词语相互关联的词典,以及
检测部,该部在不能按照所述词语进行动作时,从所述词典检索属于与所述词语相同的类别且能动作的其他词语、是所述词语的上位概念词语且能动作的其他词语、或借助关键词与所述词语关联且能动作的其他词语;
所述检索部检索到其他词语时,按照所述词语进行动作。
4.如权利要求1所述的装有声音识别功能的电视机,其特征在于,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在当前动作模式下不能按照所述词语动作时,通知用户不能按照所述词语动作。
5.如权利要求2所述的装有声音识别功能的电视机,其特征在于,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在改变动作模式后按照所述词语进行动作时,通知用户改变动作模式且按照所述词语动作。
6.如权利要求3所述的装有声音识别功能的电视机,其特征在于,还包括
在屏显示部和/或声音输出部,
所述在屏显示部和/或声音输出部在按照其他词语进行动作时,通知用户按照其他词语动作。
7.如权利要求2所述的装有声音识别功能的电视机,其特征在于,还包括
在屏显示部和/或声音输出部,
在不能按照所述词语以当前动作模式进行动作时,所述在屏显示部和/或所述声音输出部显示所述第1输入模式和所述第2输入模式的选择菜单,并且
按照用户选择的输入模式进行动作。
8.一种装有声音识别功能的电视机,其特征在于,包括
在规定时间显示要求或允许用户输入指令或者指导输入方法的画面的在屏显示部、
输入用户声音并且识别所述声音包含的词语的声音识别部,以及
用户按压开关使画面上显示的光标移动或者检测出触摸触频屏输入指令的操作部;
所述声音识别部输入词语时的所述显示时间,长于所述操作输入部输入指令时的所述显示时间。
9.一种装有声音识别功能的电视机的控制方法,其特征在于,
该电视机包括按类别划分的词典、按类别划分且包括层次结构的词典或借助关键词使词语相互关联的词典,所述方法包括下述步骤
输入声音并且识别所述声音包含的词语的声音识别步骤,
判断是否能按照所述词语进行动作的判断步骤,
检测步骤,该部在不能按照所述词语进行动作时,从所述词典检索属于与所述词语相同的类别且能动作的其他词语、是所述词语的上位概念词语且能动作的其他词语或借助关键词与所述词语关联且能动作的其他词语,以及
所述检索步骤检索到其他词语时按照所述词语进行动作的动作步骤。
10.一种装有声音识别功能的电视机的控制方法,其特征在于,包括下述步骤
在规定时间显示要求或允许用户输入指令或者指导输入方法的画面的在屏显示步骤、
输入用户声音并且识别所述声音包含的词语的声音识别步骤,以及
用户按压开关使画面上显示的光标移动或者检测出触摸触频屏输入指令的操作步骤;
所述声音识别步骤输入词语时的所述显示时间,长于所述操作输入步骤输入指令时的所述显示时间。
CNB021574413A 2001-12-18 2002-12-18 装有声音识别功能的电视机及其控制方法 Expired - Fee Related CN1266926C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001384323 2001-12-18
JP2001384323 2001-12-18

Publications (2)

Publication Number Publication Date
CN1429019A true CN1429019A (zh) 2003-07-09
CN1266926C CN1266926C (zh) 2006-07-26

Family

ID=19187713

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB021574413A Expired - Fee Related CN1266926C (zh) 2001-12-18 2002-12-18 装有声音识别功能的电视机及其控制方法

Country Status (6)

Country Link
US (1) US7254543B2 (zh)
EP (1) EP1322111B1 (zh)
KR (1) KR100513087B1 (zh)
CN (1) CN1266926C (zh)
DE (1) DE60222852D1 (zh)
MY (1) MY140265A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101859565A (zh) * 2010-06-11 2010-10-13 深圳创维-Rgb电子有限公司 一种在电视机上实现语音识别的系统及其方法
CN103117058A (zh) * 2012-12-20 2013-05-22 四川长虹电器股份有限公司 基于智能电视平台的多语音引擎切换系统及方法
CN109240107A (zh) * 2018-09-30 2019-01-18 深圳创维-Rgb电子有限公司 一种电器设备的控制方法、装置、电器设备和介质
CN111433736A (zh) * 2017-12-01 2020-07-17 雅马哈株式会社 机器控制系统、机器控制方法、以及程序
CN112397069A (zh) * 2021-01-19 2021-02-23 成都启英泰伦科技有限公司 一种语音遥控方法及装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060041926A1 (en) * 2004-04-30 2006-02-23 Vulcan Inc. Voice control of multimedia content
US20060007359A1 (en) * 2004-07-06 2006-01-12 Phanthavong Douangphachanh Method and system for switching between video modes in consumer electronics
US7574358B2 (en) 2005-02-28 2009-08-11 International Business Machines Corporation Natural language system and method based on unisolated performance metric
KR100768653B1 (ko) * 2006-05-26 2007-10-18 주식회사 케이티 음성 인식 기반의 ip-tv 서비스 제어 시스템과 그방법 및 기록매체
US8872975B2 (en) * 2006-08-08 2014-10-28 Sony Corporation Receiving device, display controlling method, and program
KR100936048B1 (ko) * 2009-03-26 2010-01-08 현대통신 주식회사 요리백과 주방 tv
US8600763B2 (en) * 2010-06-04 2013-12-03 Microsoft Corporation System-initiated speech interaction
CN101968712B (zh) * 2010-10-08 2012-09-19 鸿富锦精密工业(深圳)有限公司 具有触摸显示屏的遥控器
EP2555536A1 (en) 2011-08-05 2013-02-06 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2013022218A2 (en) * 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing user interface thereof
EP2610862B1 (en) 2011-12-30 2015-07-08 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling electronic apparatus
KR20140089863A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 디스플레이 장치, 및 이의 제어 방법, 그리고 음성 인식 시스템의 디스플레이 장치 제어 방법
KR102227599B1 (ko) 2013-11-12 2021-03-16 삼성전자 주식회사 음성인식 시스템, 음성인식 서버 및 디스플레이 장치의 제어방법
US9368105B1 (en) * 2014-06-26 2016-06-14 Amazon Technologies, Inc. Preventing false wake word detections with a voice-controlled device
CN104486654A (zh) * 2014-12-15 2015-04-01 四川长虹电器股份有限公司 一种提供指导的方法和电视机
JP6731178B2 (ja) * 2016-03-07 2020-07-29 富士ゼロックス株式会社 動画検索装置およびプログラム
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
CN109102802B (zh) 2017-06-21 2023-10-17 三星电子株式会社 用于处理用户话语的系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6370297A (ja) 1986-09-12 1988-03-30 株式会社東芝 情報処理装置
KR940001977B1 (ko) * 1990-12-31 1994-03-12 삼성전자 주식회사 Tv의 미세조정 튜닝 데이타 메모리방법
JPH0541894A (ja) 1991-01-12 1993-02-19 Sony Corp 電子機器の制御装置
US5774859A (en) * 1995-01-03 1998-06-30 Scientific-Atlanta, Inc. Information system having a speech interface
US5794205A (en) * 1995-10-19 1998-08-11 Voice It Worldwide, Inc. Voice recognition interface apparatus and method for interacting with a programmable timekeeping device
US6119088A (en) * 1998-03-03 2000-09-12 Ciluffo; Gary Appliance control programmer using voice recognition
US6505348B1 (en) * 1998-07-29 2003-01-07 Starsight Telecast, Inc. Multiple interactive electronic program guide system and methods
FR2783625B1 (fr) * 1998-09-21 2000-10-13 Thomson Multimedia Sa Systeme comprenant un appareil telecommande et un dispositif de telecommande vocale de l'appareil
JP3979556B2 (ja) 1998-12-22 2007-09-19 パイオニア株式会社 番組選択装置及び番組選択方法
US6553345B1 (en) 1999-08-26 2003-04-22 Matsushita Electric Industrial Co., Ltd. Universal remote control allowing natural language modality for television and multimedia searches and requests
US6397186B1 (en) * 1999-12-22 2002-05-28 Ambush Interactive, Inc. Hands-free, voice-operated remote control transmitter
US7096185B2 (en) * 2000-03-31 2006-08-22 United Video Properties, Inc. User speech interfaces for interactive media guidance applications
US6889191B2 (en) * 2001-12-03 2005-05-03 Scientific-Atlanta, Inc. Systems and methods for TV navigation with compressed voice-activated commands

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101859565A (zh) * 2010-06-11 2010-10-13 深圳创维-Rgb电子有限公司 一种在电视机上实现语音识别的系统及其方法
CN103117058A (zh) * 2012-12-20 2013-05-22 四川长虹电器股份有限公司 基于智能电视平台的多语音引擎切换系统及方法
CN103117058B (zh) * 2012-12-20 2015-12-09 四川长虹电器股份有限公司 基于智能电视平台的多语音引擎切换系统及方法
CN111433736A (zh) * 2017-12-01 2020-07-17 雅马哈株式会社 机器控制系统、机器控制方法、以及程序
CN111433736B (zh) * 2017-12-01 2024-05-07 雅马哈株式会社 机器控制系统以及机器控制方法
CN109240107A (zh) * 2018-09-30 2019-01-18 深圳创维-Rgb电子有限公司 一种电器设备的控制方法、装置、电器设备和介质
CN109240107B (zh) * 2018-09-30 2022-07-19 深圳创维-Rgb电子有限公司 一种电器设备的控制方法、装置、电器设备和介质
CN112397069A (zh) * 2021-01-19 2021-02-23 成都启英泰伦科技有限公司 一种语音遥控方法及装置

Also Published As

Publication number Publication date
KR20030051368A (ko) 2003-06-25
MY140265A (en) 2009-12-31
US20030115067A1 (en) 2003-06-19
CN1266926C (zh) 2006-07-26
DE60222852D1 (de) 2007-11-22
EP1322111A2 (en) 2003-06-25
EP1322111B1 (en) 2007-10-10
US7254543B2 (en) 2007-08-07
KR100513087B1 (ko) 2005-09-07
EP1322111A3 (en) 2004-07-07

Similar Documents

Publication Publication Date Title
CN1266926C (zh) 装有声音识别功能的电视机及其控制方法
CN1190073C (zh) Epg信息显示方法、装置、记录器和/或再现器
CN1248492C (zh) 接收设备及方法、信号处理设备及方法和存储媒体
CN1550101A (zh) 广播接收机
CN1264340C (zh) 广播接收装置以及数据广播方法
CN1199455C (zh) 保留菜单控制数据的记录媒体及菜单控制方法和装置
CN1104812C (zh) 控制电子节目指南显示的设备和方法
CN1194538C (zh) 电视广播设备和方法
CN1276660C (zh) 信息提供系统、广播接收装置和服务器装置
CN1932965A (zh) 电子装置及其显示控制方法、图形用户接口和显示控制程序
CN1933586A (zh) 信息处理装置、方法和程序
CN1492669A (zh) 产生节目信息的方法和装置以及处理节目信息的接收装置
CN1738440A (zh) 用于处理信息的设备,方法和计算机程序
CN1332930A (zh) 交互式节目指南系统和方法
CN1825929A (zh) 用于搜索和提供内容的系统和方法
CN1947416A (zh) 数字广播接收设备、方法及其程序
CN1947422A (zh) 数字广播回放设备与方法、计算机程序,和存储介质
CN1816879A (zh) 视频处理装置、视频处理装置的ic电路、视频处理方法和视频处理程序
CN1703083A (zh) 移动图像处理装置和方法
CN1399267A (zh) 图像信号的记录重放方法、重放装置及重放程序
CN1817038A (zh) 内容存储系统、家用服务器装置、信息供应装置、集成电路、以及程序
CN1390420A (zh) 电视节目广播方法,电视接收机和媒体
CN1918834A (zh) 节目搜索系统
CN1317896C (zh) 收视限制装置和收视限制系统
CN1713271A (zh) 遥控系统、控制器、向计算机提供控制器功能的程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee