CN109413479A - 智能电视语音交互界面文本内容完整显示的方法 - Google Patents
智能电视语音交互界面文本内容完整显示的方法 Download PDFInfo
- Publication number
- CN109413479A CN109413479A CN201811143132.4A CN201811143132A CN109413479A CN 109413479 A CN109413479 A CN 109413479A CN 201811143132 A CN201811143132 A CN 201811143132A CN 109413479 A CN109413479 A CN 109413479A
- Authority
- CN
- China
- Prior art keywords
- text
- content
- display
- casting
- line
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 16
- 238000000034 method Methods 0.000 title claims abstract description 16
- 238000005266 casting Methods 0.000 claims abstract description 24
- 230000002452 interceptive effect Effects 0.000 claims abstract description 15
- 238000005096 rolling process Methods 0.000 claims abstract description 6
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了智能电视语音交互界面文本内容完整显示的方法，包括如下步骤：步骤一、将获取到的语义文本内容标准化，使其适配语音交互框的宽度，播报能够正确；步骤二、自定义View显示文本；步骤三、自定义View滑动处理；步骤四、根据语音播报进度来显示和滚动文本内容；步骤五、依次循环进行下一行文本的显示播报直至全部内容播报显示完全。用户在使用语音进行交互时，不使用遥控器也能获取到需要的信息，文本内容根据播报自动进行滚动，正在播报的文字还会高亮，让用户对文本内容能更清晰更明了，给用户带来更智能化的体验。
Description
技术领域
本发明涉及人工智能语音技术领域，尤其涉及到一种语音交互界面文本内容完整显示的方法。
背景技术
近年来，随着人工智能的迅速发展，人工智能语音技术更是受到智能电视行业的追捧，不少电视厂商纷纷发布了具有语音交互功能的电视新品，而且智能电视语音交互也成为了吸引消费者的重要因素之一。智能电视语音交互界面各有千秋，不过，对于文本显示不全的处理却都大同小异。
智能电视语音交互界面现有的让文本内容完整显示的处理方法就是给文本内容设置滚动条，文本内容超出显示范围时可按遥控器进行滚动来查看，或者直接以省略号结尾而不能进行滚动查看，这两种方法对于用户体验来说其实是不太智能的。智能语音电视的定位是摆脱遥控器的束缚，以语音为交互入口，所以，本发明提供一种新的处理方法，结合语音合成技术，让文本根据语音播报进度自动进行滚动显示，能显示全部文本内容，同时也不用手动按遥控器进行查看，让用户能有更好更智能的体验。
发明内容
针对现有技术中存在将单词拆成两行使得播报不准确的问题，本发明的目的在于提供一种可以将文本内容拆分成每行内容能完整显示和播报的几行，将语音播报的进度与文本滚动结合起来，让文本能够根据播报的进度自动进行滚动的智能电视语音交互界面文本内容完整显示的方法。
本发明具体是这样实现的：
智能电视语音交互界面文本内容完整显示的方法，具体包括如下步骤：
步骤一、将获取到的语义文本内容标准化，使其适配语音交互框的宽度，播报能够正确。
首先，先定义好TextView的布局，确定最多能展示在界面上文本的行数和每行文本的宽度以及其他一些属性，这样文本能够按标准自动换行，不会出现单词被分开以至于不能完整播报的情况，然后将从语义拿到的数据，通过这个布局分成n行并获取每行的内容，用一个数据集合进行保存。
步骤二、自定义View显示文本。
显示文本的方案就是一行行的画出来，另外从步骤一得知，TextView设置的宽度能包含所有行的内容而不会溢出，所以显示文本时定义显示的宽度应该是要大于等于这个宽度的才行。接着从显示内容的语音交互框的垂直高度的二分之一处开始，然后纵坐标每次增加文字的高度与距离之和，依次画出来每行文字。这样所有的文本就会从语音交互框垂直方向的中间开始，依次向下一行行的显示出来。另外，显示当前行时，文本进行高亮。
步骤三、自定义View滑动处理。
每行文字能显示之后，垂直方向则利用滑动来解决。先获取到每次显示的行数来得到即将滚动一行的偏移量，自定义一个动画对象，然后获取决定每一行文本偏移量而定义的一个属性，这个属性取值是在原有值和目标行的偏移量之间，由动画控制其变化。接着设置动画播放的时间，设置变化速率为系统提供的线性变化，最后启动动画。
步骤四、根据语音播报进度来显示和滚动文本内容。
显示文本和滑动处理属于同一个自定义View，处理的是文本的显示逻辑。接着开始当前行的显示和播报，获取步骤一得到的数据集合，用步骤二的逻辑将该行内容显示在语音的交互框内，同时回调语音播报接口对该行内容进行播报，播报完当前行的内容之后，延时500ms，同时启动步骤三中定义好的动画来将已经播报的这行内容往上移动，即将播报的内容向上移动到语音交互框垂直方向上的中间位置，这样每次播报的内容都是在同一个位置。
步骤五、依次循环进行下一行文本的显示播报直至全部内容播报显示完全。
本发明具有如下有益效果：
用户在使用语音进行交互时，不使用遥控器也能获取到需要的信息，文本内容根据播报自动进行滚动，正在播报的文字还会高亮，让用户对文本内容能更清晰更明了，给用户带来更智能化的体验。
附图说明
图1是本发明的实现流程图。
具体实施方式
智能电视语音交互界面文本内容完整显示的方法，如附图1所示，具体包括如下步骤：
步骤一、获取到标准化后的文本内容。
先定义好TextView布局，初始化一个TextView对象contentView，获取语义数据content，然后调用setText(content)将content按照定义好的布局的宽度来自动生成n行。先定义一个List<String>对象contents,之后用contentView.getLineCount()获取行数，然后用subSequence(contentView.getLayout.getLineStart(i),contentView.getLayout.getLineEnd(i))方法获取该行的内容，再将每行内容添加到contents这个集合中去。
步骤二、自定义View显示文本。从语音交互框垂直高度的二分之一处开始显示文字，横坐标x为getWidth()/2+getPaddingLeft()，getWidth为语音交互框的宽度，纵坐标等于高度的一半，然后纵坐标每次增加文字的高度与距离之和，初始化一个Paint对象mPaint来设置文字的属性，之后调用canvas.drawText(text,x,y,mPaint)依次画出来每行文字，text为每行的数据内容，x、y为横纵坐标。另外，显示当前行时，文本进行高亮；
步骤三、播报当前行的文本内容。回调播报接口对每行进行播报，每行播报完成之后延迟500毫秒，这期间同时进行文本内容的滚动。
步骤四、先获取到每次播报的行数来得到即将滚动一行的偏移量scrollY，调用ValueAnimator.ofFloat(mOffect,scrollY)自定义一个ValueAnimator对象来进行移动。mOffset是为了决定每一行文本偏移量而定义的一个属性，mOffset的取值是在原有值和目标行的偏移量之间，由动画控制其变化，具体的值是在AnimatorUpdateListener接口中进行更新。接着设置动画播放的时间，设置变化速率为系统提供的线性变化，最后启动动画将已经播报的这行内容往上移动，即将播报的内容向上移动到语音交互框垂直方向上的中间位置，这样每次播报的内容都是在同一个位置。
步骤五、依次循环进行下一行文本的显示播报直至全部内容播报显示完全。
尽管这里参照本发明的解释性实施例对本发明进行了描述，上述实施例仅为本发明较佳的实施方式，本发明的实施方式并不受上述实施例的限制，应该理解，本领域技术人员可以设计出很多其他的修改和实施方式，这些修改和实施方式将落在本申请公开的原则范围和精神之内。
Claims (5)
1.智能电视语音交互界面文本内容完整显示的方法，其特征在于包括如下步骤：
步骤一、将获取到的语义文本内容标准化，使其适配语音交互框的宽度，播报能够正确；
步骤二、自定义View显示文本；
步骤三、自定义View滑动处理；
步骤四、根据语音播报进度来显示和滚动文本内容；
步骤五、依次循环进行下一行文本的显示播报直至全部内容播报显示完全。
2.根据权利要求1所述智能电视语音交互界面文本内容完整显示的方法，其特征在于：
步骤一具体为：
首先，先定义好TextView的布局，确定最多能展示在界面上文本的行数和每行文本的宽度以及其他一些属性，这样文本能够按标准自动换行，不会出现单词被分开以至于不能完整播报的情况，然后将从语义拿到的数据，通过这个布局分成n行并获取每行的内容，用一个数据集合进行保存。
3.根据权利要求2所述智能电视语音交互界面文本内容完整显示的方法，其特征在于：
步骤二具体为：
显示文本的方案就是一行行的画出来，另外从步骤一得知，TextView设置的宽度能包含所有行的内容而不会溢出，所以显示文本时定义显示的宽度应该是要大于等于这个宽度的才行；接着从显示内容的语音交互框的垂直高度的二分之一处开始，然后纵坐标每次增加文字的高度与距离之和，依次画出来每行文字；这样所有的文本就会从语音交互框垂直方向的中间开始，依次向下一行行的显示出来；另外，显示当前行时，文本进行高亮。
4.根据权利要求3所述智能电视语音交互界面文本内容完整显示的方法，其特征在于：
步骤三具体为：
每行文字能显示之后，垂直方向则利用滑动来解决；先获取到每次显示的行数来得到即将滚动一行的偏移量，自定义一个动画对象，然后获取决定每一行文本偏移量而定义的一个属性，这个属性取值是在原有值和目标行的偏移量之间，由动画控制其变化；接着设置动画播放的时间，设置变化速率为系统提供的线性变化，最后启动动画。
5.根据权利要求4所述智能电视语音交互界面文本内容完整显示的方法，其特征在于：
步骤四具体为：
显示文本和滑动处理属于同一个自定义View，处理的是文本的显示逻辑；接着开始当前行的显示和播报，获取步骤一得到的数据集合，用步骤二的逻辑将该行内容显示在语音的交互框内，同时回调语音播报接口对该行内容进行播报，播报完当前行的内容之后，延时500ms，同时启动步骤三中定义好的动画来将已经播报的这行内容往上移动，即将播报的内容向上移动到语音交互框垂直方向上的中间位置，这样每次播报的内容都是在同一个位置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811143132.4A CN109413479A (zh) | 2018-09-28 | 2018-09-28 | 智能电视语音交互界面文本内容完整显示的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811143132.4A CN109413479A (zh) | 2018-09-28 | 2018-09-28 | 智能电视语音交互界面文本内容完整显示的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109413479A true CN109413479A (zh) | 2019-03-01 |
Family
ID=65466509
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811143132.4A Pending CN109413479A (zh) | 2018-09-28 | 2018-09-28 | 智能电视语音交互界面文本内容完整显示的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109413479A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110825222A (zh) * | 2019-10-22 | 2020-02-21 | 清华大学 | 智能设备的文本呈现方法以及智能设备 |
| CN112908306A (zh) * | 2021-01-30 | 2021-06-04 | 云知声智能科技股份有限公司 | 优化上屏效果的语音识别方法、设备、终端与存储介质 |
| CN113066491A (zh) * | 2021-03-18 | 2021-07-02 | 海信视像科技股份有限公司 | 显示设备及语音交互方法 |
| CN113673200A (zh) * | 2020-05-13 | 2021-11-19 | 西安诺瓦星云科技股份有限公司 | 文本显示方法和文本显示装置 |
| WO2021238353A1 (zh) * | 2020-05-29 | 2021-12-02 | 海信视像科技股份有限公司 | 一种显示方法及显示设备 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106033678A (zh) * | 2015-03-18 | 2016-10-19 | 珠海金山办公软件有限公司 | 一种播放内容显示方法及装置 |
| US20170230709A1 (en) * | 2014-06-30 | 2017-08-10 | Apple Inc. | Intelligent automated assistant for tv user interactions |
| CN107066186A (zh) * | 2017-02-23 | 2017-08-18 | 青岛海信电器股份有限公司 | 一种基于Canvas的UI界面字符展示方法及显示设备 |
| CN107291335A (zh) * | 2017-06-30 | 2017-10-24 | 北京酷我科技有限公司 | 一种内容滚动呈现的方法 |
| CN107329759A (zh) * | 2017-06-30 | 2017-11-07 | 北京酷我科技有限公司 | 一种内容滚动显示的方法 |
| CN108109636A (zh) * | 2017-12-28 | 2018-06-01 | 百度在线网络技术（北京）有限公司 | 基于文本的语音播放方法、装置、计算机设备和存储介质 |
| CN108282688A (zh) * | 2018-01-12 | 2018-07-13 | 山东浪潮商用系统有限公司 | 一种语音交互方法、机顶盒及系统 |
| CN108366182A (zh) * | 2018-02-13 | 2018-08-03 | 京东方科技集团股份有限公司 | 文字语音同步播报的校准方法及装置、计算机存储介质 |
-
2018
- 2018-09-28 CN CN201811143132.4A patent/CN109413479A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170230709A1 (en) * | 2014-06-30 | 2017-08-10 | Apple Inc. | Intelligent automated assistant for tv user interactions |
| CN106033678A (zh) * | 2015-03-18 | 2016-10-19 | 珠海金山办公软件有限公司 | 一种播放内容显示方法及装置 |
| CN107066186A (zh) * | 2017-02-23 | 2017-08-18 | 青岛海信电器股份有限公司 | 一种基于Canvas的UI界面字符展示方法及显示设备 |
| CN107291335A (zh) * | 2017-06-30 | 2017-10-24 | 北京酷我科技有限公司 | 一种内容滚动呈现的方法 |
| CN107329759A (zh) * | 2017-06-30 | 2017-11-07 | 北京酷我科技有限公司 | 一种内容滚动显示的方法 |
| CN108109636A (zh) * | 2017-12-28 | 2018-06-01 | 百度在线网络技术（北京）有限公司 | 基于文本的语音播放方法、装置、计算机设备和存储介质 |
| CN108282688A (zh) * | 2018-01-12 | 2018-07-13 | 山东浪潮商用系统有限公司 | 一种语音交互方法、机顶盒及系统 |
| CN108366182A (zh) * | 2018-02-13 | 2018-08-03 | 京东方科技集团股份有限公司 | 文字语音同步播报的校准方法及装置、计算机存储介质 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110825222A (zh) * | 2019-10-22 | 2020-02-21 | 清华大学 | 智能设备的文本呈现方法以及智能设备 |
| CN113673200A (zh) * | 2020-05-13 | 2021-11-19 | 西安诺瓦星云科技股份有限公司 | 文本显示方法和文本显示装置 |
| WO2021238353A1 (zh) * | 2020-05-29 | 2021-12-02 | 海信视像科技股份有限公司 | 一种显示方法及显示设备 |
| CN112908306A (zh) * | 2021-01-30 | 2021-06-04 | 云知声智能科技股份有限公司 | 优化上屏效果的语音识别方法、设备、终端与存储介质 |
| CN113066491A (zh) * | 2021-03-18 | 2021-07-02 | 海信视像科技股份有限公司 | 显示设备及语音交互方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109413479A (zh) | 智能电视语音交互界面文本内容完整显示的方法 | |
| CN110012237B (zh) | 基于交互引导及云端增强渲染的视频生成方法及系统 | |
| CN106941619A (zh) | 基于人工智能的节目提醒方法、装置以及系统 | |
| CN108093526A (zh) | Led灯的控制方法、装置和可读存储介质 | |
| US20220068258A1 (en) | Audio-based selection of edit points for video clips | |
| CN113035199B (zh) | 音频处理方法、装置、设备及可读存储介质 | |
| EP3975109A1 (en) | Image processing method and apparatus, computer device and storage medium | |
| CN103150294A (zh) | 基于语音识别结果的修正方法和系统 | |
| CN109255115A (zh) | 一种文本标点调整方法及装置 | |
| CN111742311A (zh) | 智能助理方法 | |
| CN110414835A (zh) | 一种电视剧剧本量化评估系统及方法 | |
| CN113705300A (zh) | 音转文训练语料的获取方法、装置、设备以及存储介质 | |
| CN109524027A (zh) | 语音处理方法、装置、计算机设备及存储介质 | |
| CN114466222B (zh) | 一种视频合成方法、装置、电子设备及存储介质 | |
| CN107291799A (zh) | 一种网络主播贡献值排名展示方法及系统 | |
| CN116993873A (zh) | 一种数字人动作编排方法及装置 | |
| CN114501159B (zh) | 一种字幕编辑方法、装置、电子设备及存储介质 | |
| US11418821B1 (en) | Classifying segments of media content using closed captioning | |
| CN116524906A (zh) | 用于语音识别的训练数据生成方法、系统和电子设备 | |
| CN109815463A (zh) | 文本编辑选取控制方法、装置、计算机设备及存储介质 | |
| CN109493665A (zh) | 基于语音识别的快速答题方法及其系统 | |
| CN115278300A (zh) | 视频处理方法、装置、电子设备、存储介质和程序产品 | |
| CN111695670A (zh) | 神经网络模型训练方法及装置 | |
| CN115273828A (zh) | 语音意图识别模型的训练方法、装置及电子设备 | |
| CN109218843B (zh) | 基于电视设备的个性化智能语音提示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190301 |
|
| RJ01 | Rejection of invention patent application after publication |