JP2010003025A - Terminal device and program - Google Patents
Terminal device and program Download PDFInfo
- Publication number
- JP2010003025A JP2010003025A JP2008159874A JP2008159874A JP2010003025A JP 2010003025 A JP2010003025 A JP 2010003025A JP 2008159874 A JP2008159874 A JP 2008159874A JP 2008159874 A JP2008159874 A JP 2008159874A JP 2010003025 A JP2010003025 A JP 2010003025A
- Authority
- JP
- Japan
- Prior art keywords
- search
- character string
- terminal device
- data
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
この発明は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置及びプログラムに関する。 The present invention relates to a terminal device and a program having a search function for performing a data search based on a search character string input in a search input area.
一般に、携帯電話装置、パーソナルコンピュータなどの端末装置において、インターネット接続時には表示画面上に検索窓と呼ばれる検索用入力域が表示されており、この検索窓内に任意の検索文字列がユーザ操作によって入力されると、Webブラウザを起動して当該検索文字列に該当するWebページの検索を要求するようにしている。
ところで、検索窓内に検索文字列を入力する場合にその入力操作を軽減するための技術として、従来では、Webページ内の任意の文字列が選択されると、この文字列を検索窓に入力するようにした技術が開示されている(特許文献1参照)。
By the way, as a technique for reducing the input operation when inputting a search character string in the search window, conventionally, when an arbitrary character string in a Web page is selected, this character string is input into the search window. The technique made to do is disclosed (refer patent document 1).
しかしながら、上述した先行技術にあっては、検索文字列を入力する手間を軽減することができるとはいえ、Webページ内から任意の文字列を選択する際に、ユーザ操作によって所望する文字列を範囲指定する必要があった。このような範囲指定は、ユーザに負担をかけるほか、その範囲指定を間違えると、間違った検索が行われてしまうことになる。また、Webページ内から所望する文字列を探し出す際に、どのような文字列を選択するかを迷うことも多く、結果的に検索までに時間を要してしまうことになる。 However, in the above-described prior art, although it is possible to reduce the labor of inputting a search character string, a desired character string is selected by a user operation when selecting an arbitrary character string from a Web page. It was necessary to specify a range. Such range designation puts a burden on the user, and if the range designation is wrong, an erroneous search is performed. In addition, when searching for a desired character string from the Web page, it is often confusing what character string to select, and as a result, it takes time to search.
この発明の課題は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う際に、その入力から検索開始までを効率良く行うことができるようにすることである。 An object of the present invention is to efficiently perform from the input to the start of the search when performing a data search based on the search character string input in the search input area.
上述した課題を解決するために請求項1記載の発明は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置であって、当該端末装置で出力中のコンテンツに含まれている文字データを解析して前記検索文字列の候補を抽出する抽出手段と、この抽出手段によって抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力させる入力制御手段と、を具備したことを特徴とする。
In order to solve the above-described problem, the invention described in
請求項1に従属する発明として、デジタルテレビ放送を受信するテレビ放送受信手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データである、ことを特徴とする請求項2記載の発明であってもよい。
The invention subordinate to claim 1 further comprises a television broadcast receiving means for receiving a digital television broadcast, and the character data included in the content being output is added to the television broadcast received by the television broadcast receiving means. The invention according to
請求項1に従属する発明として、デジタルテレビ放送を受信するテレビ放送受信手段と、音声から文字データを認識する音声認識手段と、を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データである、ことを特徴とする請求項3記載の発明であってもよい。
The invention dependent on
請求項3に従属する発明として、前記抽出手段は、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データと前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データとを解析して前記検索文字列の候補を抽出する、ようにしたことを特徴とする請求項4記載の発明であってもよい。
According to a third aspect of the present invention, the extracting means recognizes the voice from character data added to the television broadcast received by the television broadcast receiving means and audio of the television broadcast received by the television broadcast receiving means. The invention according to
請求項1に従属する発明として、音声通話を行う通話手段と、音声から文字データを認識する音声認識手段と、を更に備え、前記出力中のコンテンツに含まれている文字データは、前記通話手段によって受信された通話音声から前記音声認識手段によって認識された文字データである、ことを特徴とする請求項5記載の発明であってもよい。
According to a first aspect of the present invention, the apparatus further comprises a calling means for performing a voice call and a voice recognition means for recognizing character data from the voice. The character data included in the content being output is the calling means. 6. The invention according to
請求項1に従属する発明として、電子メールを送受信する電子メール手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記電子メール手段によって送信あるいは受信される電子メールに含まれている文字データである、ことを特徴とする請求項6記載の発明であってもよい。
As an invention dependent on
請求項1に従属する発明として、ネットワーク上に公開されている情報ページをアクセスするアクセス手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記アクセス手段によってアクセスした情報ページに含まれている文字データである、ことを特徴とする請求項7記載の発明であってもよい。
As an invention dependent on
また、上述した課題を解決するために請求項8記載の発明は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置であって、当該端末装置で出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を前記検索文字列の候補として抽出する抽出手段と、この抽出手段によって抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力させる入力制御手段と、を具備したことを特徴とする。
In order to solve the above-mentioned problem, the invention described in
請求項8に従属する発明として、音楽データあるいは動画データを再生する再生手段を更に備え、前記再生手段によって再生される音楽データあるいは動画データに付加されている文字データの中から当該音楽あるいは動画に関する文字列を前記検索文字列の候補として抽出する、ようにしたことを特徴とする請求項9記載の発明であってもよい。 According to an eighth aspect of the present invention, there is further provided reproducing means for reproducing music data or moving picture data, and the present invention relates to the music or moving picture among the character data added to the music data or moving picture data reproduced by the reproducing means. The invention according to claim 9, wherein a character string is extracted as a candidate for the search character string.
請求項9に従属する発明として、ネットワーク上に公開されている特定情報ページをアクセスするためのアクセス情報を記憶する記憶手段を更に備え、前記再生手段によって音楽データあるいは動画データを再生している再生中において前記検索用入力域に入力されている検索文字列に基づいてデータ検索を行う場合に、前記アクセス情報を読み出して前記特定情報ページに対する検索要求を行う、ようにしたことを特徴とする請求項10記載の発明であってもよい。 According to a ninth aspect of the present invention, there is further provided a storage means for storing access information for accessing a specific information page published on the network, wherein the reproduction means reproduces music data or moving picture data. The access information is read out and a search request for the specific information page is made when performing a data search based on a search character string input in the search input area. Item 10 may be the invention.
請求項1、8に従属する発明として、前記抽出手段によって抽出された各検索文字列候補の優先順位を決定する順位決定手段を更に備え、前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を前記検索用入力域に入力させる、ようにしたことを特徴とする請求項11記載の発明であってもよい。
As an invention dependent on
請求項1、8に従属する発明として、前記抽出手段によって抽出された検索文字列候補を一覧表示する一覧表示手段を更に備え、前記入力制御手段は、前記一覧表示手段によって一覧表示されている各検索文字列候補の中から任意に選択された候補を前記検索用入力域に入力させる、ようにしたことを特徴とする請求項12記載の発明であってもよい。
The invention dependent on
請求項12に従属する発明として、前記抽出手段によって抽出された各検索文字列候補を前記一覧表示させる場合の優先順位を決定する順位決定手段を更に備え、前記一覧表示手段は、前記順位決定手段によって決定された優先順位を表示順位としてその順位にしたがった並び順となるように各検索文字列候補を一覧表示し、前記入力制御手段は、前記一覧表示の中から任意に選択された検索文字列候補を前記検索用入力域に入力させる、ようにしたことを特徴とする請求項13記載の発明であってもよい。 According to a twelfth aspect of the present invention, the apparatus further comprises rank determining means for determining a priority when the search character string candidates extracted by the extracting means are displayed in the list, wherein the list display means includes the rank determining means. Each search character string candidate is displayed in a list such that the priority order determined by the display order is the display order, and the input control means is a search character arbitrarily selected from the list display. The invention according to claim 13, wherein column candidates are input to the search input area.
請求項13に従属する発明として、前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を前記検索用入力域に入力させる、ようにしたことを特徴とする請求項14記載の発明であってもよい。 According to a thirteenth aspect of the present invention, the input control means causes a candidate of the highest priority among the priorities determined by the order determination means to be input to the search input area. The invention described in claim 14 may be provided.
請求項11、13に従属する発明として、前記順位決定手段は、前記抽出手段によって抽出された各検索データ候補の出現頻度に基づいて前記優先順位を決定する、請求項15記載の発明であってもよい。
The invention according to
請求項11、13に従属する発明として、前記順位決定手段は、前記抽出手段によって抽出された各検索データ候補の出現時刻に基づいて前記優先順位を決定する、ようにしたことを特徴とする請求項16記載の発明であってもよい。
As an invention dependent on
請求項12に従属する発明として、前記一覧表示手段は、前記順位決定手段によって決定された優先順位に基づいてその下位の候補を一覧表示から一定条件下で消去する、ようにしたことを特徴とする請求項17記載の発明であってもよい。 The invention according to claim 12 is characterized in that the list display means deletes a lower candidate from the list display under a predetermined condition based on the priority order determined by the order determination means. The invention according to claim 17 is also possible.
請求項12に従属する発明として、前記データ検索用入力域に入力された検索文字列が検索履歴として記憶されている状態において、前記一覧表示手段は、前記抽出手段によって抽出された検索文字列候補を前記検索履歴と共に一覧表示する、ようにしたことを特徴とする請求項18記載の発明であってもよい。 According to a twelfth aspect of the present invention, in the state where the search character string input to the data search input area is stored as a search history, the list display means is a search character string candidate extracted by the extraction means. The invention according to claim 18 may be displayed together with the search history.
請求項1、8に従属する発明として、前記検索用入力域に入力された検索文字列に基づいてデータ検索を行う場合に、ネットワーク上に公開されている情報ページへの検索を指示する、ようにしたことを特徴とする請求項19記載の発明であってもよい。
As an invention dependent on
また、上述した課題を解決するために請求項20記載の発明は、コンピュータに対して、検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、出力中のコンテンツに含まれている文字データを解析して前記検索文字列の候補を抽出するステップと、前記抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力するステップと、を実現させるためのプログラムを特徴とする。 In order to solve the above-described problem, the invention described in claim 20 includes a step of searching a computer based on a search character string input to a search input area, and a content being output. Analyzing the character data contained therein and extracting the search character string candidates; and inputting candidates selected from the extracted search character string candidates into the search input area. It features a program to be realized.
また、上述した課題を解決するために請求項21記載の発明は、コンピュータに対して、検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を前記検索文字列の候補として抽出するステップと、前記抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力するステップと、を実現させるためのプログラムを特徴とする。 Further, in order to solve the above-described problem, the invention according to claim 21 includes a step of performing a data search on a computer based on a search character string input to a search input area, and a content being output. Extracting a character string related to the content from the added character data as a candidate for the search character string, and inputting a candidate selected from the extracted search character string candidates to the search input area And a step for realizing the program.
この発明によれば、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。 According to this invention, when performing a data search based on a search character string input to the search input area, it is possible to efficiently perform from the input to the start of the search without imposing a burden on the user. It will be very useful for character string input support.
以下、図1〜図12を参照して本発明の実施形態を説明する。
この実施形態は、端末装置として携帯電話装置に適用した場合を例示したもので、図1は、この携帯電話装置の基本的な構成要素を示したブロック図である。
この携帯電話装置は、例えば、2つの筐体(操作部筐体、表示部筐体)が開閉可能に取り付けられた折り畳み自在なもので、音声通話機能、電子メール機能、インターネット接続機能(Webアクセス機能)などのほか、テレビ放送を受信するテレビ放送受信機能、音楽/動画コンテンツなどを再生するコンテンツ再生機能、検索用入力域(検索窓)に入力されている検索文字列に基づいてデータ検索を行うデータ検索機能など、各種の機能が備えられている。この携帯電話装置は、図示省略したが、無線通信網(公衆移動体通信網)を介してインターネットに接続されており、この無線通信網やインターネット側のメールサーバとの間で電子メールの送受信が可能なほか、インターネットを介して任意のWebページをアクセス可能となっている。
Hereinafter, embodiments of the present invention will be described with reference to FIGS.
This embodiment exemplifies a case where the present invention is applied to a mobile phone device as a terminal device, and FIG. 1 is a block diagram showing basic components of the mobile phone device.
This cellular phone device is, for example, a foldable device in which two casings (an operation unit casing and a display unit casing) are attached so as to be openable and closable. A voice call function, an e-mail function, an Internet connection function (Web access) Function), TV broadcast reception function for receiving TV broadcasts, content playback function for playing music / video content, etc., and data search based on the search string entered in the search input area (search window) Various functions such as a data search function to be performed are provided. Although not shown in the figure, this cellular phone device is connected to the Internet via a wireless communication network (public mobile communication network), and can send and receive electronic mail to and from this wireless communication network and a mail server on the Internet side. In addition, it is possible to access any Web page via the Internet.
制御部1は、二次電池を備えた電源部2からの電力供給によって動作し、記憶部3内の各種のプログラムに応じてこの携帯電話装置の全体動作を制御するもので、この制御部1にはCPU(中央演算処理装置)やメモリなどが設けられている。記憶部3は、内部メモリで、プログラム領域とデータ領域とを有し、このプログラム領域には、後述する図4〜図8に示す動作手順に応じて本実施形態を実現するためのプログラムが格納されている。なお、記憶部3としては、例えば、SDカード、ICカードなど、着脱自在な可搬型メモリ(記録メディア)を含む構成であってもよい。
The
表示部4は、液晶、有機ELなどを使用した高精細な表示装置で、数値、文字、待受画像、テレビ映像などを表示可能なもので、その待受画面のピクトエリアには、時刻表示、受信感度などが表示される。操作部5は、ダイヤル入力、文字入力、コマンド入力などを行うもので、制御部1は、操作部5からの操作信号に応じた処理として、例えば、発信処理など、各種の処理を実行する。通信部6は、無線部、ベースバンド部、多重分離部などを備え、例えば、通話機能、電子メール機能、インターネット接続機能の動作時に最寄りの基地局との間でデータの送受信を行うもので、通話機能の動作時にはベースバンド部の受信側から信号を取り込んで受信ベースバンド信号に復調したのち、電話部7を介して通話用スピーカSPから音声出力させ、また、通話用マイクMCからの入力音声データを電話部7から取り込み、送信ベースバンド信号に符号化したのち、ベースバンド部の送信側に与えてアンテナから発信出力させる。
The
テレビ放送受信部8は、携帯電話などの携帯受信機向けの地上波デジタルテレビ放送を受信するもので、テレビ映像及び音声情報以外にも電子番組表(EPG)なども含めて受信可能である。テレビ放送受信部8は、TVアンテナに接続されていて放送信号を抽出する受信部(アナログ回路部)と、受信した放送信号をOFDM(直交周波数分割多重)復調したり、多重化されている放送信号から映像データ、音声データ、文字データ(例えば、字幕データなど)に分離して復号化したり、圧縮データの解凍などを行うデジタル回路部を有している。
The
コンテンツ再生部9は、音楽コンテンツ、映像コンテンツなどを再生するもので、再生開始操作/終了操作に応じて再生動作が制御される。なお、音楽コンテンツ、映像コンテンツは、テレビ放送受信部8から受信した放送コンテンツのほか、インターネットを介してダウンロードしたり、外部メモリなどを介して取得したりしたものである。音声認識部10は、音声データを文字データとして認識するもので、通話時の音声データ、テレビ放送の音声は、この音声認識部10によって認識されて文字データに変換される。
The content reproduction unit 9 reproduces music content, video content, and the like, and the reproduction operation is controlled according to the reproduction start operation / end operation. Note that the music content and the video content are not only broadcast content received from the TV
図2(A)は、テレビ放送受信画面を示した図である。
このテレビ放送受信画面の上側には検索文字列を入力する横帯状の検索用入力域(検索窓)SWが表示されている。この検索窓SWは、インターネット上のWebページ(情報ページ)を検索する際の検索文字列が入力されるもので、テレビ放送受信画面の上側に表示されている。この検索窓SWの近傍に設けられた検索ボタンSBは、検索窓SWの内容に基づいてインターネット上の該当するWebページを検索すべきことを指示するボタンである。図2(B)は、検索窓SWを使用可能とするためにユーザ操作で当該検索窓SWを選択した際に、検索文字列リストRTの内容がプルダウンメニューとして表示された状態を示した図である。
FIG. 2A shows a television broadcast reception screen.
On the upper side of the television broadcast reception screen, a horizontal band-like search input area (search window) SW for inputting a search character string is displayed. The search window SW is used to input a search character string when searching for a Web page (information page) on the Internet, and is displayed on the upper side of the television broadcast reception screen. The search button SB provided in the vicinity of the search window SW is a button for instructing that a corresponding Web page on the Internet should be searched based on the contents of the search window SW. FIG. 2B is a diagram showing a state in which the contents of the search character string list RT are displayed as a pull-down menu when the search window SW is selected by a user operation so that the search window SW can be used. is there.
この検索文字列リストRTは、実行中のアプリケーション(この場合、テレビ放送受信機能)に対応して作成されてプルダウンメニューとして表示されたもので、ユーザ操作で検索窓SWに直接的に入力された検索文字列が検索履歴として表示されるほか、出力中コンテンツとしてのテレビ放送(例えば、字幕データ、音声データ)を解析することによって抽出された文字列が検索文字列候補として表示される。なお、このリストRT内の各検索文字列候補は、所定の並び順にしたがって表示される。 This search character string list RT is created in correspondence with a running application (in this case, a television broadcast reception function) and displayed as a pull-down menu, and is directly input to the search window SW by a user operation. In addition to displaying the search character string as a search history, a character string extracted by analyzing a television broadcast (for example, caption data, audio data) as the content being output is displayed as a search character string candidate. Each search character string candidate in the list RT is displayed according to a predetermined arrangement order.
この検索文字列リストRTの中からユーザ操作によって任意の検索文字列候補が選択指定されると、選択された検索文字列候補は検索窓SWに入力されて表示される。図2(C)は、検索ボタンSBの操作に応答してインターネット上の該当するWebページを検索表示させた場合を例示した図である。なお、図示の例では、検索文字列を「ドリブル」とした場合で、テレビ放送受信画面に代わり、「ドリブル」に関するWebページ画面が切り替え表示された状態を示している。 When an arbitrary search character string candidate is selected and designated from the search character string list RT by a user operation, the selected search character string candidate is input to the search window SW and displayed. FIG. 2C is a diagram illustrating a case where a corresponding Web page on the Internet is searched and displayed in response to an operation of the search button SB. In the illustrated example, the search character string is “Dribble”, and the Web page screen related to “Dribble” is switched and displayed instead of the television broadcast reception screen.
図3は、テレビ放送(字幕データ、音声データ)から検索文字列候補を抽出し、検索文字列リストRTに検索文字列候補を表示するまでの過程を説明するための図である。
制御部1は、テレビ放送受信部8を介してテレビ放送を受信すると、テレビ放送の字幕データ(図3(1A)参照)に対して形態素解析を行って各要素に区分したのち(図3(1B)参照)、予め決められている文字列抽出条件(名詞、形容詞、形容動詞)を満たす文字列を検索文字列候補として抽出する(図3(1C)参照)。
FIG. 3 is a diagram for explaining a process from extracting a search character string candidate from a television broadcast (caption data, audio data) to displaying the search character string candidate in the search character string list RT.
When the
また、テレビ放送の音声データに対して音声認識部10で文字データに変換すると共に、この音声認識文字データ(図3(2A)参照)に対して、上述と同様に形態素解析を行って各要素に区分したのち(図3(2B)参照)、予め決められている文字列抽出条件を満たす文字列を検索文字列候補として抽出する(図3(2C)参照)。そして、字幕データを元に抽出した検索文字列候補と音声データを元に抽出した検索文字列候補とをマージ(統合)したのち、所定範囲内(例えば、時間あるいはデータ量)の出現頻度によって優先順位(表示順位)を決定し、その優先順位の並び順にしたがって各検索文字列候補を検索文字列リストRTに追加する。そして、検索文字列リストRTの内容をプルダウンメニューとして表示させる(図3(D)参照)。なお、出現頻度によって優先順位を決定する場合、例えば、1分間、1画面分、1ページ分などの所定範囲の出現頻度によって優先順位を決定するようにしている(以下、同様)。 In addition, the voice recognition unit 10 converts the voice data of the television broadcast into character data, and the voice recognition character data (see FIG. 3 (2A)) is subjected to morphological analysis in the same manner as described above, and each element. Then, a character string satisfying a predetermined character string extraction condition is extracted as a search character string candidate (see FIG. 3 (2C)). The search character string candidate extracted based on the caption data and the search character string candidate extracted based on the speech data are merged (integrated), and then given priority according to the appearance frequency within a predetermined range (for example, time or data amount). The order (display order) is determined, and each search character string candidate is added to the search character string list RT according to the order of the priorities. Then, the contents of the search character string list RT are displayed as a pull-down menu (see FIG. 3D). When determining the priority order based on the appearance frequency, for example, the priority order is determined based on the appearance frequency within a predetermined range such as one minute, one screen, and one page (hereinafter the same).
次に、この実施形態における携帯電話装置の動作概念を図4〜図8に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、伝送媒体を介して外部供給されたプログラム/データを利用してこの実施形態特有の動作を実行することもできる。 Next, the operation concept of the mobile phone device in this embodiment will be described with reference to the flowcharts shown in FIGS. Here, each function described in these flowcharts is stored in the form of a readable program code, and operations according to the program code are sequentially executed. In addition, the operation according to the above-described program code transmitted via the transmission medium can be sequentially executed. In other words, operations specific to this embodiment can be executed by using programs / data supplied externally via a transmission medium.
図4〜図6は、電源投入に伴って実行開始される携帯電話装置の全体動作を示したフローチャートである。
先ず、制御部1は、所定のメモリをクリアするなどの初期設定を行ったのち(図4のステップA1)、所定の待受画像を読み出して表示させながら待ち受け状態となる(ステップA2)。この待ち受け状態において通信部6から電話の着信有無をチェックし(ステップA3)、電話着信を検出したときには、回線接続させるオフフック操作に応答して(ステップA4でYES)、通話可能状態とする通話処理を開始する(ステップA5)。ここで、通話相手の音声データを音声認識部10に与えて不特定話者対応の音声認識を行わせ、文字データに変換させる(ステップA6)。この場合、通話開始からその相手の音声データをリアルタイムに取得しながら文字データに変換したのち、この文字データに基づいて検索文字列抽出処理を行う(ステップA7)。
4 to 6 are flowcharts showing the entire operation of the mobile phone device that is started to be executed when the power is turned on.
First, after initial setting such as clearing a predetermined memory (step A1 in FIG. 4), the
図7は、検索文字列抽出処理(図4のステップA7など)を詳述するためのフローチャートである。
先ず、制御部1は、文字データを形態要素解析し(ステップB1)、検索文字列候補を抽出する(ステップB2)。図9は、音声通話を文字認識した文字データから検索文字列候補を抽出して検索文字列リストRTを表示するまでの過程を説明するための図である。
制御部1は、音声通話を文字認識した文字データに対して(図9(A)参照)、形態素解析を行って各要素に区分したのち(図9(B)参照)、予め決められている文字列抽出条件(名詞、形容詞、形容動詞)を満たす文字列を検索文字列候補として抽出する(図9(C)参照)。
FIG. 7 is a flowchart for explaining the search character string extraction processing (step A7 in FIG. 4 and the like) in detail.
First, the
The
そして、抽出した検索文字列候補の出現頻度によって優先順位(表示順位)を決定し(図9(D)参照)、この優先順位にしたがって並び替えた各検索文字列を検索文字列リストRTに追加する(ステップB3)。これによって現在実行中のアプリケーション(音声通話機能)に対応する検索文字列リストRTが生成される。そして、検索文字列リストRT内の最上位(最優先)の文字列候補を検索窓SWに入力して表示させる(ステップB4)。図10(A)は、音声通話中での表示画面を例示したもので、この表示画面の上側に表示されている検索窓SWには、今回の音声通話によって決定された最優先の文字列候補として“夏休み”が入力される。 Then, the priority (display order) is determined based on the appearance frequency of the extracted search character string candidates (see FIG. 9D), and each search character string rearranged according to this priority order is added to the search character string list RT. (Step B3). As a result, a search character string list RT corresponding to the application (voice call function) currently being executed is generated. Then, the uppermost (most prioritized) character string candidate in the search character string list RT is input and displayed in the search window SW (step B4). FIG. 10A illustrates a display screen during a voice call. In the search window SW displayed on the upper side of the display screen, the highest priority character string candidate determined by the current voice call is displayed. "Summer vacation" is entered as
このような検索文字列抽出処理(図4のステップA7)が終わると、検索文字列リストRTの内容を整理するために不要な検索文字列候補を当該リストRTから削除する処理を行う(図4のステップA8)。この削除処理は、検索文字列抽出処理(ステップA7)を行ってから所定時間が経過していることを条件に実行されるもので、下位の文字列候補(例えば、最下位候補)を検索文字列リストRTから削除する。なお、所定時間の経過後に最下位の文字列候補を削除する場合に限らず、例えば、検索文字列リストRTに記憶されている候補数に応じて削除処理の実行有無を決定したり、削除する候補数を決定したりするようにしてもよい。すなわち、候補数が少なければ、削除処理を一時保留し、候補数が多ければ、最下位から数えて3番目までの文字列候補などのように複数の候補を一度に削除するようにしてもよい。 When such a search character string extraction process (step A7 in FIG. 4) is completed, a process of deleting unnecessary search character string candidates from the list RT for organizing the contents of the search character string list RT is performed (FIG. 4). Step A8). This deletion process is executed under the condition that a predetermined time has elapsed since the search character string extraction process (step A7) is performed. The lower character string candidate (for example, the lowest candidate) is selected as the search character. Delete from the column list RT. Note that the lowermost character string candidate is not deleted after the elapse of a predetermined time. For example, whether or not the deletion process is performed is determined or deleted depending on the number of candidates stored in the search character string list RT. The number of candidates may be determined. That is, if the number of candidates is small, the deletion process is temporarily suspended, and if the number of candidates is large, a plurality of candidates such as the third character string candidates counted from the lowest may be deleted at once. .
そして、音声通話画面内の検索窓SWを選択してそれをアクティブ状態とする選択操作が行われたかを調べ(ステップA9でYES)、その選択操作が行われなければ、回線を遮断させるオンフック操作が行われるまで(ステップA11)、上述の音声認識処理(ステップA6)、検索文字列抽出処理(ステップA7)を行いながら上述の動作を繰り返す。いま、通話中に検索窓SWを選択する操作が行われた場合には(ステップA9でYES)、この検索窓SWの内容に基づいてインターネットをアクセスし、該当するWebページを受信して表示する検索処理に移る(ステップA10)。 Then, the search window SW in the voice call screen is selected and it is checked whether or not a selection operation for making it active has been performed (YES in step A9). If the selection operation is not performed, an on-hook operation for blocking the line is performed. (Step A11), the above-described operation is repeated while performing the above-described speech recognition processing (step A6) and search character string extraction processing (step A7). If an operation for selecting the search window SW is performed during a call (YES in step A9), the Internet is accessed based on the contents of the search window SW, and the corresponding Web page is received and displayed. The process proceeds to search processing (step A10).
図8は、検索処理(図4のステップA10など)を詳述するためのフローチャートである。
先ず、制御部1は、実行中のアプリケーション用の検索文字列リストRTを表示させる(ステップC1)。図10(B)は、音声通話画面の検索窓SWから検索文字列リストRTがプルダウン表示された状態を示した図で、図9(D)に示した内容が検索文字列リストRTとして表示される。この検索文字列リストRTの中からユーザの所望する検索文字列候補を選択する操作が行われると(ステップC2でYES)、この選択候補を検索窓SWに入力して表示させるが(ステップC3)、検索文字列リストRTの中から候補を選択せずに、任意の検索文字列を直接入力する操作が行われたときには(ステップC4でYES)、直接入力された文字列を検索窓SWに入力して表示させる(ステップC5)。
FIG. 8 is a flowchart for explaining the search process (step A10 in FIG. 4 and the like) in detail.
First, the
この状態において検索窓SWに付属されている検索ボタンSBが操作されると(ステップC6でYES)、Webブラウザを起動したのち(ステップC7)、音楽コンテンツあるいは動画コンテンツの再生中かを調べるが(ステップC8)、いま、音声通話中であるので(ステップC8でNO)、インターネットに接続し、検索窓SW内の検索文字列に該当するWebページの検索を要求し(ステップC12)、それに応答して受信したWebページを表示させる(ステップC11)。 In this state, when the search button SB attached to the search window SW is operated (YES in Step C6), after starting the Web browser (Step C7), it is checked whether music content or moving image content is being played back (Step C7). Step C8) Since a voice call is currently being made (NO in Step C8), it connects to the Internet, requests a search for a Web page corresponding to the search character string in the search window SW (Step C12), and responds to it. The received web page is displayed (step C11).
図10(C)は、検索ボタンSBの操作に応答してインターネット上の該当するWebページを検索して表示させた場合を例示した図である。なお、図示の例では、検索文字列を“旅行”とした場合で、通話中画面に代わり、“旅行”に関するWebページ画面が切り替え表示された状態である。このような検索処理が終わると(図4のステップA10)、上述のステップA6に戻り、以下、同様の動作を繰り返す。また、通話中にオンフック操作が行われたときには(ステップA11でYES)、回線を遮断させると共に(ステップA12)、今回の通話で作成した検索文字列リストRTをクリアしたのち(ステップA13)、待ち受け状態に戻る(ステップA2)。 FIG. 10C is a diagram illustrating a case where a corresponding Web page on the Internet is searched and displayed in response to an operation of the search button SB. In the illustrated example, when the search character string is “travel”, the Web page screen related to “travel” is switched and displayed instead of the call screen. When such a search process is completed (step A10 in FIG. 4), the process returns to the above-described step A6, and the same operation is repeated thereafter. When an on-hook operation is performed during a call (YES in step A11), the line is blocked (step A12), and the search character string list RT created in the current call is cleared (step A13), and then the standby is performed. Return to the state (step A2).
待ち受け状態においてテレビ放送受信開始を指示する操作が行われた場合には(図5のステップA14でYES)、テレビ放送受信部8を起動させてテレビ放送の受信を開始させる(ステップA15)。ここで、テレビ放送から字幕データを取得したときには今回取得の字幕データと前回取得の字幕データとを比較して字幕データの更新有無を調べ(ステップA16)、前回の字幕データのままで更新されていなければ、ステップA19に移るが、字幕データが更新されたときには、図7の検索文字列抽出処理を実行する(ステップA17)。いま、テレビ放送の受信開始時に字幕データを取得したときには、字幕データが更新されたものと判断されるので、検索文字列抽出処理を行う。これによって現在実行中のアプリケーション(テレビ放送受信機能)に対応する検索文字列リストRTを生成すると共に、この検索文字列リストRT内の最優先文字列候補を検索窓SWに入力させる。例えば、図2(A)に示すように検索窓SWには今回のテレビ放送受信によって決定された最優先候補として“パス”が入力される。
When an operation for instructing the start of television broadcast reception is performed in the standby state (YES in step A14 in FIG. 5), the
そして、不要な検索文字列候補を検索文字列リストRTから削除する削除処理を実行したのち(ステップA18)、今回取得の音声データと前回取得の音声データとを比較して音声データの更新有無を調べ(ステップA19)、音声データが更新されていなければ、ステップA23に移る。いま、テレビ放送の受信開始時に音声データを取得したときには、音声データが更新されたものと判断されるので、ステップA20に移り、音声データを音声認識部10に与えて不特定話者対応の音声認識を行わせ、文字データに変換させる。この場合、音声データをリアルタイムに取得しながら文字データに変換したのち、図7の検索文字列抽出処理を実行するが(ステップA21)、字幕データから抽出した検索文字列候補と音声データから抽出した検索文字列候補とをマージし、その結果に基づいた出現頻度によって優先順位を決定するようにしている。 Then, after executing deletion processing for deleting unnecessary search character string candidates from the search character string list RT (step A18), the current acquired voice data is compared with the previously acquired voice data to determine whether or not the voice data is updated. In step A19, if the audio data has not been updated, the process proceeds to step A23. Now, when the voice data is acquired at the start of the reception of the television broadcast, it is determined that the voice data has been updated. Therefore, the process proceeds to step A20, where the voice data is given to the voice recognition unit 10 and the voice corresponding to the unspecified speaker. Recognize and convert to character data. In this case, the voice data is converted into character data while being acquired in real time, and then the search character string extraction process of FIG. 7 is executed (step A21), but extracted from the search character string candidates extracted from the caption data and the voice data. The search character string candidates are merged, and the priority order is determined based on the appearance frequency based on the result.
そして、不要な検索文字列候補を検索文字列リストRTから削除する削除処理を実行したのち(ステップA22)、検索窓SWの選択操作に応答して(ステップA23でYES)、図8の検索処理を実行する(ステップA24)。これによって図2(B)に示すようにテレビ放送受信機能に対応する検索文字列リストRTがプルダウンメニューとして表示されるほか、図2(C)に示すように検索ボタンSBの操作に応答してインターネット上の該当するWebページが検索されて表示される。その後、上述のステップA16に戻り、以下、上述の動作を繰り返す。 Then, after executing deletion processing for deleting unnecessary search character string candidates from the search character string list RT (step A22), in response to the selection operation of the search window SW (YES in step A23), the search processing of FIG. Is executed (step A24). As a result, the search character string list RT corresponding to the TV broadcast reception function is displayed as a pull-down menu as shown in FIG. 2B, and in response to the operation of the search button SB as shown in FIG. The corresponding Web page on the Internet is searched and displayed. Thereafter, the process returns to the above-described step A16, and the above-described operation is repeated thereafter.
また、検索窓SWの選択操作が行われなければ(ステップA23でNO)、テレビ放送の受信終了を指示する終了操作が行われたかを調べ(ステップA25)、その終了操作が行われるまで上述のステップA16に戻り、以下、上述の動作を繰り返す。いま、終了操作が行われると(ステップA25でYES)、テレビ放送受信部8を停止させて放送受信を終了させると共に(ステップA26)、今回のテレビ放送受信で作成した検索文字列リストRTをクリアしたのち(ステップA27)、待ち受け状態に戻る(図4のステップA2)。
If the search window SW selection operation is not performed (NO in step A23), it is checked whether an end operation for instructing the end of reception of the television broadcast is performed (step A25), and the above-described operation is performed until the end operation is performed. Returning to step A16, the above-described operation is repeated. If the end operation is performed (YES in step A25), the television
また、待ち受け状態において音楽/動画再生開始を指示する操作が行われた場合には(図5のステップA28でYES)、再生部9を起動させて音楽/動画コンテンツの再生を開始させる(ステップA29)。そして、音楽/動画コンテンツに付加されている文字データの中から当該コンテンツに関する文字列を検索文字列の候補として抽出する(ステップA30)。例えば、コンテンツのヘッダ部分などに含まれている“アーティスト名”、“曲名”、“タイトル”、“出演者”、“製作者”、“ジャンル”などの文字列を検索文字列の候補として抽出したのち、この検索文字列候補を検索文字列リストRTに追加する(ステップA31)。これによって現在実行中のアプリケーション(コンテンツ再生機能)に対応する検索文字列リストRTが生成される。 If an operation for instructing the start of music / video playback is performed in the standby state (YES in step A28 in FIG. 5), the playback unit 9 is activated to start playback of music / video content (step A29). ). Then, a character string related to the content is extracted from the character data added to the music / video content as a search character string candidate (step A30). For example, character strings such as “artist name”, “song name”, “title”, “performer”, “producer”, “genre”, etc. included in the header of the content are extracted as search character string candidates. After that, this search character string candidate is added to the search character string list RT (step A31). As a result, a search character string list RT corresponding to the currently executed application (content reproduction function) is generated.
そして、検索文字列リストRTの中から予め決められている所定の文字列候補、例えば、音楽であれば、“アーティスト名”、動画であれば、“タイトル”を検索窓SWに入力して表示させる(ステップA32)。図11(A)は、音楽再生中の表示画面を例示したもので、音楽再生開始時には検索窓SWに“アーティスト名”が表示される。この状態において、検索窓SWの選択操作が行われると(ステップA33でYES)、図8の検索処理を実行する(ステップA34)。 Then, a predetermined character string candidate predetermined from the search character string list RT, for example, “artist name” for music and “title” for video are input to the search window SW and displayed. (Step A32). FIG. 11A shows an example of a display screen during music playback. At the start of music playback, “artist name” is displayed in the search window SW. In this state, when a search window SW selection operation is performed (YES in step A33), the search process of FIG. 8 is executed (step A34).
これによって図11(B)に示すように、コンテンツ再生機能に対応する検索文字列リストRTがプルダウンメニューとして表示されるほか、図11(C)に示すように検索ボタンSBの操作に応答してインターネット上の該当するWebページが検索されて表示される。その後、図5のステップA33に戻り、以下、検索窓SWの選択操作が行われる毎に検索処理を実行する。 As a result, the search character string list RT corresponding to the content reproduction function is displayed as a pull-down menu as shown in FIG. 11B, and in response to the operation of the search button SB as shown in FIG. The corresponding Web page on the Internet is searched and displayed. Thereafter, the process returns to step A33 in FIG. 5, and the search process is executed each time the search window SW is selected.
この場合、図8の検索処理のステップC8では、音楽/動画コンテンツの再生中であると判別されるので、予め記憶されている特定URL(Uniform Resource Locator)を読み出して(ステップC9)インターネットに接続し、検索窓SW内の検索文字列に該当するWebページの検索を要求し(ステップC10)、それに応答して受信したWebページを表示させる(ステップC11)。この特定URLは、音楽/動画販売促進用のプロモーションサイトをアクセスするもので、音楽/動画の再生中には、販売促進用のWebページが表示される。 In this case, in step C8 of the search process in FIG. 8, it is determined that music / video content is being played back, so a specific URL (Uniform Resource Locator) stored in advance is read out (step C9) and connected to the Internet. Then, a search for a Web page corresponding to the search character string in the search window SW is requested (Step C10), and the received Web page is displayed in response thereto (Step C11). This specific URL accesses a promotion site for music / video sales promotion, and a web page for sales promotion is displayed during reproduction of the music / video.
ここで、音楽/動画再生終了を指示する終了操作が行われると(ステップA35でYES)、再生部9を停止させて音楽/動画コンテンツの再生を終了させると共に(ステップA36)、今回の音楽/動画再生で作成した検索文字列リストRTをクリアしたのち(ステップA27)、待ち受け状態に戻る(図4のステップA2)。 When an end operation for instructing the end of music / video playback is performed (YES in step A35), the playback unit 9 is stopped to stop playback of music / video content (step A36), and the current music / video playback is stopped. After clearing the search character string list RT created by moving image reproduction (step A27), the process returns to the standby state (step A2 in FIG. 4).
また、待ち受け状態においてWebブラウザ利用開始を指示する操作が行われた場合には(図6のステップA37でYES)、Webブラウザを起動させる(ステップA38)。この状態において表示中のWebページの更新を指示する操作が行われると(ステップA39でYES)、図7の検索文字列抽出処理の実行に移る(ステップA40)。これによってWebブラウザ内のテキスト(文字データ)に対して形態素解析を行い、現在実行中のアプリケーション(Webアクセス機能)に対応する検索文字列リストRTを生成すると共に、この検索文字列リストRT内の最優先文字列候補を検索窓SWに入力させる。図12(A)は、Webブラウザ利用時/メール表示時の表示画面を例示したもので、その検索窓SWには最優先の文字列候補として“パス”が表示されている。この状態において、検索窓SWの選択操作が行われると(ステップA41でYES)、図8の検索処理を実行する(ステップA42)。 If an operation for instructing the start of Web browser use is performed in the standby state (YES in Step A37 in FIG. 6), the Web browser is activated (Step A38). In this state, when an operation for instructing the update of the Web page being displayed is performed (YES in step A39), the process proceeds to the execution of the search character string extraction process of FIG. 7 (step A40). As a result, morphological analysis is performed on the text (character data) in the Web browser, and a search character string list RT corresponding to the currently executing application (Web access function) is generated. The highest priority character string candidate is input to the search window SW. FIG. 12A illustrates an example of a display screen when using a Web browser / displaying an e-mail. In the search window SW, “path” is displayed as the highest priority character string candidate. In this state, when a search window SW selection operation is performed (YES in step A41), the search process of FIG. 8 is executed (step A42).
これによって図12(B)に示すように、Webアクセス機能に対応する検索文字列リストRTがプルダウンメニューとして表示されるほか、図12(C)に示すように検索ボタンSBの操作に応答してインターネット上の該当するWebページが検索されて表示される。そして、上述のステップA39に戻り、以下、ページ更新操作が行われる毎に、図7の検索文字列抽出処理を実行し、検索窓SWの選択操作が行われる毎に、図8の検索処理を実行する。ここで、Webブラウザ利用終了を指示する操作が行われると(ステップA43でYES)、Webブラウザを終了させると共に(ステップA44)、今回のWebブラウザ利用で作成した検索文字列リストRTをクリアしたのち(ステップA45)、待ち受け状態に戻る(図4のステップA2)。 As a result, the search character string list RT corresponding to the Web access function is displayed as a pull-down menu as shown in FIG. 12B, and in response to the operation of the search button SB as shown in FIG. The corresponding Web page on the Internet is searched and displayed. Then, returning to the above-described step A39, the search character string extraction process of FIG. 7 is executed every time the page update operation is performed, and the search process of FIG. 8 is performed every time the search window SW selection operation is performed. Execute. If an operation for instructing the end of the use of the Web browser is performed (YES in Step A43), the Web browser is ended (Step A44), and the search character string list RT created by using the current Web browser is cleared. (Step A45) returns to the standby state (Step A2 in FIG. 4).
また、待ち受け状態において電子メール利用開始を指示する操作が行われた場合には(図6のステップA46でYES)、電子メール機能を起動させる(ステップA47)。この状態においてメールを開く操作が行われると(ステップA48)、図7の検索文字列抽出処理の実行に移る(ステップA49)。これによって電子メール本文(文字データ)に対して形態素解析を行い、現在実行中のアプリケーション(電子メール機能)に対応する検索文字列リストRTを生成すると共に、この検索文字列リストRT内の最優先文字列候補を検索窓SWに入力させる。 If an operation for instructing the start of e-mail use is performed in the standby state (YES in step A46 in FIG. 6), the e-mail function is activated (step A47). When an operation for opening a mail is performed in this state (step A48), the process proceeds to execution of the search character string extraction process of FIG. 7 (step A49). As a result, a morphological analysis is performed on the e-mail body (character data) to generate a search character string list RT corresponding to the currently executing application (e-mail function), and the highest priority in the search character string list RT. A character string candidate is input to the search window SW.
この検索文字列抽出処理のステップB3において、優先順位を決定する際には出現頻度ではなく、出現時刻(メールの受信時刻)に応じて優先順位を決定するようにしている。この場合、メールの受信時刻の早い順を優先順位としたり、逆に、受信時刻の遅い順を優先順位としたりしてもよい。図12(A)は、電子メールを開いたときの表示画面を例示したもので、その検索窓SWには最優先の文字列候補として“パス”が表示されている。この状態において、検索窓SWの選択操作が行われると(ステップA50でYES)、図8の検索処理を実行する(ステップA51)。 In step B3 of this search character string extraction process, when determining the priority order, the priority order is determined according to the appearance time (mail reception time), not the appearance frequency. In this case, the order of early reception time of mail may be set as the priority order, or conversely, the order of late reception time may be set as the priority order. FIG. 12A shows an example of a display screen when an e-mail is opened. In the search window SW, “path” is displayed as the highest priority character string candidate. In this state, when a search window SW selection operation is performed (YES in step A50), the search process of FIG. 8 is executed (step A51).
これによって図12(B)に示すように、電子メール機能に対応する検索文字列リストRTがプルダウンメニューとして表示されるほか、図12(C)に示すように検索ボタンSBの操作に応答してインターネット上の該当するWebページが検索されて表示される。その後、上述のステップA48に戻り、以下、電子メールを開く操作が行われる毎に、図7の検索文字列抽出処理を実行し、検索窓SWの選択操作が行われる毎に、図8の検索処理を実行する。ここで、電子メール利用終了を指示する操作が行われると(ステップA52でYES)、電子メール機能を終了すると共に(ステップA53)、今回のメール利用で作成した検索文字列リストRTをクリアしたのち(ステップA45)、待ち受け状態に戻る(図4のステップA2)。 As a result, a search character string list RT corresponding to the e-mail function is displayed as a pull-down menu as shown in FIG. 12B, and in response to the operation of the search button SB as shown in FIG. The corresponding Web page on the Internet is searched and displayed. Thereafter, the process returns to step A48 described above, and thereafter, every time an operation for opening an e-mail is performed, the search character string extraction process of FIG. 7 is executed, and each time the search window SW is selected, the search of FIG. Execute the process. Here, when an operation for instructing the end of the use of e-mail is performed (YES in step A52), the e-mail function is ended (step A53), and after the search character string list RT created by using this e-mail is cleared. (Step A45) returns to the standby state (Step A2 in FIG. 4).
なお、その他の操作が行われた場合には(図6のステップA54でYES)、操作に対応する処理として、例えば、発信処理、電子メール作成処理などを実行する(ステップA55)。 If any other operation is performed (YES in step A54 in FIG. 6), for example, a transmission process, an e-mail creation process, and the like are executed as a process corresponding to the operation (step A55).
以上のように、この実施形態において制御部1は、出力中のコンテンツに含まれている文字データを解析して検索文字列の候補を抽出すると共に、この検索文字列候補を表示部4から一覧表示させ、この一覧表示されている各検索文字列候補の中から選択された候補を検索窓SWに入力するようにしたので、検索窓SWに入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。
As described above, in this embodiment, the
出力中のコンテンツに含まれている文字データは、テレビ放送に付加されている文字データであるので、テレビ放送受信中に番組に適した検索文字列候補を検索窓SWに入力することができる。 Since the character data included in the content being output is character data added to the television broadcast, search character string candidates suitable for the program can be input to the search window SW during the reception of the television broadcast.
出力中のコンテンツに含まれている文字データは、テレビ放送に付加されている音声データを認識した文字データであるので、テレビ放送受信中に番組に適した検索文字列候補を検索窓SWに入力することができる。 Since the character data included in the content being output is character data obtained by recognizing the audio data added to the television broadcast, search character string candidates suitable for the program are input to the search window SW during the television broadcast reception. can do.
テレビ放送に付加されている文字データ(例えば、字幕データ)とテレビ放送に付加されている音声データを認識した文字データとを解析して検索文字列の候補を抽出するようにしたので、字幕データを元に抽出した検索文字列候補と音声データを元に抽出した検索文字列候補とをマージ(統合)させることができる。 Since the character data (for example, caption data) added to the television broadcast and the character data that recognizes the voice data added to the television broadcast are analyzed to extract search character string candidates, the caption data It is possible to merge (integrate) the search character string candidates extracted based on the search character strings and the search character string candidates extracted based on the speech data.
出力中のコンテンツに含まれている文字データは、通話音声から音声認識された文字データであるので、音声通話中の会話に適した検索文字列候補を検索窓SWに入力することができる。 Since the character data included in the content being output is character data that has been voice-recognized from the call voice, search character string candidates suitable for conversation during a voice call can be input to the search window SW.
出力中のコンテンツに含まれている文字データは、受信される電子メールに含まれている文字データであるので、電子メールの閲覧中に適した検索文字列候補を検索窓SWに入力することができる。 Since the character data included in the content being output is character data included in the received e-mail, it is possible to input search character string candidates suitable for browsing the e-mail to the search window SW. it can.
出力中のコンテンツに含まれている文字データは、インターネット上に公開されているWebページに含まれている文字データであるので、Webページの閲覧中に適した検索文字列候補を検索窓SWに入力することができる。 Since the character data included in the content being output is character data included in a Web page published on the Internet, search character string candidates suitable for browsing the Web page are displayed in the search window SW. Can be entered.
出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を検索文字列の候補として抽出して一覧表示させ、この一覧表示されている各検索文字列候補の中から選択された候補を検索窓SWに入力するようにしたので、検索窓SWに入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。この場合、出力中のコンテンツに付加されている文字データを解析しなくても、検索文字列候補を抽出することができる。 A character string related to the content is extracted from the character data attached to the content being output as a search character string candidate and displayed as a list, and selected from the search character string candidates displayed in the list. Since the candidates are input to the search window SW, when performing a data search based on the search character string input to the search window SW, the process from the input to the start of search can be efficiently performed without imposing a burden on the user. It can be performed, and it becomes rich in practicality as a search character string input support. In this case, search character string candidates can be extracted without analyzing character data added to the content being output.
音楽データ/動画データに付加されている文字データの中から当該音楽/動画に関する文字列を検索文字列の候補として抽出するようにしたので、音楽/動画の再生中に適した検索文字列候補を検索窓SWに入力することができる。 Since a character string related to the music / video is extracted as a search character string candidate from the character data added to the music data / video data, search character string candidates suitable for music / video playback are selected. The search window SW can be input.
音楽/動画データの再生中に検索窓SWに入力されている検索文字列に基づいてデータ検索を行う場合に、特定サイト(例えば、音楽/動画販売促進用サイト)のURLを読み出してそのWebページに対する検索要求を行うようにしたので、ユーザにあっては、音楽/動画を再生しながらそのコンテンツを購入することができるほか、音楽/動画の再生に適したWebページを検索することができる。 When a data search is performed based on a search character string input to the search window SW during reproduction of music / video data, the URL of a specific site (for example, a music / video sales promotion site) is read and the Web page Therefore, the user can purchase the content while reproducing the music / video and search for a web page suitable for reproducing the music / video.
抽出した各検索文字列候補の優先順位を決定し、この優先順位のうち最優先順位の候補を検索窓SWに入力するようにしたので、検索窓SWへの自動入力が可能となり、ユーザ操作が不要となる。 Since the priority order of each extracted search character string candidate is determined and the candidate with the highest priority among the priority order is input to the search window SW, automatic input to the search window SW is possible, and user operation is possible. It becomes unnecessary.
抽出した検索文字列候補を一覧表示させると共に、この一覧表示されている各検索文字列候補の中からユーザ操作によって選択された候補を検索窓SWに入力するようにしたので、従来のようにユーザが検索文字列を直接入力したり、範囲指定して選択したりすることなく、候補一覧の中から検索文字列を選択するだけで良く、ユーザの負担を大幅に軽減することが可能となる。 The extracted search character string candidates are displayed in a list, and candidates selected by the user operation from among the search character string candidates displayed in the list are input to the search window SW. However, it is only necessary to select the search character string from the candidate list without directly inputting the search character string or selecting the range by specifying the range, and the burden on the user can be greatly reduced.
各検索文字列候補を一覧表示させる場合の優先順位(表示順位)を決定するようにしたので、ユーザにあっては、各候補の並び順に応じて所望する候補を選択することができ、所望する候補を容易に選択することが可能となる。 Since the priority order (display order) for displaying each search character string candidate as a list is determined, the user can select a desired candidate according to the order in which the candidates are arranged. Candidates can be easily selected.
各検索文字列候補を一覧表示させる場合の優先順位を決定した場合にその最優先順位の候補を検索窓SWに入力するようにしたので、検索に使用する可能性の高い候補が検索窓SWに入力されるので、直ちに検索を開始することができる。 When the priority for displaying each search character string candidate in a list is determined, the candidate with the highest priority is input to the search window SW. Therefore, candidates that are highly likely to be used for the search are displayed in the search window SW. Since it is entered, the search can be started immediately.
各検索文字列候補の優先順位を決定する場合に、その出現順位に基づいて優先順位を決定するようにしたので、頻繁に出現する文字列を検索候補として検索窓SWに入力させることができる。 When the priority order of each search character string candidate is determined, the priority order is determined based on the appearance order, so that frequently appearing character strings can be input as search candidates to the search window SW.
各検索文字列候補の優先順位を決定する場合に、その出現時刻に基づいて優先順位を決定するようにしたので、メールの受信時刻が最も早いメールあるいは最も遅いメールを検索窓SWに入力させることができる。 When determining the priority of each search character string candidate, the priority is determined based on the appearance time, so that the mail with the earliest or latest mail reception time is input to the search window SW. Can do.
優先順位に基づいてその下位の候補を一覧表示から一定条件下で消去するようにしたので、検索に使用する可能性の低い不用な候補を削除することができ、候補数を絞り込むことができる。 Since the lower candidates are deleted from the list display under certain conditions based on the priority order, unnecessary candidates that are unlikely to be used for the search can be deleted, and the number of candidates can be narrowed down.
検索文字列リストRTには、ユーザ操作で検索窓SWに直接的に入力された検索文字列が検索履歴として表示されるほか、出力中コンテンツを解析することによって抽出された文字列が検索文字列候補として表示されるので、リストRTの内容は実情に即したものとなり、検索に使用する可能性の高い候補を表示させることができる。 In the search character string list RT, a search character string directly input to the search window SW by a user operation is displayed as a search history, and a character string extracted by analyzing the content being output is a search character string. Since the list RT is displayed as a candidate, the content of the list RT is in accordance with the actual situation, and a candidate that is highly likely to be used for the search can be displayed.
検索窓SWに入力された検索文字列に基づいてデータ検索を行う場合に、インターネット上のWebページへの検索を指示するようにしたので、莫大な情報の中から所望する情報を検索することができる。 When performing a data search based on a search character string input to the search window SW, a search for a web page on the Internet is instructed, so that it is possible to search for desired information from a vast amount of information. it can.
なお、上述した実施形態においては、受信される電子メールに含まれている文字データから検索文字列候補を抽出するようにしたが、送信する電子メールに含まれている文字データから検索文字列候補を抽出するようにしてもよい。これによって電子メールの作成中に適した検索文字列候補を検索窓SWに入力することができる。 In the above-described embodiment, the search character string candidate is extracted from the character data included in the received e-mail, but the search character string candidate is extracted from the character data included in the e-mail to be transmitted. May be extracted. This makes it possible to input search character string candidates suitable for creation of an e-mail to the search window SW.
また、上述した実施形態においては、検索文字列リストRTにユーザ操作で検索窓SWに直接的に入力された検索文字列を検索履歴として表示するほか、出力中コンテンツを解析することによって抽出された文字列を検索文字列候補として表示するようにしたが、コンテンツ解析で抽出した検索文字列候補を検索履歴とは別個に表示するようにしてもよい。また、検索文字列リストRTは、検索窓SWからプルダウンメニューとして表示させる場合に限らず、別のウインドウに表示するようにしてもよい。 Further, in the above-described embodiment, the search character string directly input to the search window SW by the user operation is displayed as the search history in the search character string list RT, and is extracted by analyzing the content being output. Although the character string is displayed as the search character string candidate, the search character string candidate extracted by the content analysis may be displayed separately from the search history. The search character string list RT is not limited to being displayed as a pull-down menu from the search window SW, but may be displayed in a separate window.
また、上述した実施形態においては、検索窓SWに入力された検索文字列に基づいてデータ検索を行う場合に、インターネット上のWebページへの検索を指示するようにしたが、内蔵されている各種の電子辞書あるいは外部接続されている各種の電子辞書を検索窓SWに入力された検索文字列に基づいて検索するようにしてもよい。更に、電子辞書に限らず、各種のテーブル、ファイル、フォルダを検索するようにしてもよい。
その他、携帯電話装置に限らず、例えば、PDA、デジタルカメラ、音楽再生機などの携帯端末装置、PC(パーソナルコンピュータ)などにも同様に適用可能である。
In the above-described embodiment, when performing a data search based on a search character string input to the search window SW, a search for a web page on the Internet is instructed. The electronic dictionary or various externally connected electronic dictionaries may be searched based on the search character string input to the search window SW. Furthermore, not only the electronic dictionary but various tables, files, and folders may be searched.
In addition, the present invention is not limited to a mobile phone device, and can be similarly applied to, for example, a mobile terminal device such as a PDA, a digital camera, and a music player, a PC (personal computer), and the like.
1 制御部
2 電源部
3 記憶部
4 表示部
5 操作部
6 通信部
7 電話部
8 テレビ放送受信部
9 再生部
10 音声認識部
SW 検索窓
RT 検索文字列リスト
SB 検索ボタン
DESCRIPTION OF
Claims (21)
当該端末装置で出力中のコンテンツに含まれている文字データを解析して前記検索文字列の候補を抽出する抽出手段と、
この抽出手段によって抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力させる入力制御手段と、
を具備したことを特徴とする端末装置。 A terminal device having a search function for performing a data search based on a search character string input in a search input area,
Extracting means for analyzing the character data included in the content being output by the terminal device and extracting the search character string candidates;
Input control means for inputting candidates selected from search character string candidates extracted by the extraction means to the search input area;
A terminal device comprising:
前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データである、
ことを特徴とする請求項1記載の端末装置。 TV broadcast receiving means for receiving digital TV broadcast is further provided,
The character data included in the content being output is character data added to the television broadcast received by the television broadcast receiving means.
The terminal device according to claim 1.
音声から文字データを認識する音声認識手段と、
を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データである、
ことを特徴とする請求項1記載の端末装置。 TV broadcast receiving means for receiving digital TV broadcast;
Speech recognition means for recognizing character data from speech;
The character data included in the content being output is character data recognized by the voice recognition unit from the voice of the television broadcast received by the television broadcast reception unit.
The terminal device according to claim 1.
ようにしたことを特徴とする請求項3記載の端末装置。 The extraction means includes character data added to the television broadcast received by the television broadcast reception means and character data recognized by the voice recognition means from the sound of the television broadcast received by the television broadcast reception means. Analyzing and extracting candidates for the search string;
The terminal device according to claim 3, which is configured as described above.
音声から文字データを認識する音声認識手段と、
を更に備え、前記出力中のコンテンツに含まれている文字データは、前記通話手段によって受信された通話音声から前記音声認識手段によって認識された文字データである、
ことを特徴とする請求項1記載の端末装置。 Call means for making voice calls;
Speech recognition means for recognizing character data from speech;
The character data included in the content being output is character data recognized by the voice recognition unit from the call voice received by the calling unit.
The terminal device according to claim 1.
前記出力中のコンテンツに含まれている文字データは、前記電子メール手段によって送信あるいは受信される電子メールに含まれている文字データである、
ことを特徴とする請求項1記載の端末装置。 An email means for sending and receiving emails;
The character data included in the content being output is character data included in an email transmitted or received by the email means.
The terminal device according to claim 1.
前記出力中のコンテンツに含まれている文字データは、前記アクセス手段によってアクセスした情報ページに含まれている文字データである、
ことを特徴とする請求項1記載の端末装置。 An access means for accessing an information page published on the network;
The character data included in the content being output is character data included in the information page accessed by the access means.
The terminal device according to claim 1.
当該端末装置で出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を前記検索文字列の候補として抽出する抽出手段と、
この抽出手段によって抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力させる入力制御手段と、
を具備したことを特徴とする端末装置。 A terminal device having a search function for performing a data search based on a search character string input in a search input area,
Extraction means for extracting a character string related to the content from the character data added to the content being output by the terminal device as a candidate for the search character string;
Input control means for inputting candidates selected from search character string candidates extracted by the extraction means to the search input area;
A terminal device comprising:
前記再生手段によって再生される音楽データあるいは動画データに付加されている文字データの中から当該音楽あるいは動画に関する文字列を前記検索文字列の候補として抽出する、
ようにしたことを特徴とする請求項8記載の端末装置。 It further comprises a playback means for playing back music data or video data,
Extracting a character string relating to the music or moving image from the music data or moving image data reproduced by the reproducing means as a candidate for the search character string;
The terminal device according to claim 8, which is configured as described above.
前記再生手段によって音楽データあるいは動画データを再生している再生中において前記検索用入力域に入力されている検索文字列に基づいてデータ検索を行う場合に、前記アクセス情報を読み出して前記特定情報ページに対する検索要求を行う、
ようにしたことを特徴とする請求項9記載の端末装置。 Storage means for storing access information for accessing a specific information page published on the network;
When performing a data search based on a search character string input to the search input area during playback of music data or video data being played back by the playback means, the access information is read and the specific information page Make a search request for
The terminal device according to claim 9, which is configured as described above.
前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を前記検索用入力域に入力させる、
ようにしたことを特徴とする請求項1あるいは請求項8記載の端末装置。 Rank determining means for determining the priority of each search character string candidate extracted by the extracting means;
The input control means causes a candidate of the highest priority among the priorities determined by the order determination means to be input to the search input area.
9. The terminal device according to claim 1, wherein the terminal device is configured as described above.
前記入力制御手段は、前記一覧表示手段によって一覧表示されている各検索文字列候補の中から任意に選択された候補を前記検索用入力域に入力させる、
ようにしたことを特徴とする請求項1あるいは請求項8記載の端末装置。 A list display means for displaying a list of search character string candidates extracted by the extraction means;
The input control means causes a candidate arbitrarily selected from the search character string candidates displayed as a list by the list display means to be input to the search input area.
9. The terminal device according to claim 1, wherein the terminal device is configured as described above.
前記一覧表示手段は、前記順位決定手段によって決定された優先順位を表示順位としてその順位にしたがった並び順となるように各検索文字列候補を一覧表示し、
前記入力制御手段は、前記一覧表示の中から任意に選択された検索文字列候補を前記検索用入力域に入力させる、
ようにしたことを特徴とする請求項12記載の端末装置。 A rank determining means for determining a priority when displaying the list of search character string candidates extracted by the extracting means;
The list display means displays a list of search character string candidates so that the priority order determined by the order determination means is the display order and the order of arrangement according to the order.
The input control means causes a search character string candidate arbitrarily selected from the list display to be input to the search input area.
The terminal device according to claim 12, which is configured as described above.
ようにしたことを特徴とする請求項13記載の端末装置。 The input control means causes a candidate of the highest priority among the priorities determined by the order determination means to be input to the search input area.
The terminal device according to claim 13, which is configured as described above.
ようにしたことを特徴とする請求項11あるいは請求項13記載の端末装置。 The rank determining means determines the priority based on the appearance frequency of each search data candidate extracted within a predetermined range by the extracting means;
The terminal device according to claim 11 or 13, wherein the terminal device is configured as described above.
ようにしたことを特徴とする請求項11あるいは13記載の端末装置。 The rank determining means determines the priority based on the appearance time of each search data candidate extracted by the extracting means;
The terminal device according to claim 11 or 13, wherein the terminal device is configured as described above.
ようにしたことを特徴とする請求項12記載の端末装置。 The list display means erases the lower candidates from the list display under a certain condition based on the priority order determined by the order determination means.
The terminal device according to claim 12, which is configured as described above.
ようにしたことを特徴とする請求項12記載の端末装置。 In a state where the search character string input to the data search input area is stored as a search history, the list display means displays a list of search character string candidates extracted by the extraction means together with the search history.
The terminal device according to claim 12, which is configured as described above.
ようにしたことを特徴とする請求項1あるいは請求項8記載の端末装置。 Instructing a search to an information page published on the network when performing a data search based on a search character string input in the search input area,
9. The terminal device according to claim 1, wherein the terminal device is configured as described above.
検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、
出力中のコンテンツに含まれている文字データを解析して前記検索文字列の候補を抽出するステップと、
前記抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力するステップと、
を実現させるためのプログラム。 Against the computer,
Performing a data search based on the search string entered in the search input area;
Analyzing the character data included in the content being output and extracting the search character string candidates; and
Inputting a candidate selected from the extracted search character string candidates into the search input area;
A program to realize
検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、
出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を前記検索文字列の候補として抽出するステップと、
前記抽出された検索文字列候補の中から選択された候補を前記検索用入力域に入力するステップと、
を実現させるためのプログラム。 Against the computer,
Performing a data search based on the search string entered in the search input area;
Extracting a character string related to the content from the character data added to the content being output as a candidate for the search character string;
Inputting a candidate selected from the extracted search character string candidates into the search input area;
A program to realize
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008159874A JP5472960B2 (en) | 2008-06-19 | 2008-06-19 | Terminal device and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008159874A JP5472960B2 (en) | 2008-06-19 | 2008-06-19 | Terminal device and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010003025A true JP2010003025A (en) | 2010-01-07 |
JP5472960B2 JP5472960B2 (en) | 2014-04-16 |
Family
ID=41584717
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008159874A Expired - Fee Related JP5472960B2 (en) | 2008-06-19 | 2008-06-19 | Terminal device and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5472960B2 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012003757A (en) * | 2010-06-14 | 2012-01-05 | Nhn Corp | Search system and search method using search library |
JP2012257145A (en) * | 2011-06-10 | 2012-12-27 | Kyocera Corp | Electronic apparatus, method of controlling the same, and control program |
KR20170131817A (en) * | 2016-04-27 | 2017-11-30 | 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 | Method and apparatus for searching resource |
JP2020021207A (en) * | 2018-07-31 | 2020-02-06 | 楽天株式会社 | Information processor and information processing method and program and storage media |
KR20200046007A (en) * | 2016-09-20 | 2020-05-06 | 폭스바겐 악티엔 게젤샤프트 | User interface for accessing a set of functions, method and computer readable storage medium for providing a user interface for accessing a set of functions |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1069496A (en) * | 1996-08-29 | 1998-03-10 | Matsushita Electric Ind Co Ltd | Internet retrieval device |
JP2003219374A (en) * | 2002-01-18 | 2003-07-31 | Matsushita Electric Ind Co Ltd | Receiver, broadcast reception system, and broadcast system |
JP2005182590A (en) * | 2003-12-22 | 2005-07-07 | Media Do Inc | Data routing and forwarding device, computer program, and program recording medium |
WO2006085565A1 (en) * | 2005-02-08 | 2006-08-17 | Nippon Telegraph And Telephone Corporation | Information communication terminal, information communication system, information communication method, information communication program, and recording medium on which program is recorded |
JP2007328661A (en) * | 2006-06-09 | 2007-12-20 | Sony Corp | Information processor, information processing method, and program |
JP2008040891A (en) * | 2006-08-08 | 2008-02-21 | Canon Inc | Display system, control method thereof, and program |
WO2008032353A1 (en) * | 2006-09-11 | 2008-03-20 | Mitsubishi Electric Corporation | Information retrieval device |
-
2008
- 2008-06-19 JP JP2008159874A patent/JP5472960B2/en not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1069496A (en) * | 1996-08-29 | 1998-03-10 | Matsushita Electric Ind Co Ltd | Internet retrieval device |
JP2003219374A (en) * | 2002-01-18 | 2003-07-31 | Matsushita Electric Ind Co Ltd | Receiver, broadcast reception system, and broadcast system |
JP2005182590A (en) * | 2003-12-22 | 2005-07-07 | Media Do Inc | Data routing and forwarding device, computer program, and program recording medium |
WO2006085565A1 (en) * | 2005-02-08 | 2006-08-17 | Nippon Telegraph And Telephone Corporation | Information communication terminal, information communication system, information communication method, information communication program, and recording medium on which program is recorded |
JP2007328661A (en) * | 2006-06-09 | 2007-12-20 | Sony Corp | Information processor, information processing method, and program |
JP2008040891A (en) * | 2006-08-08 | 2008-02-21 | Canon Inc | Display system, control method thereof, and program |
WO2008032353A1 (en) * | 2006-09-11 | 2008-03-20 | Mitsubishi Electric Corporation | Information retrieval device |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012003757A (en) * | 2010-06-14 | 2012-01-05 | Nhn Corp | Search system and search method using search library |
JP2012257145A (en) * | 2011-06-10 | 2012-12-27 | Kyocera Corp | Electronic apparatus, method of controlling the same, and control program |
US9235376B2 (en) | 2011-06-10 | 2016-01-12 | Kyocera Corporation | Electronic device, and control method and storage medium storing control program |
KR20170131817A (en) * | 2016-04-27 | 2017-11-30 | 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 | Method and apparatus for searching resource |
JP2018519555A (en) * | 2016-04-27 | 2018-07-19 | 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co.,Ltd. | Resource search method, apparatus, program, and recording medium |
KR101926736B1 (en) * | 2016-04-27 | 2019-03-07 | 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 | Program and recording medium, method and apparatus for searching device |
KR20200046007A (en) * | 2016-09-20 | 2020-05-06 | 폭스바겐 악티엔 게젤샤프트 | User interface for accessing a set of functions, method and computer readable storage medium for providing a user interface for accessing a set of functions |
KR102312210B1 (en) * | 2016-09-20 | 2021-10-14 | 폭스바겐 악티엔게젤샤프트 | User interface for accessing a set of functions, method and computer readable storage medium for providing a user interface for accessing a set of functions |
US11392268B2 (en) | 2016-09-20 | 2022-07-19 | Volkswagen Ag | User interface for accessing a set of functions, procedures, and computer readable storage medium for providing a user interface for access to a set of functions |
JP2020021207A (en) * | 2018-07-31 | 2020-02-06 | 楽天株式会社 | Information processor and information processing method and program and storage media |
Also Published As
Publication number | Publication date |
---|---|
JP5472960B2 (en) | 2014-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5563650B2 (en) | Display method of text related to audio file and electronic device realizing the same | |
US20110039598A1 (en) | Methods and devices for adding sound annotation to picture and for highlighting on photos and mobile terminal including the devices | |
US8713079B2 (en) | Method, apparatus and computer program product for providing metadata entry | |
US8059139B2 (en) | Display controller, display control method, display control program, and mobile terminal device | |
US20070033006A1 (en) | Information processing apparatus, method and program | |
US9910934B2 (en) | Method, apparatus and computer program product for providing an information model-based user interface | |
WO2011158418A1 (en) | Content processing execution device, content processing execution method, and programme | |
KR101763642B1 (en) | Method and system for providing a contents based on preference | |
KR101741698B1 (en) | Method for providing search service and display apparatus applying the same | |
CN110989847B (en) | Information recommendation method, device, terminal equipment and storage medium | |
US20130012245A1 (en) | Apparatus and method for transmitting message in mobile terminal | |
JP4771731B2 (en) | Character input device, portable terminal device, and character input processing program | |
JP5472960B2 (en) | Terminal device and program | |
JP2010087976A (en) | Information processing apparatus, information acquisition method, information acquisition program, and information retrieval system | |
US20100260421A1 (en) | Tagging method and apparatus of portable terminal | |
JP2014120032A (en) | Character recognition device, character recognition method and character recognition program | |
WO2011019467A1 (en) | Methods and devices for adding sound annotation to picture and for highlighting on photos and mobile terminal including the devices | |
US8364135B2 (en) | Apparatus and method for managing data in portable terminal | |
CN110990342A (en) | File name processing method and electronic equipment | |
US7979093B2 (en) | Portable terminal and method for displaying preference item therein | |
JP2006074376A (en) | Portable telephone set with broadcast receiving function, program, and recording medium | |
JP2012003610A (en) | Information processor | |
JP2009296058A (en) | Mobile terminal, and control program of mobile terminal | |
JP5354648B2 (en) | Terminal device and program | |
KR20110038776A (en) | Method for acquiring information related to keyword of sound-recorded file and portable device thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20100727 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110510 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121219 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130213 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130806 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131101 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20131108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140130 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |