JP4683103B2 - 表示制御装置、表示制御方法、およびプログラム - Google Patents
表示制御装置、表示制御方法、およびプログラム Download PDFInfo
- Publication number
- JP4683103B2 JP4683103B2 JP2008243259A JP2008243259A JP4683103B2 JP 4683103 B2 JP4683103 B2 JP 4683103B2 JP 2008243259 A JP2008243259 A JP 2008243259A JP 2008243259 A JP2008243259 A JP 2008243259A JP 4683103 B2 JP4683103 B2 JP 4683103B2
- Authority
- JP
- Japan
- Prior art keywords
- display area
- thumbnail image
- video
- display
- thumbnail
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 25
- 238000010586 diagram Methods 0.000 description 12
- 238000001514 detection method Methods 0.000 description 11
- 230000005236 sound signal Effects 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 5
- 238000000605 extraction Methods 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 101000760620 Homo sapiens Cell adhesion molecule 1 Proteins 0.000 description 1
- 101000911772 Homo sapiens Hsc70-interacting protein Proteins 0.000 description 1
- 101000661816 Homo sapiens Suppression of tumorigenicity 18 protein Proteins 0.000 description 1
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 108090000237 interleukin-24 Proteins 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/4508—Management of client data or end-user data
- H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/4147—PVR [Personal Video Recorder]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Television Signal Processing For Recording (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Controls And Circuits For Display Device (AREA)
Description
そして、表示されたサムネイル画像をカーソル等で選択すると、たとえばそのサムネイル表示されている写真がテレビジョン画面にある程度拡大されて表示される。
このとき、サムネイル画像は、通常の放送映像あるいは再生映像と同様の輝度をもって表示される。
この技術では、録画したコンテンツの再生位置に対応する画像をサムネイル画像として時系列的に表示し、任意のサムネイル画像が選択されると対応する再生位置から録画されたコンテンツを再生する。
また、好みの写真のみをサムネイル表示用として登録していたとしても、記録した順番で表示されることから、ユーザの好みに合った順番で表示されるとは言い難く、使用勝手の面で課題がある。
すなわち、サムネイル画像の輝度が高いと、たとえば画面中央部に放送映像あるいは再生映像に表示されている場合に、中央の放送映像がメインであるにもかかわらず、画面の側部にあるサムネイル画像が目立ってしまい、映像の視聴を妨げるおそれがある。
これでは、たとえば好みの俳優が出演するドラマや好みの選手が出場するサッカーゲームの録画を行ったつもりであっても次の不利益がある。
すなわち、ドラマのタイトルやCM等のサムネイル画像では、ユーザは好みの俳優等の出演する映像を本当に録画できたか否かを簡単に判断することが困難である。
表示部には、制御部により映像と並列に、写真等のサムネイル画像が表示される。
制御部は、サムネイル画像を表示するに当たって優先順位に従って表示させる。
図2は、本発明の実施形態に係る表示制御装置の表示デバイスの概要を示す図である。
表示デバイス20は、図2に示すように、横長のアスペクト比をもって形成されている。表示デバイス20のアスペクト比は、たとえば16:9に設定される。
そして、制御部50は、優先順位に応じてサムネイル画像を表示する機能を有する。
制御部50は、サムネイル画像を表示するための優先順位を、アクセス回数に応じて設定する機能を有する。
また、制御部50は、お気に入り順に順番付けされた優先順位に応じてサムネイル画像を表示する機能を有している。
この場合、制御部50は、たとえば当初はお気に入り順に順番付けされた優先順位を適用し、アクセス回数の情報が閾値以上に蓄積されると、アクセス回数に応じて優先順位を再割り当てるような機能を持つことも可能である。
制御部50は、表示デバイス20に、映像を表示するメイン表示領域と、メイン表示領域に並列に、サムネイル画像を表示するためのサブ表示領域とを形成し、サブ表示領域にはメイン表示領域に近い側から優先順位の高いサムネイル画像を表示する機能を有する。
より具体的には、制御部50は、表示デバイス20に、映像を表示するメイン表示領域と、メイン表示領域の両側に並列に、サムネイル画像を表示するための第1および第2のサブ表示領域とを形成する。そして、制御部50は、第1のサブ表示領域および第2のサブ表示領域の少なくとも一方のサブ表示領域には、メイン表示領域に近い側から優先順位の高いサムネイル画像を表示する機能を有する。
この場合、制御部50は、サムネイル画像の一部の輝度を高くして表示する機能を有する。
また、制御部50は、カーソル等で選択されたサムネイル画像の輝度を高くして表示する機能を有する。制御部50は、複数のサムネイル画像を表示する場合、選択されたサムネイル画像の輝度を高くして表示する機能を有している。
そして、制御部50は、録画する番組のサムネイル画像として顔認識されたシーンで代表画を置き換える機能を有している。
この場合、制御部50は、あらかじめ指定された顔認識対象の最初に認識した画像で、サムネイル画像として代表画を置き換える。
制御部50は、あらかじめ指定された顔認識対象の画をサムネイル画像として表示し、サムネイル画像を録画している映像の顔認識した画像で置き換える機能を有している。
また、制御部50は、顔認識で得られ置き換えたサムネイル画像が選択されると、サムネイル画像を顔認識で得た記録再生部80に録画されている映像を再生する機能を有する。
さらに、制御部50は、映像デコード回路53、重畳回路54、顔認識記録部55、マイクロコンピュータ(μ‐Com)56、およびOSD(On Screen Display)制御回路57を有している。
なお、受信した放送信号は、マイクロコンピュータ56の制御の下、記録再生部80に記録され、その記録情報が再生されて表示デバイス20に表示されるように構成されている。
重畳回路54は、OSD制御回路57の制御に応じて、記録再生部80から再生される再生映像に、サムネイル画像を並列に表示させる。
顔認識記録部55は、顔認識した顔認識画像情報IFCをOSD制御回路57に供給する。
顔認識部550は、顔検出部551、特徴抽出部552、および比較出力部553を含んで構成される。
顔検出部551は、動画コンテンツから人物の顔画像をフレーム単位で検出する検出処理を実行する。
そして、顔検出部551は、検出処理により新たな人物の顔画像を検出すると、それ以降のフレームを対象として、同一人物の顔を追跡するための追跡処理を実行する。
ここで、追跡処理とは、たとえばそれ以降のフレームに同一人物の顔が含まれているか否かを判定し、含まれていると判定している限り、その同一人物の顔画像の検出を繰り返していく、といった処理をいう。
すなわち、顔検出部511は、動画コンテンツから、新たな人物の顔画像を検出する毎に、その新たな人物の顔の追跡を行う追跡処理を繰り返していく。これにより、顔検出部551は、時間的に連続した追跡範囲(ここでは、時間的に連続した1以上のフレームからなるフレーム群)に含まれる1以上の顔画像を含む時系列画像を1以上検出する。
比較出力部553は、顔が一致すると、認識した顔認識画像情報IFCをOSD制御回路57に供給する。
マイクロコンピュータ56は、リモートコマンダ60を介して入力される信号を分析処理する。
マイクロコンピュータ56は、分析処理に従って補完情報としてのサムネイル画像やカーソル等の各種情報を形成させるための指示、並びにOSD表示に関する指示命令をOSD制御回路57に出力する。
OSD制御回路57は、マイクロコンピュータ56の指示命令CMDに従って、補完情報としてのサムネイル画像やカーソル等の各種情報を形成する。
OSD制御回路57は、形成したOSD映像信号を重畳回路54に出力する。
このOSD映像信号の映像は、重畳回路54により映像デコード回路53によるTV映像信号の映像に重畳されて表示デバイス20に出力される。
サムネイル表示制御機能部571、優先順位制御機能部572、サムネイル輝度制御機能部573、カーソル制御機能部574、および顔認識画像制御機能部575は、バス576により接続されている。
優先順位制御機能部572は、あらかじめユーザによりお気に入り順に順番付けされた優先順位に応じてサムネイル画像を表示させる。
優先順位制御機能部572は、サムネイル画像を表示するための優先順位を、アクセス回数に応じて設定する。
この場合、優先順位制御機能部572は、たとえば当初はお気に入り順に順番付けされた優先順位を適用し、アクセス回数の情報が閾値以上に蓄積されると、アクセス回数に応じて優先順位を再割り当てるような制御を行う。
そしてサムネイル表示制御機能部571は、第1のサブ表示領域220および第2のサブ表示領域230の少なくとも一方のサブ表示領域には、メイン表示領域に近い側から優先順位の高いサムネイル画像を表示する。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210に最も近いサブ表示領域221に優先順位が最も高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210に最も近いサブ表示領域221に隣接する2列目のサブ表示領域222に優先順位が2番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210から最も遠い3列目のサブ表示領域223に3番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば2行目のメイン表示領域210に最も近いサブ表示領域224に隣接する2列目のサブ表示領域225に優先順位が2番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえばメイン表示領域210から最も遠い3列目のサブ表示領域226に3番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210に最も近いサブ表示領域231に優先順位が最も高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210に最も近いサブ表示領域231に隣接する2列目のサブ表示領域232に優先順位が2番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば1行目のメイン表示領域210から最も遠い3列目のサブ表示領域233に3番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば2行目のメイン表示領域210に最も近いサブ表示領域234に隣接する2列目のサブ表示領域235に優先順位が2番目に高いサムネイル画像を表示させる。
サムネイル表示制御機能部571は、たとえば2行目のメイン表示領域210から最も遠い3列目のサブ表示領域226に3番目に高いサムネイル画像を表示させる。
そこで、本実施形態においては、図6(B)に示すように、サブ表示領域223のサムネイル画像の輝度をメイン表示領域に表示される映像情報より低くして表示する。
この例では、スポットライトが当たっているように周辺部の輝度を落として暗くし、中央部のメイン表示領域210より目立たないように表示輝度制御が行われている。
このとき、中央のメイン表示領域210の輝度を落としてカーソルCSLの移動先のサブ表示領域のサムネイル画像のみ輝度を高くして表示される。
すなわち、決定キーが操作されると、サムネイル表示制御機能部571が、図8に示すように、決定キーで選定されたサムネイル画像を、中央部のメイン表示領域210上に重ねて拡大表示する。
顔認識画像制御機能部575は、あらかじめ指定された顔認識対象の最初に認識した画像で、サムネイル画像として代表画を置き換える。
顔認識画像制御機能部575は、あらかじめ指定された顔認識対象の画をサムネイル画像として表示し、サムネイル画像を録画している映像の顔認識した画像で置き換える。
また、顔認識画像制御機能部575は、顔認識で得られ置き換えたサムネイル画像が選択されると、サムネイル画像を顔認識で得た記録再生部80に録画されている映像を再生させる。
そして、顔認識画像制御機能部575は、あらかじめ指定された顔認識対象の画をサムネイル画像として表示し、サムネイル画像を録画している映像の顔認識した画像で置き換える。
これでは、たとえば好みの俳優が出演するドラマや好みの選手が出場するサッカーゲームの録画を行ったつもりであっても次の不利益がある。
すなわち、ドラマのタイトルやCM等のサムネイル画像では、ユーザは好みの俳優等の出演する映像を本当に録画できたか否かを簡単に判断することが困難である。
そこで、本実施形態においては、図10(B)に示すように、使用状況等に応じてサムネイル画像の有効な表示形態を実現するために、顔認識により番組を録画し、その番組のサムネイルとして最初に認識されたシーンで代表画を置き換える。
これにより、任意の人物が登場した番組が録画できていることが容易にわかるようになる。
リモートコマンダ60からの指示信号が、所定のTV放送局の選局を指示するものであるとき、マイクロコンピュータ56は、この指示信号に対応した選局命令をTVチューナ51に出力する。
リモートコマンダ60からの指示信号が、ボールゲームに対する各種表示制御等を指示するものであるとき、マイクロコンピュータ56は、この指示信号に対応した指示命令CMDをOSD制御回路57に出力する。
電源スイッチ61は、TV受像機に電源を投入し、電源を落とすときに操作される。
チャンネルUP/DOWNスイッチ62は、現在選局されているTV放送チャンネルの次(または前)のチャンネルを選局するときに操作される。
音量UP/DOWNスイッチ63は、音声出力を増大(または減少)するときに操作される。
なお、リモートコマンダ60には数字キーが配置されるが、ここでは省略している。なお、数字キーは、操作されたキーの数字に対応する、たとえばTV放送チャンネルを選局するとき操作される。
そして、リング部641の4分割されたスイッチ部分により上下左右へのカーソルCSLの移動を指示する上下左右キーとしても機能する。
また、押し込みボタン642は、そのカーソルCSLで選択されたサムネイル画像を選択表示するための決定キーとして用いることが可能である。
記録再生部80は、記録されている録画映像がOSD制御回路57の指示に従って再生される。
また、記録再生部80は、あらかじめ登録される好みの俳優やスポーツ選手の顔情報や名前等の顔認識する対象の情報がデータベースとして格納されている。
これにより、リモートコマンダ60からの指示信号が制御部50に配置された受光部70を介してマイクロコンピュータ56に入力される。
これに対応して、マイクロコンピュータ56は、TVチューナ51に対して指定された、たとえばサッカーTV中継放送を行っているTV放送チャンネルの選局命令を出力する。この選局命令に従い、TVチューナ51は、所定のTV放送チャンネルを選択し、音声信号を音声デコード回路52に出力し、映像信号を映像デコード回路53に出力する。
映像信号は、映像デコード回路53でデコードされた後、重畳回路54を介して表示デバイス20に表示される。また、音声デコード回路52は、音声信号をデコードし、スピーカ30に出力する。
このようにして、表示デバイス20にサッカーTV映像が表示され放映され(ST3)、TV音声信号がスピーカ30から出力される。
サムネイル表示制御機能部571が、マイクロコンピュータ56のサムネイル表示指示命令CMDに従って、表示デバイス20の表示領域21の中央部に、映像を表示するメイン表示領域を形成する。そして、サムネイル表示制御機能部571は、メイン表示領域210の両側に並列に、サムネイル画像を表示するための第1および第2のサブ表示領域220,230を形成する(ST5)。
そして、優先順位制御機能部572が、サムネイル表示制御機能部571により表示デバイス20に表示されるサムネイル画像を、規定する優先順位に従ってサブ表示領域に表示させる(ST6)。
この輝度を落としてサムネイル画像を表示する機能は、優先順位に従ったサムネイル画像表示機能にかかわりなく発現される。
これにより、カーソル制御機能部574が、リモートコマンダ60の上下左右への移動指示スイッチの操作に応じたマイクロコンピュータ56の移動指示命令CMDに従ってカーソルCSLを、重畳回路54を通して指示された方向に移動させる(ST10)。
これにより、カーソル制御機能部574が、リモートコマンダ60のズームスイッチの操作に応じたマイクロコンピュータ56の選択指示命令CMDに従ってカーソルCSLで選択されたサムネイル画像を、重畳回路54を通して拡大表示させる(ST12)。
この場合、図8に示すように、決定キーで選定されたサムネイル画像が、中央部のメイン表示領域210上に重ねて拡大表示される。
これにより、カーソル制御機能部574は、マイクロコンピュータ56のズーム解除指示命令CMDを受けると拡大表示を停止し、メイン表示領域210への通常映像の表示に切り換える(ST14)。
録画が開始されると、顔認識記録部55が、受信した映像情報を、顔認識処理を行いながら記録再生部80に録画を行う(ST16)。
顔認識記録部55は、顔認識した認識画像情報をOSD制御回路57に供給する。
映像再生領域240は、表示領域21の6割り〜8割り程度の大きさをもって形成され、記録再生部80に記録されている録画映像が再生表示される。
サブ表示領域250には、たとえば8つのサムネイル表示領域251〜258が形成され、これらにあらかじめ指定された顔認識対象の画がサムネイル画像として表示される(ST17)。
このとき、顔認識画像制御機能部575は、あらかじめ指定された顔認識対象の最初に認識した画像で、サムネイル画像として代表画を置き換える。顔認識画像制御機能部575は、あらかじめ指定された顔認識対象の画をサムネイル画像として表示し、サムネイル画像を録画している映像の顔認識した画像で置き換える。
また、顔認識画像制御機能部575は、顔認識で得られ置き換えたサムネイル画像が選択されると、サムネイル画像を顔認識で得た記録再生部80に録画されている映像を再生させる。
制御部50は、受信したテレビジョン放送信号に含まれる映像情報およびサムネイル画像の表示デバイス20への表示を制御する機能を有する。
そして、制御部50は、優先順位に応じてサムネイル画像を表示する機能を有する。
制御部50は、サムネイル画像を表示するための優先順位を、アクセス回数に応じて設定する機能を有する。
また、制御部50は、お気に入り順に順番付けされた優先順位に応じてサムネイル画像を表示する機能を有している。
この場合、制御部50は、たとえば当初はお気に入り順に順番付けされた優先順位を適用し、アクセス回数の情報が閾値以上に蓄積されると、アクセス回数に応じて優先順位を再割り当てるような機能を持つことも可能である。
制御部50は、複数のサムネイル画像を、優先順位に従って設定される表示領域に表示する機能を有する。
すなわち、本実施形態によれば、サムネイル画像をユーザの好みに合った順番で表示させることができ、使い易いという利点がある。
この場合、制御部50は、サムネイル画像の一部の輝度を高くして表示する機能を有する。
また、制御部50は、カーソル等で選択されたサムネイル画像の輝度を高くして表示する機能を有する。制御部50は、複数のサムネイル画像を表示する場合、選択されたサムネイル画像の輝度を高くして表示する機能を有している。
すなわち、中央の放送映像がメインである場合に、画面の側部にあるサムネイル画像が目立つことがなくなり、映像の視聴を妨げることを削減できる。
そして、制御部50は、録画する番組のサムネイル画像として顔認識されたシーンで代表画を置き換える機能を有している。
この場合、制御部50は、あらかじめ指定された顔認識対象の最初に認識した画像で、サムネイル画像として代表画を置き換える。
制御部50は、あらかじめ指定された顔認識対象の画をサムネイル画像として表示し、サムネイル画像を録画している映像の顔認識した画像で置き換える機能を有している。
また、制御部50は、顔認識で得られ置き換えたサムネイル画像が選択されると、サムネイル画像を顔認識で得た記録再生部80に録画されている映像を再生する機能を有する。
また、このようなプログラムは、半導体メモリ、磁気ディスク、光ディスク、フロッピー(登録商標)ディスク等の記録媒体、この記録媒体をセットしたコンピュータによりアクセスし上記プログラムを実行するように構成可能である。
Claims (11)
- テレビジョン放送信号を受信する受信部と、
上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像を表示可能な表示部と、
上記受信部で受信した上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像の上記表示部への表示を制御する制御部と、を有し、
上記制御部は、
アクセス回数に応じて設定する優先順位に応じて上記サムネイル画像を表示し、かつ、
複数のサムネイル画像を、上記優先順位に従って設定される表示領域に表示し、
上記表示部に、映像を表示するメイン表示領域と、当該メイン表示領域に並列に、上記サムネイル画像を表示するためのサブ表示領域とを形成し、
上記サブ表示領域には、上記メイン表示領域に近い側から優先順位の高いサムネイル画像を表示する機能を含み、
上記メイン表示領域に映像を表示するとともに上記サブ表示領域にサムネイル画像を表示する場合、上記メイン表示領域に表示される映像より、上記サムネイル画像の輝度を落として上記サブ表示領域に表示する
表示制御装置。 - 上記制御部は、
上記サブ表示領域に上記メイン表示領域の映像より輝度を落とし上記サムネイル画像を表示する場合、スポットライトが当たっているように当該サムネイル画像の周辺部の輝度を落として暗くし、上記メイン表示領域の映像より目立たないように表示輝度制御を行う
請求項1記載の表示制御装置。 - 上記制御部は、
表示している映像の輝度が上記サムネイル画像の輝度より高い上記メイン表示領域に設定されたカーソルが上記サブ表示領域の一のサムネイル画像に移動されて指定されると、上記メイン表示領域の映像の輝度を落とし、上記カーソルで指定された上記サムネイル画像の輝度を高くして表示する
請求項1または2記載の表示制御装置。 - 上記制御部は、
上記カーソルで指定されている上記サムネイル画像が選択されると、当該選択されたサムネイル画像を輝度を高くして上記メイン表示領域上に重ねて拡大表示する
請求項3記載の表示制御装置。 - 上記制御部は、
当初はお気に入り順に順番付けされた優先順位を適用し、アクセス回数の情報が閾値以上に蓄積されると、アクセス回数に応じて優先順位を再割り当てする
請求項1から4のいずれか一に記載の表示制御装置。 - 上記制御部は、
上記表示部の中央部に、上記映像を表示する上記メイン表示領域を形成し、当該メイン表示領域の両側に並列に、上記サムネイル画像を表示するための第1および第2のサブ表示領域を形成し、
上記第1のサブ表示領域および上記第2のサブ表示領域の少なくとも一方のサブ表示領域には、上記メイン表示領域に近い側から優先順位の高いサムネイル画像を表示する
請求項1から5のいずれか一に記載の表示制御装置。 - テレビジョン放送信号を受信する受信ステップと、
上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像を表示部に表示する表示ステップと、
上記受信ステップで受信した上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像の上記表示部への表示を制御する制御ステップと、を有し、
上記制御ステップにおいて、
アクセス回数に応じて設定する優先順位に応じて上記サムネイル画像を表示し、かつ、
複数のサムネイル画像を、上記優先順位に従って設定される表示領域に表示し、
上記表示部に、映像を表示するメイン表示領域と、当該メイン表示領域に並列に、上記サムネイル画像を表示するためのサブ表示領域とを形成し、
上記サブ表示領域には、上記メイン表示領域に近い側から優先順位の高いサムネイル画像を表示し、
上記メイン表示領域に映像を表示するとともに上記サブ表示領域にサムネイル画像を表示する場合、上記メイン表示領域に表示される映像より、上記サムネイル画像の輝度を落として上記サブ表示領域に表示する
表示制御方法。 - 上記制御ステップにおいて、
上記サブ表示領域に上記メイン表示領域の映像より輝度を落とし上記サムネイル画像を表示する場合、スポットライトが当たっているように当該サムネイル画像の周辺部の輝度を落として暗くし、上記メイン表示領域の映像より目立たないように表示輝度制御を行う
請求項7記載の表示制御方法。 - 上記制御ステップにおいて、
表示している映像の輝度が上記サムネイル画像の輝度より高い上記メイン表示領域に設定されたカーソルが上記サブ表示領域の一のサムネイル画像に移動されて指定されると、上記メイン表示領域の映像の輝度を落とし、上記カーソルで指定された上記サムネイル画像の輝度を高くして表示し、
上記カーソルで指定されている上記サムネイル画像が選択されると、当該選択されたサムネイル画像を輝度を高くして上記メイン表示領域上に重ねて拡大表示する
請求項7または8記載の表示制御方法。 - 上記制御ステップにおいて、
当初はお気に入り順に順番付けされた優先順位を適用し、アクセス回数の情報が閾値以上に蓄積されると、アクセス回数に応じて優先順位を再割り当てする
請求項7から9のいずれか一に記載の表示制御方法。 - テレビジョン放送信号を受信する受信処理と、
上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像を表示部に表示する表示処理と、
上記受信処理で受信した上記テレビジョン放送信号に含まれる映像情報およびサムネイル画像の上記表示部への表示を制御する制御処理と、を有し、
上記制御処理において、
アクセス回数に応じて設定する優先順位に応じて上記サムネイル画像を表示し、かつ、
複数のサムネイル画像を、上記優先順位に従って設定される表示領域に表示し、
上記表示部に、映像を表示するメイン表示領域と、当該メイン表示領域に並列に、上記サムネイル画像を表示するためのサブ表示領域とを形成し、
上記サブ表示領域には、上記メイン表示領域に近い側から優先順位の高いサムネイル画像を表示し、
上記メイン表示領域に映像を表示するとともに上記サブ表示領域にサムネイル画像を表示する場合、上記メイン表示領域に表示される映像より、上記サムネイル画像の輝度を落として上記サブ表示領域に表示する
表示制御処理をコンピュータに実行させるプログラム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008243259A JP4683103B2 (ja) | 2008-09-22 | 2008-09-22 | 表示制御装置、表示制御方法、およびプログラム |
EP09170716A EP2166751A3 (en) | 2008-09-22 | 2009-09-18 | Display control device, display control method, and program |
CN200910178617A CN101686351A (zh) | 2008-09-22 | 2009-09-22 | 显示控制装置、显示控制方法和程序 |
CN2012103272297A CN102833502A (zh) | 2008-09-22 | 2009-09-22 | 显示控制装置、显示控制方法和程序 |
US12/586,446 US8484682B2 (en) | 2008-09-22 | 2009-09-22 | Display control device, display control method, and program |
US13/908,197 US9191714B2 (en) | 2008-09-22 | 2013-06-03 | Display control device, display control method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008243259A JP4683103B2 (ja) | 2008-09-22 | 2008-09-22 | 表示制御装置、表示制御方法、およびプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010274661A Division JP5067472B2 (ja) | 2010-12-09 | 2010-12-09 | 表示制御装置、表示制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010074787A JP2010074787A (ja) | 2010-04-02 |
JP4683103B2 true JP4683103B2 (ja) | 2011-05-11 |
Family
ID=41352172
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008243259A Expired - Fee Related JP4683103B2 (ja) | 2008-09-22 | 2008-09-22 | 表示制御装置、表示制御方法、およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US8484682B2 (ja) |
EP (1) | EP2166751A3 (ja) |
JP (1) | JP4683103B2 (ja) |
CN (2) | CN102833502A (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9462318B2 (en) * | 2009-11-03 | 2016-10-04 | At&T Intellectual Property I, L.P. | System for media program management |
JP5396620B2 (ja) * | 2010-01-08 | 2014-01-22 | 任天堂株式会社 | 情報処理プログラム及び情報処理装置 |
CN101980144B (zh) * | 2010-11-05 | 2012-01-18 | 深圳市合正汽车电子有限公司 | 车载电脑多屏显示方法和系统 |
KR102056193B1 (ko) * | 2014-01-22 | 2019-12-16 | 엘지전자 주식회사 | 이동 단말기 및 그 제어 방법 |
JP6120793B2 (ja) * | 2014-03-24 | 2017-04-26 | 株式会社ドワンゴ | 端末装置、動画配信装置、及びプログラム |
KR20150137452A (ko) * | 2014-05-29 | 2015-12-09 | 삼성전자주식회사 | 디스플레이 장치 제어 방법 및 이를 위한 원격 제어 장치 |
US9432702B2 (en) * | 2014-07-07 | 2016-08-30 | TCL Research America Inc. | System and method for video program recognition |
EP3169077A4 (en) * | 2014-07-10 | 2018-03-28 | Sony Corporation | Data processing apparatus, receiving apparatus, data processing method, and program |
CN104270678B (zh) * | 2014-09-05 | 2018-05-08 | 广州金山网络科技有限公司 | 一种略缩图显示方法、装置以及系统 |
CN104965872B (zh) * | 2015-06-11 | 2019-04-26 | 联想(北京)有限公司 | 一种信息处理方法和电子设备 |
CN105163183B (zh) * | 2015-08-28 | 2018-08-07 | 北京奇艺世纪科技有限公司 | 一种视频图片的筛选方法及装置 |
CN105721931A (zh) * | 2016-01-21 | 2016-06-29 | 青岛海信电器股份有限公司 | 电视语音控制方法、电视及终端设备 |
JP6640595B2 (ja) * | 2016-02-19 | 2020-02-05 | ソニーモバイルコミュニケーションズ株式会社 | 情報処理装置、情報処理方法およびプログラム |
US10382634B2 (en) * | 2016-05-06 | 2019-08-13 | Fuji Xerox Co., Ltd. | Information processing apparatus and non-transitory computer readable medium configured to generate and change a display menu |
US10979774B2 (en) * | 2019-03-27 | 2021-04-13 | Rovi Guides, Inc. | Systems and methods for tagging images for placement in portions of a graphical layout based on image characteristics |
US10853982B2 (en) | 2019-03-27 | 2020-12-01 | Rovi Guides, Inc. | Systems and methods for selecting images for placement in portions of a graphical layout |
US10922528B2 (en) * | 2019-03-27 | 2021-02-16 | Rovi Guides, Inc. | Systems and methods for tagging images for placement in portions of a graphical layout based on relative characteristics of depicted faces |
JP2020167517A (ja) * | 2019-03-29 | 2020-10-08 | ソニー株式会社 | 画像処理装置と画像処理方法とプログラムおよび撮像装置 |
CN110413115B (zh) * | 2019-07-23 | 2023-02-28 | Oppo广东移动通信有限公司 | 显示控制方法及相关设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11164215A (ja) * | 1997-11-28 | 1999-06-18 | Toshiba Corp | テレビジョン受像機 |
JP2001167110A (ja) * | 1999-12-08 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 画像検索方法及びその装置 |
JP2005192223A (ja) * | 1995-02-06 | 2005-07-14 | Sony Corp | 受信装置および情報処理方法 |
JP2008072336A (ja) * | 2006-09-13 | 2008-03-27 | Sony Computer Entertainment Inc | 復号装置および復号方法 |
JP2008098811A (ja) * | 2006-10-10 | 2008-04-24 | Nikon Corp | 画像閲覧装置、画像閲覧システムおよび画像閲覧用プログラム |
JP2008103784A (ja) * | 2006-10-17 | 2008-05-01 | Hitachi Ltd | 映像記録装置 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02112567A (ja) | 1988-06-30 | 1990-04-25 | Hideaki Otaka | スライド式車庫装置 |
JP3082216B2 (ja) * | 1990-07-17 | 2000-08-28 | ソニー株式会社 | テレビジョン受像機 |
JP2002064795A (ja) | 2000-08-18 | 2002-02-28 | Sony Corp | 画像伝送装置および方法、画像記録装置および方法、記録装置および方法、再生装置および方法、記録再生装置および方法、並びに記録媒体 |
US7873972B2 (en) * | 2001-06-01 | 2011-01-18 | Jlb Ventures Llc | Method and apparatus for generating a mosaic style electronic program guide |
TW544634B (en) * | 2001-10-05 | 2003-08-01 | Newsoft Technology Corp | Thumbnail sequence generation system and method |
JP2005303743A (ja) | 2004-04-13 | 2005-10-27 | Daikin Ind Ltd | 情報処理装置および情報処理方法、プログラム、並びに、情報処理システム |
US20060004698A1 (en) * | 2004-06-30 | 2006-01-05 | Nokia Corporation | Automated prioritization of user data files |
US20070204238A1 (en) * | 2006-02-27 | 2007-08-30 | Microsoft Corporation | Smart Video Presentation |
CA2647617A1 (en) * | 2006-03-28 | 2007-11-08 | Motionbox, Inc. | System and method for enabling social browsing of networked time-based media |
KR101265609B1 (ko) | 2006-07-18 | 2013-05-22 | 엘지전자 주식회사 | 방송 수신기 및 그의 화면 제어 방법 |
US20080109841A1 (en) * | 2006-10-23 | 2008-05-08 | Ashley Heather | Product information display and product linking |
JP2008217117A (ja) | 2007-02-28 | 2008-09-18 | Fujifilm Corp | 画像検索方法及び画像検索システム |
JP4998026B2 (ja) * | 2007-03-15 | 2012-08-15 | ソニー株式会社 | 画像処理装置、撮像装置、および画像表示制御方法、並びにコンピュータ・プログラム |
JP4817452B2 (ja) | 2007-03-26 | 2011-11-16 | パイオニア株式会社 | 情報表示装置、コンピュータプログラム及び制御方法 |
US8364660B2 (en) * | 2008-07-11 | 2013-01-29 | Videosurf, Inc. | Apparatus and software system for and method of performing a visual-relevance-rank subsequent search |
US8789105B2 (en) * | 2008-08-22 | 2014-07-22 | Mobiworldmedia | Methods and apparatus for delivering content from a television channel |
-
2008
- 2008-09-22 JP JP2008243259A patent/JP4683103B2/ja not_active Expired - Fee Related
-
2009
- 2009-09-18 EP EP09170716A patent/EP2166751A3/en not_active Withdrawn
- 2009-09-22 CN CN2012103272297A patent/CN102833502A/zh active Pending
- 2009-09-22 US US12/586,446 patent/US8484682B2/en not_active Expired - Fee Related
- 2009-09-22 CN CN200910178617A patent/CN101686351A/zh active Pending
-
2013
- 2013-06-03 US US13/908,197 patent/US9191714B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005192223A (ja) * | 1995-02-06 | 2005-07-14 | Sony Corp | 受信装置および情報処理方法 |
JPH11164215A (ja) * | 1997-11-28 | 1999-06-18 | Toshiba Corp | テレビジョン受像機 |
JP2001167110A (ja) * | 1999-12-08 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 画像検索方法及びその装置 |
JP2008072336A (ja) * | 2006-09-13 | 2008-03-27 | Sony Computer Entertainment Inc | 復号装置および復号方法 |
JP2008098811A (ja) * | 2006-10-10 | 2008-04-24 | Nikon Corp | 画像閲覧装置、画像閲覧システムおよび画像閲覧用プログラム |
JP2008103784A (ja) * | 2006-10-17 | 2008-05-01 | Hitachi Ltd | 映像記録装置 |
Also Published As
Publication number | Publication date |
---|---|
EP2166751A3 (en) | 2011-02-23 |
US9191714B2 (en) | 2015-11-17 |
CN102833502A (zh) | 2012-12-19 |
US20130263183A1 (en) | 2013-10-03 |
EP2166751A2 (en) | 2010-03-24 |
CN101686351A (zh) | 2010-03-31 |
US20100083317A1 (en) | 2010-04-01 |
US8484682B2 (en) | 2013-07-09 |
JP2010074787A (ja) | 2010-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4683103B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
CN101686352B (zh) | 显示控制装置、显示控制方法和程序 | |
JP4492462B2 (ja) | 電子機器、映像処理装置及び映像処理方法 | |
US8600211B2 (en) | Electronic apparatus, reproduction method, and program | |
US20090089837A1 (en) | Electronic Apparatus and Display Method | |
US8279282B2 (en) | Display control apparatus, display control method, and program | |
US20080136937A1 (en) | Image processing apparatus, image processing method, and program | |
JP5517598B2 (ja) | 映像再生装置及びその制御方法 | |
JP4614391B2 (ja) | 画像表示方法及び画像表示装置 | |
JP5067472B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
JP2004213486A (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
JP2005184071A (ja) | 情報再生装置、情報再生方法及び情報再生用プログラム並びに情報記録媒体 | |
JP2010074788A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
JP2010074789A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
JP5302876B2 (ja) | 映像表示装置、検知状態提示方法、プログラムおよび記録媒体 | |
KR100818401B1 (ko) | 디지털 방송 수신기에서 녹화물 재생 방법 | |
JP2006100982A (ja) | 画像再生装置および画像再生方法 | |
JP2011259232A (ja) | 表示装置及びその制御方法、プログラム並びに記録媒体 | |
JP2010074776A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
KR20070075728A (ko) | 디지털 방송 수신기에서 녹화물 탐색 방법 및 그 장치 | |
KR100494170B1 (ko) | 개인용 비디오 레코더 시스템의 영상 편집 방법 및 그 장치 | |
JP3089575U (ja) | デジタルビデオディスク再生装置 | |
JP2011097182A (ja) | コンテンツ編集装置、表示装置、コンテンツ編集方法 | |
JP2007110191A (ja) | 画像記録装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100127 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100730 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100803 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101026 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110111 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110124 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140218 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140218 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |