WO2014156896A1 - 表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体 - Google Patents

表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体 Download PDF

Info

Publication number
WO2014156896A1
WO2014156896A1 PCT/JP2014/057574 JP2014057574W WO2014156896A1 WO 2014156896 A1 WO2014156896 A1 WO 2014156896A1 JP 2014057574 W JP2014057574 W JP 2014057574W WO 2014156896 A1 WO2014156896 A1 WO 2014156896A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
size
image
character
sub
Prior art date
Application number
PCT/JP2014/057574
Other languages
English (en)
French (fr)
Inventor
賢治 石崎
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2013065209A external-priority patent/JP5607201B2/ja
Priority claimed from JP2013065205A external-priority patent/JP5575294B1/ja
Priority claimed from JP2013065208A external-priority patent/JP2014191116A/ja
Priority claimed from JP2013065210A external-priority patent/JP5623580B2/ja
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to CN201480007987.8A priority Critical patent/CN104981847B/zh
Priority to US14/762,006 priority patent/US9531992B2/en
Publication of WO2014156896A1 publication Critical patent/WO2014156896A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/222Control of the character-code memory
    • G09G5/227Resolution modifying circuits, e.g. variable screen formats, resolution change between memory contents and display screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363Graphics controllers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/391Resolution modifying circuits, e.g. variable screen formats
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/66Transforming electric information into light information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0613The adjustment depending on the type of the information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0442Handling or displaying different aspect ratios, or changing the aspect ratio
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Definitions

  • the present invention relates to a display device, a portable terminal, a television receiver including the display device, and a display method of the display device.
  • the present invention also relates to a display method program and a recording medium.
  • a user who uses a mobile terminal usually uses the mobile terminal at a close distance, for example, picks up and operates the mobile terminal, the user reads from the close distance to the mobile terminal. Characters are displayed in a size that can be. On the other hand, it is normal for a user who views a television to view from a position some distance away from the television.
  • an original image is displayed in an image forming region (display unit) using a reference character size and a character size ratio related to character data included in the original image data and an image size of the original image data. Describes an image processing apparatus for determining a target image size when changing the size of an original image.
  • Non-Patent Document 1 as a method for detecting characters included in an image, first, a character region is extracted from the image, and then a character region including a plurality of rows or columns is divided into rows or columns, and then divided. A method is disclosed in which each character included in the character region of each row or column is detected.
  • the present invention has been made in view of the above problems, and its main purpose is to display the content and the input image in an optimal display size when both the content and the input image input from the outside are displayed.
  • An object of the present invention is to provide a display device that can be used.
  • a display device includes a display unit that displays content and an input image input from an external device in different areas of the display unit, the content, and the input.
  • the position and the display position of the input image on the display unit are adjusted based on the aspect ratio of the content and the input image.
  • the display method of the display device includes a display step of displaying content and an input image input from the outside in different areas of the display unit, and the content and the input image are the above An adjustment step of adjusting the display size of the content and the display size of the input image so that the display size is displayed in a different area of the display unit.
  • the display position of the content on the display unit; The display position of the input image on the display unit is adjusted based on the aspect ratio of the content and the input image.
  • the adjusting unit adjusts the display position of the content and the input image based on each aspect ratio (ratio of vertical width to horizontal width).
  • the display device can display the content and the input image whose display size are adjusted based on the aspect ratio of the content and the input image at a suitable display position of the display unit. Therefore, the display device can display both the content and the input image with an optimal display size.
  • FIG. 1 It is a block diagram which shows the structure of the control part with which the television concerning one Embodiment of this invention is provided. It is a block diagram which shows the structure of the television which concerns on one Embodiment of this invention. It is a flowchart which shows an example of the process performed in the control part with which the television concerning one Embodiment of this invention is provided. It is a figure which shows an example of the display screen displayed on LCD which a display part of a portable terminal and television which concerns on one Embodiment of this invention, (a) is an example of the sub image displayed on the display part of a portable terminal. (B) shows an example of the main image and the sub-image after scaling displayed on the LCD of the television. FIG.
  • FIG 11 is a diagram illustrating an example of a scaled sub-image displayed on the LCD in case B. It is a figure which shows an example of the sub-image after scaling displayed on LCD in case C. It is a screen transition figure of the display screen of LCD when the minimum character size ratio in a sub image changes, (a) shows an example of the display screen before the minimum character size ratio changes, (b) is the minimum character An example of the display screen after the size ratio is changed is shown.
  • FIG. 10 is a diagram illustrating an example of a display screen displayed on the LCD in case D. It is a figure which shows an example of the display screen displayed on LCD in case D1. It is a figure which shows an example of the display screen displayed on LCD in case D2. It is a figure which shows an example of the display screen displayed on LCD in case D3.
  • FIG. 10 is a diagram illustrating an example of a display screen displayed on the LCD in case D. It is a figure which shows an example of the display screen displayed on LCD in case D1. It is a figure which shows an example of the display screen displayed on LCD in case D2. It is a figure which shows an example of the display screen displayed on LCD in case D3.
  • FIG. 10 is a diagram illustrating an example of a display screen displayed on the LCD in case D. It is a figure which shows an example of the display screen displayed on LCD in case D1. It is a figure which shows an example of the display screen displayed on LCD in case D2. It is a figure which shows an example of the display screen displayed on LCD in case
  • FIG. 10 is a diagram showing an example of a display screen displayed on the LCD in case E. It is a figure which shows an example of the display screen displayed on LCD in case E1. It is a figure which shows an example of the display screen displayed on LCD in case E2. It is a figure which shows an example of the display screen displayed on LCD in case E3. It is a figure which shows an example of the display screen displayed on LCD in the case F, (a) shows an example of a display screen when the vertical width of a sub-image after scaling exceeds the vertical width of LCD, ) Shows an example of a display screen when the vertical width of the main image after scaling exceeds the vertical width of the LCD.
  • FIG. 1 It is a flowchart which shows the flow of the process performed in the television which concerns on other embodiment of this invention. It is a figure which shows an example of the relationship between the size ratio data and change flag which are transmitted from the portable terminal which concerns on other embodiment of this invention, and the sub image after scaling displayed on a television, Comprising: (a) is a portable terminal 2 shows an example of data indicating size ratio data, a change flag, and a sub-image transmitted from, and (b) is a diagram showing an example of a display screen displayed on the LCD of the television. It is a figure which shows another example of the relationship between the size ratio data and change flag transmitted from the portable terminal which concerns on other embodiment of this invention, and the sub image after scaling displayed on the television 10, Comprising: FIG.
  • FIG. 7 is a diagram showing another example of the size ratio data, the change flag, and the data indicating the sub-image transmitted from the mobile terminal
  • (b) is a diagram showing another example of the display screen displayed on the LCD of the television. It is a figure which shows an example of the display screen displayed on LCD with which the television which concerns on further another embodiment of this invention is equipped, Comprising: (a) is a display in the case of carrying out 2 screens horizontal display of the main image and sub image after scaling. An example of the screen is shown, and (b) shows an example of the display screen when the scaled main image and sub-image are vertically displayed on two screens. It is a figure which shows an example of the display screen displayed on the television which concerns on further another embodiment of this invention.
  • FIG. 14 is a diagram showing another example of a display screen displayed on an LCD provided in a television according to still another embodiment of the present invention, in which (a) shows a constant aspect ratio between a sub-image and a scaled sub-image. An example of the display screen in the case of being leaned is shown, and (b) shows an example of the display screen in the case where the aspect ratio between the sub image and the scaled sub image is not kept constant.
  • FIG. 2 is a block diagram illustrating a configuration of the television 10 according to the present embodiment.
  • the television 10 includes an external input terminal 101, a terrestrial digital broadcast tuner 102, a satellite broadcast tuner 103, a recording / playback unit 104, a video selector 106, a video processing circuit (adjustment means) 107, an OSD. (On-Screen Display) generation unit 108, LCD (Liquid Crystal Display) controller (display means) 109, LCD (display unit) 110, audio selector 111, audio processing circuit 112, amplifier 113, speaker 114, external input unit 115, A ROM 116, a RAM 117, a control unit 118, an infrared light receiving unit 119, a camera 120, and a wireless communication unit 121 are provided.
  • the video signal path is indicated by a solid line
  • the audio signal path is indicated by a one-dot chain line
  • the data (control) path (bus) is indicated by a bold line.
  • the television 10 can be connected to the mobile terminal (external device) 30 via the external input unit 115 or the wireless communication unit 121.
  • the television 10 is configured to be remotely operable by a remote controller (remote controller) 20.
  • the external input terminal 101 includes a video input terminal 101a and an audio input terminal 101b.
  • the video input terminal 101a is for inputting a video signal, and is, for example, a DVI terminal.
  • the audio input terminal 101b is for inputting an audio signal, and is, for example, an S / PDIF terminal.
  • the external input terminal 101 is not limited to this, and may be an HDMI terminal in which the video input terminal 101a and the audio input terminal 101b are integrated.
  • the terrestrial digital broadcast tuner 102 is a tuner for receiving a broadcast program broadcast by terrestrial digital broadcast.
  • the terrestrial digital broadcast tuner 102 can demodulate an MPEG2 stream from a received signal and decode a video signal and an audio signal from the MPEG2 stream, for example.
  • the MPEG2 stream demodulated by the terrestrial digital broadcast tuner 102 is supplied to the recording / playback unit 104 via the bus.
  • the video signal and audio signal decoded by the terrestrial digital broadcast tuner 102 are supplied to the video selector 106 and the audio selector 111, respectively.
  • the control unit 118 controls which channel the terrestrial digital broadcast tuner 102 selects as a demodulation target.
  • the terrestrial digital broadcast tuner 102 is preferably a double tuner that can simultaneously demodulate two MPEG2 streams broadcast via different channels.
  • the terrestrial digital broadcast tuner 102 according to the present invention is not limited to a double tuner, and may be, for example, a single tuner or a plurality of tuners including three or more tuners.
  • the satellite broadcast tuner 103 is a tuner for receiving a broadcast program broadcast by satellite broadcast.
  • the satellite broadcast tuner 103 includes a BS broadcast tuner that receives a BS broadcast program that is broadcast by satellite using a broadcast satellite, and a CS broadcast tuner that receives a CS broadcast program that is broadcast by satellite using a communication satellite. Yes. Further, the satellite broadcast tuner 103 can demodulate the received signal MPEG2 stream and decode the video signal from the MPEG2 stream, for example.
  • the MPEG2 stream demodulated by the satellite broadcast tuner 103 is supplied to the recording / playback unit 104.
  • the video signal and audio signal decoded by the satellite broadcast tuner 103 are supplied to the video selector 106 and the audio selector 111, respectively.
  • the control unit 118 selects which channel the satellite broadcast tuner 103 demodulates the MPEG2 data stream transmitted through.
  • the BS broadcast tuner and the CS broadcast tuner included in the satellite broadcast tuner 103 can simultaneously receive two broadcast programs broadcast via different channels, like the terrestrial digital broadcast tuner 102.
  • a possible double tuner is preferred.
  • the recording / playback unit 104 acquires the MPEG2 stream from either the terrestrial digital broadcast tuner 102 or the satellite broadcast tuner 103, and writes the acquired MPEG2 stream to the recording device.
  • the recording / playback unit 104 reads the MPEG2 stream from the recording device, decodes the video signal and the audio signal from the read MPEG2 stream, and supplies them to the video selector 106 and the audio selector 111, respectively.
  • the recording / playback unit 104 includes a BD drive 105 built in the TV 10, an HD drive (not shown) built in the TV 10, and a USB- connected to a USB (Universal Serial Bus) interface (not shown).
  • An HD drive (not shown) or the like can be used as a recording device for recording an MPEG2 stream.
  • the video selector 106 is supplied with the four types of video signals described above. That is, (1) a video signal input from the external input terminal 101 (particularly the video input terminal 101a), (2) a video signal decoded by the terrestrial digital broadcast tuner 102, and (3) decoded by the satellite broadcast tuner 103. And (4) the video signal decoded by the recording / playback unit 104 (particularly the playback unit).
  • the video selector 106 selects one of the video signals (1) to (4).
  • the video signal selected by the video selector 106 is supplied to the video processing circuit 107. Note that which video signal the video selector 106 selects is controlled by the control unit 118.
  • the video processing circuit 107 performs image quality adjustment processing on the video signal supplied from the video selector 106.
  • the video processing circuit 107 performs scaling processing on the video signal supplied from the video selector 106.
  • the image quality adjustment processing refers to, for example, changing at least one of the luminance, sharpness, and contrast of the video represented by the video signal by processing the video signal.
  • the scaling processing refers to similar enlargement or similar reduction of the size of the video represented by the video signal by processing the video signal.
  • the video signal processed by the video processing circuit 107 is supplied to the LCD controller 109. Note that how the video processing circuit 107 changes the image quality and size may be controlled by the control unit 118.
  • the video processing circuit 107 further acquires display size information to be described later from the control unit 118.
  • the video processing circuit 107 based on the acquired display size information, the video signal supplied from the video selector 106 and the image signal indicating the image supplied from the portable terminal 30 via the external input unit 115 or the wireless communication unit 121. Apply scaling processing to. Details of the display size information and the scaling process will be described later.
  • the video signal supplied from the video selector 106 (that is, a video signal indicating an image displayed on the entire screen on the LCD 110) is also simply referred to as “main image” (content).
  • an image signal indicating an image supplied from the mobile terminal 30 (that is, an image signal indicating an image (a moving image or a still image) displayed on the mobile terminal 30) may be used.
  • sub-image input image
  • the OSD generation unit 108 generates (renders) an OSD image from the OSD data supplied from the control unit 118.
  • Examples of the OSD image generated by the OSD generation unit 108 include an electronic program guide.
  • As the OSD data for example, SVG (Scalable Vector Graphics) can be used.
  • the OSD image generated by the OSD generation unit 108 is superimposed on the video signal supplied from the video processing circuit 107 and supplied to the LCD controller 109.
  • the LCD controller 109 drives the LCD 110 to display the video represented by the video signal.
  • the LCD controller 109 displays the video represented by the video signal based on the video signal supplied from the video processing circuit 107 superimposed on the OSD image.
  • the LCD 110 is driven to display.
  • the above-described four types of audio signals are supplied to the audio selector 111. That is, (1) an audio signal input from the external input terminal 101 (particularly the audio input terminal 101b), (2) an audio signal decoded by the terrestrial digital broadcast tuner 102, and (3) decoded by the satellite broadcast tuner 103. And (4) the audio signal decoded by the recording / playback unit 104 (particularly the playback unit).
  • the audio selector 111 selects any one of the audio signals (1) to (4).
  • the audio signal selected by the audio selector 111 is supplied to the audio processing circuit 112. Note that which audio signal the audio selector 111 selects is controlled by the control unit 118. However, the selection of the video in the video selector 106 and the selection of the audio in the audio selector 111 are interlocked. For example, when the video selector 106 selects the video signal supplied from the terrestrial digital broadcast tuner 102, the audio is selected. The selector 111 also selects the audio signal supplied from the terrestrial digital broadcast tuner 102.
  • the audio processing circuit 112 performs volume adjustment processing on the audio signal supplied from the audio selector 111.
  • the audio processing circuit 112 performs sound quality adjustment processing on the audio signal supplied from the audio selector 111.
  • the volume adjustment processing refers to changing the volume of the voice represented by the voice signal by processing the voice signal.
  • the sound quality adjustment process refers to changing the frequency characteristics of the sound represented by the sound signal by processing the sound signal (for example, low frequency emphasis or high frequency emphasis).
  • the audio signal processed by the audio processing circuit 112 is supplied to the amplifier 113. Note that the control unit 118 controls how the sound processing circuit 112 changes the sound volume and sound quality.
  • the amplifier 113 drives the speaker 114 so as to output the audio represented by the audio signal.
  • Control part The control unit 118 controls each of the above units according to a remote control signal received from the remote control 20 via the infrared light receiving unit 119 and an image captured by the camera 120.
  • Control using the infrared light receiving unit 119 includes, for example, control for switching the reception channels of the terrestrial digital broadcast tuner 102 and the satellite broadcast tuner 103 according to a remote control signal, a video signal selected by the video selector 106 and the audio selector 111, and For example, control for switching an audio signal in accordance with a remote control signal.
  • Examples of the control using the camera 120 include control for switching how the image quality is adjusted by the video processing circuit 107 in accordance with the viewer specified based on the captured image.
  • control unit 118 has a function of creating a broadcast program table from EPG (Electronic Program Guide) data provided from each broadcasting station.
  • EPG Electronic Program Guide
  • the EPG data provided from each broadcasting station may be acquired using, for example, the digital terrestrial broadcasting tuner 102 or the satellite broadcasting tuner 103, or acquired from a server connected to a network (for example, the Internet). May be.
  • the ROM 116 is a readable and non-writable memory in which fixed data such as a program executed by the control unit 118 is stored.
  • the RAM 117 is a readable and writable memory in which variable data such as data referred to by the control unit 118 for calculation and data generated by the control unit 118 by calculation is stored. For example, a broadcast program table or the like is stored in the RAM 117.
  • the external input unit 115 and the wireless communication unit 121 are interfaces for connecting an external device such as the mobile terminal 30 by wire or wireless.
  • Examples of the external input unit 115 include an Ethernet (registered trademark) interface that can be connected to the Internet, but are not limited to this.
  • the external input unit 115 is, for example, an interface for wired connection such as a USB interface, ATA (Advanced Technology Attachment), ATAPI (ATA Packet Interface), IEEE 1394, HDMI (registered trademark) (High-Definition Multimedia Interface), and LAN. I just need it.
  • wireless communication unit 121 examples include wireless connection interfaces such as Bluetooth (registered trademark), Wi-Fi (registered trademark), and IEEE80211.
  • FIG. 1 is a block diagram illustrating a configuration of the control unit 118 included in the television 10 according to the present embodiment.
  • control unit 118 includes a switching unit 131, a character recognition unit (character size detection unit) 132, a distance detection unit (distance detection unit) 133, a user setting extraction unit (user specification unit). ) 134 and a display size calculation unit (adjustment means) 135.
  • the switching unit 131 switches whether to supply the sub image (input image) acquired by the external input unit 115 or the wireless communication unit 121 to the character recognition unit 132 and the display size calculation unit 135.
  • the switching unit 131 supplies the sub image to the character recognition unit 132 and the display size calculation unit 135, a character recognition process and a display size calculation process, which will be described later, are executed, and a sub image scaling process is executed in the video processing circuit 107. Is done.
  • the video processing circuit 107 may perform the scaling process on the sub image so that a sub image (after-scaling sub image described later) displayed on the LCD 110 has a predetermined display size.
  • the predetermined display size may be determined in advance by the user, or may be appropriately adjusted by the user via the remote controller 20, for example, with reference to the sub-image displayed on the LCD 100.
  • the video processing circuit 107 may employ a configuration in which the sub image is subjected to scaling processing so that the sub image displayed on the LCD 110 has the same size as that displayed on the mobile terminal 30.
  • the switching unit 131 switches between execution and non-execution of the sub-image scaling processing according to the result of the display size calculation processing in the video processing circuit 107.
  • the case where the sub-image scaling process according to the result of the display size calculation process can be executed is referred to as an ON state, and the case where it cannot be executed is referred to as an OFF state.
  • the character recognition unit 132 recognizes the character included in the sub-image supplied from the switching unit 131 and detects the smallest character (minimum character) size (hereinafter also referred to as the minimum character size) from the recognized characters. (Hereinafter also referred to as character recognition processing). Details of the character recognition process will be described later.
  • the distance detection unit 133 detects the distance from the television 10 to the user. Note that the distance from the television 10 to the user in the distance detection unit 133 may be detected from, for example, a captured image that is captured by the camera 120 and includes the user using the television 10. In addition, since the detection of the distance from the television 10 to the user can use a well-known technique, the description is abbreviate
  • the user setting extraction unit 134 extracts, for example, a user's favorite character size (reference character size) stored in a recording medium such as the RAM 117 and set in advance by a user who uses the television 10.
  • the reference character size is not particularly limited as long as it can be input in advance by operating the remote controller 20 or the like on the basis of the character size displayed on the LCD 110 when the distance between the television 10 and the user is 1000 mm. Is not to be done.
  • the user setting extraction unit 134 executes a process of specifying a user who uses the television 10 when extracting the reference character size.
  • the user using the television 10 can be identified by using a well-known technique from, for example, a captured image captured by the camera 120, and the description thereof is omitted here.
  • the display size calculation unit 135 is optimal for the user who uses (views) the television 10 when displaying the sub image on the LCD 110 from the minimum character size detected by the character recognition unit 132 and the size of the sub image. Display size calculation processing for calculating a correct display size is executed.
  • the display size calculation unit 135 supplies display size information indicating the calculated display size to the video processing circuit 107.
  • the display size calculation unit 135 and the video processing circuit 107 constitute an adjustment unit.
  • the display size calculation unit 135 is preset by (1) a minimum character size, (2) a distance from the television 10 to the user, and (3) a user using the television 10. Display size calculation processing is executed based on the reference character size. Details of the display size calculation process will be described later.
  • the television 10 can display characters included in the sub-image with a size suitable for the distance from the television 10 to the user by the above (1) and (2). Therefore, the television 10 can display the sub image in a size that allows the user to recognize the characters included in the sub image, regardless of the distance from the television 10 to the user.
  • the television 10 has a display size adjusted according to (3) so that characters included in the sub-image are matched to the user's preferred size regardless of the distance from the television 10 to the user. Can be displayed.
  • the display size calculation unit 135 will be described by taking as an example a configuration for executing the display size calculation processing based on (1) to (3), but the present invention is not limited to this. is not.
  • the display size calculation unit 135 may execute the display size calculation process based on (1) and (2), or may execute the display size calculation process based on (1) and (3). Good.
  • FIG. 3 is a flowchart illustrating an example of processing executed in the control unit 118 included in the television 10 according to the present embodiment.
  • step S101 When the external input unit 115 or the wireless communication unit 121 acquires a sub image (step S101), the control unit 118 determines whether or not the switching unit 131 is in an ON state (step S102). When the switching unit 131 is in the OFF state (NO in step S102), the control unit 118 controls the video processing circuit 107 so that the sub image is displayed on the LCD 110 as it is (step S103).
  • step S104 If the switching unit 131 is in the ON state (YES in step S102), the character recognition unit 132 performs a character recognition process on the sub-image supplied via the switching unit 131 (step S104).
  • the distance detection unit 133 detects the distance between the user who is using the television 10 and the television 10 from the captured image captured by the camera 120 (step S105). Further, the user setting extraction unit 134 identifies a user who is using the television 10 from the captured image captured by the camera 120, and extracts a reference character size preset by the identified user from the RAM 117 ( Step S106).
  • the display size calculation unit 135 includes (1) a minimum character size detected by the character recognition unit 132, (2) a distance from the television 10 to the user detected by the distance detection unit 133, and (3) a user setting extraction unit. Based on the reference character size extracted by 134, display size calculation processing is executed (step S107). The display size calculation unit 135 supplies the calculated display size to the video processing circuit 107 as display size information (step S108).
  • control unit 118 When the control unit 118 displays the sub-image on the LCD 110, the control unit 118 may repeatedly execute the processes in steps S101 to S108 described above.
  • FIG. 4 is a diagram illustrating an example of a display screen displayed on the display unit (not shown) of the mobile terminal 30 and the LCD 110 provided in the television 10 according to the present embodiment.
  • 4A shows an example of the sub image 3a displayed on the display unit of the mobile terminal 30, and
  • FIG. 4B shows an example of the main image 1a and the scaled sub image 3b displayed on the LCD 110 of the television 10. Is shown.
  • the length in the x-axis direction in FIG. 4 of the sub image, the main image, the scaled sub image, and the scaled main image, which will be described later, is also referred to as “horizontal width”, and the length in the y axis direction is referred to as “width”. Also referred to as “vertical width”.
  • the horizontal width of the sub-image 3a is Xs1 (mm) and the vertical width is Ys1 (mm).
  • the horizontal width of the minimum character size of the minimum character (“A” in FIG. 4A) included in the sub-image 3a is Xs2 (mm), and the vertical width is Ys2 (mm).
  • the horizontal width of the main image 1a is Xt1 (mm)
  • the vertical width is Yt1 (mm)
  • the horizontal width of the scaled sub-image 3b is Xds1 (mm)
  • the vertical width is Yds1.
  • the horizontal width of the minimum character size included in the scaled sub-image 3b is Xds2 (mm) and the vertical width is Yds2 (mm).
  • a reference character size is Ss (mm).
  • the display size calculation unit 135 performs scaling so that the aspect ratio (Ys1 / Xs1) of the sub-image 3a and the aspect ratio (Yds1 / Xds1) of the scaled sub-image 3b are constant.
  • a case where the display size of the sub-image 3b is calculated will be described as an example.
  • the display size calculator 135 calculates the display size (horizontal width Xds1 and vertical width Yds1) of the scaled sub-image 3b as follows.
  • the minimum character size included in the scaled sub-image 3b can be kept equal to or larger than the minimum size at which the user can recognize characters.
  • the display size calculation unit 135 displays the entire scaled sub-image 3b on the LCD 110 by reducing the size so that Xds1 ⁇ Xt1 and Yds1 ⁇ Yt1.
  • the display size calculation unit 135 does not reduce the scaled sub-image 3b, and the displayable range (scaled sub-image) of the scaled sub-image 3b is not necessary. A part of the image 3b) may be displayed on the LCD 110.
  • the display size of the scaled sub-image 3b calculated by the display size calculation unit 135 is divided into the following cases A to C.
  • Case A is the case where the results of the calculations of equations (4) and (5) are Xds1 ⁇ Xt1 and Yds1 ⁇ Yt1.
  • the display size of the scaled sub-image 3b calculated by the display size calculation unit 135 is equal to the calculation results of the equations (4) and (5).
  • Case B The results of the calculations of equations (4) and (5) are: (i) Xds1 ⁇ Xt1, and Yds1> Yt1, or (ii) Xds1> Xt1, and Yds1> Yt1, and (Yds1 / Xds1) ⁇ Case B is defined as (Yt1 / Xt1). In other words, in case B, the vertical width Yds1 of the scaled sub-image 3b is larger than the vertical width Yt1 of the LCD 110, as indicated by the dotted line in FIG.
  • FIG. 5 is a diagram illustrating an example of the scaled sub-image displayed on the LCD 110 in the case B.
  • the display size calculation unit 135 calculates the display size of the scaled sub-image 3b ′ by setting the value of Yds1 to Yt1 at the maximum.
  • Yds1 Yt1 (7) It becomes.
  • FIG. 6 is a diagram illustrating an example of the scaled sub-image displayed on the LCD 110 in the case C.
  • the display size calculation unit 135 calculates the display size of the scaled sub-image 3b ′′ by setting the value of Xds1 to Xt1 at the maximum as shown in FIG.
  • the television 10 displays a caution indicating that the size of the minimum character included in the scaled sub-image 3b ′′ is smaller than the optimum size for the user. May be. This caution may be generated by the OSD generation unit 108, for example. Further, the television 10 may display a character having a size optimal for the user so that the character can be compared with the smallest character included in the scaled sub-image 3b ′′.
  • the configuration in which the sub-image is subjected to the scaling process based on the calculated minimum character size has been described as an example, but the present invention is not limited to this.
  • the minimum character size ratio can be calculated by, for example, Xs2 / Xs1 and Ys2 / Ys1.
  • D 2000 mm
  • S 4 mm
  • Xt1 240 mm
  • Yt1 360 mm
  • FIG. 7 is a screen transition diagram of the display screen of the LCD 110 when the minimum character size ratio in the sub-image 3a changes.
  • FIG. 7A shows an example of a display screen before the minimum character size ratio changes
  • FIG. 7B shows an example of the display screen after the minimum character size ratio changes.
  • the television 10 can display the sub-image that has been subjected to the scaling process optimal for the user on the LCD 110 while being superimposed on the main image. .
  • the present invention is not limited to this.
  • a configuration in which the main image is scaled so as not to overlap the scaled sub-image, and the scaled sub-image and the scaled main image (scaled main image) are displayed in different areas of the LCD 110 may be employed. .
  • the television 10 can prevent the user from being able to see a part of the main image by superimposing the sub image on the main image when the sub image is displayed.
  • displaying the scaled sub-image and main image in different areas of the LCD 110 is also referred to as “two-screen display”.
  • the display size calculation unit 135 may calculate the display size of the scaled main image in the same manner as the calculation of the display size of the scaled sub-image described above.
  • the display size calculation unit 135 may calculate the display size of the scaled main image in the same manner as the calculation of the display size of the scaled sub-image described above.
  • FIG. 8 is a diagram illustrating an example of a display screen displayed on the mobile terminal 30 and the television 10 according to the present embodiment.
  • 8A shows an example of the sub image 3a displayed on the display unit of the mobile terminal 30
  • FIG. 8B shows an example of the main image 1a displayed on the LCD 110
  • FIG. 8C shows the LCD 110.
  • the display size calculation unit 135 sets each parameter as follows, for example, and similarly to the calculation of the display size of the scaled sub-image 3b, the scaled main image 1d The display size of the sub image 3d may be calculated.
  • the horizontal width of the scaled main image 1d is Xdt1 (mm)
  • the vertical width is Ydt1 (mm)
  • the horizontal width of the minimum character size included in the scaled main image 1d is Xdt2 (mm)
  • the vertical width is Ydt2 (mm).
  • the display size calculation unit 135 calculates the display size (horizontal width Xdt1 and vertical width Ydt1) of the scaled main image 1d, similarly to the calculation of the display size of the scaled sub-image 3b.
  • Xdt1 St * D * (Xt1 / 1000Xt2) (10)
  • Ydt1 St * D * (Yt1 / 1000Yt2) (11) Can be calculated.
  • the display size calculator 135 may supply the display size of the scaled main image 1d to the video processing circuit 107 as display size information together with the display size of the scaled sub-image 3d.
  • the video processing circuit 107 may perform scaling processing on both the sub image 3a and the main image 1a based on the display size information acquired from the display size calculation unit 135.
  • the scaled main image 1d and the scaled sub-image 3d are displayed on the LCD 110 in two screens, for example, as shown in FIG.
  • the characters included in each image are kept in a size suitable for the user, but the visibility of the entire image is reduced.
  • the display areas of the scaled sub-image 3d and the main image 1d overlap or the display size exceeds the size of the LCD 110, at least one of the images is interrupted in the middle, so that the entire image is visually recognized. The nature will decline.
  • the display size calculation unit 135 calculates the optimal size of each screen in each of cases D to F shown below.
  • the television 10 can, for example, (1) prioritize the display of the scaled main image 1d in each of cases D to F by the user, (2) prioritize the display of the scaled sub-image 3d, and (3) It is preferable to be able to set such that none of them has priority.
  • FIG. 9 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case D.
  • the display size calculation unit 135 calculates an adjustment value (also referred to as a display size adjustment value) for appropriately adjusting the display sizes of the scaled main image 1d and the scaled sub-image 3d.
  • Case D1 In case D, the priority of the scaled main image 1d is set to the television 10 in advance higher than the priority of the scaled sub-image 3d (that is, priority is given to the display of the scaled main image 1d). Case D1 is set). In the case D1, as shown in FIG. 10, the display size calculation unit 135 adjusts (enlarges) the size of only the scaled main image 1d on the LCD 110 and displays it as the scaled main image 1d ′. Thus, the display size adjustment value is calculated.
  • FIG. 10 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case D1.
  • the display size calculation unit 135 displays the scaled main image 1d ′ when the display size of the scaled main image 1d ′ is displayed in a state where one end of the scaled sub-image 3d is in contact with one end in the longitudinal direction of the LCD 110.
  • the display size is adjusted so that the other end of the scaled main image 1d ′ is in contact with the other end of the scaled sub-image 3d in a state where one end of the image 1d ′ is in contact with the other end of the LCD 110 in the longitudinal direction. Display size adjustment value is calculated.
  • Case D2 is a case D in which the priority of the scaled sub-image 3d is set higher than the priority of the scaled main image 1d in advance in the television 10.
  • the display size calculator 135 adjusts the display size so that only the scaled sub-image 3d is adjusted and displayed on the LCD 110 as the scaled sub-image 3d ′ as shown in FIG. Calculate the value.
  • FIG. 11 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case D2.
  • Case D3 is a case D in which the priority equal to the scaled main image 1d and sub-image 3d is set in advance in the television 10.
  • the display size calculation unit 135 adjusts both the display sizes of the scaled main image 1d and the sub-image 3d, and scales the main image 1d ′ and the sub-image.
  • a display size adjustment value is calculated so as to be displayed on the LCD 110 as the image 3d ′.
  • FIG. 12 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case D3.
  • the display size calculation unit 135 adjusts the display size of the scaled main image and sub image and displays the same as in case D3, even when priority is not set for the scaled main image and sub image. As shown, the display size adjustment value may be calculated.
  • Case E is the case where the scaled main image 1d and the scaled sub-image 3d overlap as a result of the calculations of the expressions (4) and (10) in the display size calculator 135, that is, the case where Xds1 + Xdt1> Xt1.
  • the scaled main image 1d and the scaled sub-image 3d are displayed on the LCD 110 with a part of one image superimposed on a part of the other image, for example, as shown in FIG. Will be.
  • FIG. 13 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case E.
  • Case E1 is a case E in which priority is given to the display of the main image 1d after scaling on the television 10 in advance.
  • the display size calculator 135 adjusts (reduces) only the scaled sub-image 3d and displays it as the scaled sub-image 3d ′ on the LCD 110. The display size adjustment value is calculated.
  • FIG. 14 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case E1.
  • the display size calculation unit 135 displays the scaled sub image 3d ′ when the display size of the scaled sub image 3d ′ is displayed in a state where one end of the scaled main image 1d is in contact with one end in the longitudinal direction of the LCD 110. In a state where one end of the image 3d ′ is displayed in contact with the other end in the longitudinal direction of the LCD 110, the other end of the scaled sub-image 3d ′ has a display size in contact with the other end of the scaled main image 1d. Thus, the display size adjustment value is calculated.
  • Case E2 is a case E in which priority is given to the display of the sub-image 3d after scaling on the television 10 in advance.
  • the display size calculation unit 135 adjusts the display size so that only the scaled main image 1d is adjusted and displayed as the scaled main image 1d ′ on the LCD 110. An adjustment value is calculated.
  • FIG. 15 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case E2.
  • Case E3 is a case where priority equal to the scaled main image 1d and sub-image 3d is set in advance in the case of the case E.
  • the display size calculation unit 135 adjusts the display sizes of the scaled main image 1d and sub-image 3d, and scales the main image 1d ′ and sub-image 3d.
  • a display size adjustment value is calculated so as to be displayed on the LCD 110 as'.
  • FIG. 16 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case E3.
  • Case F When the vertical size of the scaled main image or the scaled sub-image exceeds the vertical width of the LCD 110 as a result of the calculation of Expressions (5) and (11) in the display size calculation unit 135, that is, Yds1> Yt1 or Ydt1> Case F is defined as Yt1. In case F, at least one of the scaled main image 1d and the scaled sub-image 3d cannot be displayed entirely on the LCD 110 as shown in FIGS. 17A and 17B, for example.
  • FIG. 17 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case F.
  • FIG. 17A shows an example of a display screen when the vertical width of the scaled sub-image 3d exceeds the vertical width of the LCD 110
  • FIG. 17B shows the vertical width of the scaled main image 1d that is the vertical width of the LCD 110.
  • An example of the display screen in the case of exceeding is shown.
  • Case F1 is a case where the priority of the scaled main image 1d is set to the television 10 in advance in advance.
  • the display size calculation unit 135 calculates the display size adjustment value so that the scaled main image 1d is preferentially displayed on the LCD 110 as shown in FIG.
  • FIG. 18 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case F1.
  • FIG. 18A shows an example of a display screen when the scaled sub-image 3d is adjusted while maintaining the display size of the scaled main image 1d
  • FIG. 18B shows the vertical width of the scaled main image 1d. Shows an example of a display screen when adjusted in accordance with the vertical width of the LCD 110.
  • the display size calculation unit 135 displays one end of the scaled sub-image 3d ′ when the display size of the scaled sub-image 3d ′ is displayed in a state where one end of the scaled main image 1d is in contact with one end in the longitudinal direction of the LCD 110. Display size adjustment so that the other end of the scaled sub-image 'is in contact with the other end of the scaled main image 1d in a state where the image is displayed in contact with the other end of the LCD 110 in the longitudinal direction. Calculate the value.
  • the display size calculator 135 determines the vertical width of the scaled main image 1d ′ and the vertical width of the LCD 110. So that the display size adjustment value of the scaled main image 2d ′ is calculated.
  • the display size of the scaled main image 1d ′ adjusted by the display size adjustment value is the LCD 110. Matches the size of. Therefore, as shown in FIG. 18B, only the scaled main image 1d 'is displayed on the LCD 110.
  • Case F2 is a case F in which the priority of the scaled sub-image 3d is set in advance in the television 10 in advance.
  • the display size calculation unit 135 calculates the display size adjustment value so that the scaled sub-image 3d is preferentially displayed on the LCD 110 as shown in FIG.
  • FIG. 19 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case F2.
  • FIG. 19A shows an example of a display screen when the vertical width of the scaled sub-image 3d ′ is displayed in accordance with the vertical width of the LCD 110
  • FIG. 19B shows the display size of the scaled sub-image 3d.
  • 7 shows an example of a display screen when the scaled main image 1d ′ is adjusted while maintaining the above.
  • Case F3 is a case where priority equal to the scaled main image 1d and sub-image 3d is set on the television 10 in advance.
  • the display size calculation unit 135 adjusts the display sizes of the scaled main image 1d and the sub image 3d, and scales the main image 1d ′ and the sub image.
  • the display size adjustment value is calculated so as to be displayed on the LCD 110 as 3d ′.
  • FIG. 20 is a diagram illustrating an example of a display screen displayed on the LCD 110 in the case F3.
  • FIG. 20A shows an example of a display screen when the scaled main image 1d and sub-image 3d are reduced and adjusted at an equal reduction ratio
  • FIG. 20B shows the scaled main image 1d and sub-image 3d.
  • the other example of the display screen at the time of reducing and adjusting the sub image 3d by the equal reduction ratio is shown.
  • the display size calculation unit 135 calculates the display size adjustment values of the scaled main image and sub image according to the preset priority as described above.
  • the display size calculation unit 135 supplies the calculated display size adjustment value to the video processing circuit 107 as display size information together with the display sizes of the main image and the sub image after scaling.
  • the video processing circuit 107 performs scaling processing on the main image and the sub image based on the display size information (that is, the display size and the display size adjustment value) supplied from the display size calculation unit 135.
  • the television 10 can display the scaled main image and the scaled sub-image displayed on the LCD 110 so as to contact each other as described above.
  • the television 10 can display the scaled main image and the scaled sub-image without causing a gap between the images.
  • the television 10 can display a part of the scaled main image and a part of the scaled sub-image without superimposing them.
  • the television 10 can display the entire scaled main image and the scaled sub-image on the LCD 110.
  • the scaled main image 1d and the scaled sub-image 3d are described by taking as an example a configuration in which the scaled main image 1d and the scaled sub-image 3d are in contact with one side along the longitudinal direction of the LCD 110. It is not limited to. For example, as shown in FIG. 21, a configuration is adopted in which the center of the vertical width of the scaled main image 1d and the scaled sub-image 3d is displayed so as to be positioned at the center of one side along the lateral direction of the LCD 110. You can also
  • FIG. 21 is a diagram showing another example of the display screen displayed on the LCD 110 of the television 10 according to the present embodiment.
  • the television 10 is similar to the sub image in that (1) the minimum character size in the main image and (2) the characters included in the main image from the television 10 to the user from the distance from the television 10 to the user. It can be displayed in a size suitable for the distance. Also, the TV 10 adjusts the main image based on the reference character size so that the characters included in the main image match the user's preferred size regardless of the distance from the TV 10 to the user. Can be displayed in the displayed size.
  • the display size calculation unit 135 sets a display size adjustment value for further adjusting the display size of at least one of the sub-image and the main image after scaling (after adjusting the display size) according to each priority. calculate.
  • the video processing circuit 107 further adjusts the display size of at least one of the scaled sub-image and main image based on the display size adjustment value.
  • the television 10 can display the sub image and the main image with a more appropriate display size according to the priority of the input image and the content.
  • the television 10 indicates that the size of the minimum character included in at least one of the scaled main image and sub-image is smaller than the optimum size for the user, as in cases B and C. A caution may be displayed.
  • the television 10 may display a character having a size optimal for the user so that it can be compared with the minimum character included in the scaled sub-image.
  • FIG. 22 is a block diagram illustrating a configuration of the character recognition unit 132 of the control unit 118 included in the television 10 according to the present embodiment.
  • the character recognition unit 132 includes a character region detection unit (character region detection unit) 141, a minimum character region detection unit (character size detection unit) 142, and a minimum character size detection unit. (Character size detection means) 143 is provided.
  • the character area detection unit 141 detects an area (character area) including characters from the sub-image input from the mobile terminal 30. In addition, the character area detection unit 141 detects a character area including a plurality of rows or columns as one character area for each row or each column. In addition, about the process which detects a character area from a subimage, since a well-known technique can be utilized, the description is abbreviate
  • the minimum character area detection unit 142 detects a character area (minimum character area) including the smallest character from the character areas detected by the character area detection unit 141.
  • the minimum character area detector 142 calculates the size of each character area detected by the character area detector 141.
  • the minimum character area detection unit 142 detects the smallest area of the horizontal width Xi or the vertical width Yi as the minimum character area based on the calculated size of each character area.
  • the minimum character area detecting unit 142 first detects the character area having the smallest horizontal width Xi and the character area having the smallest vertical width Yi among the character areas detected by the character area detecting unit 141. Next, the minimum character area detecting unit 142 compares the value of the horizontal width Xi of the character area having the smallest horizontal width Xi with the value of the vertical width Yi of the character area having the smallest vertical width Yi, and determines a character area having a smaller value. Extract as the minimum character area. The minimum character area detection unit 142 may detect the minimum character area in this way, but the present invention is not limited to this.
  • the minimum character size detection unit 143 detects the size of the minimum character (minimum character size) included in the minimum character region extracted by the minimum character region detection unit 142.
  • the minimum character size detection unit 143 sets the value of the horizontal width Xi as the minimum character size when the horizontal width Xi of the minimum character region extracted by the minimum character region detection unit 142 is smaller than the vertical width Yi. To detect. The minimum character size detection unit 143 detects the value of the vertical width Yi as the minimum character size when the vertical width Yi of the minimum character area is smaller than the horizontal width Xi.
  • the minimum character size detection unit 143 detects a value having a smaller width of the horizontal width Xi and the vertical width Yi of the minimum character region detected by the minimum character region detection unit 142 as the minimum character size.
  • FIG. 23 is a flowchart showing the flow of character recognition processing according to this embodiment.
  • FIG. 24 is a diagram showing an outline of the character recognition process.
  • 24A shows an example of the sub-image
  • FIG. 24B shows an example of the character area detected by the character area detection unit 141
  • FIG. 24C is calculated by the minimum character size detection unit 143. An example of the size of a character area is shown.
  • the character region detection unit 141 detects a character region from the sub image (step S202). At this time, the character area detection unit 141 detects the character areas a1 to a5 from the sub-image as shown in FIG.
  • the minimum character area detecting unit 142 detects the minimum character area from among the character areas a1 to a5 (step S203). At this time, as shown in FIG. 24C, the minimum character area detecting unit 142 calculates the size (width X1 to X5 and width Y1 to Y5) of each character area a1 to a5. Then, the minimum character area detecting unit 142 detects a character area having the smallest value from the calculated horizontal widths X1 to X5 and vertical widths Y1 to Y5 as the minimum character area.
  • the minimum character size detector 143 detects the minimum character size from the minimum character area (step S204).
  • the minimum character size detection unit 143 does not detect the size of all the characters included in the sub-image, and the horizontal width (in the row direction) of the minimum character region detected by the minimum character region detection unit 142 is detected.
  • the value of the width), the vertical width (the width in the column direction), and the shortest width can be detected as the minimum character size included in the sub-image.
  • the television 10 does not need to perform a large amount of processing such as detecting all characters included in the sub-image and further detecting the size of each detected character. . Therefore, the television 10 can reduce the processing time relating to the detection of the minimum character size.
  • the sub-image may include characters of a plurality of sizes in one line (or one column) character area.
  • FIG. 25 is a diagram illustrating another example of the character recognition process according to the present embodiment. 25A shows an example of the size of the character area calculated by the minimum character size detection unit 143, and FIG. 25B shows another example of the size of the character area calculated by the minimum character size detection unit 143. Is shown.
  • the character area detection unit 141 detects one character area a6, and the minimum character area detection unit 142 detects the size (vertical length) as one character area a6.
  • the width Y6) may be calculated.
  • the character area detection unit 141 detects different character areas a7 and a8 for each different size character, and the minimum character area detection unit 142 detects the size of the character areas a7 and a8 ( Each of the vertical widths Y7 and Y8) may be detected.
  • the sub-image includes character areas including characters having the same font and font size, including character areas a9 including vertically long characters, and character areas a10 and a11 not including vertically long characters. May be included.
  • FIG. 26 is a diagram showing still another example of character recognition processing according to the present embodiment.
  • control unit (determination unit) 118 may determine whether the sub image is a moving image or a still image.
  • the character recognition unit 132 (more specifically, the character region detection unit 141) performs character recognition processing continuously or discretely when the control unit 118 determines that the sub-image is a moving image. If the sub image is determined to be a still image, the character recognition process may be executed only once when the sub image is acquired.
  • the character recognition unit 132 can stop the character recognition process after executing the character recognition process once. Power consumption can be reduced.
  • the television 10 alternately executes the character area detection process in the character area detection unit 141 and the minimum character size detection process in the minimum character size detection unit 143, for example, every predetermined period. You may employ
  • the television 10 executes only the character region detection processing in the character region detection unit 141 for 0 second to 2 seconds after the sub-image starts to be supplied, and the minimum character size for 2 seconds to 4 seconds. Only detection processing of the minimum character size in the detection unit 143 may be executed, and thereafter, these processing may be repeated alternately every 2 seconds (minimum character size detection method 1 at the time of execution of alternating processing).
  • the television 10 when the television 10 alternately executes the character region detection processing and the minimum character size detection processing for each predetermined period, the television 10 performs the character region detection processing and the minimum character size detection processing on the sub image. It is also possible to adopt a configuration that is executed for different frames that are configured (minimum character size detection method 2 when executing alternate processing).
  • the character region detection unit 141 supplies only the character region detection process at the time when the sub image starts to be supplied (that is, at the time of 0 second) for 0 to 2 seconds after the sub image starts to be supplied. Executed on the frame (character area detection target frame).
  • the minimum character size detection unit 143 supplies only the detection processing of the minimum character size for 2 to 4 seconds after the sub image starts to be supplied when 2 seconds have passed after the sub image starts to be supplied. Executed for the frame (character size detection target frame).
  • the minimum character size detection unit 143 detects the minimum character size only for the region corresponding to the character region detected from the character region detection target frame in the character region detection unit 141 among the character size detection target frames. Execute the process. Thereafter, the television 10 may repeat these two processes alternately every 2 seconds.
  • the character area detection process and the minimum character size detection process when the character area detection process and the minimum character size detection process are alternately executed for each predetermined period, the character area detection process and the minimum character size detection process constitute a sub-image.
  • the television 10 detects the minimum character size after the change even when the minimum character size ratio in the sub image changes, and the scaled sub image reflecting the change in the minimum character size. As a result, it is possible to shorten the time until display on the LCD 110.
  • the television 10 determines the following case G: , H, it is preferable to switch between the minimum character size detection methods 1 and 2 at the time of executing the alternate processing.
  • Case G is the case where the minimum character is included in the region in the character size detection target frame corresponding to the character region detected from the character region detection target frame.
  • the television 10 may execute the minimum character size detection method 2 at the time of executing the alternate processing.
  • the television 10 can quickly reflect the change in the minimum character size in the character area detected from the character area detection target frame by the character area detection unit 141 on the display size of the scaled sub-image.
  • Case H is a case where the minimum character is not included in the area in the character size detection target frame corresponding to the character area detected from the character area detection target frame.
  • the television 10 only has to execute the minimum character size detection method 1 during execution of the alternate processing.
  • the television 10 detects the character size for the character area detected from the character area detection target frame even though the character area detected from the character area detection target frame does not include the minimum character. Is executed, and it is possible to prevent an erroneous minimum character size from being detected.
  • cases H1 and H2 below can be cited as examples.
  • the minimum character in the character size detection target frame, the minimum character is not included in the region corresponding to the character region detected from the character region detection target frame (the minimum character disappears), and the minimum character is included in the other region. This is the case.
  • the character included in the region corresponding to the character region detected from the character region detection target frame is not the minimum character, and the minimum character is included in the other region. Is the case.
  • the control unit 118 applies to a frame immediately before its own frame among a plurality of frames supplied immediately before the character area detection target frame.
  • a case H can be determined when the number of frames in which the character area has changed is equal to or greater than a predetermined number.
  • the predetermined number may be, for example, half of a plurality of frames supplied immediately before the character area detection target frame, or may be all the numbers, and is not particularly limited. .
  • the minimum character size detection unit 143 can detect the minimum character size from the sub-image. Therefore, the television 10 can detect the minimum character size from the sub image regardless of whether or not information indicating the size of the character included in the sub image is supplied from the mobile terminal 30 together with the sub image. As a result, the television 10 has a display size calculated according to the detected minimum character size even when the mobile terminal 30 does not supply information indicating the size of characters included in the sub image together with the sub image. Thus, a scaling process can be applied to the sub-image.
  • the television 10 can detect the size of the minimum character regardless of the type of the mobile terminal 30 with the above-described configuration.
  • Examples of the type of the mobile terminal 30 include various terminals such as a mobile phone, a smartphone, and a tablet terminal, but are not limited thereto, and include different models of various terminals.
  • the character recognition unit 132 may execute the character recognition process only on a specific region of the sub image, such as the center of the sub image, for example, not the entire sub image. Thereby, since the range of the character recognition process in the character recognition part 132 can be made small, the processing speed of a character recognition process can be improved.
  • the character recognition unit 132 may not detect all the sizes of characters included in each character area. For example, the character recognition unit 132 detects only the character size of the first character among the characters included in each character region, and determines the minimum character size from the detected character size of the first character included in each character region. It may be detected.
  • the character recognizing unit 132 may not execute the character recognition process for each frame supplied as the sub image.
  • the character recognition process may be executed every predetermined period (for example, 1 second), or the character recognition process may be executed every predetermined number of frames (for example, 50 frames).
  • the character recognition unit 132 may determine the change amount of the sub image from the difference between two consecutive frames, and may execute the character recognition process only when the change amount is a predetermined value or more. Good.
  • the frequency of character recognition processing in the character recognition unit 132 may be arbitrarily set by the user operating the remote controller 20 or the like.
  • the display size calculation unit 135 when no character is included in the sub-image, the display size calculation unit 135 cannot calculate the display size corresponding to the minimum character size.
  • the video processing circuit 107 may perform the scaling process on the sub-image so as to obtain a predetermined display size, similarly to the case where the switching unit 131 is in the OFF state.
  • the video processing circuit 107 may employ a configuration in which the sub-image is subjected to scaling processing so that the scaled sub-image has the same size as that displayed on the mobile terminal 30.
  • the predetermined character can be a character whose ratio of character size to the sub-image (or character size itself) is predetermined.
  • the sub-image is an application execution screen, a menu screen, a screen for displaying an EPG, or the like
  • the predetermined character may be a character that is determined to be used in advance on each screen.
  • the character recognition process for the entire sub-image becomes unnecessary. can do.
  • the character area recognition process and the display size calculation process it takes a long time for the character area recognition process and the display size calculation process to execute the character recognition process only in the character area including the predetermined character, for example, when there are many character areas included in the sub-image. It can also be configured to execute only in such a case.
  • the minimum character size detection unit 143 detects the size of each character included in each character region detected by the character region detection unit 141, and sets the smallest character size among the detected character sizes as the minimum character size. You may employ
  • the character recognition unit 132 only needs to include the character region detection unit 141 and the minimum character size detection unit 143.
  • the character area detection unit 141 may detect the character area from the sub-image
  • the minimum character size detection unit 143 may detect the minimum character size only from the characters included in the character area.
  • FIG. 27 is a diagram illustrating an example of a sub-image according to the present modification.
  • 27A shows an example of a character area detected by the character area detection unit 141
  • FIG. 27B shows an example of a character size detected by the minimum character size detection unit 143.
  • the character area detection unit 141 detects the character areas a12 to a14 from the sub-image as shown in FIG. Then, the minimum character size detection unit 143 detects the size for each character included in the character areas a12 to a14.
  • the minimum character size detection unit 143 detects the character sizes X12 and Y12 from the character region a14, and detects the character sizes X13 and Y13 from the character region a13. Further, the minimum character size detection unit 143 detects two different character sizes X14a, Y14a and X14b, Y14b from the character region a14.
  • the minimum character size detection unit 143 detects the smallest character size (character sizes X14a and Y14b in the example shown in FIG. 27B) as the minimum character size among the detected character sizes.
  • the television 10 can detect the size of characters included in the sub-image in the character recognition unit 132 included in the control unit 118. Thereby, the television 10 can detect the size of the characters included in the sub image regardless of the mobile terminal 30 that supplies the sub image to the television 10.
  • the portable terminal 30 supplies size ratio data indicating the ratio of the minimum character size to the size of the sub image (minimum character size ratio) together with the sub image (display image) to the television (display device) 10. Will be described with reference to FIG.
  • FIG. 28 is a block diagram illustrating a main configuration of the mobile terminal 30 according to the present embodiment.
  • the sub image is a moving image composed of a plurality of frames.
  • the portable terminal 30 includes a control unit 301, a playback unit 302, a display unit 303, a storage unit 304, and a transmission unit (output unit) 305.
  • the control unit 301 comprehensively controls each unit of the mobile terminal 30. Further, as shown in FIG. 28, the control unit 301 includes a reproduction control unit 311 and a size ratio information generation unit 312. The reproduction control unit 311 controls driving of the reproduction unit 302 so that the display unit 303 displays the sub image.
  • the size ratio information generation unit 312 refers to the table stored in the storage unit 304, generates size ratio data indicating the minimum character size ratio from the sub image and the characters included in the sub image, and associates the sub image with the sub image. To the transmission unit 305. Details of the tables stored in the size ratio information generation unit 312 and the storage unit 304 will be described later.
  • the reproduction unit 302 displays the sub image on the display unit 303 based on the control of the reproduction control unit 311 included in the control unit 301.
  • the display unit 303 can be exemplified by an LCD, for example, but is not particularly limited.
  • the transmission unit 305 transmits the sub image and the size ratio data associated with the sub image supplied from the size ratio information generation unit 312 of the control unit 301 to a display device typified by the television 10.
  • the transmission of the sub image and the size ratio data in the transmission unit 305 may be realized by, for example, wired communication using an HDMI cable (not shown) or wireless communication using Bluetooth (registered trademark) or the like. It may be realized.
  • the size ratio information generation unit 312 includes a character recognition unit (detection unit) 321, a minimum character size ratio calculation unit (size ratio calculation unit) 322, and a size ratio change determination unit (determination unit) 323. It has. Further, the storage unit 304 stores a size ratio table 341 and a change flag table 342.
  • the character recognition unit 321 recognizes characters included in the sub-image displayed on the display unit 303 and detects a minimum character size from the recognized characters. In addition, about the detection of the minimum character size in the character recognition part 321 with which the portable terminal 30 which concerns on this embodiment is provided, it performs by the process similar to the character recognition process in the character recognition part 132 with which the television 10 which concerns on Embodiment 1 is equipped. Therefore, detailed description thereof is omitted here.
  • the character recognition unit 321 supplies the detected minimum character size to the minimum character size ratio calculation unit 322 together with the sub image.
  • the minimum character size ratio calculation unit 322 calculates the ratio of the minimum character size to the sub image size (minimum character size ratio) based on the minimum character size supplied from the character recognition unit 321. Note that the minimum character size ratio (character size ratio) in the minimum character size ratio calculation unit 322 included in the mobile terminal 30 according to the present embodiment is calculated using the minimum character in the display size calculation unit 135 included in the television 10 according to the first embodiment. Since the calculation can be performed in the same manner as the calculation of the size ratio, detailed description thereof is omitted here.
  • the minimum character size ratio calculation unit 322 reads size ratio data indicating the calculated minimum character size ratio from the size ratio table 341 shown in FIG. 29 stored in the storage unit 304.
  • FIG. 29 is a diagram showing an example of the size ratio table 341 according to the present embodiment.
  • the size ratio table 341 includes a minimum width character size ratio (Xs2 / Xs1), a minimum vertical character size ratio (Ys2 / Ys1), and sizes indicating these minimum character size ratios. It is a table in which ratio data (8-bit signal) is associated.
  • the minimum character size ratio calculation unit 322 supplies the calculated minimum character size ratio and the size ratio data indicating the minimum character size ratio to the size ratio change determination unit 323 together with the sub image.
  • the size ratio change determination unit 323 determines whether or not the minimum character size ratio supplied from the minimum character size ratio calculation unit 322 is changed from the minimum character size ratio in the sub image one frame before supplied last time. . The size ratio change determination unit 323 determines that the minimum character size ratio has changed when at least one of the minimum horizontal character size ratio and the minimum vertical character size ratio in the sub-image one frame before changes. That's fine.
  • the size ratio change determination unit 323 receives a flag indicating the determination result of whether or not the minimum character size ratio has changed from the change flag table (flag table) 342 shown in FIG. read out.
  • FIG. 30 is a diagram showing an example of the change flag table 342 according to the present embodiment.
  • the change flag table 342 associates a change flag (1-bit signal) indicating whether or not the minimum character size ratio has changed with whether or not the minimum character size ratio has changed.
  • the change flag indicates that the minimum character size ratio is changed by the 1-bit signal “1”, and indicates that the minimum character size ratio is not changed by the 1-bit signal “0”. .
  • the portable terminal 30 acquires the size ratio data and the change flag corresponding to each frame constituting the sub image as described above.
  • the portable terminal 30 transmits the size ratio data and the change flag together with the sub image by transmitting the size ratio data and the change flag corresponding to each frame together with each frame constituting the sub image.
  • each of the television 10 and the mobile terminal 30 stores a common size ratio table and a change flag table.
  • FIG. 31 is a flowchart showing a flow of sub-image transmission processing in the size ratio information generation unit 312 of the mobile terminal 30 according to the present embodiment.
  • the character recognition unit 321 of the size ratio information generation unit 312 performs character recognition processing on the sub-image (step S301), and the detected minimum text size is converted into the minimum character size ratio calculation unit 322. To supply.
  • the minimum character size ratio calculation unit 322 calculates a minimum character size ratio from the supplied minimum character size and sub-image size (step S302), and stores size ratio data associated with the calculated minimum character size ratio in a size ratio table. Read from 341 (step S303).
  • the size ratio change determination unit 323 determines whether or not the size ratio in the sub-image of the current frame has changed compared to the size ratio in the sub-image of the immediately previous frame (step S304). When it is determined that the size ratio has not changed (NO in step S304), the size ratio change determination unit 323 reads the change flag “0” from the change flag table. If the size ratio change determination unit 323 determines that the size ratio has changed (YES in step S304), the size ratio change determination unit 323 reads the change flag “1” from the change flag table.
  • the control unit 301 transmits the change flag and the size ratio data acquired in steps S301 to S306, together with the sub image, to the television 10 via the transmission unit 305 (step S307).
  • FIG. 32 is a flowchart showing a flow of processing executed in the television 10 according to the present embodiment.
  • control unit 118 turns on the switching unit 131. It is determined whether it is in a state (step S402). When switching unit 131 is in the OFF state (NO in step S402), control unit 118 controls video processing circuit 107 so that the sub image is displayed on LCD 110 as it is (step S403).
  • step S404 the character recognition unit (character size detection means) 132 determines whether or not the change flag is “1” (step S404).
  • the display size calculation unit 135 displays the same display size as the display size of the immediately preceding frame of the current frame as the calculation result of the display size of the current frame constituting the sub-image. A size is set (step S405).
  • the display size calculation unit 135 supplies display size information indicating the display size of the immediately preceding frame set as the calculation result to the video processing circuit 107 (step S410). As a result, the same scaling process as that performed on the sub-image indicated by the immediately preceding frame of the current frame is performed on the sub-image indicated by the current frame.
  • the character recognition unit 132 obtains the minimum character size ratio in the current frame constituting the sub-image from the size ratio data (step S406).
  • the distance detection unit 133 detects a distance between the user using the television 10 and the television 10 from the captured image captured by the camera 120 (step S407). Further, the user setting extraction unit 134 identifies a user who is using the television 10 from the captured image captured by the camera 120, and extracts a reference character size preset by the identified user from the RAM 117 ( Step S408).
  • the display size calculation unit 135 displays based on (1) the minimum character size ratio indicated by the size ratio data, (2) the distance from the television 10 to the user, and (3) the reference character size set by the user.
  • a size calculation process is executed (step S409).
  • the display size calculation unit 135 supplies the calculated display size to the video processing circuit 107 as display size information (step S410).
  • FIG. 33 is a diagram illustrating an example of the relationship between the size ratio data and the change flag transmitted from the mobile terminal 30 according to the present embodiment, and the scaled sub-image displayed on the television 10.
  • 33A shows an example of data indicating size ratio data, a change flag, and a sub-image transmitted from the mobile terminal 30, and
  • FIG. 33B shows an example of a display screen displayed on the LCD 110 of the television 10.
  • FIG. 34 is a diagram illustrating another example of the relationship between the size ratio data and the change flag transmitted from the mobile terminal 30 according to the present embodiment and the scaled sub-image displayed on the television 10.
  • 34A shows another example of the data indicating the size ratio data, the change flag, and the sub-image transmitted from the mobile terminal 30, and
  • FIG. 34B shows the display screen displayed on the LCD 110 of the television 10. It is a figure which shows another example.
  • the mobile terminal 30 includes data including a header portion H including size ratio data and a change flag F, and a data portion D indicating one frame (current frame) constituting the sub-image. Send.
  • the character recognition unit 132 extracts the change flag F from the header part H, and determines whether or not the minimum character size ratio in the current frame has changed from the minimum character size ratio in the frame immediately before the current frame. In the example shown in FIG. 33A, since the value of the change flag F is “0”, the character recognition unit 132 determines that the minimum character size ratio has not changed.
  • the LCD 110 displays the sub-image scaled to the display size calculated based on the size ratio data in the immediately preceding frame.
  • the character recognizing unit 132 extracts the change flag F from the header portion H of the data transmitted from the mobile terminal 30 shown in FIG. 34A, and the minimum character size ratio in the current frame is the current frame. It is determined whether or not there is a change from the minimum character size ratio in the immediately preceding frame. In the example shown in FIG. 34A, since the value of the change flag F is “1”, the character recognition unit 132 determines that the minimum character size ratio has changed.
  • the display size calculation unit 135 extracts size ratio data (“01000001” and “00101000” in FIG. 34A) from the header portion H.
  • the display size calculation unit 135 calculates the display size of the scaled sub-image based on the acquired minimum character size ratio and supplies it to the video processing circuit 107.
  • the scaled sub-image is displayed on the LCD 110 with the display size changed from the scaled sub-image shown in FIG. 33B.
  • the portable terminal 30 outputs data indicating the size of the minimum character together with the sub image, so that the television 10 can display the display image and the minimum character regardless of the size of the sub image.
  • the size can be presented uniformly.
  • the mobile terminal 30 can reduce the processing amount in the television 10.
  • the mobile terminal 30 can use data associated with each table as the size ratio data and the change flag. . Thereby, the portable terminal 30 does not need to perform processing for generating size ratio data from the character size ratio and processing for generating data indicating a change flag based on the determination result.
  • the portable terminal 30 can reduce the processing required until the size ratio data and the flag data are output from the output means. That is, the mobile terminal can reduce the processing amount related to the output of the size ratio data and the change flag in the mobile terminal 30.
  • the configuration in which the mobile terminal 30 transmits the size ratio data together with the sub-image has been described as an example, but the present invention is not limited to this.
  • the size ratio data it is possible to employ a configuration in which data indicating the minimum character size is transmitted together with the sub-image, or other data can be transmitted.
  • the television 10 that receives the input of the sub-image from the mobile terminal 30 does not need to detect the minimum character or the size of the minimum character from the display image, so the processing amount in the television 10 is reduced. can do.
  • the main image after scaling and the sub-image after scaling have been described as an example of a configuration in which two images are displayed side by side in the longitudinal direction of the LCD 110 (the x-axis direction in FIG. 4). Is not to be done.
  • a configuration in which the main image after scaling and the sub-image after scaling are arranged in the short direction of the LCD 110 and displayed on two screens may be adopted. Further, it is possible to adopt a configuration in which the scaled main image and the scaled sub-image are appropriately switched between the two-screen display in which the LCD 110 is arranged in the longitudinal direction and the two-screen display in which the image is arranged in the short direction.
  • a scaled main image and a scaled sub-image are displayed in a two-screen display (also referred to as a two-screen horizontal display) arranged in the longitudinal direction of the LCD 110 and a two-screen display arranged in a short direction (both two-screen vertical display).
  • a two-screen display also referred to as a two-screen horizontal display
  • a two-screen display arranged in a short direction (both two-screen vertical display).
  • FIG. 35 is a diagram illustrating an example of a display screen displayed on the LCD 110 included in the television 10 according to the present embodiment.
  • FIG. 35A shows an example of a display screen when the scaled main image and sub image are displayed horizontally on two screens
  • FIG. 35B shows the scaled main image and sub image displayed vertically on two screens. An example of the display screen is shown.
  • the display size calculation unit 135 displays the scaled main image and sub-image horizontally on two screens based on the calculation results of Expressions (4), (5), (10), and (11). Display position determination processing for determining whether to display two screens vertically is further executed. Details of the display position determination process will be described later.
  • control unit 118 supplies the determination result of the display position determination process to the video processing circuit (adjustment unit) 107 together with the display size information.
  • the video processing circuit 107 performs scaling processing on the main image and the sub image based on the display size information acquired from the control unit 118, and generates a scaled main image and a scaled sub image. In addition, when the determination result acquired from the control unit 118 indicates two-screen horizontal display, the video processing circuit 107 generates a scaled main image and sub-image for two-screen horizontal display.
  • the LCD controller (display unit) 109 drives the LCD (display unit) 110 so that the scaled main image and sub image are displayed horizontally on two screens.
  • the video processing circuit 107 generates a scaled main image and sub-image for two-screen vertical display when the determination result acquired from the control unit 118 indicates two-screen vertical display.
  • the LCD controller 109 drives the LCD 110 so that the scaled main image and sub image are vertically displayed on two screens.
  • the display position determination process in the display size calculation unit 135 Next, the display position determination process in the display size calculation unit 135 will be described.
  • the length of the LCD 110 in the x-axis direction is the horizontal width Xd1 of the LCD 110
  • the length of the y-axis direction is the vertical width Yd1 of the LCD 110.
  • the display size calculation unit 135 compares the aspect ratio (Yd1 / Xd1) of the display area of the LCD 110 (that is, the aspect ratio (Yt1 / Xt1) of the main image) with the aspect ratio (Ys1 / Xs1) of the sub-image. To do. Then, the display size calculator 135 determines whether (i) Ys1 / Xs1 ⁇ Yd1 / Xd1 (sub-image aspect ratio ⁇ main image aspect ratio) or (ii) Ys1 / Xs1 ⁇ Yd1 / Xd1 (sub-image It is determined whether or not the aspect ratio ⁇ the aspect ratio of the main image).
  • the display size calculation unit 135 determines that Ys1 / Xs1 ⁇ Yd1 / Xd1, the display size calculation unit 135 displays an instruction (horizontal display instruction) indicating that the scaled main image and the scaled sub-image are displayed horizontally on two screens. It is supplied to the image processing circuit 107 together with the size information.
  • the display size calculation unit 135 determines that Ys1 / Xs1 ⁇ Yd1 / Xd1, the instruction (vertical display instruction) indicating that the scaled main image and the scaled sub-image are displayed vertically on two screens. And the display size information are supplied to the video processing circuit 107.
  • FIG. 36 is a diagram illustrating an example of a display screen displayed on the television 10 according to the present embodiment.
  • the horizontal width of the scaled sub-image 3e when displaying two screens vertically is Xds1A and the vertical width is Yds1A.
  • the horizontal width of the scaled sub-image 3e 'when displaying two screens horizontally is Xds1B and vertical width Is Yds1B.
  • k (where 0 ⁇ k ⁇ 1) indicates the degree of scaling (reduction ratio) of the scaled main image with respect to the main image.
  • m (where 0 ⁇ m) indicates the aspect ratio of the scaled sub-images 3e and 3e ′.
  • the display size calculation unit 135 determines that Ys1 / Xs1 ⁇ Yd1 / Xd1
  • the display size calculation unit 135 supplies the horizontal display instruction together with the display size information to the video processing circuit 107, whereby the scaled main image and sub image are displayed on the LCD 110. Display the image horizontally on two screens.
  • the display size calculation unit 135 determines that Ys1 / Xs1 ⁇ Yd1 / Xd1
  • the main image after scaling is supplied to the LCD 110 by supplying a vertical display instruction to the video processing circuit 107 together with the display size information. And the sub-image is displayed vertically on two screens.
  • the television 10 can increase the display area of the sub-image after scaling.
  • the case where Ys1 / Xs1 ⁇ Yd1 / Xd1 is also referred to as “sub-image is vertically long”, and the case where Ys1 / Xs1 ⁇ Yd1 / Xd1 is also referred to as “sub-image is horizontally long”.
  • FIG. 37 is a transition diagram showing an example of the transition of the display screen displayed on the LCD 110 of the television 10 according to the present embodiment.
  • FIG. 37A shows an example of the display screen of the LCD 110 when the display of the sub image is a vertical display
  • FIG. 37B shows the display screen of the LCD 110 when the display of the sub image is changed to the horizontal display. An example is shown.
  • the display size calculation unit 135 determines that the sub-image is vertically long, as shown in FIG.
  • the subsequent main image and sub-image are displayed horizontally on two screens.
  • the display size calculation unit 135 determines the display position. Execute the process.
  • the LCD 110 displays the scaled main image and sub image vertically on two screens, as shown in FIG.
  • the display of the sub image on the mobile terminal 30 is changed from the vertical display to the horizontal display (for example, the display screen of the mobile terminal 30 is rotated by 90 degrees), the display screen displayed on the LCD 110 is as shown in FIG. ) To the two-screen vertical display shown in FIG. 37B.
  • the case where the display of the sub image on the mobile terminal 30 is changed from the vertical display to the horizontal display has been described as an example, but the same applies to the case where the display of the sub image is changed from the horizontal display to the vertical display. It is.
  • the display size calculation unit 135 adjusts the display positions of the scaled main image and the scaled sub image on the LCD 110 based on the aspect ratio of the main image and the sub image.
  • the television 10 can display the scaled main image and the scaled sub-image at an appropriate display position on the LCD 110.
  • the scaled main image and sub image are displayed in the longitudinal direction of the LCD 110. It will be displayed side by side in the direction.
  • the aspect ratio of the sub image is smaller than the aspect ratio of the main image (that is, the shape of the sub image is longer than the shape of the main image)
  • the scaled main image and sub image are displayed in the short direction of the LCD 110. Will be displayed side by side.
  • the television 10 can display both the scaled main image and sub-image with an optimal display size, that is, the display area of the scaled main image and sub-image becomes larger.
  • the configuration in which the display position of the scaled sub-image in the LCD 110 is changed when the determination result of the display position determination process in the display size calculation unit 135 changes has been described as an example. It is not limited to. For example, even when the determination result of the display position determination process in the display size calculation unit 135 changes, a configuration in which the display position of the scaled sub-image on the LCD 110 is not changed can be employed in a predetermined case.
  • the display position of the scaled sub-image is changed when the increase rate of the display area when the scaled sub-image display position is changed is less than or equal to a predetermined threshold.
  • FIG. 38 is a diagram showing an example of a display screen displayed on the LCD 110 of the television 10 according to this modification.
  • FIG. 38A shows another example of the display screen of the LCD 110 when the display of the sub image is the vertical display
  • FIG. 38B shows the display of the LCD 110 when the display of the sub image is changed to the horizontal display.
  • the other example of a screen is shown.
  • the display size calculation unit 135 determines that the sub image is vertically long
  • the scaled main image 1f ′ is displayed.
  • the sub-image 3f ′ is displayed horizontally on the LCD 110 on two screens.
  • the display size calculation unit 135 determines that the sub image is horizontally long. To do.
  • the display size calculation unit 135 (i) displays the display area Sa of the scaled sub-image 3g ′ when the display position of the scaled sub-image is changed to the display position when vertically displaying two screens, and (ii) From the display area Sb of the scaled sub-image 3g ′′ when the display position of the scaled sub-image remains the current position (position shown in FIG. 38A), the display area increase rate (Sa / Sb ) Is calculated.
  • the display size calculation unit 135 compares the calculated increase rate Sa / Sb with a predetermined threshold value. When the calculated increase rate is larger than the predetermined threshold, the display size calculation unit 135 changes the display position indicating an instruction to change to the two-screen vertical display (that is, change the display position of the scaled sub-image). The instruction is supplied to the video processing circuit 107 together with the display size information.
  • the display size calculation unit 135 maintains the two-screen horizontal display (that is, maintains the display position of the scaled sub-image as it is).
  • a display position maintenance instruction indicating the instruction is supplied to the video processing circuit 107 together with the display size information.
  • the display size calculation unit 135 may calculate the display area increase rate Sa / Sb by calculating Expression (26).
  • the display size calculation unit 135 calculates the increase rate Sa / Sb calculated by the equation (26) and the predetermined threshold 1.1. And ⁇ (Yd1 / Xd1) ⁇ 2 ⁇ / ⁇ (Ys1 / Xs1) ⁇ 2 ⁇ ⁇ 1.1 (27) If the condition is satisfied, a display position maintenance instruction for maintaining the display position of the sub-image after scaling may be notified to the video processing circuit 107. If the expression (27) is not satisfied, the video processing circuit 107 may be notified of a display position change instruction for changing the display position of the scaled sub-image.
  • the sub image displayed on the mobile terminal 30 has been described as an example when the vertical display is changed to the horizontal display, but similarly, when the horizontal display is changed to the vertical display, ⁇ (Ys1 / Xs1) ⁇ 2 ⁇ / ⁇ (Yd1 / Xd1) ⁇ 2 ⁇ ⁇ 1.1 (28) If the condition is satisfied, the display position of the sub-image after scaling may be maintained as it is. Moreover, what is necessary is just to change the display position of the sub image after scaling, when Formula (28) is not satisfy
  • the display size calculation unit 135 further changes the display position of the scaled sub-image based on the increase rate of the display area even when the determination result of the display position determination process changes. Or not. Thereby, when the display of the sub image on the mobile terminal 30 is changed, the television 10 has a low display area increase rate, but the display position is changed, thereby reducing the visibility of the user. Can be prevented.
  • the minimum character size and the distance between the television 10 and the user may change frequently, but if the display size of the sub-image after scaling is changed each time these change, the user will be bothered. You may feel that.
  • the display size of the scaled sub image is changed. You may employ
  • the visibility of the user is deteriorated by changing the display size of the sub-image after scaling each time the minimum character size, the distance between the television 10 and the user, and the like are changed. Can be prevented.
  • FIG. 39 is a diagram illustrating another example of the display screen displayed on the LCD 110 included in the television 10 according to the present embodiment.
  • FIG. 39A shows an example of a display screen when the aspect ratio between the sub-image and the scaled sub-image is kept constant
  • FIG. 39B shows the aspect of the sub-image and the scaled sub-image.
  • An example of the display screen when the ratio is not kept constant is shown.
  • the user user when a two-screen display is performed with the aspect ratio of the sub-image and the scaled sub-image maintained constant, the user user can
  • the shape of the scaled sub-image may be deformable by operating 20 or the like.
  • the display size calculation unit 135 calculates the vertical width Yds1 ′ according to the user instruction, and uses the video processing circuit as display size information. 107 may be supplied.
  • the scaled sub-image that has been subjected to the scaling process by the video processing circuit 107 is displayed on the LCD 110 with the aspect ratio changed as shown in FIG.
  • the television 10 can change the size and shape of at least one of the scaled main image and sub-image according to the user instruction regardless of the aspect ratio.
  • control block (particularly the control unit 118) of the television 10 and the control block (particularly the control unit 301) of the mobile terminal 30 are realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like. Alternatively, it may be realized by software using a CPU (Central Processing Unit).
  • CPU Central Processing Unit
  • the television 10 and the mobile terminal 30 are provided with a CPU that executes instructions of a program, which is software that implements each function, and a ROM (Read Only Memory) or a storage device (these are referred to as “recording media”), a RAM (Random Access Memory) for expanding the program, and the like.
  • a computer or CPU reads the said program from the said recording medium and runs it.
  • the recording medium a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • a transmission medium such as a communication network or a broadcast wave
  • the present invention can also be realized in the form of a data signal embedded in a carrier wave in which the program is embodied by electronic transmission.
  • the display device (television 10) displays content (main image) and an input image (sub image) input from an external device (mobile terminal 30) in different regions of the display unit (LCD 110).
  • Display means for displaying LCD controller 109) and adjusting means for adjusting the display size of the content and the display size of the input image so that the content and the input image are displayed in different areas of the display unit (display size)
  • a calculating unit 135 and a video processing circuit 107) wherein the adjusting unit determines the display position of the content on the display unit and the display position of the input image on the display unit, and the content and the input image. Adjust based on the aspect ratio.
  • the adjusting unit adjusts the display position of the content and the input image based on each aspect ratio (ratio of vertical width to horizontal width).
  • the display device can display the content and the input image whose display size are adjusted based on the aspect ratio of the content and the input image at a suitable display position of the display unit. Therefore, the display device can display both the content and the input image with an optimal display size.
  • the adjustment unit in the aspect 1 when the aspect ratio of the input image is equal to or greater than the aspect ratio of the content, the adjustment unit in the aspect 1 is configured such that the input image and the content are the length of the display unit.
  • the display position is adjusted so as to be displayed side by side and the aspect ratio of the input image is smaller than the aspect ratio of the content, the input image and the content are displayed side by side in the short direction of the display unit.
  • the display position may be adjusted as follows.
  • the display means when the aspect ratio of the input image is greater than or equal to the aspect ratio of the content, that is, when the shape of the input image is vertically longer than the shape of the content, the display means They are displayed side by side in the longitudinal direction of the display section.
  • the display means displays them on the display unit. Will be displayed side by side in the short direction.
  • the display device can adjust the display position so that the display area of the display device and the content is larger according to the aspect ratio of the input image and the aspect ratio of the content.
  • the adjustment means in the aspect 1 or 2 is configured such that the adjustment means adjusts the display position before the aspect ratio changes when the aspect ratio of the input image changes.
  • the display size of the input image is compared with the display size of the input image when the display position is adjusted after the aspect ratio changes, and the aspect ratio changes with respect to the display size before the aspect ratio changes.
  • the display position of the input image after the change in the aspect ratio is adjusted only when the increase rate of the display size after this is greater than or equal to a predetermined threshold.
  • the adjustment unit increases the display size after the aspect ratio has changed with respect to the display size before the aspect ratio has changed, with respect to the display position of the input image after the aspect ratio has changed. Adjust only if the rate is greater than a predetermined threshold.
  • the display device has a small change in the display size of the input image when the display position is adjusted after the aspect ratio is changed with respect to the display size of the input image before the aspect ratio is changed.
  • the display position is adjusted each time the aspect ratio of the input image changes, and the user can be prevented from feeling bothersome.
  • a display device is the above-described aspect 1 to 3, in which distance detection means (distance detection unit 133) for detecting a distance from the display device to the user and an input image input from the external device.
  • Character size detection means character recognition unit 132 for detecting the smallest character size (minimum character size) among the included characters, and the adjustment means determines the display size of the input image as the input size. Adjustment may be made based on the size of the smallest character included in the image and the distance, and the display size of the content may be adjusted based on the adjusted display size of the input image.
  • the adjustment means sets the display size of the input image to (1) the size of the smallest character included in the input image, and (2) the distance from the display device to the user. To adjust based on both.
  • the adjusting means adjusts the display size of the content based on the display size of the display image adjusted as described above.
  • the display device displays the input image in a size suitable for the distance from the display device to the user, and suitable display of the display unit based on the aspect ratio of the content and the input image.
  • the position can be displayed.
  • the display device is the above-described aspect 1 to 3, in which the size of the smallest character among the characters included in the input image and the distance detection means that detects the distance from the display device to the user.
  • a character size detecting means for detecting the character size wherein the character size detecting means detects the smallest character size among the characters included in the content, and the adjusting means is configured to display the display size of the input image. Is adjusted based on the size of the smallest character included in the input image and the distance, and the display size of the content is adjusted based on the size of the smallest character included in the content and the distance. May be adjusted.
  • the adjusting means sets the display size of the input image and the content to (1) the size of the smallest character included in the input image or the content, and (2) the display device. To adjust based on both the distance from the user to the user.
  • the display device displays the input image and the content in the display unit having a size suitable for the distance from the display device to the user and based on the aspect ratio of the content and the input image. It is possible to display at a suitable display position.
  • a display device includes the user specifying unit that specifies the user who uses the display device in the above-described aspect 4 or 5, and the adjustment unit further sets a display size of the input image. You may adjust based on the reference character size preset by the said user specified by the said user specific means.
  • the adjusting unit further adjusts the display size of the input image based on (3) the reference character size.
  • the display device is adjusted so that the characters included in the input image match the user's preferred size, regardless of the distance from the display device to the user. Can be displayed in display size.
  • a television receiver according to aspect 7 of the present invention includes the display device according to aspects 1 to 6.
  • a display method is a display method of a display device, the display step of displaying content and an input image input from the outside in different areas of the display unit, the content and the input image Adjusting the display size of the content and the display size of the input image such that the display position of the content is displayed on the display unit in the adjustment step.
  • the display position of the input image on the display unit is adjusted based on the aspect ratio of the content and the input image.
  • the display device may be realized by a computer.
  • the display device is realized by the computer by causing the computer to operate as each unit included in the display device.
  • a program and a computer-readable recording medium on which the program is recorded also fall within the scope of the present invention.
  • a main object of these inventions is to provide a display device capable of displaying an image input from the outside in a size that allows the user to recognize characters included in the image, regardless of the distance to the user. is there.
  • Display means (LCD controller 109) for displaying content (main image) on the display unit; Distance detection means (distance detection unit 133) for detecting the distance from the display device to the user; Character size detection means (character recognition unit 132) for detecting the smallest character size (minimum character size) among characters included in an input image (sub-image) input from an external device; Adjusting means (display size calculation unit 135, video processing unit 107) for adjusting the display size of the input image based on the size of the smallest character included in the input image and the distance; The display means displays the input image on the display unit together with the content at a display size adjusted by the adjustment means.
  • a display device (television 10).
  • the adjustment means sets the display size when the input image is displayed on the display unit to (1) the size of the smallest character included in the input image, and (2) Adjustment is made based on both the distance from the display device to the user.
  • the display means displays the input image whose display size is adjusted together with the content.
  • the display device can display characters included in the input image in a size suitable for the distance from the display device to the user. Therefore, the display device can display the input image in a size that allows the user to recognize the characters included in the input image, regardless of the distance from the display device to the user.
  • invention A2 User specifying means (user setting extraction unit 134) for specifying the user who uses the display device is provided, The adjusting means further adjusts the display size of the input image based on a reference character size preset by the user specified by the user specifying means.
  • a display device according to invention A1 characterized in that:
  • the adjusting means further adjusts the display size of the input image based on (3) a reference character size preset by the user.
  • the display device is adjusted so that the characters included in the input image match the user's preferred size, regardless of the distance from the display device to the user. Can be displayed in display size.
  • the adjusting means reduces the display size of the content based on the adjusted display size of the input image,
  • the display means displays the reduced content in a region different from a region where the input image whose display size is adjusted is displayed on the display unit.
  • a display device according to invention A1 or A2, characterized in that:
  • the adjusting unit reduces (adjusts) the display size of the content based on the display size of the input image.
  • the display means displays the input image and the content whose display size has been adjusted by the adjustment means, respectively, in different areas of the display unit.
  • the display device prevents the user from being able to see part of the content due to the input image being superimposed on the content when the input image is displayed. it can.
  • the character size detection means detects the size of the smallest character among the characters included in the content,
  • the adjusting means adjusts the display size of the content based on the size of the smallest character included in the content and the distance,
  • the display means displays each of the content and the input image in a different area on the display unit with a display size adjusted by the adjustment means.
  • the display device according to invention A2 characterized by:
  • the adjusting means adjusts the display size of the content together with the display size of the input image.
  • the display means displays the input image and the content whose display size has been adjusted by the adjustment means, respectively, in different areas of the display unit.
  • the display device can display characters included in the content in a size suitable for the distance from the display device to the user.
  • the display device can prevent the user from seeing a part of the content because the input image is superimposed on the content. .
  • the adjusting means further adjusts the display size of the content based on the reference character size.
  • the adjusting unit further adjusts the display size of the content based on a reference character size preset by the user.
  • the display device displays the content in a display size adjusted so that characters included in the content match the user's preference regardless of the distance from the display device to the user. can do.
  • the adjustment means further adjusts the display size of at least one of the input image and the content whose display size has been adjusted according to the priority of the input image and the content.
  • the adjusting unit further adjusts the display size of the input image and the content after the display size is adjusted according to each priority.
  • the adjustment unit may cause a gap between the input image and the content.
  • the display size of the higher priority of the input image and the content can be enlarged.
  • the adjusting means may be configured such that when the input image and the content after adjusting the display size are displayed on the display unit, a part of the input image and a part of the content overlap. Can reduce the display size of the lower priority of the input image and the content.
  • the display device can display the input image and the content with a more appropriate display size according to the priority of the input image and the content.
  • invention A7 Including the display device according to any one of the inventions A1 to A6,
  • the television receiver (TV 10) characterized by the above-mentioned.
  • a display device display method for displaying content on a display unit A distance detecting step for detecting a distance from the display device to the user; A character size detecting step for detecting a size of the smallest character among characters included in an input image input from an external device; An adjustment step of adjusting the display size of the input image based on the size of the smallest character included in the input image and the distance; A display step of displaying the input image on the display unit together with the content with the display size adjusted in the adjustment step.
  • invention A9 A program for causing a computer to function as the display device according to any one of inventions A1 to A6, wherein the program causes the computer to function as each of the above means.
  • invention A10 A computer-readable recording medium on which the program according to invention A9 is recorded.
  • invention B In a television, in order to detect the size of a character included in an image using a conventionally used method for detecting a character, first, the character region included in the image is detected, and further, After detecting characters, the size of all detected characters must be detected. As described above, the conventional technique has a problem that the amount of processing in the television becomes large when the size of characters included in an image is detected.
  • the main object of these inventions is to provide a display device capable of reducing the processing amount relating to the detection of the character size.
  • a character region detecting means for detecting a character region including characters from an input image (sub-image) input from an external device (mobile terminal 30); The length of the character area in the row direction (horizontal width) and the length in the column direction (vertical width) are calculated, and the length of the shortest width is the smallest minimum character among the characters included in the input image.
  • Character size detection means minimum character area detection unit 142, minimum character size detection unit 143) for detecting the character size; A display device (television 10).
  • the character size detection unit is the shortest of the widths in the row direction and the column direction of each character region without detecting the size of all the characters included in the input image.
  • the length of the width can be detected as the size of the minimum character included in the input image.
  • the display device detects all characters included in the input image, and further detects the size of each detected character. There is no need to do it. Therefore, the display device can reduce the amount of processing related to the detection of the character size (more specifically, the minimum character size).
  • the character size detection means detects the minimum character size from the input image. Therefore, the display device can detect the minimum character size from the input image regardless of whether or not information indicating the size of the character included in the input image is supplied from the external device together with the input image. .
  • invention B2 A determination unit (control unit 118) for determining whether the input image is a moving image or a still image;
  • the character area detecting means performs the detection of the character area only once when the input image is input when the input image is determined to be a still image by the determining means.
  • the display device according to invention B1 which is characterized.
  • the character region detection means can stop the detection of the character region after detecting the character region once. Power consumption related to detection can be reduced.
  • invention B3 The character area detecting means and the character size detecting means alternately execute the detection of the character area by the character area detecting means and the detection of the size of the minimum character by the character size detecting means.
  • the display device according to invention B1 characterized by the above.
  • the character area detection unit and the character size detection unit execute the processes simultaneously by alternately executing the character area detection process and the minimum character size detection process.
  • the processing speed of each process can be improved. Therefore, the display device can shorten the time required to detect the changed minimum character size even when the minimum character size in the input image changes.
  • invention B4 The character area detecting means detects only a character area included in a specific range among character areas included in the input image.
  • the display device according to any one of inventions B1 to B3, characterized in that:
  • the display device can further reduce the amount of processing related to character detection.
  • invention B5 Including the display device according to any one of the inventions B1 to B4,
  • the television receiver (TV 10) characterized by the above-mentioned.
  • invention B6 A detection method in a display device, A character region detection step for detecting a character region including characters from an input image input from an external device; A character that calculates the width in the row direction and the width in the column direction of the character area and detects the shortest width as the smallest smallest character size among the characters included in the input image. Including a size detection step, A detection method characterized by the above.
  • invention B7 A program for causing a computer to function as the display device according to any one of the inventions B1 to B4, wherein the program causes the computer to function as each of the above means.
  • invention B8 The computer-readable recording medium which recorded the program as described in invention B7.
  • a main object of these inventions is to provide a portable terminal capable of reducing the processing amount in an image output destination device.
  • Output means (transmission unit 305) for outputting a display image (sub-image) displayed on the display unit (display unit 303) to the outside;
  • Detecting means character recognition unit 321) for detecting the size of the smallest minimum character (minimum character size) included in the display image,
  • the mobile terminal mobile terminal 30
  • the output means outputs data indicating the size of the minimum character together with the display image.
  • the portable terminal can output data indicating the size of the minimum character together with the display image from the output means.
  • an output destination device for example, the television 10) that receives input of the display image from the portable terminal detects the minimum character from the display image even when processing using the size of the minimum character is performed. There is no need to detect or detect the minimum character size.
  • the mobile terminal can reduce the amount of processing in the display image output destination device.
  • the display image displayed on the display unit of the mobile terminal is an input image input from the outside (mobile terminal) in the display device.
  • Size ratio calculating means character size ratio calculating unit 322 that calculates a character size ratio that is a ratio between the size of the minimum character and the size of the display image;
  • the output means outputs size ratio data indicating the character size ratio as data indicating the minimum character size.
  • the portable terminal outputs the size ratio data together with the display image from the output unit, thereby allowing the display device to display the display regardless of the size of the display image.
  • the image and the minimum character size can be presented uniformly.
  • the output destination device performs processing using the character size ratio
  • the minimum character detection, the minimum character size detection, and the minimum character size and the display are performed from the display image. There is no need to calculate the character size ratio from the image.
  • the mobile terminal can further reduce the amount of processing in the display image output destination device.
  • invention C3 A determination unit (size ratio change determination unit 323) for determining whether or not the character size ratio has changed; The output means further outputs flag data (change flag) indicating a determination result by the determination means together with the display image.
  • a portable terminal according to the invention C2 wherein
  • the portable terminal can output the flag data in addition to the display image and the size ratio data from the output means.
  • the output destination device can easily determine whether or not the character size ratio included in the display image has changed by referring to the flag data. Further, the output destination device refers to the flag data, and only when the flag data indicates that the character size ratio has changed, the output destination device displays the size ratio data indicating the changed character size ratio. It is also possible to perform processing that requires detection of the minimum character size by referring to it.
  • the mobile terminal can further reduce the amount of processing in the display image output destination device.
  • the storage unit stores a size ratio table (size ratio table 341) in which the character size ratio and the size ratio data are associated with each other.
  • the output means outputs, as the size ratio data, the size ratio data associated with the character size ratio calculated by the size ratio calculation means and the size ratio table.
  • the storage unit stores a flag table (change flag table 342) in which the determination result by the determination unit and the flag data are associated with each other.
  • the output means outputs the flag data associated with the determination result by the determination means and the flag table as the flag data.
  • the portable terminal can use data associated with each table as the size ratio data and the flag data. Thereby, the portable terminal need not perform processing for generating size ratio data from the character size ratio and processing for generating flag data based on the determination result.
  • the portable terminal can reduce processing required until the size ratio data and the flag data are output from the output means. That is, the portable terminal can reduce the processing amount related to the output of the display image, the size ratio data, and the flag data.
  • invention C6 A display device (television 10) that receives input of data indicating the size of the minimum character together with the display image from the mobile terminal according to any one of inventions C1 to C5, A display device comprising character size detecting means for detecting the minimum character size from the data.
  • the display device detects the minimum character from the display image even when processing using the size of the minimum character included in the display image input from the mobile terminal is performed. There is no need or need to detect the minimum character size.
  • the display device receives an input of data indicating the size of the minimum character together with the display image from the mobile terminal, thereby improving a processing speed regarding processing using the size of the minimum character (reducing processing time). can do.
  • invention C7 An output method of a mobile terminal, An output step of outputting a display image displayed on the display unit to the outside; Detecting a size of the smallest minimum character included in the display image, In the output step, data indicating the size of the minimum character is output together with the display image.
  • invention C8 A program for causing a computer to function as the portable terminal according to any one of Inventions C1 to C5 or the display device according to Invention C6, wherein the program causes the computer to function as each of the above means.
  • invention C9 A computer-readable recording medium on which the program according to invention C8 is recorded.
  • the display device according to the present invention can be suitably applied to a television receiver, an electronic blackboard, a digital signage (electronic signboard), a personal computer, and the like.
  • the external device according to the present invention can be suitably applied to portable terminals such as a mobile phone, a smartphone, a tablet terminal, an electronic book, a digital camera, and a digital video camera.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

 本発明の一態様に係るテレビ(10)は、メイン画像及びサブ画像がLCD(110)の異なる領域に表示されるよう、メイン画像の表示サイズ及びサブ画像の表示サイズを調整する表示サイズ算出部(135)及び映像処理回路(107)を備え、表示サイズ算出部(135)は、メイン画像のLCD(110)上の表示位置、及び、サブ画像のLCD(110)上の表示位置を、メイン画像及びサブ画像のアスペクト比に基づいて調整する。

Description

表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
 本発明は、表示装置、携帯端末、表示装置を備えたテレビジョン受像機、及び、表示装置の表示方法に関するものである。また、表示方法のプログラム、及び、記録媒体に関するものである。
 近年、テレビジョン受像機(テレビ)の利用方法の多様化により、例えばスマートフォンなどの携帯端末に表示される画像(携帯画像)を、テレビの備える大きなディスプレイに表示するという利用方法が新たに提案されている。
 ここで、携帯端末を利用するユーザは、例えば携帯端末を手に取って操作するなど、ユーザ自身の至近距離で利用することが通常であることから、携帯端末には、ユーザが至近距離から読むことのできるサイズで文字が表示される。一方、テレビを視聴するユーザは、テレビからある程度距離の離れた位置から視聴することが通常である。
 このため、携帯画像を、携帯端末に表示される表示サイズと同じサイズでテレビのディスプレイに表示した場合、ユーザはディスプレイに表示された携帯画像に含まれる文字を読むことが困難となる。
 特許文献1には、基準文字サイズ及び原画像データに含まれる文字データに関する文字サイズの比率と、原画像データの画像サイズとを用いて、画像形成領域(表示部)に原画像を表示するために原画像のサイズを変更する際の目標画像サイズを決定する画像処理装置が記載されている。
 なお、非特許文献1には、画像に含まれる文字の検出方法として、まず画像から文字領域を抽出し、次に複数の行又は列を含む文字領域を行又は列毎に分割し、そして分割した各行又は列の文字領域に含まれる各文字を検出する、という方法が開示されている。
日本国公開特許公報「特開2009-259223号公報(2009年11月5日公開)」
"OCR技術解説2"、[online]、メディアドライブ株式会社、[平成25年2月26日検索]、インターネット〈URL:http://mediadrive.jp/technology/techocr06.html〉
 ここで、携帯画像をテレビのディスプレイに表示する際に、テレビ番組などのコンテンツがディスプレイに表示されている場合や、携帯画像と共に表示したい場合がある。一方、携帯画像と共にコンテンツを表示する場合には、携帯画像がコンテンツに重畳して表示されることにより、コンテンツの一部が表示されなくなってしまうことがある。そこで、携帯画像がコンテンツに重畳して表示されることを避けるため、コンテンツの表示サイズを縮小し、縮小したコンテンツと携帯画像とをディスプレイの異なる領域に表示することが考えられる。
 しかしながら、このような場合に、テレビのディスプレイの異なる領域に携帯画像及びコンテンツを単に表示しただけでは、携帯画像及びコンテンツの少なくとも何れかを最適な表示サイズで表示することができないという問題がある。
 本発明は、上記の問題に鑑みてなされたものであり、その主たる目的は、コンテンツ及び外部から入力される入力画像を共に表示する場合に、コンテンツ及び入力画像を最適な表示サイズで表示することのできる表示装置を提供することにある。
 本発明の一態様に係る表示装置は、上記の課題を解決するために、コンテンツと、外部機器から入力される入力画像とを表示部の異なる領域に表示する表示手段と、上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整手段と、を備え、上記調整手段は、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する。
 また、本発明の他の一態様に係る表示装置の表示方法は、コンテンツと、外部から入力される入力画像とを表示部の異なる領域に表示する表示ステップと、上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整ステップと、を含み、上記調整ステップにおいて、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する。
 上記の構成によれば、上記調整手段は、上記コンテンツ及び上記入力画像の表示位置を、各々のアスペクト比(横幅に対する縦幅の比率)に基づいて調整する。
 これによれば、上記表示装置は、上記コンテンツ及び上記入力画像のアスペクト比に基づいて、上記表示サイズの調整されたコンテンツ及び入力画像を上記表示部の適した表示位置に表示することができる。したがって、上記表示装置は、上記コンテンツ及び上記入力画像を共に最適な表示サイズで表示することができる。
本発明の一実施形態に係るテレビの備える制御部の構成を示すブロック図である。 本発明の一実施形態に係るテレビの構成を示すブロック図である。 本発明の一実施形態に係るテレビの備える制御部において実行される処理の一例を示すフローチャートである。 本発明の一実施形態に係る携帯端末の表示部及びテレビの備えるLCDに表示される表示画面の一例を示す図であり、(a)は携帯端末の表示部に表示されるサブ画像の一例を示し、(b)はテレビのLCDに表示されるメイン画像及びスケーリング後サブ画像の一例を示している。 ケースBである場合にLCDに表示されるスケーリング後サブ画像の一例を示す図である。 ケースCでる場合にLCDに表示されるスケーリング後サブ画像の一例を示す図である。 サブ画像における最小文字サイズ比が変化した場合の、LCDの表示画面の画面遷移図であり、(a)は最小文字サイズ比が変化する前の表示画面の一例を示し、(b)は最小文字サイズ比が変化した後の表示画面の一例を示している。 本発明の一実施形態に係る携帯端末及びテレビに表示される表示画面の一例を示す図であり、(a)は携帯端末の表示部に表示されるサブ画像の一例を示し、(b)はLCDに表示されるメイン画像の一例を示し、(c)は、LCDに表示されるスケーリング後のメイン画像及びサブ画像の一例を示している。 ケースDである場合にLCDに表示される表示画面の一例を示す図である。 ケースD1である場合にLCDに表示される表示画面の一例を示す図である。 ケースD2である場合にLCDに表示される表示画面の一例を示す図である。 ケースD3である場合にLCDに表示される表示画面の一例を示す図である。 ケースEである場合にLCDに表示される表示画面の一例を示す図である。 ケースE1である場合にLCDに表示される表示画面の一例を示す図である。 ケースE2である場合にLCDに表示される表示画面の一例を示す図である。 ケースE3である場合にLCDに表示される表示画面の一例を示す図である。 ケースFである場合にLCDに表示される表示画面の一例を示す図であり、(a)はスケーリング後サブ画像の縦幅がLCDの縦幅を超える場合の表示画面の一例を示し、(b)はスケーリング後メイン画像の縦幅がLCDの縦幅を超える場合の表示画面の一例を示している。 ケースF1である場合にLCDに表示される表示画面の一例を示す図であり、(a)はスケーリング後メイン画像の表示サイズを保ちつつスケーリング後サブ画像が調整された場合の表示画面の一例を示し、(b)はスケーリング後メイン画像の縦幅がLCD110の縦幅に合わせて調整された場合の表示画面の一例を示している。 ケースF2である場合にLCDに表示される表示画面の一例を示す図であり、(a)はスケーリング後サブ画像の縦幅がLCDの縦幅に合わせて表示された場合の表示画面の一例を示し、(b)はスケーリング後サブ画像の表示サイズを保ちつつスケーリング後メイン画像1d’が調整された場合の表示画面の一例を示している。 ケースF3である場合にLCDに表示される表示画面の一例を示す図であって、(a)はスケーリング後のメイン画像及びサブ画像を均等な縮小率で縮小して調整した場合の表示画面の一例を示し、(b)はスケーリング後のメイン画像及びサブ画像を均等な縮小率で縮小して調整した場合の表示画面の他の一例を示している。 本発明の一実施形態に係るテレビのLCDに表示される表示画面の他の一例を示す図である。 本発明の一実施形態に係るテレビの備える制御部の文字認識部の構成を示すブロック図である。 本発明の一実施形態に係る文字認識処理の流れを示すフローチャートである。 本発明の一実施形態に係る文字認識処理の概要を示す図であって、(a)携帯端末から供給されるサブ画像の一例を示し、(b)は文字領域検出部によって検出される文字領域の一例を示し、(c)は最小文字サイズ検出部によって算出される文字領域のサイズの一例を示している。 本発明の一実施形態に係る文字認識処理の他の一例を示す図であって、(a)は最小文字サイズ検出部によって算出される文字領域のサイズの一例を示し、(b)は最小文字サイズ検出部によって算出される文字領域のサイズの他の一例を示している。 本発明の一実施形態に係る文字認識処理のさらに他の一例を示す図である。 本発明の一実施形態の変形例に係るサブ画像の一例を示す図であって、(a)は文字領域検出部によって検出される文字領域の一例を示し、(b)は最小文字サイズ検出部によって検出される文字サイズの一例を示している。 本発明の他の実施形態に係る携帯端末の要部構成を示すブロック図である。 本発明の他の実施形態に係るサイズ比テーブルの一例を示す図である。 本発明の他の実施形態に係る変化フラグテーブルの一例を示す図である。 本発明の他の実施形態に係る携帯端末のサイズ比情報生成部におけるサブ画像送信処理の流れを示すフローチャートである。 本発明の他の実施形態に係るテレビにおいて実行される処理の流れを示すフローチャートである。 本発明の他の実施形態に係る携帯端末から送信されるサイズ比データ及び変化フラグと、テレビに表示されるスケーリング後サブ画像との関係の一例を示す図であって、(a)は携帯端末から送信されるサイズ比データ、変化フラグ及びサブ画像を示すデータの一例を示し、(b)はテレビのLCDに表示される表示画面の一例を示す図である。 本発明の他の実施形態に係る携帯端末から送信されるサイズ比データ及び変化フラグと、テレビ10に表示されるスケーリング後サブ画像との関係の他の一例を示す図であって、(a)は携帯端末から送信されるサイズ比データ、変化フラグ及びサブ画像を示すデータの他の一例を示し、(b)はテレビのLCDに表示される表示画面の他の一例を示す図である。 本発明のさらに他の実施形態に係るテレビの備えるLCDに表示される表示画面の一例を示す図であって、(a)はスケーリング後のメイン画像及びサブ画像を2画面横表示する場合の表示画面の一例を示し、(b)はスケーリング後のメイン画像及びサブ画像を2画面縦表示する場合の表示画面の一例を示している。 本発明のさらに他の実施形態に係るテレビに表示される表示画面の一例を示す図である。 本発明のさらに他の実施形態に係るテレビのLCDに表示される表示画面の遷移の一例を示す遷移図であって、(a)はサブ画像の表示が縦表示である場合のLCDの表示画面の一例を示し、(b)はサブ画像の表示が横表示に遷移した場合のLCDの表示画面の一例を示している。 本発明のさらに他の実施形態の変形例に係るテレビのLCDに表示される表示画面の一例を示す図であって、(a)はサブ画像の表示が縦表示である場合のLCDの表示画面の他の一例を示し、(b)はサブ画像の表示が横表示に遷移した場合のLCDの表示画面の他の一例を示している。 本発明のさらに他の実施形態に係るテレビの備えるLCDに表示される表示画面の他の一例を示す図であって、(a)はサブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれている場合の表示画面の一例を示し、(b)はサブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれていない場合の表示画面の一例を示している。
 <実施形態1>
 本発明の一実施形態に係る表示装置について、図面に基づいて説明すれば以下のとおりである。なお、本実施形態に係る表示装置はテレビジョン受像機として実現されているので、以下ではこれを「テレビ」と呼ぶ。ただし、本発明の適用範囲は、テレビに限定されるものではない。
 〔テレビの構成〕
 まず、本実施形態に係るテレビ10の構成を、図2を参照して説明する。図2は、本実施形態に係るテレビ10の構成を示すブロック図である。
 テレビ10は、図2に示すように、外部入力端子101、地上デジタル放送チューナ102、衛星放送チューナ103、録画再生部104、BDドライブ105、映像セレクタ106、映像処理回路(調整手段)107、OSD(On-Screen Display)生成部108、LCD(Liquid Crystal Display)コントローラ(表示手段)109、LCD(表示部)110、音声セレクタ111、音声処理回路112、アンプ113、スピーカ114、外部入力部115、ROM116、RAM117、制御部118、赤外線受光部119、カメラ120、及び、無線通信部121を備えている。
 図2においては、映像信号の経路を実線で、音声信号の経路を1点鎖線で、データや制御信号の経路(バス)を太線で示している。また、図2に示すように、テレビ10は、外部入力部115又は無線通信部121を介して携帯端末(外部機器)30と接続可能である。なお、図2に示すように、テレビ10は、リモートコントローラ(リモコン)20によって遠隔操作が可能に構成されている。
 (外部入力端子)
 外部入力端子101は、映像入力端子101aと音声入力端子101bとを含む。映像入力端子101aは、映像信号を入力するためのものであり、例えば、DVI端子である。音声入力端子101bは、音声信号を入力するためのものであり、例えば、S/PDIF端子である。ただし、外部入力端子101は、これに限定されず、映像入力端子101aと音声入力端子101bとが一体化されたHDMI端子などであってもよい。
 (チューナ)
 地上デジタル放送チューナ102は、地上デジタル放送により放送される放送番組を受信するためのチューナである。地上デジタル放送チューナ102は、例えば、受信信号からMPEG2ストリームを復調し、MPEG2ストリームから映像信号および音声信号を復号することができる。
 地上デジタル放送チューナ102により復調されたMPEG2ストリームは、バスを介して録画再生部104に供給される。また、地上デジタル放送チューナ102により復号された映像信号および音声信号は、それぞれ、映像セレクタ106および音声セレクタ111に供給さる。なお、地上デジタル放送チューナ102が何れのチャンネルを復調対象として選択するかは、制御部118により制御される。
 なお、地上デジタル放送チューナ102は、異なるチャンネルを介して放送される2つのMPEG2ストリームを同時に復調することが可能なダブルチューナであることが好ましい。もちろん、本発明に係る地上デジタル放送チューナ102は、ダブルチューナに限定されるものではなく、例えば、シングルチューナであってもよく、3つ以上のチューナを備える複数のチューナであってもよい。
 衛星放送チューナ103は、衛星放送により放送される放送番組を受信するためのチューナである。衛星放送チューナ103は、放送衛星を用いて衛星放送されるBS放送番組を受信するBS放送用チューナ、及び、通信衛星を用いて衛星放送されるCS放送番組を受信するCS放送用チューナを備えている。また、衛星放送チューナ103は、例えば、受信信号MPEG2ストリームを復調し、MPEG2ストリームから映像信号を復号することができる。
 衛星放送チューナ103により復調されたMPEG2ストリームは、録画再生部104に供給される。また、衛星放送チューナ103により復号された映像信号および音声信号は、それぞれ、映像セレクタ106および音声セレクタ111に供給さる。なお、衛星放送チューナ103が何れのチャンネルを介して伝送されるMPEG2データストリームを復調するかは、制御部118により選択される。
 なお、本実施形態における衛星放送チューナ103が備えるBS放送用チューナ及びCS放送用チューナはそれぞれ、地上デジタル放送チューナ102と同様、異なるチャンネルを介して放送される2つの放送番組を同時に受信することが可能なダブルチューナであることが好ましい。
 (録画再生部)
 録画再生部104は、地上デジタル放送チューナ102および衛星放送チューナ103の何れかからMPEG2ストリームを取得し、取得したMPEG2ストリームを記録装置に書き込む。また、録画再生部104は、記録装置からMPEG2ストリームを読み出し、読み出したMPEG2ストリームから映像信号および音声信号を復号し、それぞれ、映像セレクタ106および音声セレクタ111に供給する。
 なお、録画再生部104は、テレビ10に内蔵されたBDドライブ105、テレビ10に内蔵されたHDドライブ(不図示)、および、USB(Universal Serial Bus)インターフェース(不図示)に接続されたUSB-HDドライブ(不図示)などを、MPEG2ストリームを記録するための記録装置として利用することができる。
 (映像セレクタ)
 映像セレクタ106には、上述した4種類の映像信号が供給される。すなわち、(1)外部入力端子101(特に映像入力端子101a)から入力された映像信号、(2)地上デジタル放送チューナ102にて復号された映像信号、(3)衛星放送チューナ103にて復号された映像信号、および、(4)録画再生部104(特に再生部)にて復号された映像信号が入力される。映像セレクタ106は、上記(1)~(4)の映像信号のうちの何れか1つを選択する。映像セレクタ106によって選択された映像信号は、映像処理回路107に供給される。なお、映像セレクタ106が何れの映像信号を選択するかは、制御部118によって制御される。
 (映像処理回路)
 映像処理回路107は、映像セレクタ106から供給された映像信号に画質調整処理を施す。また、映像処理回路107は、映像セレクタ106から供給された映像信号にスケーリング処理を施す。ここで、画質調整処理とは、例えば、映像信号を加工することによって、その映像信号が表す映像の輝度、シャープネス、および、コントラストの少なくとも何れかを変更することを指す。また、スケーリング処理とは、映像信号を加工することによって、その映像信号が表す映像のサイズを相似拡大または相似縮小することを指す。映像処理回路107によって加工された映像信号は、LCDコントローラ109に供給される。なお、映像処理回路107が画質およびサイズをどのように変更するかは、制御部118によって制御されればよい。
 映像処理回路107は、さらに、制御部118から、後述する表示サイズ情報を取得する。映像処理回路107は、取得した表示サイズ情報に基づき、映像セレクタ106から供給された映像信号、及び、外部入力部115又は無線通信部121を介して携帯端末30から供給される画像を示す画像信号に対してスケーリング処理を施す。なお、表示サイズ情報、及び、スケーリング処理の詳細については、後述する。
 以降では、映像セレクタ106から供給された映像信号(すなわち、LCD110に全画面表示される画像を示す映像信号)を、単に「メイン画像」(コンテンツ)とも記載する。また、携帯端末30から供給される画像を示す画像信号(すなわち、携帯端末30に表示されている画像(動画像であってもよく、静止画像であってもよい)を示す画像信号)を、単に「サブ画像」(入力画像)とも記載する。
 (OSD生成部)
 OSD生成部108は、制御部118から供給されたOSDデータからOSD画像を生成(レンダリング)する。OSD生成部108が生成するOSD画像としては、電子番組表などが挙げられる。OSDデータとしては、例えば、SVG(Scalable Vector Graphics)を用いることができる。OSD生成部108により生成されたOSD画像は、映像処理回路107から供給された映像信号に重畳され、LCDコントローラ109に供給される。
 (LCDコントローラ、LCD)
 LCDコントローラ109は、映像処理回路107から供給された映像信号に基づいて、その映像信号が表す映像を表示するようにLCD110を駆動する。また、OSD生成部108からOSD画像が供給されている場合、LCDコントローラ109は、映像処理回路107から供給された映像信号にOSD画像が重畳されたものに基づいて、その映像信号が表す映像を表示するようにLCD110を駆動する。
 (音声セレクタ)
 音声セレクタ111には、上述した4種類の音声信号が供給される。すなわち、(1)外部入力端子101(特に音声入力端子101b)から入力された音声信号、(2)地上デジタル放送チューナ102にて復号された音声信号、(3)衛星放送チューナ103にて復号された音声信号、および、(4)録画再生部104(特に再生部)にて復号された音声信号が入力される。音声セレクタ111は、上記(1)~(4)の音声信号のうちの何れか1つを選択する。
 音声セレクタ111によって選択された音声信号は、音声処理回路112に供給される。なお、音声セレクタ111が何れの音声信号を選択するかは、制御部118によって制御される。ただし、映像セレクタ106における映像の選択と、音声セレクタ111における音声の選択とは連動しており、例えば、映像セレクタ106が地上デジタル放送チューナ102から供給された映像信号を選択しているときには、音声セレクタ111も地上デジタル放送チューナ102から供給された音声信号を選択する。
 (音声処理回路)
 音声処理回路112は、音声セレクタ111から供給された音声信号に音量調整処理を施す。また、音声処理回路112は、音声セレクタ111から供給された音声信号に音質調整処理を施す。ここで、音量調整処理とは、音声信号を加工することによって、その音声信号が表す音声の音量を変更することを指す。また、音質調整処理とは、音声信号を加工することによって、その音声信号が表す音声の周波数特性を変更すること(例えば、低域の強調や高域の強調など)を指す。音声処理回路112によって加工された音声信号は、アンプ113に供給される。なお、音声処理回路112によって音量および音質をどのように変更するかは、制御部118によって制御される。
 (アンプ、スピーカ)
 アンプ113は、音声処理回路112から供給された音声信号に基づいて、その音声信号が表す音声を出力するようにスピーカ114を駆動する。
 (制御部)
 制御部118は、赤外線受光部119を介してリモコン20から受信したリモコン信号、及び、カメラ120が撮像した画像に応じて上記各部を制御する。赤外線受光部119を用いた制御としては、例えば、地上デジタル放送チューナ102および衛星放送チューナ103の受信チャンネルをリモコン信号に応じて切り替える制御や、映像セレクタ106および音声セレクタ111にて選択する映像信号および音声信号をリモコン信号に応じて切り替える制御などが挙げられる。また、カメラ120を用いた制御としては、例えば、映像処理回路107にて画質をどのように調整するかを、撮像した画像に基づいて特定した視聴者に応じて切り替える制御などが挙げられる。
 さらに、制御部118は、各放送局から提供されるEPG(Electronic Program Guide)データから放送番組テーブルを作成する機能を有している。なお、各放送局から提供されるEPGデータは、例えば、地上デジタル放送チューナ102又は衛星放送チューナ103を用いて取得してもよいし、ネットワーク(例えば、インターネットなど)に接続されたサーバから取得してもよい。
 (ROM、RAM)
 ROM116は、制御部118によって実行されるプログラムなどの固定データが格納される、読み出し可能かつ書き込み不能なメモリである。一方、RAM117は、制御部118が演算のために参照するデータや、制御部118が演算によって生成したデータなどの可変データが格納される、読み出し可能かつ書き込み可能なメモリである。例えば、放送番組テーブルなどは、RAM117に格納される。
 (外部入力部、無線通信部)
 外部入力部115、及び、無線通信部121は、有線又は無線により、携帯端末30などの外部機器を接続するためのインターフェースである。
 外部入力部115としては、例えば、インターネットに接続可能なイーサーネット(登録商標)インターフェースを挙げることができるが、これに限定されるものではない。外部入力部115は、例えば、USBインターフェース、ATA(Advanced Technology Attachment)、ATAPI(ATA Packet Interface)、IEEE1394、HDMI(登録商標)(High-Definition Multimedia Interface)、および、LANなどの有線接続用インターフェースであればよい。
 また、無線通信部121としては、Bluetooth(登録商標)、Wi-Fi(登録商標)、及び、IEEE80211などの無線接続用インターフェースを挙げることができる。
 〔制御部の構成〕
 次に、本実施形態に係る制御部118の構成の詳細について、図1を参照して説明する。図1は、本実施形態に係るテレビ10の備える制御部118の構成を示すブロック図である。
 図1に示すように、本実施形態に係る制御部118は、スイッチング部131、文字認識部(文字サイズ検出手段)132、距離検出部(距離検出手段)133、ユーザ設定抽出部(ユーザ特定手段)134、及び、表示サイズ算出部(調整手段)135を備えている。
 (スイッチング部)
 スイッチング部131は、外部入力部115又は無線通信部121において取得されたサブ画像(入力画像)を、文字認識部132及び表示サイズ算出部135に供給するか否かを切り替える。
 スイッチング部131がサブ画像を文字認識部132及び表示サイズ算出部135に供給する場合には、後述する文字認識処理及び表示サイズ算出処理が実行され、映像処理回路107においてサブ画像のスケーリング処理が実行される。
 一方、スイッチング部131がサブ画像を文字認識部132及び表示サイズ算出部135に供給しない場合には、文字認識処理及び表示サイズ算出処理は実行されない。この場合には、映像処理回路107は、LCD110に表示されるサブ画像(後述する、スケーリング後サブ画像)が所定の表示サイズとなるようサブ画像をスケーリング処理すればよい。
 なお、所定の表示サイズは、ユーザによって予め定められていてもよいし、LCD100に表示されるサブ画像を参照して、例えばリモコン20を介してユーザが適宜調整可能であってもよい。また、映像処理回路107は、LCD110に表示されるサブ画像が携帯端末30において表示される際のサイズと同じサイズとなるようサブ画像にスケーリング処理を施す構成を採用することもできる。
 換言すれば、スイッチング部131は、映像処理回路107における表示サイズ算出処理の結果に応じたサブ画像のスケーリング処理の実行と非実行とを切り替える。以降では、映像処理回路107において、表示サイズ算出処理の結果に応じたサブ画像のスケーリング処理を実行可能にする場合をON状態とも記載し、実行不可とする場合をOFF状態とも記載する。
 (文字認識部)
 文字認識部132は、スイッチング部131から供給されるサブ画像に含まれる文字を認識し、認識した文字の中から最も小さい文字(最小文字)のサイズ(以降、最小文字サイズとも記載する)を検出する(以降、文字認識処理とも記載する)。なお、文字認識処理の詳細については後述する。
 (距離検出部)
 距離検出部133は、テレビ10からユーザまでの距離を検出する。なお、距離検出部133におけるテレビ10からユーザまでの距離は、例えば、カメラ120によって撮像された、テレビ10を使用しているユーザの含まれる撮像画像から検出されればよい。なお、テレビ10からユーザまでの距離の検出は、周知の技術を用いることができるため、ここではその説明を省略する。
 (ユーザ設定抽出部)
 ユーザ設定抽出部134は、例えばRAM117などの記録媒体に格納されている、予めテレビ10を利用しているユーザによって設定されたユーザの好みの文字サイズ(基準文字サイズ)を抽出する。基準文字サイズは、例えば、テレビ10とユーザとの距離が1000mmである場合にLCD110に表示される文字サイズを基準として、リモコン20等を操作することによって予め入力可能であればよいが、特に限定されるものではない。
 なお、ユーザ設定抽出部134は、基準文字サイズを抽出するに際し、テレビ10を利用しているユーザを特定する処理を実行する。テレビ10を使用しているユーザは、例えば、カメラ120によって撮像された撮像画像から、周知の技術を用いることによって特定することができるため、ここではその説明を省略する。
 (表示サイズ算出部)
 表示サイズ算出部135は、文字認識部132において検出された最小文字サイズと、サブ画像のサイズとから、サブ画像をLCD110に表示する際に、テレビ10を使用(視聴)しているユーザに最適な表示サイズを算出する表示サイズ算出処理を実行する。表示サイズ算出部135は、算出した表示サイズを示す表示サイズ情報を映像処理回路107へ供給する。換言すれば、本実施形態においては、表示サイズ算出部135と映像処理回路107とによって、調整手段を構成している。
 より具体的には、表示サイズ算出部135は、(1)最小文字サイズ、(2)テレビ10からユーザまでの距離、及び、(3)テレビ10を使用しているユーザが予め設定している基準文字サイズに基づいて、表示サイズ算出処理を実行する。表示サイズ算出処理の算出の詳細については、後述する。
 テレビ10は、上記(1)及び(2)により、サブ画像に含まれる文字を、テレビ10からユーザまでの距離に適した大きさで表示することができる。したがって、テレビ10は、テレビ10からユーザまでの距離によらず、サブ画像を、当該サブ画像に含まれる文字をユーザが認識可能なサイズで表示することができる。
 また、テレビ10は、(3)により、テレビ10からユーザまでの距離によらず、サブ画像に含まれる文字がユーザの好みのサイズにより合致したサイズとなるよう調整された表示サイズで、サブ画像を表示することができる。
 なお、本実施形態では、表示サイズ算出部135は、(1)~(3)に基づいて表示サイズ算出処理を実行する構成を例に挙げて説明するが、本発明はこれに限定されるものではない。例えば、表示サイズ算出部135は、(1)及び(2)に基づいて表示サイズ算出処理を実行してもよいし、(1)及び(3)に基づいて表示サイズ算出処理を実行してもよい。
 〔制御部における処理の概要〕
 次に、本実施形態に係るテレビ10の備える制御部118において実行される処理の概要について、図3を参照して説明する。図3は、本実施形態に係るテレビ10の備える制御部118において実行される処理の一例を示すフローチャートである。
 外部入力部115又は無線通信部121においてサブ画像を取得すると(ステップS101)、制御部118は、スイッチング部131がON状態であるか否かを判定する(ステップS102)。スイッチング部131がOFF状態である場合(ステップS102においてNO)、制御部118は、サブ画像がそのままLCD110に表示されるよう、映像処理回路107を制御する(ステップS103)。
 スイッチング部131がON状態である場合(ステップS102においてYES)、文字認識部132は、スイッチング部131を介して供給されるサブ画像に対して文字認識処理を実行する(ステップS104)。
 次に、距離検出部133は、カメラ120によって撮像された撮像画像から、テレビ10を使用しているユーザと、当該テレビ10との距離を検出する(ステップS105)。また、ユーザ設定抽出部134は、カメラ120によって撮像された撮像画像から、テレビ10を使用しているユーザを特定し、特定されたユーザによって予め設定されている基準文字サイズをRAM117から抽出する(ステップS106)。
 表示サイズ算出部135は、(1)文字認識部132によって検出された最小文字サイズ、(2)距離検出部133によって検出されたテレビ10からユーザまでの距離、及び、(3)ユーザ設定抽出部134によって抽出された基準文字サイズに基づいて、表示サイズ算出処理を実行する(ステップS107)。表示サイズ算出部135は、算出した表示サイズを、表示サイズ情報として映像処理回路107に供給する(ステップS108)。
 制御部118は、サブ画像をLCD110に表示させる場合には、上述したステップS101~S108の処理を繰り返し実行すればよい。
 〔表示サイズ算出処理〕
 次に、本実施形態に係るテレビ10の備える制御部118の表示サイズ算出部135におけるサブ画像の表示サイズ算出処理について、図4から図21を参照して説明する。
 〔サブ画像をメイン画像に重畳表示する場合〕
 まず、サブ画像のみの表示サイズを算出する場合(すなわち、サブ画像をメイン画像に重畳して表示する場合)の表示サイズ算出処理について、図4から図7を参照して説明する。この場合には、LCD110には、図4に示すように、映像処理回路107においてスケーリング処理の施されたサブ画像3b(以降では、スケーリング後サブ画像とも記載する)が、メイン画像1aに重畳された状態で表示されることになる。
 図4は、本実施形態に係る携帯端末30の表示部(不図示)、及び、テレビ10の備えるLCD110に表示される表示画面の一例を示す図である。図4の(a)は、携帯端末30の表示部に表示されるサブ画像3aの一例を示し、(b)は、テレビ10のLCD110に表示されるメイン画像1a及びスケーリング後サブ画像3bの一例を示している。なお、以降では、サブ画像、メイン画像、スケーリング後サブ画像、及び、後述するスケーリング後メイン画像の、図4におけるx軸方向の長さを「横幅」とも記載し、y軸方向の長さを「縦幅」とも記載する。
 ここで、図4の(a)に示すように、サブ画像3aの横幅をXs1(mm)、縦幅をYs1(mm)とする。また、サブ画像3aに含まれる最小文字(図4の(a)においては、「A」)の最小文字サイズの横幅をXs2(mm)、縦幅をYs2(mm)とする。なお、本実施形態では、Xs2=Ys2である場合を例に挙げて説明するが、これに限定されるものではない。
 また、図4の(b)に示すように、メイン画像1aの横幅をXt1(mm)、縦幅をYt1(mm)とし、スケーリング後サブ画像3bの横幅をXds1(mm)、縦幅をYds1(mm)とする。スケーリング後サブ画像3bに含まれる最小文字サイズの横幅をXds2(mm)、縦幅をYds2(mm)とする。
 また、距離検出部133によって検出されるテレビ10とユーザとの距離をD(mm)とし、D=1000(mm)であるときを基準として予め設定されている基準文字サイズ(以降、サブ画像用基準文字サイズとも記載する)をSs(mm)とする。
 なお、本実施形態では、表示サイズ算出部135において、サブ画像3aのアスペクト比(Ys1/Xs1)と、スケーリング後サブ画像3bのアスペクト比(Yds1/Xds1)とが一定となるように、スケーリング後サブ画像3bの表示サイズを算出する場合を例に挙げて説明する。
 また、サブ画像3aのアスペクト比と、スケーリング後サブ画像3bのアスペクト比が一定であることから、Xs2:Xs1=Xds2:Xds1、Ys2:Ys1=Yds2:Yds1を満たす。これらの条件のもと、表示サイズ算出部135は、以下のようにスケーリング後サブ画像3bの表示サイズ(横幅Xds1及び縦幅Yds1)を算出する。
 まず、スケーリング後サブ画像3bの横幅Xds1及び縦幅Yds1は、それぞれ、
  Xds1=(Xds2/Xs2)*Xs1 ・・・(1)
  Yds1=(Yds2/Ys2)*Ys1 ・・・(2)
と表される。
 また、スケーリング後サブ画像3bに含まれる最小文字サイズ(本実施形態では、Xds2=Yds2)は、テレビ10からユーザまでの距離Dに正比例する。これにより、スケーリング後サブ画像3bに含まれる最小文字サイズを、ユーザが文字を認識できる最低限のサイズ以上に保つことができる。具体的には、スケーリング後サブ画像3bに含まれる最小文字サイズは、テレビ10とユーザとの距離DがD=1000(mm)であるときのサブ画像用基準文字サイズがSsであることから、
  Xds2=Yds2=(Ss*D)/1000 ・・・(3)
となる。
 式(1)~(3)より、スケーリング後サブ画像3bの表示サイズ(横幅Xds1、及び、縦幅Yds1)は、それぞれ、
  Xds1=Ss*D*(Xs1/1000Xs2) ・・・(4)
  Yds1=Ss*D*(Ys1/1000Ys2) ・・・(5)
となる。
 ただし、式(4)及び(5)の計算の結果、Xds1>Xt1、あるいは、Yds1>Yt1となった場合には、スケーリング後サブ画像3bの全体をLCD110に表示することができない。本実施形態では、表示サイズ算出部135は、このような場合に、Xds1≦Xt1、及び、Yds1≦Yt1となるように縮小することにより、スケーリング後サブ画像3bの全体をLCD110に表示する。
 なお、本発明はこれに限定されるものではなく、例えば、表示サイズ算出部135は、スケーリング後サブ画像3bを縮小することなく、スケーリング後サブ画像3bのうちの表示可能な範囲(スケーリング後サブ画像3bの一部)をLCD110に表示してもよい。
 上述のことから、表示サイズ算出部135において算出されるスケーリング後サブ画像3bの表示サイズは、次のケースA~Cに分けられる。
 (ケースA)
 式(4)及び(5)の計算の結果が、Xds1≦Xt1、及び、Yds1≦Yt1である場合を、ケースAとする。ケースAの場合には、表示サイズ算出部135において算出されるスケーリング後サブ画像3bの表示サイズは、式(4)及び(5)の計算結果と等しくなる。
 (ケースB)
 式(4)及び(5)の計算の結果が、(i)Xds1≦Xt1、かつ、Yds1>Yt1、又は、(ii)Xds1>Xt1、かつ、Yds1>Yt1、かつ、(Yds1/Xds1)≧(Yt1/Xt1)である場合を、ケースBとする。換言すれば、ケースBでは、図5において点線で示すように、スケーリング後サブ画像3bの縦幅Yds1が、LCD110の縦幅Yt1よりも大きい。
 図5は、ケースBである場合に、LCD110に表示されるスケーリング後サブ画像の一例を示す図である。
 表示サイズ算出部135は、ケースBの場合、図5に示すように、Yds1の値を最大でもYt1までとしてスケーリング後サブ画像3b’の表示サイズを算出する。これにより、表示サイズ算出部135において算出されるスケーリング後サブ画像3b’の表示サイズは、
  Xds1=(Xs1/Ys1)*Yt1 ・・・(6)
  Yds1=Yt1 ・・・(7)
となる。
 なお、式(6)におけるXs1/Ys1の値は、(Xs1/Xs2)及び(Ys1/Ys2)の値から、表示サイズ算出部135において、
  (Xs1/Xs2)/(Ys1/Ys2)=Xs1/Ys1
により算出することができる。
 (ケースC)
 式(4)及び(5)の計算の結果が、(i)Xds1>Xt1、かつ、Yds1≦Yt1、又は、(ii)Xds1>Xt1、かつ、Yds1>Yt1、かつ、(Yds1/Xds1)<(Yt1/Xt1)である場合を、ケースCとする。換言すれば、ケースCでは、図6において点線で示すように、スケーリング後サブ画像3bの横幅Xds1が、LCD110の横幅Xt1よりも大きい。
 図6は、ケースCである場合に、LCD110に表示されるスケーリング後サブ画像の一例を示す図である。
 表示サイズ算出部135は、ケースCの場合には、図6に示すように、Xds1の値を最大でもXt1までとしてスケーリング後サブ画像3b”の表示サイズを算出する。これにより、表示サイズ算出部135において算出されるスケーリング後サブ画像3b”の表示サイズは、
  Xds1=Xt1 ・・・(8)
  Yds1=(Ys1/Xs1)*Xt1 ・・・(9)
となる。
 なお、ケースB、Cにおいては、LCD110に表示されるスケーリング後サブ画像3b”に含まれる最小文字のサイズが、ユーザに最適な大きさ(式(4)及び(5)の計算結果)よりも小さくなっている。このため、ケースB、Cの場合には、テレビ10は、スケーリング後サブ画像3b”に含まれる最小文字のサイズがユーザに最適なサイズよりも小さいことを示すコーションを表示してもよい。このコーションは、例えば、OSD生成部108によって生成されればよい。また、テレビ10は、スケーリング後サブ画像3b”に含まれる最小文字と比較可能なように、ユーザに最適なサイズの文字を表示してもよい。
 なお、上述では、算出した最小文字サイズに基づいてサブ画像にスケーリング処理を施す構成を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、サブ画像のサイズに対する、最小文字サイズの比(最小文字サイズ比)を算出し、算出した最小文字サイズ比に基づいてサブ画像にスケーリング処理を施す構成を採用することもできる。
 (最小文字サイズ比が変化する場合)
 ここで、サブ画像3aのサイズに対する、サブ画像3aに含まれる最小文字サイズの比(最小文字サイズ比)が変化した場合のスケーリング後サブ画像3bの表示サイズの変化について、図7を参照して説明する。
 なお、最小文字サイズ比については、例えば、Xs2/Xs1、及び、Ys2/Ys1により、算出することができる。ここでは、D=2000mm、S=4mm、Xt1=240mm、Yt1=360mmである場合を例に挙げて説明する。
 図7は、サブ画像3aにおける最小文字サイズ比が変化した場合の、LCD110の表示画面の画面遷移図である。図7の(a)は、最小文字サイズ比が変化する前の表示画面の一例を示し、(b)は、最小文字サイズ比が変化した後の表示画面の一例を示している。
 まず、変化する前の最小文字サイズ比がXs2/Xs1=1/30、Ys2/Ys1=1/45である場合、表示サイズ算出部135における表示サイズ算出処理により、スケーリング後サブ画像3bの表示サイズが、式(4)及び(5)から、
  Xds1=(4*2000*30)/1000=240mm
  Yds1=(4*2000*45)/1000=360mm
と、算出される。この表示サイズに基づいて映像処理回路107においてサブ画像3aにスケーリング処理が施され、LCD110には、図7の(a)に示すように、スケーリング後サブ画像3bが表示される。
 その後、最小文字サイズ比がXs2/Xs1=1/20、Ys2/Ys1=1/30に変化した場合には、表示サイズ算出部135における表示サイズ算出処理により、スケーリング後サブ画像3cの表示サイズが、式(4)及び(5)から、
  Xds1=(4*2000*20)/1000=160mm
  Yds1=(4*2000*30)/1000=240mm
と、算出される。この表示サイズに基づいて映像処理回路107においてサブ画像3aにスケーリング処理が施され、LCD110には、図7の(b)に示すように、変化後の表示サイズのスケーリング後サブ画像3cが表示される。
 このようにして、テレビ10は、サブ画像における最小文字サイズ比が変化した場合にも、ユーザに最適なスケーリング処理の施されたサブ画像を、メイン画像に重畳してLCD110に表示することができる。
 〔サブ画像及びメイン画像を2画面表示する場合〕
 なお、本実施形態では、サブ画像をスケーリングすると共に、スケーリング後サブ画像をメイン画像に重畳して表示する場合を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、スケーリング後サブ画像と重ならないようにメイン画像をスケーリングし、スケーリング後サブ画像とスケーリング後のメイン画像(スケーリング後メイン画像)とを、LCD110の異なる領域に表示する構成を採用することもできる。
 これによって、テレビ10は、サブ画像を表示した場合にサブ画像がメイン画像に重畳されることによって、メイン画像の一部をユーザが見ることができなくなってしまうことを防ぐことができる。
 なお、以降では、スケーリング後のサブ画像及びメイン画像をLCD110の異なる領域に表示することを、「2画面表示」とも記載する。
 さらに、表示サイズ算出部135は、メイン画像に文字が含まれている場合、上述したスケーリング後サブ画像の表示サイズの算出と同様にして、スケーリング後メイン画像の表示サイズを算出してもよい。以降、メイン画像及びサブ画像の双方をスケーリングして2画面表示する場合について、図8から図21を参照して説明する。
 図8は、本実施形態に係る携帯端末30及びテレビ10に表示される表示画面の一例を示す図である。図8の(a)は、携帯端末30の表示部に表示されるサブ画像3aの一例を示し、(b)は、LCD110に表示されるメイン画像1aの一例を示し、(c)は、LCD110に表示されるスケーリング後のメイン画像1dおよびサブ画像3dの一例を示している。
 なお、2画面表示を行う場合には、表示サイズ算出部135は、各パラメータを例えば以下のように設定して、スケーリング後サブ画像3bの表示サイズの算出と同様に、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズを算出すればよい。
 メイン画像1aに含まれる最小文字サイズの横幅をXt2(mm)、縦幅をYt2(mm)(本実施形態では、Xt2=Yt2)とする。スケーリング後メイン画像1dの横幅をXdt1(mm)、縦幅をYdt1(mm)とし、スケーリング後メイン画像1dに含まれる最小文字サイズの横幅をXdt2(mm)、縦幅をYdt2(mm)とする。また、D=1000(mm)であるときを基準として予め設定されている基準文字サイズ(メイン画像用基準文字サイズ)をSt(mm)とする。
 このとき、表示サイズ算出部135は、スケーリング後メイン画像1dの表示サイズ(横幅Xdt1、及び、縦幅Ydt1)を、それぞれ、スケーリング後サブ画像3bの表示サイズの算出と同様に、
  Xdt1=St*D*(Xt1/1000Xt2) ・・・(10)
  Ydt1=St*D*(Yt1/1000Yt2) ・・・(11)
によって算出することができる。
 この場合には、表示サイズ算出部135は、スケーリング後サブ画像3dの表示サイズと共に、スケーリング後メイン画像1dの表示サイズを表示サイズ情報として映像処理回路107に供給すればよい。また、映像処理回路107は、表示サイズ算出部135から取得した表示サイズ情報に基づき、サブ画像3aおよびメイン画像1aの双方にスケーリング処理を施せばよい。
 これにより、スケーリング後メイン画像1dおよびスケーリング後サブ画像3dは、例えば、図8に示すように、LCD110に2画面表示される。
 一方で、サブ画像3a及びメイン画像1aを共にスケーリング処理して2画面表示を行う場合には、スケーリング後の各画像の表示領域に隙間ができたり、重なったり、一方又は双方の表示サイズがLCD110のサイズを超えてしまう場合がある。
 スケーリング後のサブ画像3d及びメイン画像1dの表示領域が離れてしまう場合には、各画像に含まれる文字はユーザに適したサイズに保たれるものの、画像全体としての視認性が低下してしまう。また、スケーリング後のサブ画像3d及びメイン画像1dの表示領域が重なったり、表示サイズがLCD110のサイズを超えてしまう場合には、少なくとも一方の画像が途中で途切れてしまうため、画像全体としての視認性が低下してしまう。
 このような場合には、表示サイズ算出部135は、以下に示すケースD~Fの各々において、最適な各画面のサイズを計算することが好ましい。さらに、テレビ10は、ユーザにより、ケースD~Fの各々において、例えば(1)スケーリング後メイン画像1dの表示を優先する場合、(2)スケーリング後サブ画像3dの表示を優先する場合、及び、(3)何れも優先しない場合などの設定が可能であることが好ましい。
 (ケースD)
 表示サイズ算出部135における式(4)及び(10)の計算の結果、スケーリング後メイン画像1dとスケーリング後サブ画像3dとの間に隙間が生じる場合、すなわち、Xds1+Xdt1<Xt1となる場合を、ケースDとする。ケースDの場合、例えば、図9に示すように、スケーリング後メイン画像1d、及び、スケーリング後サブ画像3dは、各々離間してLCD110に表示されることになる。
 図9は、ケースDである場合にLCD110に表示される表示画面の一例を示す図である。
 表示サイズ算出部135は、このような場合には、スケーリング後メイン画像1d及びスケーリング後サブ画像3dの表示サイズを適切に調整するための調整値(表示サイズ調整値とも記載する)を算出する。
 ケースD1
 ケースDの場合であって、テレビ10に、予めスケーリング後メイン画像1dの優先度がスケーリング後サブ画像3dの優先度よりも高く設定されている(すなわち、スケーリング後メイン画像1dの表示を優先する設定がされている)場合を、ケースD1とする。ケースD1の場合には、表示サイズ算出部135は、図10に示すように、LCD110に、スケーリング後メイン画像1dのみのサイズが調整(拡大)されて、スケーリング後メイン画像1d’として表示されるように、表示サイズ調整値を算出する。
 図10は、ケースD1である場合にLCD110に表示される表示画面の一例を示す図である。
 具体的には、表示サイズ算出部135は、スケーリング後メイン画像1d’の表示サイズが、スケーリング後サブ画像3dの一端をLCD110の長手方向の一端に接する状態で表示させた場合に、スケーリング後メイン画像1d’の一端をLCD110の長手方向の他の一端に接するように表示させた状態で当該スケーリング後メイン画像1d’の他の一端がスケーリング後サブ画像3dの他の一端に接する表示サイズに調整されるよう、表示サイズ調整値を算出する。
 ケースD2
 ケースDの場合であって、テレビ10に、予めスケーリング後サブ画像3dの優先度がスケーリング後メイン画像1dの優先度よりも高く設定されている場合を、ケースD2とする。ケースD2の場合には、表示サイズ算出部135は、図11に示すように、スケーリング後サブ画像3dのみが調整されて、スケーリング後サブ画像3d’としてLCD110に表示されるように、表示サイズ調整値を算出する。
 図11は、ケースD2である場合にLCD110に表示される表示画面の一例を示す図である。
 ケースD3
 ケースDの場合であって、テレビ10に、予めスケーリング後のメイン画像1d及びサブ画像3dに等しい優先度が設定がされている場合を、ケースD3とする。ケースD3の場合には、表示サイズ算出部135は、図12に示すように、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズの双方が調整されて、スケーリング後のメイン画像1d’及びサブ画像3d’としてLCD110に表示されるように、表示サイズ調整値を算出する。
 図12は、ケースD3である場合にLCD110に表示される表示画面の一例を示す図である。
 なお、表示サイズ算出部135は、スケーリング後のメイン画像及びサブ画像に優先度が設定されていない場合にも、ケースD3と同様にスケーリング後のメイン画像及びサブ画像の表示サイズが調整されて表示されるように、表示サイズ調整値を算出してもよい。
 (ケースE)
 表示サイズ算出部135における式(4)及び(10)の計算の結果、スケーリング後メイン画像1dとスケーリング後サブ画像3dとが重なる場合、すなわち、Xds1+Xdt1>Xt1となる場合を、ケースEとする。ケースEの場合、スケーリング後メイン画像1d、及び、スケーリング後サブ画像3dは、例えば、図13に示すように、一方の画像の一部が他方の画像の一部に重畳してLCD110に表示されることになる。
 図13は、ケースEである場合にLCD110に表示される表示画面の一例を示す図である。
 ケースE1
 ケースEの場合であって、テレビ10に予めスケーリング後メイン画像1dの表示を優先する設定がされている場合を、ケースE1とする。ケースE1の場合には、表示サイズ算出部135は、図14に示すように、LCD110に、スケーリング後サブ画像3dのみが調整(縮小)されて、スケーリング後サブ画像3d’として表示されるように、表示サイズ調整値を算出する。
 図14は、ケースE1である場合にLCD110に表示される表示画面の一例を示す図である。
 具体的には、表示サイズ算出部135は、スケーリング後サブ画像3d’の表示サイズが、スケーリング後メイン画像1dの一端をLCD110の長手方向の一端に接する状態で表示させた場合に、スケーリング後サブ画像3d’の一端をLCD110の長手方向の他の一端に接するように表示させた状態で当該スケーリング後サブ画像3d’の他の一端がスケーリング後メイン画像1dの他の一端に接する表示サイズとなるように、表示サイズ調整値を算出する。
 ケースE2
 ケースEの場合であって、テレビ10に予めスケーリング後サブ画像3dの表示を優先する設定がされている場合を、ケースE2とする。ケースE2の場合には、表示サイズ算出部135は、図15に示すように、LCD110に、スケーリング後メイン画像1dのみが調整されて、スケーリング後メイン画像1d’として表示されるように、表示サイズ調整値を算出する。
 図15は、ケースE2である場合にLCD110に表示される表示画面の一例を示す図である。
 ケースE3
 ケースEの場合であって、テレビ10に、予めスケーリング後のメイン画像1d及びサブ画像3dに等しい優先度が設定がされている場合を、ケースE3とする。ケースE3の場合には、表示サイズ算出部135は、図16に示すように、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズが共に調整され、スケーリング後のメイン画像1d’及びサブ画像3d’としてLCD110に表示されるように、表示サイズ調整値を算出する。
 図16は、ケースE3である場合にLCD110に表示される表示画面の一例を示す図である。
 (ケースF)
 表示サイズ算出部135における式(5)及び(11)の計算の結果、スケーリング後メイン画像またはスケーリング後サブ画像の縦幅がLCD110の縦幅を超える場合、すなわち、Yds1>Yt1、または、Ydt1>Yt1となる場合を、ケースFとする。ケースFの場合、スケーリング後メイン画像1dおよびスケーリング後サブ画像3dの少なくとも一方は、例えば、図17の(a)及び(b)に示すように、LCD110にその全体が表示できなくなる。
 図17は、ケースFである場合にLCD110に表示される表示画面の一例を示す図である。図17の(a)は、スケーリング後サブ画像3dの縦幅がLCD110の縦幅を超える場合の表示画面の一例を示し、(b)は、スケーリング後メイン画像1dの縦幅がLCD110の縦幅を超える場合の表示画面の一例を示している。
 ケースF1
 ケースFの場合であって、テレビ10に、予めスケーリング後メイン画像1dの優先度が高く設定されている場合を、ケースF1とする。ケースF1の場合には、表示サイズ算出部135は、図18に示すように、スケーリング後メイン画像1dが優先されてLCD110に表示されるように、表示サイズ調整値を算出する。
 図18は、ケースF1である場合にLCD110に表示される表示画面の一例を示す図である。図18の(a)は、スケーリング後メイン画像1dの表示サイズを保ちつつスケーリング後サブ画像3dが調整された場合の表示画面の一例を示し、(b)は、スケーリング後メイン画像1dの縦幅がLCD110の縦幅に合わせて調整された場合の表示画面の一例を示している。
 まず、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズが図18の(a)に示すような場合であるときに、表示サイズ算出部135において算出される表示サイズについて説明する。表示サイズ算出部135は、スケーリング後サブ画像3d’の表示サイズが、スケーリング後メイン画像1dの一端をLCD110の長手方向の一端に接する状態で表示させた場合に、スケーリング後サブ画像3d’の一端をLCD110の長手方向の他の一端に接するように表示させた状態で当該スケーリング後サブ画像’の他の一端がスケーリング後メイン画像1dの他の一端に接する表示サイズとなるように、表示サイズ調整値を算出する。
 一方、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズが図18の(b)に示すような場合、表示サイズ算出部135は、スケーリング後メイン画像1d’の縦幅とLCD110の縦幅とが一致するように、スケーリング後メイン画像2d’の表示サイズ調整値を算出する。
 なお、本実施形態では、メイン画像1aとスケーリング後メイン画像1d’とのアスペクト比が一定に保たれているため、表示サイズ調整値によって調整されたスケーリング後メイン画像1d’の表示サイズは、LCD110のサイズと一致する。このため、図18の(b)に示すように、LCD110には、スケーリング後メイン画像1d’のみが表示されることになる。
 ケースF2
 ケースFの場合であって、テレビ10に、予めスケーリング後サブ画像3dの優先度が高く設定されている場合を、ケースF2とする。ケースF2の場合には、表示サイズ算出部135は、図19に示すように、スケーリング後サブ画像3dが優先されてLCD110に表示されるように、表示サイズ調整値を算出する。
 図19は、ケースF2である場合にLCD110に表示される表示画面の一例を示す図である。図19の(a)は、スケーリング後サブ画像3d’の縦幅がLCD110の縦幅に合わせて表示された場合の表示画面の一例を示し、(b)は、スケーリング後サブ画像3dの表示サイズを保ちつつスケーリング後メイン画像1d’が調整された場合の表示画面の一例を示している。
 ケースF3
 ケースFの場合であって、テレビ10に、予めスケーリング後のメイン画像1d及びサブ画像3dに等しい優先度が設定されている場合を、ケースF3とする。ケースF3の場合には、表示サイズ算出部135は、図20に示すように、スケーリング後のメイン画像1d及びサブ画像3dの表示サイズが共に調整されて、スケーリング後のメイン画像1d’及びサブ画像3d’としてLCD110に表示されるように、表示サイズ調整値を算出する。
 図20は、ケースF3である場合にLCD110に表示される表示画面の一例を示す図である。図20の(a)は、スケーリング後のメイン画像1d及びサブ画像3dを均等な縮小率で縮小して調整した場合の表示画面の一例を示し、(b)は、スケーリング後のメイン画像1d及びサブ画像3dを均等な縮小率で縮小して調整した場合の表示画面の他の一例を示している。
 表示サイズ算出部135は、ケースD~Fの場合に、上述のようにして、予め設定された優先度に応じて、スケーリング後のメイン画像及びサブ画像の表示サイズ調整値を算出する。表示サイズ算出部135は、算出した表示サイズ調整値を、スケーリング後のメイン画像及びサブ画像の表示サイズと共に表示サイズ情報として映像処理回路107に供給する。映像処理回路107は、表示サイズ算出部135から供給される表示サイズ情報(すなわち、表示サイズ、及び、表示サイズ調整値)に基づいて、メイン画像及びサブ画像に対してスケーリング処理を施す。
 これにより、テレビ10は、ケースD~Fの場合であっても、LCD110に表示されるスケーリング後メイン画像およびスケーリング後サブ画像を、上述のように、互いに接するように表示することができる。
 これによって、テレビ10は、ケースDの場合には、スケーリング後メイン画像とスケーリング後サブ画像とを、各画像の間に隙間を生じさせることなく表示することができる。また、テレビ10は、ケースEの場合には、スケーリング後メイン画像の一部とスケーリング後サブ画像の一部とを重畳させることなく表示することができる。さらに、テレビ10は、ケースFの場合には、スケーリング後メイン画像およびスケーリング後サブ画像の全体をLCD110に表示させることができる。
 なお、本実施形態では、スケーリング後メイン画像1d及びスケーリング後サブ画像3dが共に、LCD110の長手方向の沿った1辺に接するように表示させる構成を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、図21に示すように、スケーリング後メイン画像1d及びスケーリング後サブ画像3dの縦幅の中心が、LCD110の短手方向に沿った1辺の中心に位置するように表示される構成を採用することもできる。
 図21は、本実施形態に係るテレビ10のLCD110に表示される表示画面の他の一例を示す図である。
 上述のように、テレビ10は、サブ画像と同様に(1)メイン画像における最小文字サイズ、(2)テレビ10からユーザまでの距離から、メイン画像に含まれる文字を、テレビ10からユーザまでの距離に適した大きさで表示することができる。またテレビ10は、(3)基準文字サイズに基づいて、テレビ10からユーザまでの距離によらず、メイン画像を、メイン画像に含まれる文字がユーザの好みのサイズにより合致したサイズとなるよう調整された表示サイズで表示することができる。
 さらに、表示サイズ算出部135は、スケーリング後(表示サイズの調整後)のサブ画像及びメイン画像の少なくとも何れかの表示サイズを更に調整するための表示サイズ調整値を、各々の優先度に応じて算出する。また、映像処理回路107は、表示サイズ調整値に基づいてスケーリング後のサブ画像及びメイン画像の少なくとも何れかの表示サイズを更に調整する。
 これによって、テレビ10は、上記入力画像及び上記コンテンツの優先度に応じて、より適切な表示サイズでサブ画像及びメイン画像を表示することができる。
 また、テレビ10は、ケースE、Fにおいて、ケースB、Cと同様にスケーリング後のメイン画像及びサブ画像の少なくとも何れかに含まれる最小文字のサイズがユーザに最適なサイズよりも小さいことを示すコーションを表示してもよい。また、テレビ10は、スケーリング後サブ画像に含まれる最小文字と比較可能なように、ユーザに最適なサイズの文字を表示してもよい。
 〔文字認識部の構成〕
 次に、本実施形態のテレビ10の備える制御部118の文字認識部132における文字認識処理、及び、文字認識処理を実行するための文字認識部132の有する構成について、図22から図25を参照して説明する。図22は、本実施形態に係るテレビ10の備える制御部118の文字認識部132の構成を示すブロック図である。
 図22に示すように、本実施形態に係る文字認識部132は、文字領域検出部(文字領域検出手段)141、最小文字領域検出部(文字サイズ検出手段)142、及び、最小文字サイズ検出部(文字サイズ検出手段)143を備えている。
 (文字領域検出部)
 文字領域検出部141は、携帯端末30から入力されるサブ画像から、文字の含まれる領域(文字領域)を検出する。また、文字領域検出部141は、複数行又は複数列からなる文字領域を、各行又は各列毎に1つの文字領域として検出する。なお、サブ画像から文字領域を検出する処理については、周知の技術を利用することができるため、ここではその説明を省略する。
 (最小文字領域検出部)
 最小文字領域検出部142は、文字領域検出部141において検出された文字領域から、最も小さい文字を含む文字領域(最小文字領域)を検出する。
 最小文字領域検出部142は、文字領域検出部141において検出された各文字領域のサイズを算出する。各文字領域のサイズ(横幅(行方向の幅)Xi、縦幅(列方向の幅)Yi、ただし、iは文字領域を示し、1≦i)の算出は、次の座標計算
  Xi=(文字領域iの右上隅のX座標)-(文字領域iの左上隅のX座標)
  Yi=(文字領域iの左上隅のY座標)-(文字領域iの左下隅のY座標)
により、算出することができる。
 最小文字領域検出部142は、算出した各文字領域のサイズに基づき、横幅Xi又は縦幅Yiのサイズの最も小さな領域を最小文字領域として検出する。
 例えば、最小文字領域検出部142は、まず、文字領域検出部141において検出された各文字領域のうち、横幅Xiの最も小さい文字領域と、縦幅Yiの最も小さい文字領域とを検出する。次に、最小文字領域検出部142は、横幅Xiの最も小さい文字領域の横幅Xiの値と、縦幅Yiの最も小さい文字領域の縦幅Yiの値を比較し、より値の小さい文字領域を、最小文字領域として抽出する。最小文字領域検出部142は、このようにして最小文字領域を検出すればよいが、もちろん、本発明はこれに限定されるものでない。
 (最小文字サイズ検出部)
 最小文字サイズ検出部143は、最小文字領域検出部142において抽出された最小文字領域に含まれる最小文字のサイズ(最小文字サイズ)を検出する。
 具体的には、最小文字サイズ検出部143は、最小文字領域検出部142において抽出された最小文字領域の横幅Xiが、縦幅Yiよりも小さい場合には、横幅Xiの値を最小文字サイズとして検出する。また、最小文字サイズ検出部143は、最小文字領域の縦幅Yiが、横幅Xiよりも小さい場合には、縦幅Yiの値を最小文字サイズとして検出する。
 すなわち、最小文字サイズ検出部143は、最小文字領域検出部142によって検出された最小文字領域の横幅Xi及び縦幅Yiの何れか小さい幅の値を最小文字サイズとして検出する。
 〔文字認識処理〕
 次に、本実施形態に係る文字認識部132における文字認識処理について、図23から図25を参照して説明する。図23は、本実施形態に係る文字認識処理の流れを示すフローチャートである。
 また、図24は、文字認識処理の概要を示す図である。図24の(a)は、サブ画像の一例を示し、(b)は、文字領域検出部141によって検出される文字領域の一例を示し、(c)は、最小文字サイズ検出部143によって算出される文字領域のサイズの一例を示している。
 図23に示すように、例えば、図24の(a)に示すサブ画像を取得すると(ステップS201)、文字領域検出部141は、サブ画像から文字領域を検出する(ステップS202)。このとき、文字領域検出部141は、図24の(b)に示すように、サブ画像から、文字領域a1~a5を検出する。
 文字領域検出部141によって文字領域が検出されると、最小文字領域検出部142は、各文字領域a1~a5のうちから、最小文字領域を検出する(ステップS203)。このとき、最小文字領域検出部142は、図24の(c)に示すように、各文字領域a1~a5のサイズ(横幅X1~X5、及び、縦幅Y1~Y5)を算出する。そして、最小文字領域検出部142は、算出した横幅X1~X5及び縦幅Y1~Y5から最も値の小さい幅を有する文字領域を、最小文字領域として検出する。
 最小文字領域検出部142によって最小文字領域が検出されると、最小文字サイズ検出部143は、最小文字領域から最小文字サイズを検出する(ステップS204)。
 上記の構成によれば、最小文字サイズ検出部143は、サブ画像に含まれる全ての文字のサイズを検出しなくとも、最小文字領域検出部142によって検出される最小文字領域の横幅(行方向の幅)及び縦幅(列方向の幅)、最も短い幅の値を、サブ画像に含まれる最小文字サイズとして検出することができる。
 このため、テレビ10は、最小文字サイズを検出するために、サブ画像に含まれる全ての文字を検出し、更に検出した各文字のサイズを検出するという、処理量の大きな処理を行う必要がない。したがって、テレビ10は、最小文字サイズの検出に関する処理時間を低減することができる。
 なお、図25に示すように、サブ画像には、1行(又は1列)の文字領域に複数のサイズの文字が含まれている場合もある。図25は、本実施形態に係る文字認識処理の他の一例を示す図である。図25の(a)は、最小文字サイズ検出部143によって算出される文字領域のサイズの一例を示し、(b)は、最小文字サイズ検出部143によって算出される文字領域のサイズの他の一例を示している。
 このような場合には、図25の(a)に示すように、文字領域検出部141において1つの文字領域a6として検出し、最小文字領域検出部142において1つの文字領域a6としてのサイズ(縦幅Y6)を算出してもよい。また、図25の(b)に示すように、文字領域検出部141において異なるサイズの文字毎に異なる文字領域a7、a8として検出し、最小文字領域検出部142において文字領域a7、a8のサイズ(縦幅Y7、Y8)を各々検出してもよい。
 さらに、図26に示すように、サブ画像に、フォント及びフォントサイズが同一な文字を含む文字領域であって、縦長の文字を含む文字領域a9と、縦長の文字を含まない文字領域a10、a11とが含まれている場合もある。図26は、本実施形態に係る文字認識処理のさらに他の一例を示す図である。
 このような場合であっても、図26に示すように、文字領域検出部141において文字領域a9~a11を各々異なる文字領域として検出し、最小文字領域検出部142において文字領域a9~a11の各々のサイズ(縦幅Y9~Y11)を検出すればよい。このとき、Y9>Y10=Y11であるから、最小文字領域検出部142は、縦長の文字を含まない文字領域a10及び11のうちの任意の1つの文字領域を最小文字領域として検出してもよいし、文字領域a10及びa11の双方を最小文字領域として検出してもよい。
 (その他の構成)
 なお、本実施形態に係る制御部(判定手段)118は、サブ画像が動画像であるか静止画像であるかを判定してもよい。この場合には、文字認識部132(より具体的には、文字領域検出部141)は、制御部118においてサブ画像が動画像であると判定された場合には文字認識処理を継続的又は離散的に複数回実行し、サブ画像が静止画像であると判定された場合には文字認識処理をサブ画像を取得した時点で1度だけ実行してもよい。
 これにより、本実施形態に係る文字認識部132は、サブ画像が静止画像である場合には、文字認識処理を1度実行した後は文字認識処理を停止することができるため、文字認識処理に関する消費電力を削減することができる。
 さらに、本実施形態に係るテレビ10は、文字領域検出部141における文字領域の検出処理と、最小文字サイズ検出部143における最小文字サイズの検出処理とを、例えば所定の期間毎に、交互に実行する構成を採用してもよい。例えば、テレビ10は、サブ画像が供給され始めてから0秒~2秒の間は、文字領域検出部141における文字領域の検出処理のみを実行し、2秒~4秒の間は、最小文字サイズ検出部143における最小文字サイズの検出処理のみを実行し、以降これらの処理を2秒毎に交互に繰り返せばよい(交互処理実行時の最小文字サイズ検出方法1)。
 また、テレビ10は、文字領域の検出処理と最小文字サイズの検出処理とを所定の期間毎に交互に実行する場合、文字領域の検出処理と、最小文字サイズの検出処理とを、サブ画像を構成する異なるフレームに対して実行する構成を採用することもできる(交互処理実行時の最小文字サイズ検出方法2)。
 例えば、文字領域検出部141は、サブ画像が供給され始めてから0秒~2秒の間、文字領域の検出処理のみを、サブ画像が供給され始めた時点(つまり、0秒の時点)で供給されたフレーム(文字領域検出対象フレーム)に対して実行する。次に、最小文字サイズ検出部143は、サブ画像が供給され始めてから2秒~4秒の間、最小文字サイズの検出処理のみを、サブ画像が供給され始めてから2秒が経過した時点で供給されたフレーム(文字サイズ検出対象フレーム)に対して実行する。
 このとき、最小文字サイズ検出部143は、文字サイズ検出対象フレームのうち、文字領域検出部141において文字領域検出対象フレームから検出された文字領域に対応する領域に対してのみ、最小文字サイズの検出処理を実行する。テレビ10は、以降、これら2つの処理を2秒毎に交互に繰り返せばよい。
 このように、文字領域の検出処理と最小文字サイズの検出処理とを所定の期間毎に交互に実行する際に、文字領域の検出処理と最小文字サイズの検出処理とを、サブ画像を構成する異なるフレームに対して実行することにより、テレビ10は、サブ画像における最小文字サイズ比が変化した場合にも、変化後の最小文字サイズを検出し、最小文字サイズの変化を反映したスケーリング後サブ画像としてLCD110に表示するまでの時間を短縮することができる。
 さらに、文字領域検出部141よって文字領域検出対象フレームから検出された文字領域又は当該文字領域に含まれる文字サイズが、文字サイズ検出対象フレームにおいて変化する場合には、テレビ10は、以下のケースG、Hに応じて上記交互処理実行時の最小文字サイズ検出方法1と2とを切り替えることが好ましい。
 (ケースG)
 文字領域検出対象フレームから検出された文字領域に対応する、文字サイズ検出対象フレームにおける領域に最小文字が含まれている場合を、ケースGとする。ケースGの場合には、テレビ10は、上記交互処理実行時の最小文字サイズ検出方法2を実行すればよい。
 これにより、テレビ10は、文字領域検出部141よって文字領域検出対象フレームから検出された文字領域における最小文字サイズの変化を、スケーリング後サブ画像の表示サイズにより早く反映することができる。
 (ケースH)
 文字領域検出対象フレームから検出された文字領域に対応する文字サイズ検出対象フレームにおける領域に、最小文字が含まれていない場合を、ケースHとする。ケースHの場合には、テレビ10は、上記交互処理実行時の最小文字サイズ検出方法1を実行すればよい。
 これにより、テレビ10は、文字領域検出対象フレームから検出された文字領域に最小文字が含まれていないにも係らず、文字領域検出対象フレームから検出された文字領域に対して文字サイズの検出処理が実行され、誤った最小文字サイズが検出されてしまうことを防ぐことができる。
 なお、ケースHの場合には、例えば、以下のケースH1、ケースH2などの場合を例に挙げることができる。ケースH1は、文字サイズ検出対象フレームにおける、文字領域検出対象フレームから検出された文字領域と対応する領域に最小文字が含まれなくなり(最小文字が消え)、他の領域に最小文字が含まれるようになる場合である。また、ケースH2は、文字サイズ検出対象フレームにおける、文字領域検出対象フレームから検出された文字領域と対応する領域に含まれる文字が最小文字でなくなり、他の領域に最小文字が含まれるようになる場合である。
 また、テレビ10におけるケースGとケースHとの判定方法としては、例えば、制御部118が、文字領域検出対象フレームの直前に供給された複数のフレームの中で、自フレームの直前のフレームに対して文字領域が変化しているフレームの数が所定の数以上である場合にケースHと判定する方法を挙げることができる。なお、所定の数としては、例えば、文字領域検出対象フレームの直前に供給された複数のフレームの半数であってもよいし、全ての数であってもよいし、特に限定されるものではない。
 また、上述のように、最小文字サイズ検出部143は、サブ画像から最小文字サイズを検出することができる。このため、テレビ10は、携帯端末30からサブ画像と共にサブ画像に含まれる文字のサイズを示す情報が供給されるか否かによらず、サブ画像から最小文字サイズを検出することができる。これによって、テレビ10は、携帯端末30からサブ画像と共にサブ画像に含まれる文字のサイズを示す情報が供給されない場合であっても、検出された最小文字サイズに応じて算出された表示サイズとなるようサブ画像にスケーリング処理を施すことができる。
 なお、テレビ10は、上述の構成により、携帯端末30のタイプによらずに最小文字のサイズを検出することができる。携帯端末30のタイプとしては、例えば、携帯電話、スマートフォンおよびタブレット端末など種々の端末を挙げることができるが、これに限定されず、種々の端末の異なる機種も含まれる。
 さらに、本変形例に係る文字認識部132は、文字認識処理を、サブ画像全体ではなく、例えば、サブ画像の中心部など、サブ画像の特定の領域のみに対して実行してもよい。これにより、文字認識部132における文字認識処理の範囲を小さくすることができるため、文字認識処理の処理速度を向上させることができる。
 また、本変形例に係る文字認識部132は、各文字領域に含まれる文字の全てのサイズを検出しなくともよい。例えば、文字認識部132は、各文字領域に含まれる文字のうち、先頭の文字の文字サイズのみを検出し、検出した、各文字領域に含まれる先頭の文字の文字サイズから、最小文字サイズを検出してもよい。
 また、本変形例に係る文字認識部132は、サブ画像が動画像である場合、サブ画像として供給されるフレーム毎に文字認識処理を実行しなくともよい。例えば、所定の期間(例えば、1秒など)毎に文字認識処理を実行してもよいし、所定のフレーム数(例えば、50フレーム)毎に文字認識処理を実行してもよい。
 さらに、本変形例に係る文字認識部132は、連続する2フレーム間の差分からサブ画像の変化量を判定し、変化量が所定の値以上である場合にのみ文字認識処理を実行してもよい。
 また、本実施形態に係る文字認識部132における文字認識処理の頻度を、ユーザがリモコン20などを操作することによって、任意に設定可能であってもよい。
 なお、本実施形態において、サブ画像に文字が含まれていない場合には、表示サイズ算出部135は、最小文字サイズに応じた表示サイズを算出することができない。このような場合には、映像処理回路107は、スイッチング部131がOFF状態である場合と同様に、所定の表示サイズとなるようサブ画像をスケーリング処理すればよい。また、映像処理回路107は、スケーリング後サブ画像が携帯端末30において表示される際のサイズと同じサイズとなるようサブ画像にスケーリング処理を施す構成を採用することもできる。
 また、本実施形態に係る文字認識部132における文字認識処理を、所定の文字を含む文字領域に対してのみ実行する構成を採用してもよい。所定の文字とは、サブ画像に対する文字サイズの比(又は、文字サイズそのもの)が予め定められている文字をあげることができる。例えば、所定の文字は、サブ画像がアプリケーションの実行画面、メニュー画面およびEPGを表示する画面などである場合に、各画面において予め利用されることが決まっている文字などであればよい。
 このように、所定の文字の含まれる文字領域にのみ文字認識処理を実行することにより、サブ画像全体に対する文字認識処理が不要になるため、文字認識部132における文字認識処理に関する処理速度を高速化することができる。
 さらに、所定の文字の含まれる文字領域にのみ文字認識処理を実行する処理を、例えば、サブ画像に含まれる文字領域が多い場合など文字領域認識処理及び表示サイズ算出処理に長時間を要してしまう場合にのみ、実行する構成とすることもできる。
 <変形例>
 なお、本実施形態では、最小文字領域検出部142において最小文字領域を検出し、最小文字サイズ検出部143において最小文字サイズを検出する構成を例に挙げて説明したが、本発明はこれに限定されるものではない。
 例えば、最小文字サイズ検出部143において、文字領域検出部141によって検出された各文字領域に含まれる各文字のサイズを検出し、検出した文字サイズの中から最も小さい文字のサイズを最小文字サイズとして検出する構成を採用してもよい。
 この場合には、文字認識部132は、文字領域検出部141、及び、最小文字サイズ検出部143のみを備えていればよい。換言すれば、本変形例に係る文字領域検出部141は、サブ画像から文字領域を検出し、最小文字サイズ検出部143は、文字領域に含まれる文字のみから最小文字サイズを検出すればよい。
 本変形例に係る文字領域検出部141及び最小文字サイズ検出部143における処理について、図27を参照して説明する。図27は、本変形例に係るサブ画像の一例を示す図である。図27の(a)は、文字領域検出部141によって検出される文字領域の一例を示し、(b)は、最小文字サイズ検出部143によって検出される文字サイズの一例を示している。
 文字領域検出部141は、図27の(a)に示すように、サブ画像から文字領域a12~a14を検出する。そして、最小文字サイズ検出部143は、文字領域a12~a14に含まれる文字毎にサイズを検出する。
 このとき、最小文字サイズ検出部143は、図27の(b)に示すように、文字領域a14から文字サイズX12、Y12を検出し、文字領域a13から文字サイズX13、Y13を検出する。さらに、最小文字サイズ検出部143は、文字領域a14から、2つの異なる文字サイズX14a、Y14a及びX14b、Y14bを検出する。
 最小文字サイズ検出部143は、検出した文字サイズのうち、最も小さい文字サイズ(図27の(b)に示す例においては、文字サイズX14a、Y14b)を最小文字サイズとして検出する。
 上記の構成によれば、本変形例に係るテレビ10は、制御部118の備える文字認識部132において、サブ画像に含まれる文字のサイズを検出することができる。これにより、テレビ10は、サブ画像を当該テレビ10に供給する携帯端末30に係らず、サブ画像に含まれる文字のサイズを検出することができる。
 <実施形態2>
 実施形態1では、携帯端末30から供給されるサブ画像に含まれる文字の最小文字サイズを、テレビ10の備える文字認識部132において検出する構成を例に挙げて説明したが、本発明はこれに限定されるものではない。
 本実施形態では、携帯端末30が、サブ画像(表示画像)と共に、最小文字サイズのサブ画像のサイズに対する比(最小文字サイズ比)を示すサイズ比データをテレビ(表示装置)10に供給する場合を例に挙げ、図28を参照して説明する。図28は、本実施形態に係る携帯端末30の要部構成を示すブロック図である。
 なお、説明の便宜上、実施形態1に係るテレビ10と同様の機能を有する構成要素については同一の符号を付し、その説明を省略する。本実施形態では、主に、実施形態1との相違点について説明するものとする。
 また、本実施形態では、サブ画像が複数フレームから構成される動画像である場合を例に挙げて説明する。
 〔携帯端末の構成〕
 携帯端末30は、図28に示すように、制御部301、再生部302、表示部303、記憶部304、及び、送信部(出力手段)305を備えている。
 制御部301は、携帯端末30の各部を統括的に制御する。また、制御部301は、図28に示すように、再生制御部311、及び、サイズ比情報生成部312を備えている。再生制御部311は、表示部303にサブ画像を表示するよう、再生部302の駆動を制御する。
 サイズ比情報生成部312は、記憶部304に格納されているテーブルを参照して、サブ画像及びサブ画像に含まれる文字から、最小文字サイズ比を示すサイズ比データを生成し、サブ画像と関連づけて送信部305に供給する。なお、サイズ比情報生成部312、及び、記憶部304に格納されているテーブルの詳細については、後述する。
 再生部302は、制御部301の備える再生制御部311の制御に基づき、サブ画像を表示部303に表示する。なお、表示部303としては、例えば、LCDなどを例に挙げることができるが、特に限定されるものではない。
 送信部305は、制御部301のサイズ比情報生成部312から供給される、サブ画像及び当該サブ画像に関連づけられたサイズ比データを、テレビ10に代表される表示装置に送信する。なお、送信部305におけるサブ画像及びサイズ比データの送信は、例えば、HDMIケーブル(不図示)などを用いた有線通信によって実現されてもよいし、Bluetooth(登録商標)などを用いた無線通信によって実現されてもよい。
 〔サイズ比情報生成部の構成〕
 次に、制御部301の備えるサイズ比情報生成部312、及び、記憶部304の詳細について、図28を参照して説明する。図28に示すように、サイズ比情報生成部312は、文字認識部(検出手段)321、最小文字サイズ比算出部(サイズ比算出手段)322、及び、サイズ比変化判定部(判定手段)323を備えている。また、記憶部304には、サイズ比テーブル341、及び、変化フラグテーブル342が格納されている。
 (文字認識部)
 文字認識部321は、表示部303に表示されるサブ画像に含まれる文字を認識し、認識した文字の中から最小文字サイズを検出する。なお、本実施形態に係る携帯端末30の備える文字認識部321における最小文字サイズの検出については、実施形態1に係るテレビ10の備える文字認識部132における文字認識処理と同様の処理によって実行することができるため、ここではその詳細な説明については省略する。
 文字認識部321は、検出した最小文字サイズを、サブ画像と共に最小文字サイズ比算出部322に供給する。
 (最小文字サイズ比算出部、サイズ比テーブル)
 最小文字サイズ比算出部322は、文字認識部321から供給される最小文字サイズに基づき、サブ画像のサイズに対する最小文字サイズの比(最小文字サイズ比)を算出する。なお、本実施形態に係る携帯端末30の備える最小文字サイズ比算出部322における最小文字サイズ比(文字サイズ比)の算出は、実施形態1に係るテレビ10の備える表示サイズ算出部135における最小文字サイズ比の算出と同様にして行うことができるため、ここではその詳細な説明については省略する。
 また、最小文字サイズ比算出部322は、算出した最小文字サイズ比を示すサイズ比データを、記憶部304に格納されている、図29に示すサイズ比テーブル341から読み出す。
 図29は、本実施形態に係るサイズ比テーブル341の一例を示す図である。サイズ比テーブル341は、図29に示すように、横幅の最小文字サイズ比(Xs2/Xs1)、及び、縦幅の最小文字サイズ比(Ys2/Ys1)と、これらの最小文字サイズ比を示すサイズ比データ(8ビット信号)とを関連づけたテーブルである。
 最小文字サイズ比算出部322は、算出した最小文字サイズ比、及び、当該最小文字サイズ比を示すサイズ比データを、サブ画像と共にサイズ比変化判定部323に供給する。
 (サイズ比変化判定部、変化フラグテーブル)
 サイズ比変化判定部323は、最小文字サイズ比算出部322から供給された最小文字サイズ比が、前回供給された1フレーム前のサブ画像における最小文字サイズ比から変化しているか否かを判定する。サイズ比変化判定部323は、1フレーム前のサブ画像における、横幅の最小文字サイズ比又は縦幅の最小文字サイズ比の少なくとも何れかが変化した場合に、最小文字サイズ比が変化したと判定すればよい。
 また、サイズ比変化判定部323は、最小文字サイズ比が変化したか否かの判定結果を示すフラグを、記憶部304に格納されている、図30に示す変化フラグテーブル(フラグテーブル)342から読み出す。
 図30は、本実施形態に係る変化フラグテーブル342の一例を示す図である。変化フラグテーブル342は、図30に示すように、最小文字サイズ比が変化したか否かと、最小文字サイズ比が変化したか否かを示す変化フラグ(1ビット信号)とを関連付けたテーブルである。図30に示すように、変化フラグは、1ビット信号「1」で最小文字サイズ比が変化したことを示し、1ビット信号「0」で最小文字サイズ比が変化していないことを示している。
 携帯端末30は、上述のようにして、サブ画像を構成する各フレームに対応するサイズ比データ及び変化フラグを取得する。携帯端末30は、サブ画像を構成する各フレームと共に、各フレームに対応するサイズ比データ及び変化フラグを送信することによって、サブ画像と共にサイズ比データ及び変化フラグを送信する。
 なお、テレビ10及び携帯端末30の各々には、共通のサイズ比テーブル及び変化フラグテーブルが格納されていることが好ましい。
 〔携帯端末におけるサブ画像送信処理〕
 次に、本実施形態に係る携帯端末30において、サブ画像と共にサイズ比データ及び変化フラグをテレビ10に送信する際の処理(サブ画像送信処理とも記載する)について、図31を参照して説明する。図31は、本実施形態に係る携帯端末30のサイズ比情報生成部312におけるサブ画像送信処理の流れを示すフローチャートである。
 図31に示すように、サイズ比情報生成部312の文字認識部321は、サブ画像に対して文字認識処理を実行し(ステップS301)、検出した最小文字文サイズを最小文字サイズ比算出部322に供給する。
 最小文字サイズ比算出部322は、供給された最小文字サイズ及びサブ画像のサイズから最小文字サイズ比を算出し(ステップS302)、算出した最小文字サイズ比に関連付けられたサイズ比データをサイズ比テーブル341から読み出す(ステップS303)。
 サイズ比変化判定部323は、現在のフレームのサブ画像におけるサイズ比が、直前のフレームのサブ画像におけるサイズ比と比較して変化しているか否かを判定する(ステップS304)。サイズ比変化判定部323は、サイズ比が変化していないと判定した場合(ステップS304においてNO)、変化フラグテーブルから変化フラグ「0」を読み出す。また、サイズ比変化判定部323は、サイズ比が変化したと判定した場合(ステップS304においてYES)、変化フラグテーブルから変化フラグ「1」を読み出す。
 制御部301は、ステップS301~S306において取得した変化フラグ及びサイズ比データを、サブ画像と共に、送信部305を介してテレビ10に送信する(ステップS307)。
 〔テレビにおける処理〕
 次に、本実施形態に係るテレビ10において実行される処理について、図32を参照して説明する。図32は、本実施形態に係るテレビ10において実行される処理の流れを示すフローチャートである。
 図32に示すように、外部入力部115又は無線通信部121を介して携帯端末30からサブ画像、変化フラグ及びサイズ比データを取得すると(ステップS401)、制御部118は、スイッチング部131がON状態であるか否かを判定する(ステップS402)。スイッチング部131がOFF状態である場合(ステップS402においてNO)、制御部118は、サブ画像がそのままLCD110に表示されるよう、映像処理回路107を制御する(ステップS403)。
 スイッチング部131がON状態である場合(ステップS402においてYES)、文字認識部(文字サイズ検出手段)132は、変化フラグが「1」であるか否かを判定する(ステップS404)。
 変化フラグが「0」である場合(ステップS404においてNO)、表示サイズ算出部135は、サブ画像を構成する現フレームの表示サイズの算出結果として、当該現フレームの直前フレームの表示サイズと同じ表示サイズを設定する(ステップS405)。
 表示サイズ算出部135は、算出結果として設定した直前フレームの表示サイズを示す表示サイズ情報を映像処理回路107に供給する(ステップS410)。これにより、現フレームの示すサブ画像には、当該現フレームの直前フレームの示すサブ画像に施されるスケーリング処理と同じスケーリング処理が施されることになる。
 また、変化フラグが「1」である場合(ステップS404においてYES)、文字認識部132は、サイズ比データから、サブ画像を構成する現フレームにおける最小文字サイズ比を取得する(ステップS406)。
 次に、距離検出部133は、カメラ120によって撮像された撮像画像から、テレビ10を使用しているユーザと、当該テレビ10との距離を検出する(ステップS407)。また、ユーザ設定抽出部134は、カメラ120によって撮像された撮像画像から、テレビ10を使用しているユーザを特定し、特定されたユーザによって予め設定されている基準文字サイズをRAM117から抽出する(ステップS408)。
 そして、表示サイズ算出部135は、(1)サイズ比データの示す最小文字サイズ比、(2)テレビ10からユーザまでの距離、及び、(3)ユーザの設定した基準文字サイズに基づいて、表示サイズ算出処理を実行する(ステップS409)。表示サイズ算出部135は、算出した表示サイズを、表示サイズ情報として映像処理回路107に供給する(ステップS410)。
 (サイズ比データ、変化フラグ)
 次に、本実施形態係る携帯端末30から送信されるサイズ比データ及び変化フラグと、テレビ10に表示されるスケーリング後サブ画像との関係について、図33及び図34を参照して説明する。
 図33は、本実施形態に係る携帯端末30から送信されるサイズ比データ及び変化フラグと、テレビ10に表示されるスケーリング後サブ画像との関係の一例を示す図である。図33の(a)は、携帯端末30から送信されるサイズ比データ、変化フラグ及びサブ画像を示すデータの一例を示し、(b)は、テレビ10のLCD110に表示される表示画面の一例を示す図である。
 また、図34は、本実施形態に係る携帯端末30から送信されるサイズ比データ及び変化フラグと、テレビ10に表示されるスケーリング後サブ画像との関係の他の一例を示す図である。図34の(a)は、携帯端末30から送信されるサイズ比データ、変化フラグ及びサブ画像を示すデータの他の一例を示し、(b)は、テレビ10のLCD110に表示される表示画面の他の一例を示す図である。
 図33の(a)に示すように、携帯端末30は、サイズ比データ及び変化フラグFを含むヘッダ部Hと、サブ画像を構成する1フレーム(現フレーム)を示すデータ部Dとからなるデータを送信する。
 このとき、文字認識部132は、ヘッダ部Hから変化フラグFを抽出し、現フレームにおける最小文字サイズ比が、現フレームの直前フレームにおける最小文字サイズ比から変化しているか否かを判定する。図33の(a)に示す例では、変化フラグFの値は「0」であることから、文字認識部132は、最小文字サイズ比は変化していないと判定する。
 表示サイズ算出部135は、直前フレームにおけるサイズ比データの示す最小文字サイズ比に基づいて算出した表示サイズをそのまま映像処理回路107に供給する。なお、変化フラグF=0であることから、直前フレームにおける最小文字サイズ比は、現フレームにおけるサイズ比データの示す最小文字サイズ比(Xs2/Xs1=1/30、Ys2/Ys1=1/45)と同じである。
 これにより、LCD110には、図33の(b)に示すように、直前フレームにおけるサイズ比データに基づいて算出された表示サイズにスケーリングされたサブ画像が表示されることになる。
 次に、文字認識部132は、図34の(a)に示す、携帯端末30から送信されたデータのヘッダ部Hから変化フラグFを抽出し、現フレームにおける最小文字サイズ比が、現フレームの直前フレームにおける最小文字サイズ比から変化しているか否かを判定する。図34の(a)に示す例では、変化フラグFの値は「1」であることから、文字認識部132は、最小文字サイズ比が変化していると判定する。
 表示サイズ算出部135は、ヘッダ部Hからサイズ比データ(図34の(a)における「01000001」、「00101000」)を抽出する。表示サイズ算出部135は、例えば、RAM117などに格納されているサイズ比テーブルを参照して、抽出したサイズ比データの示す最小文字サイズ比(Xs2/Xs1=1/20、Ys2/Ys1=1/30)を取得する。表示サイズ算出部135は、取得した最小文字サイズ比に基づいて、スケーリング後サブ画像の表示サイズを算出し、映像処理回路107に供給する。
 これにより、LCD110には、図34の(b)に示すように、図33の(b)に示すスケーリング後サブ画像から表示サイズが変更された状態で、スケーリング後サブ画像が表示される。
 上記の構成によれば、携帯端末30は、サブ画像と共に最小文字のサイズを示すデータを出力することにより、テレビ10に対して、サブ画像のサイズに係らず、上記表示画像と上記最小文字のサイズとを一律に提示することができる。
 したがって、テレビ10は、文字サイズ比を用いて表示サイズ算出処理を実行する場合であっても、サブ画像から最小文字の検出、最小文字のサイズの検出、及び、最小文字のサイズ及び上記表示画像からの文字サイズ比の算出の何れも行う必要がない。これによって、携帯端末30は、テレビ10における処理量を低減することができる。
 また、記憶部304にはサイズ比テーブル341及び変化フラグテーブル342が格納されていることから、携帯端末30は、サイズ比データ及び変化フラグとして、各テーブルにおいて関連付けられているデータを用いることができる。これにより、携帯端末30は、文字サイズ比からサイズ比データを生成する処理、及び、上記判定結果に基づいて変化フラグを示すデータを生成する処理を行う必要がない。
 したがって、携帯端末30は、上記出力手段から上記サイズ比データ及び上記フラグデータを出力するまでに必要な処理を削減することができる。つまり、上記携帯端末は、当該携帯端末30におけるサイズ比データ及び変化フラグの出力に関する処理量を低減することができる。
 なお、本実施形態では、携帯端末30が、サブ画像と共にサイズ比データを送信する構成を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、サイズ比データに代えて、最小文字サイズを示すデータをサブ画像と共に送信する構成を採用することもできるし、さらに他のデータを送信することもできる。
 これによれば、携帯端末30からサブ画像の入力を受け付けるテレビ10は、上記表示画像から最小文字を検出する必要も、最小文字のサイズを検出する必要もないため、テレビ10における処理量を低減することができる。
 <実施形態3>
 実施形態1では、スケーリング後メイン画像及びスケーリング後サブ画像を、LCD110の長手方向(図4におけるx軸方向)に並べて2画面表示する構成を例に挙げて説明したが、本発明はこれに限定されるものではない。
 例えば、スケーリング後メイン画像及びスケーリング後サブ画像を、LCD110の短手方向に並べて2画面表示する構成を採用してもよい。また、スケーリング後メイン画像及びスケーリング後サブ画像を、LCD110の長手方向に並べる2画面表示と、短手方向に並べる2画面表示とを適宜切り替える構成を採用することもできる。
 本実施形態では、スケーリング後メイン画像及びスケーリング後サブ画像を、LCD110の長手方向に並べる2画面表示(2画面横表示とも記載する)と、短手方向に並べる2画面表示(2画面縦表示とも記載する)とを適宜切り替える構成を例に挙げて説明する。
 〔メイン画像およびサブ画像の最適な配置〕
 本実施形態に係るテレビ(表示装置)10の備える制御部118の表示サイズ算出部(調整手段)135における処理について、図35から図36を参照して説明する。
 図35は、本実施形態に係るテレビ10の備えるLCD110に表示される表示画面の一例を示す図である。図35の(a)は、スケーリング後のメイン画像及びサブ画像を2画面横表示する場合の表示画面の一例を示し、(b)は、スケーリング後のメイン画像及びサブ画像を2画面縦表示する場合の表示画面の一例を示している。
 本実施形態に係る表示サイズ算出部135は、式(4)、(5)、(10)及び(11)の計算結果に基づき、スケーリング後のメイン画像及びサブ画像を2画面横表示させるか、2画面縦表示させるかを判定する表示位置判定処理をさらに実行する。なお、表示位置判定処理の詳細については、後述する。
 表示サイズ算出部135において表示位置判定処理が実行されると、制御部118は、表示位置判定処理の判定結果を、表示サイズ情報と共に映像処理回路(調整手段)107に供給する。
 映像処理回路107は、制御部118から取得した表示サイズ情報に基づいて、メイン画像及びサブ画像にスケーリング処理を施し、スケーリング後メイン画像およびスケーリング後サブ画像を生成する。また、映像処理回路107は、制御部118から取得した判定結果が2画面横表示を示す場合には、2画面横表示用のスケーリング後のメイン画像及びサブ画像を生成する。LCDコントローラ(表示手段)109は、スケーリング後のメイン画像及びサブ画像が2画面横表示されるよう、LCD(表示部)110を駆動する。
 さらに、映像処理回路107は、制御部118から取得した判定結果が2画面縦表示を示す場合には、2画面縦表示用のスケーリング後のメイン画像及びサブ画像を生成する。LCDコントローラ109は、スケーリング後のメイン画像及びサブ画像が2画面縦表示されるよう、LCD110を駆動する。
 (表示位置判定処理)
 次に、表示サイズ算出部135における表示位置判定処理について、説明する。ここで、LCD110のx軸方向の長さをLCD110の横幅Xd1とし、y軸方向の長さをLCD110の縦幅Yd1とする。
 表示サイズ算出部135は、まず、LCD110の表示領域のアスペクト比(Yd1/Xd1)(すなわち、メイン画像のアスペクト比(Yt1/Xt1))と、サブ画像のアスペクト比(Ys1/Xs1)とを比較する。そして、表示サイズ算出部135は、(i)Ys1/Xs1≧Yd1/Xd1(サブ画像のアスペクト比≧メイン画像のアスペクト比)であるか、(ii)Ys1/Xs1<Yd1/Xd1(サブ画像のアスペクト比<メイン画像のアスペクト比)であるかを判定する。
 表示サイズ算出部135は、Ys1/Xs1≧Yd1/Xd1であると判定した場合には、スケーリング後メイン画像およびスケーリング後サブ画像を2画面横表示させる旨を示す指示(横表示指示)を、表示サイズ情報と共に映像処理回路107に供給する。
 一方、表示サイズ算出部135は、Ys1/Xs1<Yd1/Xd1であると判定した場合には、スケーリング後メイン画像およびスケーリング後サブ画像を2画面縦表示させる旨を示す指示(縦表示指示)を、表示サイズ情報と共に映像処理回路107に供給する。
 (表示位置判定処理の判定式について)
 ここで、表示サイズ算出部135における表示位置判定処理の判定式(Ys1/Xs1≧Yd1/Xd1、及び、Ys1/Xs1<Yd1/Xd1)について、図36を参照して説明する。図36は、本実施形態に係るテレビ10に表示される表示画面の一例を示す図である。
 図36に示すように、2画面縦表示する場合のスケーリング後サブ画像3eの横幅をXds1A、縦幅をYds1Aとし、2画面横表示する場合のスケーリング後サブ画像3e’の横幅をXds1B、縦幅をYds1Bとする。
 LCD110と、スケーリング後メイン画像1eとは、相似形であることから、
  k=Xdt1/Xd1=Ydt1/Yd1 ・・・(12)
が得られる。ここで、k(ただし、0<k<1)は、スケーリング後メイン画像のメイン画像に対するスケーリングの程度(縮小率)を示している。
 また、スケーリング後サブ画像3eとスケーリング後サブ画像3e’とは、相似形であることから、
  m=Yds1A/Xds1A=Yds1B/Xds1B ・・・(13)
が得られる。ここで、m(ただし、0<m)は、スケーリング後サブ画像3e及び3e’のアスペクト比を示している。
 さらに、図36に示すように、スケーリング後メイン画像1eとスケーリング後サブ画像3eとの関係から、
  Yd1=Ydt1+Yds1A ・・・(14)
であり、スケーリング後メイン画像1eとスケーリング後サブ画像3e’との関係から、
  Xd1=Xdt1+Xds1B ・・・(15)
である。
 ここで、2画面縦表示した場合のスケーリング後サブ画像3eの表示面積Saは、
  Sa=Xds1A*Yds1A ・・・(16)
であり、2画面横表示した場合のスケーリング後サブ画像3e’の表示面積Sbは、
  Sb=Xds1B*Yds1B ・・・(17)
である。
 式(12)~(14)、(16)から、スケーリング後サブ画像3eの表示面積Saは、
  Sa=Xds1A*(1-k)Yd1
    ={(1-k)^2}*(Yd1^2)/m ・・・(18)
となる。また、式(12)、(13)、(15)、(17)から、スケーリング後サブ画像3e’の表示面積Sbは、
  Sb=(1-k)Xd1*Yds1B
    ={(1-k)^2}*(Xd1^2)*m ・・・(19)
となる。
 ここで、Sa>Sb、すなわち、スケーリング後サブ画像3eの表示面積Saが、スケーリング後サブ画像3e’の表示面積Sbよりも大きくなるとき、式(18)及び(19)から、
  Sa/Sb=(Yd1^2)/{(m^2)*(Xd1^2)}>1 ・・・(20)
となる。
 また、式(20)から、
  m^2<(Yd1/Xd1)^2 ・・・(21)
が得られる。さらに、式(21)から、
  Yds1A/Xds1A<Yd1/Xd1 ・・・(22)
が得られる。
 なお、サブ画像と、スケーリング後サブ画像3eとは、相似形であることから、
  Yds1A/Xds1A=Ys1/Xs1 ・・・(23)
である。したがって、式(22)及び(23)より、
  Ys1/Xs1<Yd1/Xd1 ・・・(24)
となる。
 以上のことから、式(24)が成立する場合には、スケーリング後サブ画像3eの表示面積Saが、スケーリング後サブ画像3e’の表示面積Sbよりも大きくなる。
 同様に、Sa<Sb、すなわち、スケーリング後サブ画像3e’の表示面積Sbが、スケーリング後サブ画像3eの表示面積Saよりも大きくなるとき、
  Ys1/Xs1≧Yd1/Xd1
が成立する。
 従って、表示サイズ算出部135は、Ys1/Xs1≧Yd1/Xd1であると判定した場合に横表示指示を表示サイズ情報と共に映像処理回路107に供給することにより、LCD110にスケーリング後のメイン画像及びサブ画像を2画面横表示させる。また、表示サイズ算出部135は、Ys1/Xs1<Yd1/Xd1であると判定した場合には、縦表示指示を表示サイズ情報と共に映像処理回路107に供給することにより、LCD110にスケーリング後のメイン画像及びサブ画像を2画面縦表示させる。
 これによって、テレビ10は、スケーリング後サブ画像の表示面積をより大きくすることができる。なお、以降では、Ys1/Xs1≧Yd1/Xd1である場合を「サブ画像が縦長」とも記載し、Ys1/Xs1<Yd1/Xd1である場合を「サブ画像が横長」とも記載する。
 (表示画面の遷移)
 次に、携帯端末(外部機器)30におけるサブ画像の表示が縦表示(サブ画像の長手方向が図37におけるy軸方向となる表示)から横表示(サブ画像の長手方向がx軸方向となる表示)に遷移した場合における、LCD110に表示される表示画面の遷移の一例を、図37を参照して説明する。
 図37は、本実施形態に係るテレビ10のLCD110に表示される表示画面の遷移の一例を示す遷移図である。図37の(a)は、サブ画像の表示が縦表示である場合のLCD110の表示画面の一例を示し、(b)は、サブ画像の表示が横表示に遷移した場合のLCD110の表示画面の一例を示している。
 携帯端末30に表示されるサブ画像が縦表示であって、表示サイズ算出部135においてサブ画像が縦長であると判定された場合、図37の(a)に示すように、LCD110には、スケーリング後のメイン画像及びサブ画像が2画面横表示される。
 次に、携帯端末30に表示されるサブ画像が、図37の(a)に示す縦表示から、図37の(b)に示す横表示に遷移すると、表示サイズ算出部135は、表示位置判定処理を実行する。表示サイズ算出部135においてサブ画像が横長であると判定された場合、LCD110には、図37の(b)に示すように、スケーリング後のメイン画像及びサブ画像が、2画面縦表示される。
 このように、携帯端末30におけるサブ画像の表示が縦表示から横表示に遷移(例えば、携帯端末30の表示画面が90度回転)すると、LCD110に表示される表示画面は、図37の(a)に示す2画面横表示から、図37の(b)に示す2画面縦表示に遷移する。なお、本実施形態では、携帯端末30におけるサブ画像の表示が縦表示から横表示に遷移する場合を例に挙げて説明したが、サブ画像の表示が横表示から縦表示に遷移する場合も同様である。
 上記の構成によれば、表示サイズ算出部135は、スケーリング後メイン画像及びスケーリング後サブ画像のLCD110における表示位置を、メイン画像及びサブ画像のアスペクト比に基づいて調整する。これによって、テレビ10は、スケーリング後メイン画像及びスケーリング後サブ画像をLCD110上の適した表示位置に表示することができる。
 より具体的には、サブ画像のアスペクト比がメイン画像のアスペクト比以上(つまり、サブ画像の形状がメイン画像の形状よりも縦長)である場合、スケーリング後のメイン画像及びサブ画像をLCD110の長手方向に並べて表示することになる。また、サブ画像のアスペクト比がメイン画像のアスペクト比よりも小さい(つまり、サブ画像の形状がメイン画像の形状よりも横長)である場合、スケーリング後のメイン画像及びサブ画像をLCD110の短手方向に並べて表示することになる。
 したがって、テレビ10は、スケーリング後のメイン画像及びサブ画像を共に最適な表示サイズで、すなわち、スケーリング後のメイン画像及びサブ画像の表示面積がより大きくなるよう表示することができる。
 <変形例>
 本実施形態では、表示サイズ算出部135における表示位置判定処理の判定結果が変わった場合に、LCD110におけるスケーリング後サブ画像の表示位置を変更する構成を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、表示サイズ算出部135における表示位置判定処理の判定結果が変わった場合であっても、所定の場合には、LCD110におけるスケーリング後サブ画像の表示位置を変更しない構成を採用することもできる。
 本変形例では、スケーリング後サブ画像の表示位置を変更した場合の表示面積の、変更しない場合の表示面積に対する増加率が所定の閾値以下である場合には、スケーリング後サブ画像の表示位置を変更しない構成を例に挙げて説明する。
 本変形例に係るテレビ10におけるLCD110の表示画面の一例について、図38を参照して説明する。図38は、本変形例に係るテレビ10のLCD110に表示される表示画面の一例を示す図である。図38の(a)は、サブ画像の表示が縦表示である場合のLCD110の表示画面の他の一例を示し、(b)は、サブ画像の表示が横表示に遷移した場合のLCD110の表示画面の他の一例を示している。
 図38の(a)に示すように、携帯端末30においてサブ画像3fが縦表示されており、表示サイズ算出部135においてサブ画像が縦長であると判定された場合、スケーリング後のメイン画像1f’及びサブ画像3f’は、LCD110に2画面横表示される。次に、図38の(a)に示す状態から、(b)に示すようにサブ画像3gが横表示される状態に遷移した場合、表示サイズ算出部135は、サブ画像が横長であると判定する。
 このとき、表示サイズ算出部135は、(i)スケーリング後サブ画像の表示位置を2画面縦表示する際の表示位置に変更した場合のスケーリング後サブ画像3g’の表示面積Saと、(ii)スケーリング後サブ画像の表示位置を現在(図38の(a)に示す位置)の位置のままとした場合のスケーリング後サブ画像3g”の表示面積Sbとから、表示面積の増加率(Sa/Sb)を算出する。
 表示サイズ算出部135は、算出した増加率Sa/Sbと、所定の閾値とを比較する。表示サイズ算出部135は、算出した増加率が所定の閾値より大きい場合には、2画面縦表示に変更する(つまり、スケーリング後サブ画像の表示位置を変更する)旨の指示を示す表示位置変更指示を、表示サイズ情報と共に映像処理回路107に供給する。
 一方、表示サイズ算出部135は、算出した増加率が所定の閾値以下である場合には、2画面横表示を維持する(つまり、スケーリング後サブ画像の表示位置を現在のまま維持する)旨の指示を示す表示位置維持指示を、表示サイズ情報と共に映像処理回路107に供給する。
 (増加率Sa/Sbの算出)
 ここで、表示サイズ算出部135における、スケーリング後サブ画像の表示面積の増加率Sa/Sbの算出、及び、算出した増加率Sa/Sbと所定の閾値との比較について説明する。なお、本変形例では、所定の閾値として増加率1.1(すなわち、増加率が10%)が設定されている場合を例に挙げて説明するが、所定の閾値は任意に設定可能であればよく、特に限定されるものではない。
 表示面積の増加率Sa/Sbは、式(13)より、
  m=Yds1A/Xds1A=Yds1B/Xds1B
   =Ys1/Xs1 ・・・(25)
であるから、式(18)、(19)及び(25)から、
  Sa/Sb=(Yd1)^2/{(m^2)*Xd1^2}
       ={(Yd1/Xd1)^2}/{(Ys1/Xs1)^2}・・(26)
となる。
 以上より、表示サイズ算出部135は、式(26)を計算することにより、表示面積の増加率Sa/Sbを算出すればよい。
 本変形例では、所定の閾値として増加率1.1が設定されていることから、表示サイズ算出部135は、式(26)によって算出される増加率Sa/Sbと、所定の閾値1.1とを比較して、
  {(Yd1/Xd1)^2}/{(Ys1/Xs1)^2}≦1.1 ・・・(27)
を満たす場合には、スケーリング後サブ画像の表示位置を現在のまま維持する表示位置維持指示を映像処理回路107に通知すればよい。また、式(27)を満たさない場合に、スケーリング後サブ画像の表示位置を変更する表示位置変更指示を映像処理回路107に通知すればよい。
 本変形例では、携帯端末30に表示されるサブ画像が、縦表示から横表示に遷移した場合を例に挙げて説明したが、横表示から縦表示に遷移する場合も同様に、
  {(Ys1/Xs1)^2}/{(Yd1/Xd1)^2}≦1.1 ・・・(28)
を満たす場合には、スケーリング後サブ画像の表示位置を現在のまま維持させればよい。また、式(28)を満たさない場合に、スケーリング後サブ画像の表示位置を変更させればよい。
 上記の構成によれば、表示サイズ算出部135は、表示位置判定処理の判定結果が変わった場合であっても、更に、表示面積の増加率に基づいてスケーリング後サブ画像の表示位置を変更するか否かを決定することができる。これにより、テレビ10は、携帯端末30におけるサブ画像の表示が遷移した場合に、表示面積の増加率が低いにも係らず表示位置が変更されてしまうことにより、ユーザの視認性が低下してしまうことを防ぐことができる。
 なお、本変形例の他の一例として、表示位置判定処理の判定結果が変わった場合であっても、所定の期間が経過する前に元の判定結果に戻った場合には、スケーリング後サブ画像の表示位置を変更しない構成などを採用することもできる。
 また、最小文字サイズ、及び、テレビ10とユーザとの距離などは、頻繁に変化することもあるが、これらが変化する度にスケーリング後サブ画像の表示サイズが変更されると、ユーザが煩わしさを感じてしまう場合がある。
 このような場合、例えば、サブ画像に含まれる最小文字サイズが変化した場合であっても、最小文字サイズの変化率が所定の値よりも小さい場合には、スケーリング後サブ画像の表示サイズを変更しない構成を採用してもよい。さらに、テレビ10とユーザとの距離が変化した場合であっても、距離の変化が所定の値よりも小さい場合、又は、距離の変化が所定の時間以内である場合には、スケーリング後サブ画像の表示サイズを変更しない構成を採用してもよい。
 上述の構成によれば、最小文字サイズ、及び、テレビ10とユーザとの距離などが変化する度にスケーリング後サブ画像の表示サイズが変更されることによって、ユーザの視認性が低下してしまうことを防ぐことができる。
 <実施形態4>
 実施形態1では、サブ画像とスケーリング後サブ画像とのアスペクト比、及び、メイン画像とスケーリング後メイン画像とのアスペクト比を一定に保ちつつ2画面表示する場合を例に挙げて説明したが、本発明はこれに限定されるものではない。例えば、サブ画像とスケーリング後サブ画像とのアスペクト比、及び、メイン画像とスケーリング後メイン画像とのアスペクト比の少なくとも何れかを一定に保つことなく2画面表示してもよい。
 本実施形態の一例として、2画面表示においてサブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれない場合について、図39を参照して説明する。図39は、本実施形態に係るテレビ10の備えるLCD110に表示される表示画面の他の一例を示す図である。図39の(a)は、サブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれている場合の表示画面の一例を示し、(b)は、サブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれていない場合の表示画面の一例を示している。
 例えば、本実施形態では、図39の(a)に示すように、サブ画像とスケーリング後サブ画像とのアスペクト比が一定に保たれた状態で2画面表示されている場合に、ユーザユーザがリモコン20などを操作することによって、スケーリング後サブ画像の形状を変形可能であってもよい。
 表示サイズ算出部135は、ユーザによりスケーリング後サブ画像の縦幅Yds1の長さを長くする指示が入力されると、ユーザ指示に応じた縦幅Yds1’を算出し、表示サイズ情報として映像処理回路107に供給すればよい。映像処理回路107によってスケーリング処理の施されたスケーリング後サブ画像は、図39の(b)に示すように、アスペクト比が変更された状態でLCD110に表示される。
 これにより、テレビ10は、スケーリング後のメイン画像及びサブ画像の少なくとも何れかの大きさ及び形状などを、アスペクト比に係らず、ユーザ指示に応じて変更することができる。
 〔ソフトウェアによる実現例〕
 テレビ10の制御ブロック(特に、制御部118)、及び、携帯端末30の制御ブロック(特に、制御部301)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
 後者の場合、テレビ10及び携帯端末30は、各機能を実現するソフトウェアであるプログラムの命令を実行するCPU、上記プログラムおよび各種データがコンピュータ(またはCPU)で読み取り可能に記録されたROM(Read Only Memory)または記憶装置(これらを「記録媒体」と称する)、上記プログラムを展開するRAM(Random Access Memory)などを備えている。そして、コンピュータ(またはCPU)が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
 本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
 〔まとめ〕
 本発明の態様1に係る表示装置(テレビ10)は、コンテンツ(メイン画像)と、外部機器(携帯端末30)から入力される入力画像(サブ画像)とを表示部(LCD110)の異なる領域に表示する表示手段(LCDコントローラ109)と、上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整手段(表示サイズ算出部135、映像処理回路107)と、を備え、上記調整手段は、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する。
 上記の構成によれば、上記調整手段は、上記コンテンツ及び上記入力画像の表示位置を、各々のアスペクト比(横幅に対する縦幅の比率)に基づいて調整する。
 これによれば、上記表示装置は、上記コンテンツ及び上記入力画像のアスペクト比に基づいて、上記表示サイズの調整されたコンテンツ及び入力画像を上記表示部の適した表示位置に表示することができる。したがって、上記表示装置は、上記コンテンツ及び上記入力画像を共に最適な表示サイズで表示することができる。
 本発明の態様2に係る表示装置において、上記態様1における上記調整手段は、上記入力画像のアスペクト比が上記コンテンツのアスペクト比以上である場合、上記入力画像及び上記コンテンツが、上記表示部の長手方向に並べて表示されるよう表示位置を調整し、上記入力画像のアスペクト比が上記コンテンツのアスペクト比よりも小さい場合、上記入力画像及び上記コンテンツが、上記表示部の短手方向に並べて表示されるよう表示位置を調整してもよい。
 上記の構成によれば、上記表示手段は、上記入力画像のアスペクト比が上記コンテンツのアスペクト比以上である場合、つまり、上記入力画像の形状が上記コンテンツの形状よりも縦長である場合、これらを上記表示部の長手方向に並べて表示することになる。また、上記表示手段は、上記入力画像のアスペクト比が上記コンテンツのアスペクト比よりも小さい場合、つまり、上記入力画像の形状が上記コンテンツの形状よりも横長である場合には、これらを上記表示部の短手方向に並べて表示することになる。
 これによって、上記表示装置は、上記入力画像のアスペクト比と上記コンテンツのアスペクト比とに応じて、上記表示装置及び上記コンテンツの表示面積がより大きくなるよう表示位置を調整することができる。
 本発明の態様3に係る表示装置において、上記態様1又は2における上記調整手段は、上記調整手段は、上記入力画像のアスペクト比が変化した場合、上記アスペクト比が変化する前に表示位置を調整した上記入力画像の表示サイズと、上記アスペクト比が変化した後に表示位置を調整した場合の上記入力画像の表示サイズとを比較し、上記アスペクト比が変化する前の表示サイズに対する上記アスペクト比が変化した後の表示サイズの増加率が所定の閾値以上である場合にのみ、上記アスペクト比が変化した後の入力画像の表示位置を調整する。
 上記の構成によれば、上記調整手段は、上記アスペクト比が変化した後の入力画像の表示位置を、上記アスペクト比が変化する前の表示サイズに対する上記アスペクト比が変化した後の表示サイズの増加率が所定の閾値よりも大きい場合にのみ調整する。
 これによって、上記表示装置は、アスペクト比が変化した後の表示位置を調整した場合の入力画像の表示サイズの、アスペクト比が変化する前の入力画像の表示サイズに対する変化が小さいにも係らず、上記入力画像のアスペクト比が変化する度に表示位置が調整されてしまい、ユーザが煩わしさを感じてしまうことを低減することができる。
 本発明の態様4に係る表示装置は、上記態様1から3において、当該表示装置からユーザまでの距離を検出する距離検出手段(距離検出部133)と、上記外部機器から入力される入力画像に含まれる文字のうち、最も小さい文字の大きさ(最小文字サイズ)を検出する文字サイズ検出手段(文字認識部132)と、を更に備え上記調整手段は、上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、上記コンテンツの表示サイズを、上記入力画像の調整された表示サイズに基づいて調整してもよい。
 上記の構成によれば、上記調整手段は、上記入力画像の表示サイズを、(1)上記入力画像に含まれるもっとも小さい文字の大きさ、及び、(2)上記表示装置から上記ユーザまでの距離の双方に基づいて調整する。また、上記調整手段は、上記コンテンツの表示サイズを、上述のようにして調整された上記表示画像の表示サイズに基づいて調整する。
 これにより、上記表示装置は、上記入力画像を、当該表示装置から上記ユーザまでの距離に適した大きさで、かつ、上記コンテンツ及び上記入力画像のアスペクト比に基づいた上記表示部の適した表示位置に、表示することができる。
 本発明の態様5に係る表示装置は、上記態様1から3において、当該表示装置からユーザまでの距離を検出する距離検出手段と、上記入力画像に含まれる文字のうち、最も小さい文字の大きさを検出する文字サイズ検出手段と、を更に備え、上記文字サイズ検出手段は、上記コンテンツに含まれる文字のうち、最も小さい文字の大きさを検出し、上記調整手段は、上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、上記コンテンツの表示サイズを、上記コンテンツに含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整してもよい。
 上記の構成によれば、上記調整手段は、上記入力画像及び上記コンテンツの表示サイズを、(1)上記入力画像又は上記コンテンツに含まれるもっとも小さい文字の大きさ、及び、(2)上記表示装置から上記ユーザまでの距離の双方に基づいて調整する。これにより、上記表示装置は、上記入力画像及び上記コンテンツを、当該表示装置から上記ユーザまでの距離に適した大きさで、かつ、上記コンテンツ及び上記入力画像のアスペクト比に基づいた上記表示部の適した表示位置に、表示することができる。
 本発明の態様6に係る表示装置は、上記態様4又は5において、当該表示装置を利用する上記ユーザを特定するユーザ特定手段を備え、上記調整手段は、更に、上記入力画像の表示サイズを、上記ユーザ特定手段によって特定される上記ユーザによって予め設定されている基準文字サイズに基づいて調整してもよい。
 上記の構成によれば、上記調整手段は、上記入力画像の表示サイズを、更に、(3)上記基準文字サイズに基づいて調整する。これにより、上記表示装置は、当該表示装置から上記ユーザまでの距離によらず、上記入力画像を、上記入力画像に含まれる文字が上記ユーザの好みのサイズにより合致したサイズとなるよう調整された表示サイズで表示することができる。
 本発明の態様7に係るテレビジョン受像機は、上記態様1から6までの表示装置を備えている。
 本発明の態様8に係る表示方法は、表示装置の表示方法であって、コンテンツと、外部から入力される入力画像とを表示部の異なる領域に表示する表示ステップと、上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整ステップと、を含み、上記調整ステップにおいて、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する。
 上記の構成によれば、上記態様1に係る表示装置と同様の効果を奏することができる。
 本発明の各態様に係る表示装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記表示装置が備える各手段として動作させることにより上記表示装置をコンピュータにて実現させる表示装置のプログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
 なお、ここで開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
 <本明細書に記載された発明>
 本明細書には、上述した発明の他に、以下の発明が含まれる。
 〔発明A〕
 上述の特許文献1に記載の技術では、画像処理装置とユーザとの距離に係らず、表示部に表示される原画像のサイズは一定に決まる。このため、ユーザが画像処理装置から遠ざかった場合には、表示部に表示される原画像に含まれる文字を読むことができなくなってしまうという問題がある。また、ユーザが画像処理装置に近づいた場合には、表示部に表示される原画像に含まれる文字が必要以上に大きく見えるため、読みづらくなってしまうという問題がある。
 これに対し、本明細書には、上記の課題を解決する以下の発明が含まれる。これらの発明の主たる目的は、ユーザとの距離によらず、外部から入力される画像を、当該画像に含まれる文字をユーザが認識可能なサイズで表示することのできる表示装置を提供することにある。
 (発明A1)
 コンテンツ(メイン画像)を表示部に表示する表示手段(LCDコントローラ109)と、
 当該表示装置からユーザまでの距離を検出する距離検出手段(距離検出部133)と、
 外部機器から入力される入力画像(サブ画像)に含まれる文字のうち、最も小さい文字の大きさを(最小文字サイズ)検出する文字サイズ検出手段(文字認識部132)と、
 上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整する調整手段(表示サイズ算出部135、映像処理部107)と、を備え、
 上記表示手段は、上記入力画像を、上記調整手段によって調整された表示サイズで、上記コンテンツと共に上記表示部に表示する、
ことを特徴とする表示装置(テレビ10)。
 上記の構成によれば、上記調整手段は、上記入力画像が上記表示部に表示される際の表示サイズを、(1)上記入力画像に含まれるもっとも小さい文字の大きさ、及び、(2)上記表示装置から上記ユーザまでの距離の双方に基づいて調整する。また、上記表示手段は、表示サイズの調整された上記入力画像を、上記コンテンツと共に表示する。
 これにより、上記表示装置は、上記入力画像に含まれる文字を、当該表示装置から上記ユーザまでの距離に適した大きさで表示することができる。したがって、上記表示装置は、当該表示装置からユーザまでの距離によらず、上記入力画像を、当該入力画像に含まれる文字をユーザが認識可能なサイズで表示することができる。
 (発明A2)
 当該表示装置を利用する上記ユーザを特定するユーザ特定手段(ユーザ設定抽出部134)を備え、
 上記調整手段は、更に、上記入力画像の表示サイズを、上記ユーザ特定手段によって特定される上記ユーザによって予め設定されている基準文字サイズに基づいて調整する、
ことを特徴とする発明A1に記載の表示装置。
 上記の構成によれば、上記調整手段は、上記入力画像の表示サイズを、更に、(3)上記ユーザによって予め設定されている基準文字サイズに基づいて調整する。
 これにより、上記表示装置は、当該表示装置から上記ユーザまでの距離によらず、上記入力画像を、上記入力画像に含まれる文字が上記ユーザの好みのサイズにより合致したサイズとなるよう調整された表示サイズで表示することができる。
 (発明A3)
 上記調整手段は、上記コンテンツの表示サイズを、上記入力画像の調整された表示サイズに基づいて縮小し、
 上記表示手段は、上記縮小されたコンテンツを、上記表示部上の、上記表示サイズの調整された入力画像が表示される領域と異なる領域に表示する、
ことを特徴とする発明A1またはA2に記載の表示装置。
 上記の構成によれば、上記調整手段は、上記入力画像の表示サイズに基づいて、上記コンテンツの表示サイズを縮小(調整)する。また、上記表示手段は、上記調整手段によって表示サイズの調整された上記入力画像及び上記コンテンツを各々上記表示部の異なる領域に表示する。
 これによって、上記表示装置は、上記入力画像を表示した場合に、上記入力画像が上記コンテンツに重畳されることによって、上記コンテンツの一部をユーザが見ることができなくなってしまうことを防ぐことができる。
 (発明A4)
 上記文字サイズ検出手段は、上記コンテンツに含まれる文字のうち、最も小さい文字の大きさを検出し、
 上記調整手段は、上記コンテンツの表示サイズを、上記コンテンツに含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、
 上記表示手段は、上記コンテンツ及び上記入力画像の各々を、上記調整手段によって調整された表示サイズで、上記表示部上の異なる領域に表示する、
ことを特徴とする発明A2に記載の表示装置。
 上記の構成によれば、上記調整手段は、上記入力画像の表示サイズと共に、上記コンテンツの表示サイズを調整する。また、上記表示手段は、上記調整手段によって表示サイズの調整された上記入力画像及び上記コンテンツを各々上記表示部の異なる領域に表示する。
 これによって、上記表示装置は、上記コンテンツに含まれる文字を、当該表示装置から上記ユーザまでの距離に適した大きさで表示することができる。また、上記表示装置は、上記入力画像を表示した場合に、上記入力画像が上記コンテンツに重畳されることによって、上記コンテンツの一部をユーザが見ることができなくなってしまうことを防ぐことができる。
 (発明A5)
 上記調整手段は、更に、上記コンテンツの表示サイズを、上記基準文字サイズに基づいて調整する、
ことを特徴とする発明A4に記載の表示装置。
 上記の構成によれば、上記調整手段は、上記コンテンツの表示サイズを、更に、上記ユーザによって予め設定されている基準文字サイズに基づいて調整する。
 これにより、上記表示装置は、当該表示装置から上記ユーザまでの距離によらず、上記コンテンツに含まれる文字が上記ユーザの好みにより合致したサイズとなるよう調整された表示サイズで、上記コンテンツを表示することができる。
 (発明A6)
 上記調整手段は、表示サイズを調整した上記入力画像及び上記コンテンツの少なくとも何れかの表示サイズを、上記入力画像及び上記コンテンツの優先度に応じて更に調整する、
ことを特徴とする発明A4又はA5に記載の表示装置。
 上記の構成によれば、上記調整手段は、表示サイズの調整後の上記入力画像及び上記コンテンツの少なくとも何れかの表示サイズを、各々の優先度に応じて更に調整する。
 これにより、上記調整手段は、例えば、表示サイズの調整後の上記入力画像及び上記コンテンツが上記表示部に表示される際に上記入力画像と上記コンテンツとの間に隙間が生じてしまうような場合には、上記入力画像及び上記コンテンツの上記優先度の高い方の表示サイズを拡大することができる。
 また、上記調整手段は、表示サイズの調整後の上記入力画像及び上記コンテンツが上記表示部に表示される際に上記入力画像の一部と上記コンテンツの一部とが重なってしまうような場合には、上記入力画像及び上記コンテンツの上記優先度の低い方の表示サイズを縮小することもできる。
 これによって、上記表示装置は、上記入力画像及び上記コンテンツの優先度に応じて、より適切な表示サイズで上記入力画像及び上記コンテンツを表示することができる。
 (発明A7)
 発明A1からA6までの何れか1つに記載の表示装置を備えている、
ことを特徴とするテレビジョン受像機(テレビ10)。
 (発明A8)
 コンテンツを表示部に表示する表示装置の表示方法であって、
 上記表示装置からユーザまでの距離を検出する距離検出ステップと、
 外部機器から入力される入力画像に含まれる文字のうち、最も小さい文字の大きさを検出する文字サイズ検出ステップと、
 上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整する調整ステップと、
 上記入力画像を、上記調整ステップにおいて調整された表示サイズで、上記コンテンツと共に上記表示部に表示する表示ステップと、を含んでいる、
ことを特徴とする表示方法。
 上記の構成によれば、発明A1に係る表示装置と同様の効果を奏することができる。
 (発明A9)
 発明A1からA6のいずれか1つに記載の表示装置としてコンピュータを機能させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
 (発明A10)
 発明A9に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
 〔発明B〕
 テレビにおいて、従来用いられてきた文字の検出方法を用いて、画像に含まれる文字のサイズを検出するためには、まず、画像に含まれる文字領域を検出し、さらに文字領域に含まれる全ての文字を検出した上で、検出された全ての文字のサイズを検出しなければならない。このように、従来の技術では、画像に含まれる文字のサイズを検出する場合に、テレビにおける処理量が大きくなってしまうという問題がある。
 これに対し、本明細書には、上記の課題を解決する以下の発明が含まれる。これらの発明の主たる目的は、文字のサイズの検出に関する処理量を低減することのできる表示装置を提供することにある。
 (発明B1)
 外部機器(携帯端末30)から入力される入力画像(サブ画像)から、文字を含む文字領域を検出する文字領域検出手段(文字領域検出部141)と、
 上記文字領域の行方向の幅(横幅)の長さおよび列方向の幅(縦幅)の長さを算出し、最も短い幅の長さを、上記入力画像に含まれる文字のうち最も小さい最小文字のサイズとして検出する文字サイズ検出手段(最小文字領域検出部142、最小文字サイズ検出部143)と、を備えている、
ことを特徴とする表示装置(テレビ10)。
 上記の構成によれば、上記文字サイズ検出手段は、上記入力画像に含まれる全ての文字のサイズを検出しなくとも、各文字領域の行方向及び列方向の幅の長さのうち、最も短い幅の長さを、上記入力画像に含まれる最小文字のサイズとして検出することができる。
 このため、上記表示装置は、上記最小文字のサイズを検出するために、上記入力画像に含まれる全ての文字を検出し、更に検出した各文字のサイズを検出するという、処理量の大きな処理を行う必要がない。したがって、上記表示装置は、文字のサイズ(より具体的には、最小文字のサイズ)の検出に関する処理量を低減することができる。
 また、上記文字サイズ検出手段は、上記入力画像から最小文字のサイズを検出する。このため、上記表示装置は、上記外部機器から入力画像と共に当該入力画像に含まれる文字のサイズを示す情報が供給されるか否かに係らず、入力画像から最小文字サイズを検出することができる。
 (発明B2)
 上記入力画像が動画像であるか静止画像であるかを判定する判定手段(制御部118)を更に備え、
 上記文字領域検出手段は、上記入力画像が上記判定手段によって静止画像であると判定された場合には、上記文字領域の検出を、上記入力画像が入力された際に1度だけ行う、ことを特徴とする発明B1に記載の表示装置。
 これにより、上記文字領域検出手段は、サブ画像が静止画像である場合には、上記文字領域の検出を1度実行した後は当該文字領域の検出を停止することができるため、上記文字領域の検出に関する消費電力を削減することができる。
 (発明B3)
 上記文字領域検出手段および上記文字サイズ検出手段は、当該文字領域検出手段による上記文字領域の検出と、当該文字サイズ検出手段による上記最小文字のサイズの検出とを、交互に実行する、
ことを特徴とする発明B1に記載の表示装置。
 上記の構成によれば、上記文字領域検出手段および上記文字サイズ検出手段は、上記文字領域の検出処理と最小文字のサイズの検出処理とを交互に実行することにより、各処理を同時に実行する場合よりも各処理の処理速度を向上させることができる。このため、上記表示装置は、上記入力画像における最小文字のサイズが変化した場合にも、変化後の最小文字のサイズを検出するまでの時間を短縮することができる。
 (発明B4)
 上記文字領域検出手段は、上記入力画像に含まれる文字領域のうち、特定の範囲内に含まれる文字領域のみを検出する、
ことを特徴とする発明B1からB3の何れか1つに記載の表示装置。
 上記の構成によれば、上記文字領域検出手段における文字領域の検出、及び、上記文字サイズ検出手段における最小文字のサイズの検出を実行する上記入力画像における範囲を小さくすることができる。これにより、上記表示装置は、文字の検出に関する処理量をさらに低減することができる。
 (発明B5)
 発明B1からB4までの何れか1つに記載の表示装置を備えている、
ことを特徴とするテレビジョン受像機(テレビ10)。
 (発明B6)
 表示装置における検出方法であって、
 外部機器から入力される入力画像から、文字を含む文字領域を検出する文字領域検出ステップと、
 上記文字領域の行方向の幅の長さおよび列方向の幅の長さを算出し、最も短い幅の長さを、上記入力画像に含まれる文字のうち最も小さい最小文字のサイズとして検出する文字サイズ検出ステップと、を含んでいる、
ことを特徴とする検出方法。
 上記の構成によれば、発明B1に係る表示装置と同様の効果を奏することができる。
 (発明B7)
 発明B1からB4のいずれか1つに記載の表示装置としてコンピュータを機能させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
 (発明B8)
 発明B7に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
 〔発明C〕
 テレビと携帯端末とを含む構成に対して、特許文献1に記載の技術を用いたとすると、テレビにおいて、入力された携帯画像から文字を検出する処理と、検出した文字に基づいて携帯画像の表示サイズを算出する処理の双方を実行しなければならないため、テレビ側の処理量が大きくなってしまうという問題がある。このため、携帯画像が携帯端末からテレビに入力された時点から、携帯画像がテレビのディスプレイに表示されるまでにタイムラグが生じてしまう。
 これに対し、本明細書には、上記の課題を解決する以下の発明が含まれる。これらの発明の主たる目的は、画像の出力先の機器における処理量を低減することのできる携帯端末を提供することにある。
 (発明C1)
 表示部(表示部303)に表示される表示画像(サブ画像)を外部に出力する出力手段(送信部305)と、
 上記表示画像に含まれる最も小さい最小文字のサイズ(最小文字サイズ)を検出する検出手段(文字認識部321)と、を備え、
 上記出力手段は、上記最小文字のサイズを示すデータを上記表示画像と共に出力する、ことを特徴とする携帯端末(携帯端末30)。
 上記の構成によれば、上記携帯端末は、上記出力手段から、上記表示画像と共に上記最小文字のサイズを示すデータを出力することができる。
 これによって、上記携帯端末から上記表示画像の入力を受け付ける出力先の機器(例えば、テレビ10)は、最小文字のサイズを用いた処理を行う場合であっても、上記表示画像から最小文字を検出する必要も、最小文字のサイズを検出する必要もない。
 したがって、上記携帯端末は、表示画像の出力先の機器における処理量を低減することができる。
 なお、上記携帯端末の表示部に表示される表示画像は、上記表示装置において外部(携帯端末)から入力される入力画像である。
 (発明C2)
 上記最小文字のサイズと、上記表示画像のサイズとの比である文字サイズ比を算出するサイズ比算出手段(文字サイズ比算出部322)を備え、
 上記出力手段は、上記最小文字のサイズを示すデータとして、上記文字サイズ比を示すサイズ比データを出力する、
ことを特徴とする発明C1に記載の携帯端末。
 上記の構成によれば、上記携帯端末は、上記出力手段から、上記表示画像と共に上記サイズ比データを出力することにより、上記出力先機器に対して、上記表示画像のサイズに係らず、上記表示画像と上記最小文字のサイズとを一律に提示することができる。
 これによって、上記出力先機器は、上記文字サイズ比を用いた処理を行う場合であっても、上記表示画像から最小文字の検出、最小文字のサイズの検出、及び、最小文字のサイズ及び上記表示画像からの文字サイズ比の算出の何れも行う必要がない。
 したがって、上記携帯端末は、表示画像の出力先の機器における処理量をさらに低減することができる。
 (発明C3)
 上記文字サイズ比が変化したか否かを判定する判定手段(サイズ比変化判定部323)を備え、
 上記出力手段は、上記表示画像と共に、上記判定手段による判定結果を示すフラグデータ(変化フラグ)を更に出力する、
ことを特徴とする発明C2に記載の携帯端末。
 上記の構成によれば、上記携帯端末は上記出力手段から、上記表示画像及び上記サイズ比データに加え、上記フラグデータを出力することができる。
 これにより、上記出力先機器は、上記フラグデータを参照することにより、上記表示画像に含まれる上記文字サイズ比が変化しているか否かを容易に判定することができる。また、上記出力先機器は、上記フラグデータを参照し、当該フラグデータが上記文字サイズ比が変化していることを示している場合にのみ、変化した上記文字サイズ比を示す上記サイズ比データを参照して最小文字サイズの検出が必要な処理を行うこともできる。
 したがって、上記携帯端末は、表示画像の出力先の機器における処理量をさらに低減することができる。
 (発明C4)
 記憶部(記憶部304)には、上記文字サイズ比と上記サイズ比データとが関連付けられたサイズ比テーブル(サイズ比テーブル341)が格納されており、
 上記出力手段は、上記サイズ比データとして、上記サイズ比算出手段によって算出された上記文字サイズ比と上記サイズ比テーブルにおいて関連付けられているサイズ比データを出力する、
ことを特徴とする発明C3に記載の携帯端末。
 (発明C5)
 上記記憶部には、上記判定手段による判定結果と上記フラグデータとが関連付けられたフラグテーブル(変化フラグテーブル342)が格納されており、
 上記出力手段は、上記フラグデータとして、上記判定手段による判定結果と上記フラグテーブルにおいて関連付けられているフラグデータを出力する、
ことを特徴とする発明C4に記載の携帯端末。
 上記の構成によれば、上記携帯端末は、上記サイズ比データ及び上記フラグデータとして、上記各テーブルにおいて関連付けられているデータを用いることができる。これにより、上記携帯端末は、上記文字サイズ比からサイズ比データを生成する処理、及び、上記判定結果に基づいてフラグデータを生成する処理を行う必要がない。
 したがって、上記携帯端末は、上記出力手段から上記サイズ比データ及び上記フラグデータを出力するまでに必要な処理を削減することができる。つまり上記携帯端末は、上記表示画像、上記サイズ比データ及び上記フラグデータの出力に関する処理量を低減することができる。
 (発明C6)
 発明C1からC5までの何れか1つに記載の携帯端末から上記表示画像と共に上記最小文字のサイズを示すデータの入力を受け付ける表示装置(テレビ10)であって、
 上記データから、上記最小文字のサイズを検出する文字サイズ検出手段を備えている、ことを特徴とする表示装置。
 上記の構成によれば、上記表示装置は、上記携帯端末から入力される上記表示画像に含まれる最小文字のサイズを用いた処理を行う場合であっても、上記表示画像から最小文字を検出する必要も、最小文字のサイズを検出する必要もない。
 したがって、上記表示装置は、上記携帯端末から上記表示画像と共に上記最小文字のサイズを示すデータの入力を受け付けることにより、上記最小文字のサイズを用いた処理に関する処理速度を向上させる(処理時間を短縮する)ことができる。
 (発明C7)
 携帯端末の出力方法であって、
 表示部に表示される表示画像を外部に出力する出力ステップと、
 上記表示画像に含まれる最も小さい最小文字のサイズを検出する検出ステップと、を含み、
 上記出力ステップにおいて、上記最小文字のサイズを示すデータを上記表示画像と共に出力する、
ことを特徴とする出力方法。
 上記の構成によれば、発明C1に係る携帯端末と同様の効果を奏することができる。
 (発明C8)
 発明C1からC5のいずれか1つに記載の携帯端末、又は、発明C6に記載の表示装置としてコンピュータを機能させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
 (発明C9)
 発明C8に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
 本発明に係る表示装置は、テレビジョン受像機、電子黒板、デジタルサイネージ(電子看板)、及び、パーソナルコンピュータなどに好適に適用することができる。また、本発明に係る外部装置は、携帯電話、スマートフォン、タブレット端末、電子書籍、デジタルカメラ、及び、デジタルビデオカメラなどの携帯端末に好適に適用することができる。
 10     テレビ(表示装置、テレビジョン受像機)
 20     リモートコントローラ
 30     携帯端末(外部機器)
 107    映像処理回路(調整手段)
 109    LCDコントローラ(表示手段)
 110    LCD(表示部)
 115    外部入力部
 117    RAM
 118    制御部
 120    カメラ
 121    無線通信部
 131    スイッチング部
 132    文字認識部(文字サイズ検出手段)
 133    距離検出部(距離検出手段)
 134    ユーザ設定抽出部(ユーザ特定手段)
 135    表示サイズ算出部(調整手段)
 141    文字領域検出部
 142    最小文字領域検出部
 143    最小文字サイズ検出部
 301    制御部
 303    表示部
 304    記憶部
 305    送信部
 311    再生制御部
 312    サイズ比情報生成部
 321    文字認識部
 322    最小文字サイズ比算出部
 323    サイズ比変化判定部
 341    サイズ比テーブル
 342    変化フラグテーブル

Claims (20)

  1.  コンテンツと、外部機器から入力される入力画像とを表示部の異なる領域に表示する表示手段と、
     上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整手段と、を備え、
     上記調整手段は、さらに、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する、
    ことを特徴とする表示装置。
  2.  上記調整手段は、
      上記入力画像のアスペクト比が上記コンテンツのアスペクト比以上である場合、上記入力画像及び上記コンテンツが、上記表示部の長手方向に並べて表示されるよう表示位置を調整し、
      上記入力画像のアスペクト比が上記コンテンツのアスペクト比よりも小さい場合、上記入力画像及び上記コンテンツが、上記表示部の短手方向に並べて表示されるよう表示位置を調整する、
    ことを特徴とする請求項1に記載の表示装置。
  3.  上記調整手段は、上記入力画像のアスペクト比が変化した場合、
      上記アスペクト比が変化する前に表示位置を調整した上記入力画像の表示サイズと、上記アスペクト比が変化した後に表示位置を調整した場合の上記入力画像の表示サイズとを比較し、
      上記アスペクト比が変化する前の表示サイズに対する上記アスペクト比が変化した後の表示サイズの増加率が所定の閾値よりも大きい場合にのみ、上記アスペクト比が変化した後の入力画像の表示位置を調整する、
    ことを特徴とする請求項1又は2に記載の表示装置。
  4.  当該表示装置からユーザまでの距離を検出する距離検出手段と、
     上記外部機器から入力される入力画像に含まれる文字のうち、最も小さい文字の大きさを検出する文字サイズ検出手段と、を更に備え
     上記調整手段は、
      上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、
      上記コンテンツの表示サイズを、上記入力画像の調整された表示サイズに基づいて調整する、
    ことを特徴とする請求項1から3の何れか1項に記載の表示装置。
  5.  当該表示装置からユーザまでの距離を検出する距離検出手段と、
     上記入力画像に含まれる文字のうち、最も小さい文字の大きさを検出する文字サイズ検出手段と、を更に備え、
     上記文字サイズ検出手段は、上記コンテンツに含まれる文字のうち、最も小さい文字の大きさを検出し、
     上記調整手段は、
      上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、
      上記コンテンツの表示サイズを、上記コンテンツに含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整する、
    ことを特徴とする請求項1から3の何れか1項に記載の表示装置。
  6.  当該表示装置を利用する上記ユーザを特定するユーザ特定手段を備え、
     上記調整手段は、更に、上記入力画像の表示サイズを、上記ユーザ特定手段によって特定される上記ユーザによって予め設定されている基準文字サイズに基づいて調整する、
    ことを特徴とする請求項4又は5に記載の表示装置。
  7.  当該表示装置からユーザまでの距離を検出する距離検出手段と、
     上記入力画像に含まれる文字のうち、最も小さい文字の大きさを検出する文字サイズ検出手段と、を更に備え、
     上記調整手段は、上記入力画像の表示サイズを、上記入力画像に含まれる最も小さい文字の大きさ、及び、上記距離に基づいて調整し、
     上記表示手段は、上記入力画像を、上記調整手段によって調整された表示サイズで、上記コンテンツと共に上記表示部に表示する、
    ことを特徴とする請求項1に記載の表示装置。
  8.  当該表示装置を利用する上記ユーザを特定するユーザ特定手段を備え、
     上記調整手段は、更に、上記入力画像の表示サイズを、上記ユーザ特定手段によって特定される上記ユーザによって予め設定されている基準文字サイズに基づいて調整する、
    ことを特徴とする請求項7に記載の表示装置。
     
  9.  上記入力画像から、文字を含む文字領域を検出する文字領域検出手段と、
     上記文字領域の行方向の幅の長さおよび列方向の幅の長さを算出し、最も短い幅の長さを、上記入力画像に含まれる文字のうち最も小さい最小文字のサイズとして検出する文字サイズ検出手段と、を更に備えている、
    ことを特徴とする請求項1に記載の表示装置。
  10.  上記入力画像が動画像であるか静止画像であるかを判定する判定手段を更に備え、
     上記文字領域検出手段は、上記入力画像が上記判定手段によって静止画像であると判定された場合には、上記文字領域の検出を、上記入力画像が入力された際に1度だけ行う、
    ことを特徴とする請求項9に記載の表示装置。
  11.  上記文字領域検出手段および上記文字サイズ検出手段は、当該文字領域検出手段による上記文字領域の検出と、当該文字サイズ検出手段による上記最小文字のサイズの検出とを、交互に実行する、
    ことを特徴とする請求項9に記載の表示装置。
  12.  上記文字領域検出手段は、上記入力画像に含まれる文字領域のうち、特定の範囲内に含まれる文字領域のみを検出する、
    ことを特徴とする請求項9から11の何れか1項に記載の表示装置。
  13.  上記外部機器は携帯端末であり、
     当該表示装置は、上記携帯端末から上記入力画像と共に当該入力画像に含まれる最も小さい最小文字のサイズを示すデータの入力を受け付け、
     上記データから上記最小文字のサイズを検出する文字サイズ検出手段を更に備えている、
    ことを特徴とする請求項1に記載の表示装置。
  14.  表示部に表示される表示画像を請求項13に記載の表示装置に対して出力する出力手段と、
     上記表示画像に含まれる最も小さい最小文字のサイズを検出する検出手段と、を備え、
     上記出力手段は、上記最小文字のサイズを示すデータを上記表示画像と共に出力する、
    ことを特徴とする携帯端末。
  15.  上記最小文字のサイズと、上記表示画像のサイズとの比である文字サイズ比を算出するサイズ比算出手段を備え、
     上記出力手段は、上記最小文字のサイズを示すデータとして、上記文字サイズ比を示すサイズ比データを出力する、
    ことを特徴とする請求項14に記載の携帯端末。
  16.  上記文字サイズ比が変化したか否かを判定する判定手段を備え、
     上記出力手段は、上記表示画像と共に、上記判定手段による判定結果を示すフラグデータを更に出力する、
    ことを特徴とする請求項15に記載の携帯端末。
  17.  請求項1から13までの何れか1項に記載の表示装置を備えている、
    ことを特徴とするテレビジョン受像機。
  18.  表示装置の表示方法であって、
     コンテンツと、外部から入力される入力画像とを表示部の異なる領域に表示する表示ステップと、
     上記コンテンツ及び上記入力画像が上記表示部の異なる領域に表示されるよう、上記コンテンツの表示サイズ及び上記入力画像の表示サイズを調整する調整ステップと、を含み、
     上記調整ステップにおいて、さらに、上記コンテンツの上記表示部上の表示位置、及び、上記入力画像の上記表示部上の表示位置を、上記コンテンツ及び入力画像のアスペクト比に基づいて調整する、
    ことを特徴とする表示方法。
  19.  請求項1から13のいずれか1項に記載の表示装置としてコンピュータを機能させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
  20.  請求項19に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
PCT/JP2014/057574 2013-03-26 2014-03-19 表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体 WO2014156896A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201480007987.8A CN104981847B (zh) 2013-03-26 2014-03-19 显示装置、电视接收机、以及显示方法
US14/762,006 US9531992B2 (en) 2013-03-26 2014-03-19 Display apparatus, portable terminal, television receiver, display method, program, and recording medium

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
JP2013065209A JP5607201B2 (ja) 2013-03-26 2013-03-26 表示装置、テレビジョン受像機、検出方法、プログラム、及び、記録媒体
JP2013-065209 2013-03-26
JP2013065205A JP5575294B1 (ja) 2013-03-26 2013-03-26 表示装置、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
JP2013-065210 2013-03-26
JP2013065208A JP2014191116A (ja) 2013-03-26 2013-03-26 携帯端末、表示装置、出力方法、プログラム、及び、記録媒体
JP2013065210A JP5623580B2 (ja) 2013-03-26 2013-03-26 表示装置、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
JP2013-065208 2013-03-26
JP2013-065205 2013-03-26

Publications (1)

Publication Number Publication Date
WO2014156896A1 true WO2014156896A1 (ja) 2014-10-02

Family

ID=51623875

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/057574 WO2014156896A1 (ja) 2013-03-26 2014-03-19 表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体

Country Status (3)

Country Link
US (1) US9531992B2 (ja)
CN (1) CN104981847B (ja)
WO (1) WO2014156896A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160210900A1 (en) * 2015-01-20 2016-07-21 Samsung Display Co., Ltd. Display apparatus and driving method thereof
CN110556081A (zh) * 2018-06-04 2019-12-10 富士施乐株式会社 显示控制装置、存储程序的存储介质以及显示系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9992441B2 (en) * 2015-01-05 2018-06-05 Lattice Semiconductor Corporation Displaying multiple videos on sink device using display information of source device
US20170039567A1 (en) * 2015-08-03 2017-02-09 Capital One Services, LLC. Systems and methods for item-based transaction authentication
JP6680653B2 (ja) * 2016-09-12 2020-04-15 シスメックス株式会社 顕微鏡装置、顕微鏡システムおよび撮像方法
JP6448696B2 (ja) * 2017-03-22 2019-01-09 株式会社東芝 情報処理装置、方法及びプログラム
JP2020091617A (ja) * 2018-12-05 2020-06-11 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
JP7266455B2 (ja) * 2019-04-26 2023-04-28 キヤノン株式会社 表示装置及びその制御方法、並びにプログラム
CN110085191A (zh) * 2019-05-15 2019-08-02 京东方科技集团股份有限公司 显示装置及处理器、处理方法、驱动方法、存储介质和设备
CN114793294A (zh) * 2020-03-13 2022-07-26 海信视像科技股份有限公司 一种显示设备及开机动画显示方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6413686A (en) * 1987-07-07 1989-01-18 Nec Corp System for measuring character size in character string
JPH07184045A (ja) * 1993-12-24 1995-07-21 Ricoh Co Ltd 画像処理装置
JPH1031666A (ja) * 1996-07-17 1998-02-03 Canon Inc 電子メイル装置
JP2000259142A (ja) * 1999-03-12 2000-09-22 Omron Corp 文字サイズ調整装置、文字サイズ調整方法および文字サイズ調整プログラムを記録した記録媒体
JP2001094900A (ja) * 1999-09-21 2001-04-06 Matsushita Electric Ind Co Ltd 画面表示方法
JP2002014664A (ja) * 2000-06-30 2002-01-18 Canon Inc 画像処理装置、画像処理方法及び記憶媒体
JP2004178085A (ja) * 2002-11-25 2004-06-24 Nippon Telegr & Teleph Corp <Ntt> 情報表示装置、情報表示プログラム、プログラム記録媒体及び情報表示方法
WO2011155192A1 (ja) * 2010-06-08 2011-12-15 パナソニック株式会社 映像生成装置、方法及び集積回路

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5382972A (en) * 1988-09-22 1995-01-17 Kannes; Deno Video conferencing system for courtroom and other applications
GB9200281D0 (en) * 1992-01-08 1992-02-26 Thomson Consumer Electronics A pip horizontal panning circuit for wide screen television
KR20000070273A (ko) * 1997-11-17 2000-11-25 이데이 노부유끼 텔레비젼 장치 및 텔레비젼 장치의 표시 방법 및 화면 제어 장치 및 방법
US6563547B1 (en) * 1999-09-07 2003-05-13 Spotware Technologies, Inc. System and method for displaying a television picture within another displayed image
KR20020040303A (ko) * 2000-11-24 2002-05-30 구자홍 티브이의 부화면 처리장치
CN100465995C (zh) * 2001-06-12 2009-03-04 奥普提克斯晶硅有限公司 一种将图像投射到屏幕表面的方法及系统
CA2465104A1 (en) * 2001-10-23 2003-05-01 Samsung Electronics Co., Ltd. Information storage medium including markup document and av data, recording method, reproducing method, and reproducing apparatus therefor
KR100735300B1 (ko) * 2005-01-04 2007-07-03 삼성전자주식회사 디지털 방송 채널정보 표시방법과 그에 따른 디지털 방송수신장치
US20070008338A1 (en) * 2005-05-28 2007-01-11 Young-Chan Kim Display system, display apparatus, and method of controlling video source and display apparatus
US8284209B2 (en) * 2005-12-15 2012-10-09 Broadcom Corporation System and method for optimizing display bandwidth
JP4142073B2 (ja) * 2006-10-13 2008-08-27 株式会社コナミデジタルエンタテインメント 表示装置、表示方法、ならびに、プログラム
JP5073281B2 (ja) * 2006-12-12 2012-11-14 株式会社Pfu 付箋表示処理装置および付箋表示処理方法
JP2008178075A (ja) * 2006-12-18 2008-07-31 Sony Corp 表示制御装置、表示制御方法、及びプログラム
US20110200092A1 (en) * 2007-11-12 2011-08-18 Yoshio Todoroki Digitial broadcast receiver
JP4247291B1 (ja) * 2007-12-20 2009-04-02 株式会社東芝 再生装置および再生方法
JP5152031B2 (ja) 2008-03-24 2013-02-27 ブラザー工業株式会社 画像処理装置およびコンピュータプログラム
CN101609387A (zh) * 2008-06-20 2009-12-23 宏碁股份有限公司 在屏幕上显示多个窗口的方法及计算机可读取媒体
JP2010147538A (ja) * 2008-12-16 2010-07-01 Sony Corp 画像処理装置および方法、並びにプログラム
JP2011160152A (ja) * 2010-01-29 2011-08-18 Toshiba Corp 映像出力装置及び映像出力方法
US20110298980A1 (en) * 2010-06-08 2011-12-08 Sony Corporation Resizing tv graphic elements and reorienting graphics plane for user position
JP5751860B2 (ja) * 2011-02-23 2015-07-22 富士通テン株式会社 映像処理回路および映像表示装置
EP2525568B1 (en) * 2011-05-19 2017-11-15 EchoStar Technologies L.L.C. Automatic subtitle resizing
JP5289540B2 (ja) * 2011-11-14 2013-09-11 株式会社東芝 画像処理装置、及び画像処理方法
JP5783161B2 (ja) * 2012-11-28 2015-09-24 コニカミノルタ株式会社 画像形成装置、画像形成システムおよびプログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6413686A (en) * 1987-07-07 1989-01-18 Nec Corp System for measuring character size in character string
JPH07184045A (ja) * 1993-12-24 1995-07-21 Ricoh Co Ltd 画像処理装置
JPH1031666A (ja) * 1996-07-17 1998-02-03 Canon Inc 電子メイル装置
JP2000259142A (ja) * 1999-03-12 2000-09-22 Omron Corp 文字サイズ調整装置、文字サイズ調整方法および文字サイズ調整プログラムを記録した記録媒体
JP2001094900A (ja) * 1999-09-21 2001-04-06 Matsushita Electric Ind Co Ltd 画面表示方法
JP2002014664A (ja) * 2000-06-30 2002-01-18 Canon Inc 画像処理装置、画像処理方法及び記憶媒体
JP2004178085A (ja) * 2002-11-25 2004-06-24 Nippon Telegr & Teleph Corp <Ntt> 情報表示装置、情報表示プログラム、プログラム記録媒体及び情報表示方法
WO2011155192A1 (ja) * 2010-06-08 2011-12-15 パナソニック株式会社 映像生成装置、方法及び集積回路

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160210900A1 (en) * 2015-01-20 2016-07-21 Samsung Display Co., Ltd. Display apparatus and driving method thereof
CN110556081A (zh) * 2018-06-04 2019-12-10 富士施乐株式会社 显示控制装置、存储程序的存储介质以及显示系统
US11373619B2 (en) 2018-06-04 2022-06-28 Fujifilm Business Innovation Corp. Display control apparatus, display system, and non-transitory computer readable medium

Also Published As

Publication number Publication date
CN104981847A (zh) 2015-10-14
CN104981847B (zh) 2017-07-04
US9531992B2 (en) 2016-12-27
US20150365625A1 (en) 2015-12-17

Similar Documents

Publication Publication Date Title
WO2014156896A1 (ja) 表示装置、携帯端末、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
US9854323B2 (en) Device and control method for the device
JP2010108372A (ja) 映像表示装置、映像表示方法および映像システム
KR101486254B1 (ko) 프레임 레이트 변환 설정방법 및 이를 적용한 디스플레이 장치
JP5291792B2 (ja) デジタル放送受信装置および映像表示方法
US20080266456A1 (en) Broadcasting reception device and signal processing method for broadcasting reception device
JP5291793B2 (ja) デジタル放送受信装置および映像表示方法
JP5623580B2 (ja) 表示装置、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
JP5607201B2 (ja) 表示装置、テレビジョン受像機、検出方法、プログラム、及び、記録媒体
JP2014066928A (ja) 映像信号供給装置、表示装置、テレビジョン受像機、表示システム、映像信号供給方法、表示方法、プログラム、及び、記録媒体
JP5575294B1 (ja) 表示装置、テレビジョン受像機、表示方法、プログラム、及び、記録媒体
JP2014191116A (ja) 携帯端末、表示装置、出力方法、プログラム、及び、記録媒体
JP2009005258A (ja) テレビジョン受像機
US20110058100A1 (en) Video signal processing apparatus and video signal processing method
US20200351541A1 (en) Systems and methods for simultaneously displaying video content from multiple programming sources
JP5307302B2 (ja) 表示装置、調整方法、及び、テレビジョン受像機
JP5184709B1 (ja) 表示装置、表示システム、調整方法、テレビジョン受像機、プログラム、及び、記録媒体
JP2017021191A (ja) 電子機器及びその制御方法
JP4876848B2 (ja) ビデオスケーリングシステムおよびテレビ受像装置
JP5743540B2 (ja) 映像処理装置及びその制御方法
JP6279422B2 (ja) 表示処理装置、テレビジョン受像機、情報生成装置、放送システム、表示処理方法、プログラム、および記録媒体
JP2014045425A (ja) 電子機器、電子機器の制御方法
EP2009912A2 (en) Image displaying method and display apparatus using the same
JP5061778B2 (ja) 字幕補正表示方法
JP2012034037A (ja) 映像信号処理装置及び映像信号処理方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14776225

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14762006

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14776225

Country of ref document: EP

Kind code of ref document: A1