WO2018168578A1 - 撮像装置、映像信号処理装置および映像信号処理方法 - Google Patents

撮像装置、映像信号処理装置および映像信号処理方法 Download PDF

Info

Publication number
WO2018168578A1
WO2018168578A1 PCT/JP2018/008601 JP2018008601W WO2018168578A1 WO 2018168578 A1 WO2018168578 A1 WO 2018168578A1 JP 2018008601 W JP2018008601 W JP 2018008601W WO 2018168578 A1 WO2018168578 A1 WO 2018168578A1
Authority
WO
WIPO (PCT)
Prior art keywords
video signal
processing unit
signal processing
imaging
size
Prior art date
Application number
PCT/JP2018/008601
Other languages
English (en)
French (fr)
Inventor
浩二 神谷
幸裕 木下
康貴 中島
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN201880016329.3A priority Critical patent/CN110383817B/zh
Priority to US16/486,343 priority patent/US11039067B2/en
Priority to EP18768349.5A priority patent/EP3598735A4/en
Priority to JP2019505907A priority patent/JP7092111B2/ja
Publication of WO2018168578A1 publication Critical patent/WO2018168578A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/02—Viewfinders
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/18—Signals indicating condition of a camera member or suitability of light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/815—Camera processing pipelines; Components thereof for controlling the resolution by using a single image

Definitions

  • the present technology relates to an imaging apparatus such as a video camera, a video signal processing apparatus and a video signal processing method used for the imaging apparatus.
  • An object of the present technology relates to an imaging apparatus, a video signal processing apparatus, and a video signal processing method that can perform focus adjustment while visually recognizing a display image of a viewfinder.
  • an imaging apparatus includes: An imaging unit having an imaging element; A first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging unit; A plurality of divided areas for spatially dividing the first video signal generated by the first video signal processing unit are set, and each of the divided areas corresponds to the first video signal. A second video signal that generates a second video signal having a second resolution lower than the first resolution by cutting out the first video signals in an area smaller than the size of the divided area as a block and connecting them together. A processing unit; A viewfinder for displaying the second video signal.
  • the size of the divided area is 3 ⁇ 3 pixels or more, and the size of the block is either 2 ⁇ 1 pixel or more and 1 ⁇ 2 pixels or more.
  • the second video signal processing unit divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size. May be configured.
  • the second video signal processing unit arranges one or more divided areas of the first size in a central part of a video space by the first video signal, and the plurality of divided areas of the second size are You may comprise so that it may arrange
  • the second video signal processing unit may be configured so that the second video signal processing unit sets each of the blocks at a position across a plurality of divided areas.
  • the imaging apparatus further includes a control unit that controls the second video signal processing unit to move the position of the block in each divided area according to a switching instruction given by a user. Good.
  • the second video signal processing unit generates a third video signal having the second resolution by down-conversion from the first video signal, the second video signal, and the third video signal.
  • a switching unit that switches between video signals may be further provided.
  • the imaging device is An imaging unit having an imaging element; A first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging unit; Down-converting the first video signal at the outer edge to generate a down-converted video, setting a plurality of divided areas for spatially dividing the first video signal in the area inside the outer edge, For each of the divided areas, the first video signal in a region smaller than the size of the corresponding divided area is cut out from the first video signal as a block, and connected to each other to generate a block connected video, and the down A second video signal processing unit that generates a second video signal having a second resolution lower than the first resolution by connecting the converted video and the block connection video; A viewfinder for displaying the second video signal.
  • a video signal processing apparatus is: A first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging device; A plurality of divided areas for spatially dividing the first video signal generated by the first video signal processing unit are set, and each of the divided areas corresponds to the first video signal. A second video signal that generates a second video signal having a second resolution lower than the first resolution by cutting out the first video signals in an area smaller than the size of the divided area as a block and connecting them together. And a processing unit.
  • the video signal processing method is as follows: A first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging apparatus; A second video signal processing unit sets a plurality of divided areas for spatially dividing the first video signal, and for each of the divided areas, the corresponding divided area from the first video signal is set.
  • the second video signal having a second resolution lower than the first resolution is generated by cutting out the first video signals in an area smaller than the size as blocks and connecting them together.
  • FIG. 2 is a block diagram illustrating a functional configuration of a VF signal processing unit 15 in the imaging device 1 of FIG. 1. It is a figure which shows the typical method of producing
  • FIG. 15 is a diagram illustrating an operation method when an operator is changed on the UI screen illustrated in FIG. 14.
  • FIG. 15 is a diagram illustrating a switching order between a plurality of dials on the UI screen illustrated in FIG. 14.
  • FIG. 15 is a diagram illustrating a switching order between a plurality of buttons on the UI screen illustrated in FIG. 14.
  • FIG. 15 is a diagram showing a display example when duplicate setting of an operator occurs on the UI screen shown in FIG. 14. It is a figure which shows an example of a schematic structure of an endoscopic surgery system. It is a block diagram which shows an example of a function structure of the camera head shown in FIG. 20, and CCU.
  • FIG. 1 is a block diagram illustrating a configuration of the imaging apparatus according to the first embodiment of the present technology.
  • the imaging apparatus 1 includes an optical block 11, an imaging unit 12, a main line video signal processing unit 13, an output unit 14, a VF signal processing unit 15, a VF (viewfinder) 16, a control unit 17, and an operation. And an input unit 18.
  • the optical block 11 includes a lens, a focus adjustment mechanism, a shutter mechanism, an iris (iris) mechanism, and the like.
  • the optical block 11 forms an image of the reflected light from the subject on the imaging surface of the imaging device of the imaging unit 12 with a lens.
  • the imaging unit 12 includes an imaging device, an analog signal processing circuit, an A / D conversion circuit, and the like.
  • the image pickup device includes a CCD (Charge Coupled Device) image sensor, a CMOS (Complementary Metal Oxide Semiconductor) image sensor, and the like.
  • the image sensor has a relatively high number of effective pixels such as 4K (3840 ⁇ 2160) and 8K (7680 ⁇ 4320). Pixel signals obtained by the image pickup device of the image pickup unit 12 are supplied to the main line video signal processing unit 13.
  • the main line video signal processing unit 13 corresponds to the “first video signal processing unit” in the claims, and for example, defect correction, noise removal, By performing signal processing such as lens aberration correction, A / D conversion, and RAW development, a first video signal having a first resolution corresponding to the number of effective pixels of the image sensor is generated.
  • the first video signal is a relatively high resolution video signal such as a 4K video signal or an 8K video signal. In the present specification, the description will be continued assuming that a 4K video signal is generated.
  • the generated first video signal is supplied to the output unit 14 and the VF signal processing unit 15.
  • the output unit 14 performs processing of outputting the first video signal obtained by the main line video signal processing unit 13 to an external video device such as a CCU (camera control unit) or a display through a camera cable.
  • the CCU receives the first video signal transmitted from the imaging device 1 through the camera cable 30 and performs processing of converting the digital video signal to an analog video signal in a format suitable for transmission and transmitting the analog video signal, for example. .
  • the first video signal obtained by the main line video signal processing unit 13 may be recorded on a recording medium such as an SSD (Solid State Drive).
  • a recording medium such as an SSD (Solid State Drive).
  • the VF signal processing unit 15 corresponds to the “second video signal processing unit” in the claims, and from the first video signal having the first resolution obtained by the main video signal processing unit 13, A second video signal having a second resolution which is the screen resolution of the VF 16 is generated.
  • the operation input unit 18 receives a command for operating the imaging apparatus 1 and various settings from the user, and includes, for example, a button, a switch, a dial, and a touch panel sensor provided on the screen of the VF 16.
  • the control unit 17 is a controller for controlling each part of the image pickup apparatus 1 and includes a CPU (Central Processing Unit), a RAM (Random Access Memory), a ROM (Read Only Only Member), and the like.
  • the RAM or ROM stores programs executed by the CPU and various parameters.
  • the control unit 17 interprets user operation input information received by the operation input unit 18 and controls the imaging apparatus 1 according to the interpreted input information.
  • FIG. 2 is a block diagram showing a functional configuration of the VF signal processing unit 15.
  • the VF signal processing unit 15 includes a down converter 151, a block connection unit 152, a switching unit 153, and a detail processing unit 154.
  • the down converter 151 converts the input first video signal into a second video signal having a screen resolution of VF16 by typical resolution conversion. More specifically, the down converter 151 converts the first video signal with 4K resolution into the second video signal with HD resolution by down-conversion.
  • a typical method for down-converting a first video signal with 4K resolution into a second video signal with HD resolution for example, an average value of 2 ⁇ 2 pixels in the vertical and horizontal directions of the first video signal is used as the second video signal.
  • the block linking unit 152 sets a plurality of divided areas for spatially dividing the input first video signal, and is smaller than the size of the corresponding divided area from the first video signal for each divided area.
  • the first video signal in the region is cut out as a block and connected to each other to generate a second video signal having the second resolution.
  • the switching unit 153 selects one of the second video signal output from the down converter 151 and the second video signal output from the block coupling unit 152 in accordance with a selection command given by the user using the operation input unit 18. This is selected and supplied to the detail processing unit 154.
  • the detail processing unit 154 performs detail processing for enhancing the contour of the subject on the second video signal selected by the switching unit 153 and outputs the result to the VF 16.
  • the second video signal supplied to the VF 16 is block-connected to the second video signal obtained by the down converter 151 in accordance with a selection command given by the user using the operation input unit 18.
  • the second video signal obtained by the unit 152 can be switched.
  • the main line video signal processing unit 13 and the VF signal processing unit 15 correspond to the “video signal processing device” in the claims of the present technology.
  • a typical method for generating a second video signal with HD resolution used as a VF video signal from a first video signal with 4K resolution includes, for example, a first video signal with 4K resolution as shown in FIG.
  • the video of the first video signal 31 with 4K resolution and the video of the second video signal 33 with HD resolution are shown in the same size.
  • the size of the image of the signal 33 is 1 ⁇ 2 both vertically and horizontally of the size of the image of the first video signal 31 with 4K resolution.
  • the region for the HD resolution cut out from the first video signal 31 with 4K resolution is shown in the region 32A. It is necessary to move from the position to the position of the region 32B, and a complicated user operation for that purpose is required.
  • the block connecting unit 152 in the VF signal processing unit 15 sets a plurality of divided areas for spatially dividing the input first video signal having the first resolution (for example, 4K). For each divided area, the first video signal in a region smaller than the size of the corresponding divided area is cut out as a block from the first video signal and connected to each other to obtain the second resolution (for example, HD). 2 video signals are generated.
  • the first resolution for example, 4K
  • the size of the divided area should theoretically be 3 ⁇ 3 pixels or more, and the block size should theoretically be 2 ⁇ 1 pixel or 1 ⁇ 2 pixels or more. This is because the contrast between two adjacent pixels in the first video signal serves as an index in order to visually recognize the focus state.
  • the number of divided areas is 2 to 20 in both horizontal and vertical directions.
  • the horizontal and vertical numbers of the divided areas are not necessarily the same.
  • the first resolution may be 4K, 8K, or higher.
  • the second resolution may be HD or lower. If the first resolution is 8K, the second resolution may be 4K, HD, or lower.
  • the resolution of the first video signal is 4K
  • the resolution of the second video signal is HD
  • the size of the divided area is 1280 ⁇ 720 pixels
  • the block size is 640 ⁇ 360 pixels. To do.
  • the block connecting unit 152 sets a total of nine divided areas A0-A8, 3 ⁇ 3, which spatially divide the 4K first resolution signal 31.
  • the size of each divided area A0-A8 is 1280 horizontal x 720 vertical pixels.
  • the block connecting unit 152 cuts out a set of horizontal 640 ⁇ vertical 360 pixels as blocks B0-B8 from the first video signal 31 for each divided area A0-A8.
  • the positions of the blocks B0-B8 cut out from the respective divided areas A0-A8 are rectangular areas of horizontal 640 ⁇ horizontal 360 pixels corresponding to the center of the corresponding divided areas A0-A8.
  • the position of the block B0-B8 cut out from the divided areas A0-A8 may be other than the central portion. Further, the size and position of the blocks B0-B8 cut out from the respective divided areas A0-A8 may or may not be the same among the divided areas A0-A8.
  • the block connecting unit 152 converts the blocks B0 to B8 cut out from the divided areas A0 to A8 into vertical and horizontal directions of the divided areas A0 to A8 in the first video signal 31, respectively.
  • the second video signal 34 of HD resolution is generated by connecting in accordance with the positional relationship.
  • the VF signal processing unit 15 supplies the generated second video signal 34 to the VF 16 as a VF video signal and displays it on the screen of the VF 16.
  • the block connecting unit 152 of the VF signal processing unit 15 sets a plurality of divided areas for spatially dividing the first video signal having the first resolution, For each individual divided area, the first video signal in a region smaller than the size of the corresponding divided area is cut out from the first video signal as a block, and the second video signal having the second resolution is connected to each other. Generate and display on the screen of VF16.
  • VF16 having a screen resolution lower than the resolution of the first video signal
  • FIG. 8 is a diagram showing a modification of the VF video format obtained by the VF signal processing unit 15.
  • the VF signal processing unit 15 divides the first video signal 31 having the first resolution (for example, 4K) into an outer edge region 41 and an inner region 42.
  • the down converter 151 of the VF signal processing unit 15 generates a down-converted video of the outer edge area 43 of the second video signal 34 by down-converting the first video signal 31 of the outer edge area 41.
  • the VF signal processing unit 15 sets a plurality of divided areas A0-A24 for spatially dividing the first video signal 31 in the inner region 42 in the block connecting unit 152, and each divided area A0-A24. Each time, the first video signal in the area smaller than the size of the corresponding divided area A0-A24 is cut out as a block B0-B24 from the first video signal 31 in the inner area 42 and connected to each other, thereby A block concatenated video of the inner area 44 of the video signal 34 is generated.
  • the VF signal processing unit 15 connects the down-converted video of the outer edge region 43 obtained by the down converter 151 and the block-connected video of the inner region 44 obtained by the block connecting unit 152 to obtain the second resolution.
  • a second video signal 34 (for example, HD) is generated and output to the VF 16.
  • each of the first video signals A VF image can be obtained in which the focus state of the divided area can be visually recognized and the imaging range of the subject can be easily viewed.
  • ⁇ Modification 2> (Divided areas of two sizes)
  • the sizes of the plurality of divided areas that spatially divide the first video signal need not be the same. Also, the block sizes need not all be the same.
  • the size of the divided area A6 in the middle portion of the first video signal 31 is made larger than the sizes of the surrounding divided areas (A0-A5, A7-A12),
  • the size of the block B6 cut out from the divided area A6 in the middle part may be larger than the size of the blocks (B0-B5, B7-B12) cut out from the surrounding divided areas (A0-A5, A7-A12).
  • the size of the divided area A6 in the middle part is twice the size of the surrounding divided areas (A0-A5, A7-A12), and the size of the block cut out from the divided area A6 in the middle part Is an example in which the size of the block cut out from the surrounding divided area is doubled horizontally and vertically.
  • a second video signal in which the degree of attention of the video of the block B6 cut out from the divided area A6 in the central portion can be obtained, and imaging is performed by focusing on the central portion of the field of view of the imaging device 1.
  • a suitable VF video signal can be obtained when the frequency is high.
  • one or more large divided areas and blocks may be set in the area other than the central portion of the first video signal in accordance with the position of the area that is frequently selected to be focused.
  • ⁇ Modification 3> Part of the block cut out from the divided area
  • the position of the block cut out from the divided area does not necessarily have to be the central portion of the divided area.
  • a block may be set at an eccentric position in the divided area.
  • blocks (B0-B5, B7-B12) are set at eccentric positions near the central divided area A6. It is.
  • blocks (B0-B5, B7-B12) may be set at positions eccentric in the direction away from the central divided area A6. .
  • the blocks may be set so as to straddle between a plurality of adjacent divided blocks.
  • B7, B8, B10, and B11) are set in such a manner that a part of each of them enters the central divided area A6.
  • ⁇ Modification 4> (Move block position in the divided area)
  • the position of the block may be movable within the divided area.
  • the control unit 17 controls the position of the block in the divided area to be moved in real time according to the switching instruction given from the user using the operation input unit 18.
  • FIG. 12 is a diagram illustrating an example of block position movement control.
  • each divided area A0-A15 is equally divided into a total of four areas of 2 ⁇ 2 in height, and one of the areas is effective as a block B0-B15.
  • the control unit 17 performs control so that the blocks B0 to B15 in the divided areas A0 to A15 are simultaneously moved to the next area in the clockwise direction in accordance with a switching instruction given by the user using the operation input unit 18. In this example, when the switching instruction is given four times, the blocks B0 to B15 go around once and return to their original positions.
  • the block moving direction may be switched between a clockwise direction and a counterclockwise direction according to a setting by the user.
  • the detail processing unit 154 in the VF signal processing unit 15 performs detail processing for enhancing the contour of the subject on the second video signal. Since this detail processing is performed by determining that the luminance change portion of the video is a contour, as shown in FIG. 13, many of the joint portions 45 of the blocks B00 and B01 are emphasized as a contour, and the focus state is visually recognized. Can be an obstacle to doing.
  • the VF signal processing unit 15 is configured to invalidate the detail processing of the joints between the blocks based on the position information of the joints of the blocks given from the control unit 17. Accordingly, it is possible to prevent the useless use of the edge emphasis portion in the video for visually recognizing the focus state.
  • ⁇ Modification 6> [User settings for block connection function]
  • the user can make the following settings for the block connection function. 1. ON / OFF of block connection function Number of divisions Block size Block position Dial direction 6. ON / OFF of multi-size division area Detail cancellation
  • the on / off of the block connection function is a setting for switching the above-described block connection function on / off.
  • the division number is a setting of the number of divided areas that spatially divide the first video signal.
  • the number of divisions can be selected from 4 to the maximum number of divisions.
  • the first video signal is spatially divided into nine divided areas of horizontal 3 ⁇ vertical 3.
  • the first video signal is spatially divided into 12 divided areas of 4 ⁇ 3 horizontal.
  • the first video signal is spatially divided into 16 divided areas of 4 ⁇ 4.
  • the number of divisions is 25, the first video signal is spatially divided into 25 divided areas of 5 ⁇ 5.
  • the upper limit of the number of divisions may be more than 25.
  • the block size is a setting of the block size (number of horizontal and vertical pixels) in the divided area.
  • the block size may be set as a ratio value with respect to the size of the divided area.
  • the block position is the setting of the block position within the divided area.
  • the divided area is equally divided into a total of four areas of 2 ⁇ 2 in the vertical direction, and which area is used as a block is set.
  • the dial direction is a setting for the number of divisions and the increase / decrease of the block size with respect to the rotation operation direction (clockwise direction or counterclockwise direction) of the operation element (dial) assigned to the setting of the number of divisions and the block size.
  • the amount of rotation (rotation angle) in the clockwise direction of the dial is switched in the order of 9 ⁇ 16 ⁇ 25, and the number of divisions is switched in the order of 25 ⁇ 16 ⁇ 9 as the amount of rotation of the dial counterclockwise (rotation angle) increases.
  • the multi-size division area is configured such that the size of the division area of the middle portion of the first video signal is larger than the size of the plurality of division areas around it. Whether to use the area.
  • Detail cancellation is a setting for canceling the detail processing.
  • FIG. 14 is a diagram showing a UI (User Interface) screen for the user setting.
  • UI User Interface
  • the VF 16 or an external display of the imaging device 1 is used as a UI display unit, and a specific operation button or the like provided on the imaging device 1 is used as a setting input unit.
  • a user can select an operator assigned to each setting item from a plurality of operator groups.
  • the operator groups that can be assigned to the setting items are a specific button group and a dial group provided in the operation input unit 18 of the imaging apparatus 1.
  • FIG. 15 is a side view showing an operator related to the block connection function of the imaging apparatus 1.
  • the imaging apparatus 1 includes a plurality of buttons B1, B2, B3, B4, and B5 and a plurality of dials D1, D2, and D3 as an operator group to which each setting item related to the block connection function can be assigned. , D4.
  • the operator group is provided on the side surface of the body 1A of the imaging device 1 is shown, but it may be provided on another surface such as the upper surface of the imaging device 1 or provided on the VF16. May be.
  • the UI screen shown in FIG. 14 has an initial value of an operator set for each setting item.
  • the button B1 operator is used to set the block connection function on / off
  • the dial D1 operator is used to set the number of divisions
  • the dial D2 operator is used to set the block size
  • the block position is set.
  • the operator of the dial D3 is set as the initial value by setting the button B2 for setting the dial direction, the button B3 for setting the multi-size divided area on / off, and the button B4 for setting detail cancellation. .
  • FIG. 16 is a diagram showing an operation method when the operator assigned to the block size setting is changed from the dial D2 to the dial D3 on the UI screen shown in FIG.
  • the user selects a setting item whose operator is to be changed by operating, for example, the cursor key 20 provided on the operation input unit 18.
  • the cursor key 20 provided on the operation input unit 18.
  • the down key 20d of the cursor key 20 is pressed twice
  • the setting item to be changed by the operation element moves from on / off of the block connection function to the block size.
  • the right key 20r of the cursor key 20 is pressed once, the display of the operation element for the setting item of the block size is changed from the dial D2 to the dial D3.
  • the assignment of the operator to the block size setting item is changed from the dial D2 to the dial D3.
  • the display of the operation element for the setting item of the horizontal center partial pixel number is changed from the dial D2 to the dial D4.
  • the assignment of the operation element to the setting item of the horizontal block size is changed from the dial D2 to the dial D4.
  • the assignment of the operation elements to other setting items can be changed.
  • FIG. 17 is a diagram showing a switching order between a plurality of dials D1-D4.
  • the dial before the setting change is the dial D2
  • the selected dial is switched in the order of the dial D3, the dial D4, and the dial D1 each time the right key 20r of the cursor key 20 is pressed once.
  • the buttons B1-B5 can be switched by the same rule.
  • the user can change the appearance of the second video signal displayed on the VF 16 or an external display in real time by operating each operation element assigned to each setting item related to the block connection function at the time of shooting. it can. Thereby, the user can select a setting value that is optimal for focus adjustment by visual recognition.
  • control unit 17 detects the state of each operation element individually assigned to each setting item related to the block connection function in the operation input unit 18.
  • the control unit 17 generates each set value corresponding to the detected state and sets it in the VF signal processing unit 15.
  • the VF signal processing unit 15 generates a VF video signal based on each set value given by the control unit 17 and outputs it to the VF 16.
  • the technology according to the present disclosure can be applied to various products.
  • the technology according to the present disclosure may be applied to an endoscopic surgery system.
  • FIG. 20 is a diagram illustrating an example of a schematic configuration of an endoscopic surgery system 5000 to which the technology according to the present disclosure can be applied.
  • an endoscopic surgery system 5000 includes an endoscope 5001, other surgical tools 5017, a support arm device 5027 that supports the endoscope 5001, and various devices for endoscopic surgery. And a cart 5037 on which is mounted.
  • trocars 5025a to 5025d are punctured into the abdominal wall.
  • the lens barrel 5003 of the endoscope 5001 and other surgical tools 5017 are inserted into the body cavity of the patient 5071 from the trocars 5025a to 5025d.
  • an insufflation tube 5019, an energy treatment tool 5021, and forceps 5023 are inserted into the body cavity of the patient 5071.
  • the energy treatment device 5021 is a treatment device that performs tissue incision and separation, blood vessel sealing, or the like by high-frequency current or ultrasonic vibration.
  • the illustrated surgical tool 5017 is merely an example, and as the surgical tool 5017, for example, various surgical tools generally used in endoscopic surgery such as a lever and a retractor may be used.
  • the image of the surgical site in the body cavity of the patient 5071 captured by the endoscope 5001 is displayed on the display device 5041.
  • the surgeon 5067 performs a treatment such as excision of the affected part, for example, using the energy treatment tool 5021 and the forceps 5023 while viewing the image of the surgical part displayed on the display device 5041 in real time.
  • the pneumoperitoneum tube 5019, the energy treatment tool 5021, and the forceps 5023 are supported by an operator 5067 or an assistant during surgery.
  • the support arm device 5027 includes an arm portion 5031 extending from the base portion 5029.
  • the arm portion 5031 includes joint portions 5033a, 5033b, and 5033c and links 5035a and 5035b, and is driven by control from the arm control device 5045.
  • the endoscope 5001 is supported by the arm unit 5031, and the position and posture thereof are controlled. Thereby, the stable position fixing of the endoscope 5001 can be realized.
  • the endoscope 5001 includes a lens barrel 5003 in which a region having a predetermined length from the distal end is inserted into the body cavity of the patient 5071, and a camera head 5005 connected to the proximal end of the lens barrel 5003.
  • a lens barrel 5003 in which a region having a predetermined length from the distal end is inserted into the body cavity of the patient 5071, and a camera head 5005 connected to the proximal end of the lens barrel 5003.
  • an endoscope 5001 configured as a so-called rigid mirror having a rigid lens barrel 5003 is illustrated, but the endoscope 5001 is configured as a so-called flexible mirror having a flexible lens barrel 5003. Also good.
  • An opening into which an objective lens is fitted is provided at the tip of the lens barrel 5003.
  • a light source device 5043 is connected to the endoscope 5001, and light generated by the light source device 5043 is guided to the tip of the lens barrel by a light guide extending inside the lens barrel 5003. Irradiation is performed toward the observation target in the body cavity of the patient 5071 through the lens.
  • the endoscope 5001 may be a direct endoscope, a perspective mirror, or a side endoscope.
  • An optical system and an image sensor are provided inside the camera head 5005, and reflected light (observation light) from the observation target is condensed on the image sensor by the optical system. Observation light is photoelectrically converted by the imaging element, and an electrical signal corresponding to the observation light, that is, an image signal corresponding to the observation image is generated.
  • the image signal is transmitted to a camera control unit (CCU) 5039 as RAW data.
  • CCU camera control unit
  • the camera head 5005 is equipped with a function of adjusting the magnification and the focal length by appropriately driving the optical system.
  • a plurality of imaging elements may be provided in the camera head 5005 in order to cope with, for example, stereoscopic viewing (3D display).
  • a plurality of relay optical systems are provided inside the lens barrel 5003 in order to guide observation light to each of the plurality of imaging elements.
  • the CCU 5039 is configured by a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), and the like, and comprehensively controls operations of the endoscope 5001 and the display device 5041. Specifically, the CCU 5039 performs various types of image processing for displaying an image based on the image signal, such as development processing (demosaic processing), for example, on the image signal received from the camera head 5005. The CCU 5039 provides the display device 5041 with the image signal subjected to the image processing. Further, the CCU 5039 transmits a control signal to the camera head 5005 to control the driving thereof.
  • the control signal can include information regarding imaging conditions such as magnification and focal length.
  • the display device 5041 displays an image based on an image signal subjected to image processing by the CCU 5039 under the control of the CCU 5039.
  • the endoscope 5001 is compatible with high-resolution imaging such as 4K (horizontal pixel number 3840 ⁇ vertical pixel number 2160) or 8K (horizontal pixel number 7680 ⁇ vertical pixel number 4320), and / or 3D display
  • the display device 5041 may be a display device capable of high-resolution display and / or 3D display.
  • 4K or 8K high-resolution imaging a more immersive feeling can be obtained by using a display device 5041 having a size of 55 inches or more.
  • a plurality of display devices 5041 having different resolutions and sizes may be provided depending on applications.
  • the light source device 5043 is composed of a light source such as an LED (light emitting diode), for example, and supplies irradiation light to the endoscope 5001 when photographing a surgical site.
  • a light source such as an LED (light emitting diode)
  • the arm control device 5045 is configured by a processor such as a CPU, for example, and operates according to a predetermined program to control driving of the arm portion 5031 of the support arm device 5027 according to a predetermined control method.
  • the input device 5047 is an input interface for the endoscopic surgery system 5000.
  • the user can input various information and instructions to the endoscopic surgery system 5000 via the input device 5047.
  • the user inputs various types of information related to the operation, such as the patient's physical information and information about the surgical technique, via the input device 5047.
  • the user instructs the arm unit 5031 to be driven via the input device 5047 or the instruction to change the imaging conditions (type of irradiation light, magnification, focal length, etc.) by the endoscope 5001. Then, an instruction to drive the energy treatment instrument 5021 is input.
  • the input device 5047 is configured to be able to input various information without contact, so that a user belonging to a clean area (for example, an operator 5067) can operate a device belonging to an unclean area without contact. Is possible.
  • a user belonging to a clean area for example, an operator 5067
  • the user can operate the device without releasing his / her hand from the surgical tool he / she has, the convenience for the user is improved.
  • the treatment instrument control device 5049 controls the drive of the energy treatment instrument 5021 for tissue cauterization, incision, or blood vessel sealing.
  • the pneumoperitoneum device 5051 gas is introduced into the body cavity via the pneumoperitoneum tube 5019.
  • the recorder 5053 is an apparatus capable of recording various types of information related to surgery.
  • the printer 5055 is a device that can print various types of information related to surgery in various formats such as text, images, or graphs.
  • the support arm device 5027 includes a base portion 5029 as a base and an arm portion 5031 extending from the base portion 5029.
  • the arm portion 5031 includes a plurality of joint portions 5033a, 5033b, and 5033c and a plurality of links 5035a and 5035b connected by the joint portion 5033b.
  • FIG. The configuration of the arm portion 5031 is shown in a simplified manner.
  • the shape, number and arrangement of the joint portions 5033a to 5033c and the links 5035a and 5035b, the direction of the rotation axis of the joint portions 5033a to 5033c, and the like are appropriately set so that the arm portion 5031 has a desired degree of freedom.
  • the arm portion 5031 can be preferably configured to have 6 degrees of freedom or more. Accordingly, the endoscope 5001 can be freely moved within the movable range of the arm portion 5031. Therefore, the barrel 5003 of the endoscope 5001 can be inserted into the body cavity of the patient 5071 from a desired direction. It becomes possible.
  • the joint portions 5033a to 5033c are provided with actuators, and the joint portions 5033a to 5033c are configured to be rotatable around a predetermined rotation axis by driving the actuators.
  • the arm control device 5045 By controlling the driving of the actuator by the arm control device 5045, the rotation angles of the joint portions 5033a to 5033c are controlled, and the driving of the arm portion 5031 is controlled. Thereby, control of the position and orientation of the endoscope 5001 can be realized.
  • the arm control device 5045 can control the driving of the arm unit 5031 by various known control methods such as force control or position control.
  • an endoscope 5001 is supported by a doctor called a scopist.
  • the position of the endoscope 5001 can be more reliably fixed without relying on human hands, so that an image of the surgical site can be stably obtained. It becomes possible to perform the operation smoothly.
  • the arm control device 5045 is not necessarily provided in the cart 5037. Further, the arm control device 5045 is not necessarily a single device. For example, the arm control device 5045 may be provided in each joint portion 5033a to 5033c of the arm portion 5031 of the support arm device 5027, and the plurality of arm control devices 5045 cooperate with each other to drive the arm portion 5031. Control may be realized.
  • the light source device 5043 supplies irradiation light to the endoscope 5001 when photographing a surgical site.
  • the light source device 5043 is composed of a white light source composed of, for example, an LED, a laser light source, or a combination thereof.
  • a white light source is configured by a combination of RGB laser light sources, the output intensity and output timing of each color (each wavelength) can be controlled with high accuracy. Adjustments can be made.
  • each RGB light source is controlled by irradiating the observation target with laser light from each of the RGB laser light sources in a time-sharing manner and controlling the driving of the image sensor of the camera head 5005 in synchronization with the irradiation timing. It is also possible to take the images that have been taken in time division. According to this method, a color image can be obtained without providing a color filter in the image sensor.
  • the driving of the light source device 5043 may be controlled so as to change the intensity of the output light every predetermined time.
  • the driving of the image sensor of the camera head 5005 is controlled to acquire images in a time-sharing manner, and the images are synthesized, so that high dynamics without so-called blackout and overexposure are obtained. A range image can be generated.
  • the light source device 5043 may be configured to be able to supply light of a predetermined wavelength band corresponding to special light observation.
  • special light observation for example, by utilizing the wavelength dependence of light absorption in body tissue, the surface of the mucous membrane is irradiated by irradiating light in a narrow band compared to irradiation light (ie, white light) during normal observation.
  • narrow band imaging is performed in which a predetermined tissue such as a blood vessel is imaged with high contrast.
  • fluorescence observation may be performed in which an image is obtained by fluorescence generated by irradiating excitation light.
  • the body tissue is irradiated with excitation light to observe fluorescence from the body tissue (autofluorescence observation), or a reagent such as indocyanine green (ICG) is locally administered to the body tissue and applied to the body tissue.
  • a reagent such as indocyanine green (ICG) is locally administered to the body tissue and applied to the body tissue.
  • ICG indocyanine green
  • the light source device 5043 can be configured to be able to supply narrowband light and / or excitation light corresponding to such special light observation.
  • the camera head 5005 includes a lens unit 5007, an imaging unit 5009, a drive unit 5011, a communication unit 5013, and a camera head control unit 5015 as its functions.
  • the CCU 5039 includes a communication unit 5059, an image processing unit 5061, and a control unit 5063 as its functions.
  • the camera head 5005 and the CCU 5039 are connected to each other via a transmission cable 5065 so that they can communicate with each other.
  • the imaging unit 5009 is configured by an imaging element, and is disposed in the subsequent stage of the lens unit 5007.
  • the observation light that has passed through the lens unit 5007 is collected on the light receiving surface of the image sensor, and an image signal corresponding to the observation image is generated by photoelectric conversion.
  • the image signal generated by the imaging unit 5009 is provided to the communication unit 5013.
  • CMOS Complementary Metal Oxide Semiconductor
  • the imaging element for example, an element capable of capturing a high-resolution image of 4K or more may be used.
  • the image sensor that configures the image capturing unit 5009 is configured to include a pair of image sensors for acquiring right-eye and left-eye image signals corresponding to 3D display. By performing the 3D display, the operator 5067 can more accurately grasp the depth of the living tissue in the surgical site.
  • the imaging unit 5009 is configured as a multi-plate type, a plurality of lens units 5007 are also provided corresponding to each imaging element.
  • the driving unit 5011 includes an actuator, and moves the zoom lens and the focus lens of the lens unit 5007 by a predetermined distance along the optical axis under the control of the camera head control unit 5015. Thereby, the magnification and focus of the image captured by the imaging unit 5009 can be adjusted as appropriate.
  • the communication unit 5013 is configured by a communication device for transmitting and receiving various types of information to and from the CCU 5039.
  • the communication unit 5013 transmits the image signal obtained from the imaging unit 5009 as RAW data to the CCU 5039 via the transmission cable 5065.
  • the image signal is preferably transmitted by optical communication.
  • the surgeon 5067 performs the surgery while observing the state of the affected area with the captured image, so that a moving image of the surgical site is displayed in real time as much as possible for safer and more reliable surgery. Because it is required.
  • the communication unit 5013 is provided with a photoelectric conversion module that converts an electrical signal into an optical signal.
  • the image signal is converted into an optical signal by the photoelectric conversion module, and then transmitted to the CCU 5039 via the transmission cable 5065.
  • the communication unit 5013 receives a control signal for controlling driving of the camera head 5005 from the CCU 5039.
  • the control signal includes, for example, information for designating the frame rate of the captured image, information for designating the exposure value at the time of imaging, and / or information for designating the magnification and focus of the captured image. Contains information about the condition.
  • the communication unit 5013 provides the received control signal to the camera head control unit 5015.
  • the control signal from the CCU 5039 may also be transmitted by optical communication.
  • the communication unit 5013 is provided with a photoelectric conversion module that converts an optical signal into an electric signal.
  • the control signal is converted into an electric signal by the photoelectric conversion module, and then provided to the camera head control unit 5015.
  • the imaging conditions such as the frame rate, exposure value, magnification, and focus are automatically set by the control unit 5063 of the CCU 5039 based on the acquired image signal. That is, a so-called AE (Auto Exposure) function, AF (Auto Focus) function, and AWB (Auto White Balance) function are mounted on the endoscope 5001.
  • AE Auto Exposure
  • AF Automatic Focus
  • AWB Automatic White Balance
  • the camera head control unit 5015 controls driving of the camera head 5005 based on a control signal from the CCU 5039 received via the communication unit 5013. For example, the camera head control unit 5015 controls driving of the imaging element of the imaging unit 5009 based on information indicating that the frame rate of the captured image is specified and / or information indicating that the exposure at the time of imaging is specified. For example, the camera head control unit 5015 appropriately moves the zoom lens and the focus lens of the lens unit 5007 via the drive unit 5011 based on information indicating that the magnification and focus of the captured image are designated.
  • the camera head control unit 5015 may further have a function of storing information for identifying the lens barrel 5003 and the camera head 5005.
  • the camera head 5005 can be resistant to autoclave sterilization by arranging the lens unit 5007, the imaging unit 5009, and the like in a sealed structure with high airtightness and waterproofness.
  • the communication unit 5059 transmits a control signal for controlling the driving of the camera head 5005 to the camera head 5005.
  • the control signal may also be transmitted by optical communication.
  • the image processing unit 5061 performs various types of image processing on the image signal that is RAW data transmitted from the camera head 5005. Examples of the image processing include development processing, high image quality processing (band enhancement processing, super-resolution processing, NR (Noise reduction) processing and / or camera shake correction processing, etc.), and / or enlargement processing (electronic zoom processing). Various known signal processing is included.
  • the image processing unit 5061 performs detection processing on the image signal for performing AE, AF, and AWB.
  • the image processing unit 5061 is configured by a processor such as a CPU or a GPU, and the above-described image processing and detection processing can be performed by the processor operating according to a predetermined program.
  • the image processing unit 5061 is configured by a plurality of GPUs, the image processing unit 5061 appropriately divides information related to the image signal, and performs image processing in parallel by the plurality of GPUs.
  • the control unit 5063 performs various controls relating to imaging of the surgical site by the endoscope 5001 and display of the captured image. For example, the control unit 5063 generates a control signal for controlling driving of the camera head 5005. At this time, when the imaging condition is input by the user, the control unit 5063 generates a control signal based on the input by the user. Alternatively, when the endoscope 5001 is equipped with the AE function, the AF function, and the AWB function, the control unit 5063 determines the optimum exposure value, focal length, and the like according to the detection processing result by the image processing unit 5061. A white balance is appropriately calculated and a control signal is generated.
  • the transmission cable 5065 for connecting the camera head 5005 and the CCU 5039 is an electric signal cable corresponding to electric signal communication, an optical fiber corresponding to optical communication, or a composite cable thereof.
  • communication is performed by wire using the transmission cable 5065, but communication between the camera head 5005 and the CCU 5039 may be performed wirelessly.
  • communication between the two is performed wirelessly, there is no need to install the transmission cable 5065 in the operating room, so that the situation where the movement of the medical staff in the operating room is hindered by the transmission cable 5065 can be eliminated.
  • the endoscopic surgery system 5000 to which the technology according to the present disclosure can be applied has been described.
  • the endoscopic surgery system 5000 has been described as an example, but a system to which the technology according to the present disclosure can be applied is not limited to such an example.
  • the technology according to the present disclosure may be applied to a testing flexible endoscope system or a microscope operation system.
  • the second display device when a second display device having a screen resolution lower than that of the display device 5041 is added to the configuration described above, the second display device is obtained from an image captured by the camera head 5005 in the CCU 5039.
  • the present invention can be suitably applied in processing for generating an image to be displayed on the screen.
  • a video signal capable of visually recognizing the focus state at the position of each divided area is obtained on the screen of the second display device having a low screen resolution. Therefore, the surgeon 5067 can start an operation of focusing on an arbitrary divided area without requiring an operation of moving an image area to be displayed on the screen of the second display device, and quickly adjusts the focus. Therefore, it is possible to perform the operation more safely and reliably.
  • this technique can also take the following structures.
  • an imaging unit having an imaging element;
  • a first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging unit;
  • a plurality of divided areas for spatially dividing the first video signal generated by the first video signal processing unit are set, and each of the divided areas corresponds to the first video signal.
  • a second video signal that generates a second video signal having a second resolution lower than the first resolution by cutting out the first video signals in an area smaller than the size of the divided area as a block and connecting them together.
  • An image pickup apparatus comprising: a viewfinder that displays the second video signal.
  • the imaging apparatus is 3 ⁇ 3 pixels or more, and the size of the block is any one of 2 ⁇ 1 pixel and 1 ⁇ 2 pixels or more.
  • the imaging apparatus divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size.
  • An imaging device configured to.
  • the imaging device arranges one or more divided areas of the first size in a central part of a video space by the first video signal, and the plurality of divided areas of the second size are An imaging device configured to be arranged around one or more divided areas of a first size.
  • the imaging device according to any one of (1) to (4),
  • the second video signal processing unit is configured to set each of the blocks at a position over a plurality of divided areas.
  • the imaging apparatus is A down converter that generates a third video signal having the second resolution by down-conversion from the first video signal;
  • An imaging device further comprising: a switching unit that switches between the second video signal and the third video signal.
  • the second video signal processing unit further includes a detail processing unit that performs a process of enhancing a contour of the second video signal by skipping a joint between the blocks.
  • An imaging apparatus further comprising an output unit that outputs the second video signal generated by the second video signal processing unit to an external device.
  • the imaging apparatus according to any one of (1) to (8), An operation input unit having a plurality of operator groups including a first operator that receives setting information by the number of divided areas by the user;
  • the control unit is configured to detect a state of the first operation element at the time of shooting and reflect the setting information on an operation of the second video signal processing unit in real time.
  • the imaging apparatus further includes a second operator that receives setting information by a user of the block size,
  • the imaging unit is configured to detect a state of the second operation element during imaging and reflect the setting information in an operation of the second video signal processing unit in real time.
  • the imaging apparatus includes a third operator that receives setting information by a user of the position of the block,
  • the control unit is configured to detect a state of the third operation element during shooting and reflect the setting information in an operation of the second video signal processing unit in real time.
  • the imaging apparatus according to any one of (9) to (11), The operator group provides on / off setting information for dividing the first video signal into one or more divided areas having the first size and a plurality of divided areas having the second size.
  • the control unit is configured to detect a state of the fourth operation element at the time of shooting and reflect the setting information in an operation of the second video signal processing unit in real time.
  • An imaging apparatus further comprising: a user interface capable of setting assignment of the first operator, the second operator, the third operator, and the fourth operator in the operator group.
  • an imaging unit having an imaging element;
  • a first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging unit; Down-converting the first video signal at the outer edge to generate a down-converted video, setting a plurality of divided areas for spatially dividing the first video signal in the area inside the outer edge, For each of the divided areas, the first video signal in a region smaller than the size of the corresponding divided area is cut out from the first video signal as a block, and connected to each other to generate a block connected video, and the down
  • An image pickup apparatus comprising: a viewfinder that displays the second video signal.
  • the imaging apparatus according to (14),
  • the size of the division area is 3 ⁇ 3 pixels or more, and the size of the block is any one of 2 ⁇ 1 pixel and 1 ⁇ 2 pixels or more.
  • the imaging device according to (14) or (15), The second video signal processing unit divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size.
  • An imaging device configured to.
  • the imaging apparatus arranges one or more divided areas of the first size in a central part of a video space by the first video signal, and the plurality of divided areas of the second size are An imaging device configured to be arranged around one or more divided areas of a first size.
  • the imaging apparatus according to any one of (14) to (17),
  • the second video signal processing unit is configured to set each of the blocks at a position over a plurality of divided areas.
  • the imaging apparatus is A down converter that generates a third video signal having the second resolution by down-conversion from the first video signal;
  • An imaging device further comprising: a switching unit that switches between the second video signal and the third video signal.
  • the imaging apparatus according to any one of (14) to (18), The imaging apparatus according to claim 1, wherein the second video signal processing unit further includes a detail processing unit that performs a process of enhancing a contour of the second video signal by skipping a joint between the blocks.
  • An imaging apparatus further comprising an output unit that outputs the second video signal generated by the second video signal processing unit to an external device.
  • the imaging apparatus according to any one of (14) to (20), An operation input unit having a plurality of operator groups including a first operator that receives setting information by the number of divided areas by the user; The control unit is configured to detect a state of the first operation element at the time of shooting and reflect the setting information on an operation of the second video signal processing unit in real time.
  • the imaging device according to (22),
  • the operator group further includes a second operator that receives setting information by a user of the block size,
  • the imaging unit is configured to detect a state of the second operation element during imaging and reflect the setting information in an operation of the second video signal processing unit in real time.
  • the imaging device includes a third operator that receives setting information by a user of the position of the block,
  • the control unit is configured to detect a state of the third operation element during shooting and reflect the setting information in an operation of the second video signal processing unit in real time.
  • the imaging apparatus according to any one of (22) to (24),
  • the operator group provides on / off setting information for dividing the first video signal into one or more divided areas having the first size and a plurality of divided areas having the second size.
  • the control unit is configured to detect a state of the fourth operation element at the time of shooting and reflect the setting information in an operation of the second video signal processing unit in real time.
  • An imaging apparatus further comprising: a user interface capable of setting assignment of the first operator, the second operator, the third operator, and the fourth operator in the operator group.
  • a first video signal processing unit that generates a first video signal having a first resolution from a pixel signal obtained by the imaging device;
  • a plurality of divided areas for spatially dividing the first video signal generated by the first video signal processing unit are set, and each of the divided areas corresponds to the first video signal.
  • a second video signal that generates a second video signal having a second resolution lower than the first resolution by cutting out the first video signals in an area smaller than the size of the divided area as a block and connecting them together.
  • a video signal processing apparatus comprising: a processing unit.
  • the video signal processing apparatus according to (27),
  • the size of the divided area is 3 ⁇ 3 pixels or more, and the size of the block is any of 2 ⁇ 1 pixel and 1 ⁇ 2 pixels or more.
  • the video signal processing apparatus according to (27) or (28), The second video signal processing unit divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size.
  • a video signal processing device The second video signal processing unit divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size.
  • the video signal processing apparatus according to (29), wherein The second video signal processing unit arranges one or more divided areas of the first size in a central part of a video space by the first video signal, and the plurality of divided areas of the second size are A video signal processing device configured to be arranged around one or more divided areas of a first size.
  • the video signal processing apparatus according to any one of (27) to (30),
  • the second video signal processing unit is configured to set each of the blocks at a position across a plurality of divided areas.
  • the video signal processing device is A down converter that generates a third video signal having the second resolution by down-conversion from the first video signal;
  • a video signal processing apparatus further comprising: a switching unit that switches between the second video signal and the third video signal.
  • the video signal processing device according to any one of (27) to (32),
  • the second video signal processing unit further includes a detail processing unit that performs a process of enhancing a contour of the second video signal by skipping a joint between the blocks.
  • a first video signal processing unit generates a first video signal having a first resolution from a pixel signal obtained by the imaging device;
  • a second video signal processing unit sets a plurality of divided areas for spatially dividing the first video signal, and for each of the divided areas, the corresponding divided area from the first video signal is set.
  • the video signal processing method according to (34) or (35), divides the first video signal into one or more divided areas having a first size and a plurality of divided areas having a second size smaller than the first size. Signal processing method.
  • the video signal processing method according to (36), The second video signal processing unit arranges one or more divided areas of the first size in a central part of a video space by the first video signal, and the plurality of divided areas of the second size are A video signal processing method arranged around one or more divided areas of a first size.
  • the video signal processing method according to any one of (34) to (38),
  • the second video signal processor is Generating a third video signal having the second resolution by down-conversion from the first video signal; A video signal processing method for switching and outputting the second video signal and the third video signal.

Abstract

この撮像装置は、撮像素子を有する撮像部と、撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、第１の映像信号処理部により生成された第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の分割エリア毎に、第１の映像信号から対応する分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、第２の映像信号を表示するビューファインダーと、を具備する。

Description

撮像装置、映像信号処理装置および映像信号処理方法
　本技術は、ビデオカメラなどの撮像装置、撮像装置などに用いられる映像信号処理装置および映像信号処理方法に関する。
　ビデオカメラの撮像画素数が増大してきている。近年では、４Ｋ（３８４０×２１６０）の撮像画素数を有するカメラも多い。このようにビデオカメラの撮像画素数が増大すると、フォーカス調整に高い精度が要求される。そこで、撮像した映像の一部を拡大してビューファインダーに表示することによって、ユーザによるフォーカス調整の精度向上を図る技術がある（特許文献１参照）。
特開２００７－３３６２５７号公報
　しかしながら、ビューファインダーに表示された局所的な映像をユーザが見ながらのフォーカス調整は実用的に不十分な点があり、その解決が求められている。
　本技術の目的は、ビューファインダーの表示映像を視認しながらのフォーカス調整を良好に行うことのできる撮像装置、映像信号処理装置および映像信号処理方法に関する。
　上記の課題を解決するために、本技術に係る第１の形態である撮像装置は、
　撮像素子を有する撮像部と、
　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　前記第１の映像信号処理部により生成された前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
　前記第２の映像信号を表示するビューファインダーとを具備する。
　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである。
　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分するように構成されてもよい。
　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置するように構成されてもよい。
　前記第２の映像信号処理部は、前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定するように構成されてもよい。
　上記の撮像装置は、ユーザより与えられる切替指示に従って、前記各分割エリアの前記ブロックの位置をそれぞれ移動させるように前記第２の映像信号処理部を制御する制御ユニットをさらに具備するものであってよい。
　前記第２の映像信号処理部は、前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成するダウンコンバータと、前記第２の映像信号と前記第３の映像信号とを切り替える切替部とをさらに具備するものであってよい。
　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行うディテール処理部を有するものであってよい。
　本技術に係る第２の形態である撮像装置は、
　撮像素子を有する撮像部と、
　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　外縁部の前記第１の映像信号をダウンコンバートしてダウンコンバート映像を生成し、前記外縁部の内側の領域の前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによってブロック連結映像を生成し、前記ダウンコンバート映像と前記ブロック連結映像とを繋ぎ合せて前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
　前記第２の映像信号を表示するビューファインダーとを具備する。
　本技術に係る第３の形態である映像信号処理装置は、
　撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　前記第１の映像信号処理部により生成された前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と
　を具備する。
　本技術に係る映像信号処理方法は、
　第１の映像信号処理部が、撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成し、
　第２の映像信号処理部が、前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する。
　以上のように、本技術によれば、ビューファインダーの表示映像を視認しながらのフォーカス調整を良好に行うことができる。
[規則91に基づく訂正 18.05.2018]　
本技術に係る第１の実施形態の撮像装置の構成を示すブロック図である。 図１の撮像装置１におけるＶＦ信号処理部１５の機能的な構成を示すブロック図である。 ４Ｋの第１の映像信号からＶＦに表示させるＨＤの第２の映像信号を生成する典型的な方法を示す図である。 ４Ｋの第１の映像信号から切り出すＨＤ解像度分の領域の移動を示す図である。 ４Ｋの第１の解像信号に対する分割エリアの設定例を示す図である。 分割エリアのブロックの設定例を示す図である。 各ブロックを繋ぎ合せて生成される第２の映像信号の例を示す図である。 ＶＦ映像フォーマットの変形例を示す図である。 分割エリアのフォーマットの変形例を示す図である。 分割エリア毎のブロック位置の変形例を示す図である。 分割エリア毎のブロック位置の他の変形例を示す図である。 分割エリア内のブロックの移動制御を示す図である。 ディテール処理について説明する図である。 ブロック繋ぎ機能に関するユーザ設定のためのＵＩ画面を示す図である。 撮像装置１のブロック繋ぎ機能に関する操作子を示す側面図である。 図１４に示したＵＩ画面で操作子を変更する場合の操作方法を示す図である。 図１４に示したＵＩ画面における複数のダイヤル間の切替順を示す図である。 図１４に示したＵＩ画面における複数のボタン間の切替順を示す図である。 図１４に示したＵＩ画面において、操作子の重複設定が発生した場合の表示例を示す図である。 内視鏡手術システムの概略的な構成の一例を示す図である。 図２０に示すカメラヘッド及びＣＣＵの機能構成の一例を示すブロック図である。
　以下、本技術に係る実施形態を、図面を参照しながら説明する。
＜第１の実施形態＞
　図１は、本技術に係る第１の実施形態の撮像装置の構成を示すブロック図である。
　この撮像装置１は、光学ブロック１１と、撮像部１２と、本線映像信号処理部１３と、出力部１４と、ＶＦ信号処理部１５と、ＶＦ（ビューファインダー）１６と、制御ユニット１７と、操作入力部１８とを備える。
　光学ブロック１１は、レンズ、フォーカス調整機構、シャッター機構、絞り（アイリス）機構などを有している。光学ブロック１１は、被写体からの反射光をレンズによって撮像部１２の撮像素子の撮像面に結像する。
　撮像部１２は、撮像素子、アナログ信号処理回路、Ａ／Ｄ変換回路などを有する。撮像素子はＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサー、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサーなどで構成される。撮像素子は、例えば４Ｋ（３８４０×２１６０）、８Ｋ（７６８０×４３２０）など、比較的高い有効画素数を有する。撮像部１２の撮像素子で得られた画素信号は本線映像信号処理部１３に供給される。
　本線映像信号処理部１３は、特許請求の範囲の「第１の映像信号処理部」に相当するものであり、撮像部１２より供給された画素信号に対して、例えば、欠陥補正、ノイズ除去、レンズ収差補正、Ａ／Ｄ変換、ＲＡＷ現像などの信号処理を行うことによって、撮像素子の有効画素数に対応する第１の解像度の第１の映像信号を生成する。第１の映像信号は、例えば、４Ｋ映像信号、８Ｋ映像信号など、比較的高い解像度の映像信号である。なお、本明細書では、４Ｋ映像信号が生成される場合を想定して説明を続ける。生成された第１の映像信号は出力部１４およびＶＦ信号処理部１５に供給される。
　出力部１４は、本線映像信号処理部１３によって得られた第１の映像信号をカメラケーブルを通じてＣＣＵ（カメラ制御ユニット）などの外部の映像機器やディスプレイに出力したりする処理を行う。ＣＣＵでは、撮像装置１よりカメラケーブル３０を通じて伝送された第１の映像信号などを受信し、例えば、伝送に適した形式のデジタル映像信号、アナログ映像信号に変換して伝送する処理などが行われる。
　なお、本線映像信号処理部１３によって得られた第１の映像信号はＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などの記録媒体に記録されてもよい。
　ＶＦ信号処理部１５は、特許請求の範囲の「第２の映像信号処理部」に相当するものであり、本線映像信号処理部１３によって得られた第１の解像度の第１の映像信号から、ＶＦ１６の画面解像度である第２の解像度の第２の映像信号を生成する。
　ＶＦ１６は、第２の映像信号を表示可能な画面を有する。
　操作入力部１８は、ユーザから撮像装置１を操作するための命令や各種設定などの入力を受け付けるものであり、例えば、ボタン、スイッチ、ダイヤル、ＶＦ１６の画面に設けられたタッチパネルセンサーなどにより構成される。
　制御ユニット１７は、撮像装置１の各部を制御するためのコントローラであり、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）およびＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｂｅｒ）などで構成される。ＲＡＭあるいはＲＯＭには、ＣＰＵにより実行されるプログラムや各種パラメータなどが格納される。制御ユニット１７は、操作入力部１８において受け付けられたユーザの操作入力の情報を解釈し、解釈した入力情報に応じて撮像装置１を制御する。
　次に、上記のＶＦ信号処理部１５の詳細について説明する。
　図２は、ＶＦ信号処理部１５の機能的な構成を示すブロック図である。
　ＶＦ信号処理部１５は、ダウンコンバータ１５１、ブロック連結部１５２、切替部１５３、ディテール処理部１５４を有する。
　ダウンコンバータ１５１は、入力された第１の映像信号を、典型的な解像度変換によってＶＦ１６の画面解像度の第２の映像信号に変換する。より具体的には、ダウンコンバータ１５１は、４Ｋ解像度の第１の映像信号をダウンコンバートによってＨＤ解像度の第２の映像信号に変換する。４Ｋの解像度の第１の映像信号をＨＤ解像度の第２の映像信号にダウンコンバートする典型的な方法としては、例えば、第１の映像信号の縦横２×２画素の平均値を第２の映像信号の１画素の値に変換する方法などがある。
　ブロック連結部１５２は、入力された第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の分割エリア毎に、第１の映像信号から、対応する分割エリアのサイズ未満の領域の第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって第２の解像度の第２の映像信号を生成する。
　切替部１５３は、操作入力部１８を使ってユーザから与えられた選択命令に従って、ダウンコンバータ１５１の出力である第２の映像信号とブロック連結部１５２の出力である第２の映像信号の一方を選択してディテール処理部１５４に供給する。
　ディテール処理部１５４は、切替部１５３によって選択された第２の映像信号に対して被写体の輪郭を強調するディテール処理を行い、その結果をＶＦ１６に出力する。
　このＶＦ信号処理部１５では、操作入力部１８を使ってユーザから与えられた選択命令に従って、ＶＦ１６に供給する第２の映像信号を、ダウンコンバータ１５１によって得られる第２の映像信号と、ブロック連結部１５２によって得られる第２の映像信号とを切り替えることが可能である。
　なお、上記の撮像装置１の構成において、本線映像信号処理部１３とＶＦ信号処理部１５は、本技術に係る特許請求の範囲の「映像信号処理装置」に相当するものである。
　（ＶＦ映像信号の生成）
　４Ｋ解像度の第１の映像信号からＶＦ映像信号として用いられるＨＤ解像度の第２の映像信号を生成する典型的な方法には、例えば、図３に示すように、４Ｋ解像度の第１の映像信号３１からＨＤ解像度分の領域３２Ａの映像信号を切り出してＶＦ１６の画面に第２の映像信号３３として表示させる方法がある。なお、図３においては、４Ｋ解像度の第１の映像信号３１の映像とＨＤ解像度の第２の映像信号３３の映像とを同じ大きさで表記しているが、実際には、第２の映像信号３３の映像の大きさは、４Ｋ解像度の第１の映像信号３１の映像の大きさの縦横とも１／２である。
　しかしながら、カメラマン（ユーザ）がフレーム内でフォーカスを合わせようとする位置は一定ではないため、図４に示すように、４Ｋ解像度の第１の映像信号３１から切り出すＨＤ解像度分の領域を領域３２Ａの位置から領域３２Ｂの位置に移動させる必要があり、そのための煩雑なユーザ操作が必要になる。
　そこで、本実施形態では、ＶＦ信号処理部１５内のブロック連結部１５２が、入力された第１の解像度（例えば４Ｋ）の第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の分割エリア毎に、第１の映像信号から、対応する分割エリアのサイズ未満の領域の第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって第２の解像度（例えばＨＤ）の第２の映像信号を生成する。
　分割エリアのサイズは理論的には横３×縦３画素以上、ブロックのサイズは理論的には横２×縦１画素以上または横１×縦２画素以上である必要がある。これはフォーカスの状態を視認するためには、第１の映像信号において互いに隣接する２つの画素間のコントラストが指標となるからである。
　但し、分割エリア、ブロックのサイズをあまり小さくすると、フォーカス状態の視認が困難であるため、実用的には、例えば、分割エリアの数は横縦とも２個から２０個までが適切であろう。分割エリアの横縦の数は必ずしも同一とする必要はない。
　また、第１の解像度は４Ｋ、８Ｋ、それ以上の解像度であってもよい。
　第１の解像度が４Ｋである場合、第２の解像度はＨＤ、それ以下の解像度であってよい。
　第１の解像度が８Ｋである場合、第２の解像度は４Ｋ、ＨＤ、それ以下の解像度であってよい。
　（ブロック連結部１５２によるＶＦ信号生成の具体的説明）
　次に、ブロック連結部１５２の動作を具体的に説明する。
　なお、この具体例において、第１の映像信号の解像度は４Ｋ、第２の映像信号の解像度はＨＤ、分割エリアのサイズは横１２８０×縦７２０画素、ブロックのサイズは横６４０×縦３６０画素とする。
　まず、ブロック連結部１５２は、図５に示すように、４Ｋの第１の解像信号３１を空間的に区分する横３×縦３個の計９個の分割エリアＡ０－Ａ８を設定する。個々の分割エリアＡ０－Ａ８のサイズは横１２８０×縦７２０画素である。
　次に、ブロック連結部１５２は、図６に示すように、個々の分割エリアＡ０－Ａ８毎に、第１の映像信号３１から、横６４０×縦３６０画素のまとまりをブロックＢ０－Ｂ８として切り出す。本例では、各々の分割エリアＡ０－Ａ８から切り出されるブロックＢ０－Ｂ８の位置は、各々対応する分割エリアＡ０－Ａ８の中央部にあたる横６４０×横３６０画素の矩形領域である場合を想定する。
　なお、分割エリアＡ０－Ａ８から切り出されるブロックＢ０－Ｂ８の位置は中央部分以外であってもよい。また、それぞれの分割エリアＡ０－Ａ８から切り出されるブロックＢ０－Ｂ８のサイズと位置は、各分割エリアＡ０－Ａ８間で同一であってもよいし、同一でなくてもよい。
　次に、ブロック連結部１５２は、図７に示すように、各分割エリアＡ０－Ａ８からそれぞれ切り出された各ブロックＢ０－Ｂ８を、第１の映像信号３１における各分割エリアＡ０－Ａ８の縦横の位置関係に対応して繋ぎ合せることによって、ＨＤ解像度の第２の映像信号３４を生成する。そして、ＶＦ信号処理部１５は、生成した第２の映像信号３４をＶＦ１６にＶＦ映像信号として供給して、ＶＦ１６の画面に表示させる。
　このように本実施形態の撮像装置１によれば、ＶＦ信号処理部１５のブロック連結部１５２が、第１の解像度の第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の分割エリア毎に、第１の映像信号から、対応する分割エリアのサイズ未満の領域の第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって第２の解像度の第２の映像信号を生成し、ＶＦ１６の画面に表示させる。
　これにより、第１の映像信号の解像度よりも画面解像度が低いＶＦ１６の画面で、第１の映像信号の各分割エリアの位置でのフォーカス状態を視認することが可能なＶＦ映像信号が得られる。したがって、ユーザは、ＶＦ１６の画面に表示させる第１の映像信号の領域を移動させる操作を要することなく、任意の分割エリアに対してフォーカスを合わせる操作を開始でき、迅速にフォーカス調整を行うことができる。
　次に、本技術に係る変形例を説明する。
　＜変形例１＞
　（ＶＦ映像フォーマットの変形例）
　図８は、ＶＦ信号処理部１５により得られるＶＦ映像フォーマットの変形例を示す図である。
　この変形例では、ＶＦ信号処理部１５は、第１の解像度（例えば４Ｋ）の第１の映像信号３１を、外縁部の領域４１と内側領域４２とに分ける。ＶＦ信号処理部１５のダウンコンバータ１５１は、外縁部の領域４１の第１の映像信号３１をダウンコンバートすることによって、第２の映像信号３４の外縁部の領域４３のダウンコンバート映像を生成する。
　また、ＶＦ信号処理部１５は、ブロック連結部１５２にて、内側領域４２の第１の映像信号３１を空間的に区分する複数の分割エリアＡ０－Ａ２４を設定し、個々の分割エリアＡ０－Ａ２４毎に、内側領域４２の第１の映像信号３１から、対応する分割エリアＡ０－Ａ２４のサイズ未満の領域の第１の映像信号をブロックＢ０－Ｂ２４として切り出し、互いに繋ぎ合せることによって、第２の映像信号３４の内側領域４４のブロック連結映像を生成する。
　そしてＶＦ信号処理部１５は、ダウンコンバータ１５１によって得られた外縁部の領域４３のダウンコンバート映像とブロック連結部１５２によって得られた内側領域４４のブロック連結映像とを繋ぎ合せて、第２の解像度（例えばＨＤ）の第２の映像信号３４を生成し、ＶＦ１６に出力する。
　このように、外縁部の領域４１の第１の映像信号３１をダウンコンバートしたダウンコンバート映像を、第２の映像信号３４の外縁部の領域４３に配置することによって、第１の映像信号の各分割エリアのフォーカス状態を視認できるとともに、被写体の撮像範囲の視認をも容易なＶＦ映像が得られる。
　 ＜変形例２＞
　（２種類のサイズの分割エリア）
　第１の映像信号を空間的に区分する複数の分割エリアのサイズはすべて同じである必要はない。また、ブロックのサイズもすべて同じである必要はない。
　例えば、図９に示すように、第１の映像信号３１の中部部分の分割エリアＡ６のサイズをその周囲の複数の分割エリア（Ａ０－Ａ５、Ａ７－Ａ１２）のサイズよりも大きくするとともに、この中部部分の分割エリアＡ６から切り出されるブロックＢ６のサイズも周囲の各分割エリア（Ａ０－Ａ５、Ａ７－Ａ１２）から切り出されるブロック（Ｂ０－Ｂ５、Ｂ７－Ｂ１２）のサイズよりも大きくしてよい。
　図９の例は、中部部分の分割エリアＡ６のサイズを周囲の分割エリア（Ａ０－Ａ５、Ａ７－Ａ１２）のサイズの横縦２倍とし、かつ中部部分の分割エリアＡ６から切り出されるブロックのサイズを周囲の分割エリアから切り出されるブロックのサイズの横縦２倍とした例である。これにより、中央部分の分割エリアＡ６から切り出されたブロックＢ６の映像の注目度を高めた第２の映像信号を得ることができ、撮像装置１の視野の中央部分にフォーカスを合わせて撮像が行われる頻度が高い場合に好適なＶＦ映像信号が得られる。
　その他、フォーカスを合わせるように選定される頻度が高い領域の位置に合わせて、第１の映像信号の中央部分以外の領域にサイズの大きい分割エリア、ブロックを１以上設定してもよい。
　＜変形例３＞
　（分割エリアから切り出すブロックの位置）
　分割エリアから切り出すブロックの位置は、必ずしも分割エリアの中央部分である必要はない。例えば、図１０に示すように、分割エリア内の偏心位置にブロックを設定してもよい。図１０の例は、周辺部分の複数の分割エリア（Ａ０－Ａ５、Ａ７－Ａ１２）については、中央の分割エリアＡ６寄りの偏心位置にブロック（Ｂ０－Ｂ５、Ｂ７－Ｂ１２）が設定されたものである。もちろん、周辺部分の複数の分割エリア（Ａ０－Ａ５、Ａ７－Ａ１２）については、中央の分割エリアＡ６から離れる方向に偏心した位置にブロック（Ｂ０－Ｂ５、Ｂ７－Ｂ１２）が設定されてもよい。
　また、図１１に示すように、ブロックは、隣接する複数の分割ブロック間に跨るようにして設定されてもかまわない。図１１の例は、中央の分割エリアＡ６の上下左右に隣接する複数の分割エリア（Ａ１、Ａ２、Ａ４、Ａ５、Ａ７、Ａ８、Ａ１０、Ａ１１）に対応するブロック（Ｂ１、Ｂ２、Ｂ４、Ｂ５、Ｂ７、Ｂ８、Ｂ１０、Ｂ１１）の各々の一部分が、中央の分割エリアＡ６内に侵入して設定される場合を示している。
　＜変形例４＞
　（分割エリア内のブロック位置の移動）
　分割エリア内でブロックの位置は移動可能とされていてもよい。
　分割エリア内でブロックの位置を移動させるために、制御ユニット１７は、操作入力部１８を使ってユーザから与えられる切替指示に従って、分割エリア内のブロックの位置をリアルタイムに移動させるように制御する。
　図１２は、ブロック位置の移動制御の例を示す図である。
　この例において、各々の分割エリアＡ０－Ａ１５は、縦２×横２の計４つの領域に等分され、その中の１つの領域がブロックＢ０－Ｂ１５として有効となる。制御ユニット１７は、操作入力部１８を使ってユーザから与えられる切替指示に従って、各分割エリアＡ０－Ａ１５内のブロックＢ０－Ｂ１５を時計回り方向に次の領域に同時に移動させるように制御を行う。この例では、４回の切替指示が与えられることによって、ブロックＢ０－Ｂ１５は一周して元の位置に戻る。
　また、ユーザによる設定によって、ブロックの移動方向を時計回り方向と反時計回り方向との間で切り替えることができるようにしてもよい。
　＜変形例５＞
　（ディテール処理のキャンセル）
　上記の実施形態において、ＶＦ信号処理部１５内のディテール処理部１５４は、第２の映像信号に対して被写体の輪郭を強調するディテール処理を行うものである。このディテール処理は、映像の輝度変化部を輪郭と判定して行われるので、図１３に示すように、ブロックＢ００、Ｂ０１の繋ぎ目部分４５の多くを輪郭として強調してしまい、フォーカス状態を視認するうえでの障害となり得る。
　そこで、ＶＦ信号処理部１５は、制御ユニット１７から与えられたブロックの繋ぎ目の位置情報をもとに、ブロック間の繋ぎ目のディテール処理を無効にするように構成される。これによって、フォーカスの状態を視認するための映像において無益な輪郭強調部の発生を防止することができる。
　＜変形例６＞
　［ブロック繋ぎ機能に関するユーザ設定について］
　以上説明した撮像装置１では、上記のブロック繋ぎ機能に関して、ユーザによる次のような設定が可能である。
　１．ブロック繋ぎ機能のオン／オフ
　２．分割数
　３．ブロックサイズ
　４．ブロック位置
　５．ダイヤル方向
　６．マルチサイズ分割エリアのオン／オフ
　７．ディテールキャンセル
　ブロック繋ぎ機能のオン／オフは、上述したブロック繋ぎ機能のオン／オフを切り替える設定である。
　分割数は、第１の映像信号を空間的に区分する複数の分割エリアの数の設定である。分割数は、例えば、４から分割最大数までの間で選択可能である。例えば、分割数が９のとき、第１の映像信号は空間的に横３×縦３の９個の分割エリアに分割される。分割数が１２のとき、第１の映像信号は空間的に横４×縦３の１２個の分割エリアに分割される。分割数が１６のとき、第１の映像信号は空間的に横４×縦４の１６個の分割エリアに分割される。分割数が２５のとき、第１の映像信号は空間的に横５×縦５の２５個の分割エリアに分割される。その他、様々な数や横縦比の分割数の設定が可能であってよい。分割数の上限は２５個よりもさらに多くてもよい。
　ブロックサイズは、分割エリア内のブロックのサイズ（横と縦の各画素数）の設定である。あるいは、ブロックサイズは、分割エリアのサイズに対する割合の値で設定されても良い。
　ブロック位置は、分割エリア内のブロックの位置の設定である。例えば、図１２に示したように、分割エリアが縦２×横２の計４つの領域に等分され、その中のどの領域をブロックとして用いるかが設定される。
　ダイヤル方向は、分割数、ブロックサイズの設定に割り当てられた操作子（ダイヤル）の回転操作方向（時計回り方向、反時計回り方向）に対する分割数、ブロックサイズの増減の設定である。例えば、分割数の種類として"９"、"１６"、"２５"が存在し、ダイヤルの時計回り方向に"増"が設定されている場合、ダイヤルの時計回り方向の回転量（回転角度）の増大に伴い、分割数が９→１６→２５の順に切り替えられ、ダイヤルの反時計回り方向の回転量（回転角度）の増大に伴い、分割数が２５→１６→９の順に切り替えられる。ブロックサイズの設定に割り当てられたダイヤル方向についても同様である。
　マルチサイズ分割エリアのオン／オフは、例えば、図９に示したように、第１の映像信号の中部部分の分割エリアのサイズをその周囲の複数の分割エリアのサイズよりも大きくしたマルチサイズ分割エリアを利用するかどうかの設定である。
　ディテールキャンセルは、ディテール処理をキャンセルするかどうかの設定である。
　図１４は、上記ユーザ設定のためのＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面を示す図である。
　このＵＩに関して、例えば、撮像装置１のＶＦ１６や外部ディスプレイなどがＵＩ表示部として用いられ、撮像装置１に設けられた特定の操作ボタンなどが設定入力部として用いられる。
　ＵＩ画面では、設定項目毎に割り当てる操作子を複数の操作子群のなかからユーザが選択することが可能とされる。設定項目に対して割り当てが可能な操作子群は、撮像装置１の操作入力部１８に設けられた特定のボタン群およびダイヤル群などである。
　図１５は撮像装置１のブロック繋ぎ機能に関する操作子を示す側面図である。同図に示すように、撮像装置１は、ブロック繋ぎ機能に関する各設定項目の割り当てが可能な操作子群として、複数のボタンＢ１、Ｂ２、Ｂ３、Ｂ４、Ｂ５と複数のダイヤルＤ１、Ｄ２、Ｄ３、Ｄ４を備える。
　なお、この図では操作子群が撮像装置１のボディ１Ａの側面に設けられる場合を示したが、撮像装置１の上面など、他の面に設けられたものであってよいし、ＶＦ１６に設けられてもよい。
　次に、図１４に示したＵＩ画面で、ユーザが、撮像装置１の操作子群において、任意の設定項目に対して任意の操作子を割り当てる方法を説明する。
　なお、図１４に示したＵＩ画面には、設定項目毎に操作子の初期値が設定されている場合を想定している。例えば、ブロック繋ぎ機能のオン／オフの設定にはボタンＢ１の操作子が、分割数にはダイヤルＤ１の操作子が、ブロックサイズの設定にはダイヤルＤ２の操作子が、ブロック位置の設定にはダイヤルＤ３の操作子が、ダイヤル方向の設定にはボタンＢ２が、マルチサイズ分割エリアのオン／オフの設定にはボタンＢ３が、そしてディテールキャンセルの設定にはボタンＢ４が各々初期値として設定される。
　図１６は図１４に示したＵＩ画面で、ブロックサイズの設定に割り当てられた操作子をダイヤルＤ２からダイヤルＤ３に変更する場合の操作方法を示す図である。
　ＵＩ画面においてユーザは、操作子を変更したい設定項目を、例えば操作入力部１８に設けられたカーソルキー２０などを操作して選択する。例えば、カーソルキー２０の下キー２０ｄが２回押されると、操作子の変更対象となる設定項目は、ブロック繋ぎ機能のオン／オフからブロックサイズに移動する。次に、カーソルキー２０の右キー２０ｒが一回押されると、ブロックサイズの設定項目に対する操作子の表示がダイヤルＤ２からダイヤルＤ３に変更される。これにより、ブロックサイズの設定項目に対する操作子の割り当てがダイヤルＤ２からダイヤルＤ３に変更される。なお、カーソルキー２０の右キー２０ｒが二回押された場合には、横の中央部分画素数の設定項目に対する操作子の表示がダイヤルＤ２からダイヤルＤ４に変更される。これにより、横のブロックサイズの設定項目に対する操作子の割り当てがダイヤルＤ２からダイヤルＤ４に変更される。同様の要領により、他の設定項目に対する操作子の割り当ても変更することができる。
　図１７は、複数のダイヤルＤ１－Ｄ４間の切替順を示す図である。このように、設定変更前のダイヤルがダイヤルＤ２である場合、カーソルキー２０の右キー２０ｒが一回押されるたびに、選択されたダイヤルはダイヤルＤ３、ダイヤルＤ４、ダイヤルＤ１の順にスイッチされる。また、図１８に示すように、ボタンＢ１－Ｂ５についても同様のルールで切り替えられるようになっている。
　なお、横の中央部分画素数の設定項目に対する操作子の割り当てがダイヤルＤ２からダイヤルＤ３に変更された場合、ブロック位置の設定に対して割り当てられた操作子と重複する。このように複数の設定項目に対する操作子の重複が発生した場合、図１９に示すように、以前よりその操作子が割り当てられた側の操作項目（例えばブロック位置の設定項目）に対する操作子の設定変更を促すように、その操作項目が反転表示などによって判別可能な状態で表示される。これによりユーザは、操作子の重複設定を避けるように、操作子の割り当てを変更することができる。
　［設定変更に伴うＶＦ映像生成へのリアルタイム反映］
　ユーザは、撮影時に、ブロック繋ぎ機能に関する各設定項目に割り当てられた各々の操作子を操作することによって、ＶＦ１６や外部ディスプレイなどに表示させる第２の映像信号の見え方をリアルタイムに変化させることができる。これにより、視認によるフォーカス調整に最適な設定値をユーザが選定することができる。
　すなわち、制御ユニット１７は、操作入力部１８においてブロック繋ぎ機能に関する各設定項目に個別に割り当てられた各操作子の状態をそれぞれ検出する。制御ユニット１７は、検出した状態に対応する各設定値を生成し、ＶＦ信号処理部１５に設定する。ＶＦ信号処理部１５は、制御ユニット１７により与えられた各設定値をもとにＶＦ映像信号を生成し、ＶＦ１６に出力する。
　＜＜応用例＞＞
　本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
[規則91に基づく訂正 18.05.2018]　
　図２０は、本開示に係る技術が適用され得る内視鏡手術システム５０００の概略的な構成の一例を示す図である。図２０では、術者（医師）５０６７が、内視鏡手術システム５０００を用いて、患者ベッド５０６９上の患者５０７１に手術を行っている様子が図示されている。図示するように、内視鏡手術システム５０００は、内視鏡５００１と、その他の術具５０１７と、内視鏡５００１を支持する支持アーム装置５０２７と、内視鏡下手術のための各種の装置が搭載されたカート５０３７と、から構成される。
　内視鏡手術では、腹壁を切って開腹する代わりに、トロッカ５０２５ａ～５０２５ｄと呼ばれる筒状の開孔器具が腹壁に複数穿刺される。そして、トロッカ５０２５ａ～５０２５ｄから、内視鏡５００１の鏡筒５００３や、その他の術具５０１７が患者５０７１の体腔内に挿入される。図示する例では、その他の術具５０１７として、気腹チューブ５０１９、エネルギー処置具５０２１及び鉗子５０２３が、患者５０７１の体腔内に挿入されている。また、エネルギー処置具５０２１は、高周波電流や超音波振動により、組織の切開及び剥離、又は血管の封止等を行う処置具である。ただし、図示する術具５０１７はあくまで一例であり、術具５０１７としては、例えば攝子、レトラクタ等、一般的に内視鏡下手術において用いられる各種の術具が用いられてよい。
　内視鏡５００１によって撮影された患者５０７１の体腔内の術部の画像が、表示装置５０４１に表示される。術者５０６７は、表示装置５０４１に表示された術部の画像をリアルタイムで見ながら、エネルギー処置具５０２１や鉗子５０２３を用いて、例えば患部を切除する等の処置を行う。なお、図示は省略しているが、気腹チューブ５０１９、エネルギー処置具５０２１及び鉗子５０２３は、手術中に、術者５０６７又は助手等によって支持される。
　（支持アーム装置）
　支持アーム装置５０２７は、ベース部５０２９から延伸するアーム部５０３１を備える。図示する例では、アーム部５０３１は、関節部５０３３ａ、５０３３ｂ、５０３３ｃ、及びリンク５０３５ａ、５０３５ｂから構成されており、アーム制御装置５０４５からの制御により駆動される。アーム部５０３１によって内視鏡５００１が支持され、その位置及び姿勢が制御される。これにより、内視鏡５００１の安定的な位置の固定が実現され得る。
　（内視鏡）
　内視鏡５００１は、先端から所定の長さの領域が患者５０７１の体腔内に挿入される鏡筒５００３と、鏡筒５００３の基端に接続されるカメラヘッド５００５と、から構成される。図示する例では、硬性の鏡筒５００３を有するいわゆる硬性鏡として構成される内視鏡５００１を図示しているが、内視鏡５００１は、軟性の鏡筒５００３を有するいわゆる軟性鏡として構成されてもよい。
　鏡筒５００３の先端には、対物レンズが嵌め込まれた開口部が設けられている。内視鏡５００１には光源装置５０４３が接続されており、当該光源装置５０４３によって生成された光が、鏡筒５００３の内部に延設されるライトガイドによって当該鏡筒の先端まで導光され、対物レンズを介して患者５０７１の体腔内の観察対象に向かって照射される。なお、内視鏡５００１は、直視鏡であってもよいし、斜視鏡又は側視鏡であってもよい。
　カメラヘッド５００５の内部には光学系及び撮像素子が設けられており、観察対象からの反射光（観察光）は当該光学系によって当該撮像素子に集光される。当該撮像素子によって観察光が光電変換され、観察光に対応する電気信号、すなわち観察像に対応する画像信号が生成される。当該画像信号は、ＲＡＷデータとしてカメラコントロールユニット（ＣＣＵ：Camera　Control　Unit）５０３９に送信される。なお、カメラヘッド５００５には、その光学系を適宜駆動させることにより、倍率及び焦点距離を調整する機能が搭載される。
　なお、例えば立体視（３Ｄ表示）等に対応するために、カメラヘッド５００５には撮像素子が複数設けられてもよい。この場合、鏡筒５００３の内部には、当該複数の撮像素子のそれぞれに観察光を導光するために、リレー光学系が複数系統設けられる。
　（カートに搭載される各種の装置）
　ＣＣＵ５０３９は、ＣＰＵ（Central　Processing　Unit）やＧＰＵ（Graphics　Processing　Unit）等によって構成され、内視鏡５００１及び表示装置５０４１の動作を統括的に制御する。具体的には、ＣＣＵ５０３９は、カメラヘッド５００５から受け取った画像信号に対して、例えば現像処理（デモザイク処理）等の、当該画像信号に基づく画像を表示するための各種の画像処理を施す。ＣＣＵ５０３９は、当該画像処理を施した画像信号を表示装置５０４１に提供する。また、ＣＣＵ５０３９は、カメラヘッド５００５に対して制御信号を送信し、その駆動を制御する。当該制御信号には、倍率や焦点距離等、撮像条件に関する情報が含まれ得る。
　表示装置５０４１は、ＣＣＵ５０３９からの制御により、当該ＣＣＵ５０３９によって画像処理が施された画像信号に基づく画像を表示する。内視鏡５００１が例えば４Ｋ（水平画素数３８４０×垂直画素数２１６０）又は８Ｋ（水平画素数７６８０×垂直画素数４３２０）等の高解像度の撮影に対応したものである場合、及び／又は３Ｄ表示に対応したものである場合には、表示装置５０４１としては、それぞれに対応して、高解像度の表示が可能なもの、及び／又は３Ｄ表示可能なものが用いられ得る。４Ｋ又は８Ｋ等の高解像度の撮影に対応したものである場合、表示装置５０４１として５５インチ以上のサイズのものを用いることで一層の没入感が得られる。また、用途に応じて、解像度、サイズが異なる複数の表示装置５０４１が設けられてもよい。
　光源装置５０４３は、例えばＬＥＤ（light　emitting　diode）等の光源から構成され、術部を撮影する際の照射光を内視鏡５００１に供給する。
　アーム制御装置５０４５は、例えばＣＰＵ等のプロセッサによって構成され、所定のプログラムに従って動作することにより、所定の制御方式に従って支持アーム装置５０２７のアーム部５０３１の駆動を制御する。
　入力装置５０４７は、内視鏡手術システム５０００に対する入力インタフェースである。ユーザは、入力装置５０４７を介して、内視鏡手術システム５０００に対して各種の情報の入力や指示入力を行うことができる。例えば、ユーザは、入力装置５０４７を介して、患者の身体情報や、手術の術式についての情報等、手術に関する各種の情報を入力する。また、例えば、ユーザは、入力装置５０４７を介して、アーム部５０３１を駆動させる旨の指示や、内視鏡５００１による撮像条件（照射光の種類、倍率及び焦点距離等）を変更する旨の指示、エネルギー処置具５０２１を駆動させる旨の指示等を入力する。
　入力装置５０４７の種類は限定されず、入力装置５０４７は各種の公知の入力装置であってよい。入力装置５０４７としては、例えば、マウス、キーボード、タッチパネル、スイッチ、フットスイッチ５０５７及び／又はレバー等が適用され得る。入力装置５０４７としてタッチパネルが用いられる場合には、当該タッチパネルは表示装置５０４１の表示面上に設けられてもよい。
　あるいは、入力装置５０４７は、例えばメガネ型のウェアラブルデバイスやＨＭＤ（Head　Mounted　Display）等の、ユーザによって装着されるデバイスであり、これらのデバイスによって検出されるユーザのジェスチャや視線に応じて各種の入力が行われる。また、入力装置５０４７は、ユーザの動きを検出可能なカメラを含み、当該カメラによって撮像された映像から検出されるユーザのジェスチャや視線に応じて各種の入力が行われる。更に、入力装置５０４７は、ユーザの声を収音可能なマイクロフォンを含み、当該マイクロフォンを介して音声によって各種の入力が行われる。このように、入力装置５０４７が非接触で各種の情報を入力可能に構成されることにより、特に清潔域に属するユーザ（例えば術者５０６７）が、不潔域に属する機器を非接触で操作することが可能となる。また、ユーザは、所持している術具から手を離すことなく機器を操作することが可能となるため、ユーザの利便性が向上する。
　処置具制御装置５０４９は、組織の焼灼、切開又は血管の封止等のためのエネルギー処置具５０２１の駆動を制御する。気腹装置５０５１は、内視鏡５００１による視野の確保及び術者の作業空間の確保の目的で、患者５０７１の体腔を膨らめるために、気腹チューブ５０１９を介して当該体腔内にガスを送り込む。レコーダ５０５３は、手術に関する各種の情報を記録可能な装置である。プリンタ５０５５は、手術に関する各種の情報を、テキスト、画像又はグラフ等各種の形式で印刷可能な装置である。
　以下、内視鏡手術システム５０００において特に特徴的な構成について、更に詳細に説明する。
[規則91に基づく訂正 18.05.2018]　
　（支持アーム装置）
　支持アーム装置５０２７は、基台であるベース部５０２９と、ベース部５０２９から延伸するアーム部５０３１と、を備える。図示する例では、アーム部５０３１は、複数の関節部５０３３ａ、５０３３ｂ、５０３３ｃと、関節部５０３３ｂによって連結される複数のリンク５０３５ａ、５０３５ｂと、から構成されているが、図２０では、簡単のため、アーム部５０３１の構成を簡略化して図示している。実際には、アーム部５０３１が所望の自由度を有するように、関節部５０３３ａ～５０３３ｃ及びリンク５０３５ａ、５０３５ｂの形状、数及び配置、並びに関節部５０３３ａ～５０３３ｃの回転軸の方向等が適宜設定され得る。例えば、アーム部５０３１は、好適に、６自由度以上の自由度を有するように構成され得る。これにより、アーム部５０３１の可動範囲内において内視鏡５００１を自由に移動させることが可能になるため、所望の方向から内視鏡５００１の鏡筒５００３を患者５０７１の体腔内に挿入することが可能になる。
　関節部５０３３ａ～５０３３ｃにはアクチュエータが設けられており、関節部５０３３ａ～５０３３ｃは当該アクチュエータの駆動により所定の回転軸まわりに回転可能に構成されている。当該アクチュエータの駆動がアーム制御装置５０４５によって制御されることにより、各関節部５０３３ａ～５０３３ｃの回転角度が制御され、アーム部５０３１の駆動が制御される。これにより、内視鏡５００１の位置及び姿勢の制御が実現され得る。この際、アーム制御装置５０４５は、力制御又は位置制御等、各種の公知の制御方式によってアーム部５０３１の駆動を制御することができる。
　例えば、術者５０６７が、入力装置５０４７（フットスイッチ５０５７を含む）を介して適宜操作入力を行うことにより、当該操作入力に応じてアーム制御装置５０４５によってアーム部５０３１の駆動が適宜制御され、内視鏡５００１の位置及び姿勢が制御されてよい。当該制御により、アーム部５０３１の先端の内視鏡５００１を任意の位置から任意の位置まで移動させた後、その移動後の位置で固定的に支持することができる。なお、アーム部５０３１は、いわゆるマスタースレイブ方式で操作されてもよい。この場合、アーム部５０３１は、手術室から離れた場所に設置される入力装置５０４７を介してユーザによって遠隔操作され得る。
　また、力制御が適用される場合には、アーム制御装置５０４５は、ユーザからの外力を受け、その外力にならってスムーズにアーム部５０３１が移動するように、各関節部５０３３ａ～５０３３ｃのアクチュエータを駆動させる、いわゆるパワーアシスト制御を行ってもよい。これにより、ユーザが直接アーム部５０３１に触れながらアーム部５０３１を移動させる際に、比較的軽い力で当該アーム部５０３１を移動させることができる。従って、より直感的に、より簡易な操作で内視鏡５００１を移動させることが可能となり、ユーザの利便性を向上させることができる。
　ここで、一般的に、内視鏡下手術では、スコピストと呼ばれる医師によって内視鏡５００１が支持されていた。これに対して、支持アーム装置５０２７を用いることにより、人手によらずに内視鏡５００１の位置をより確実に固定することが可能になるため、術部の画像を安定的に得ることができ、手術を円滑に行うことが可能になる。
　なお、アーム制御装置５０４５は必ずしもカート５０３７に設けられなくてもよい。また、アーム制御装置５０４５は必ずしも１つの装置でなくてもよい。例えば、アーム制御装置５０４５は、支持アーム装置５０２７のアーム部５０３１の各関節部５０３３ａ～５０３３ｃにそれぞれ設けられてもよく、複数のアーム制御装置５０４５が互いに協働することにより、アーム部５０３１の駆動制御が実現されてもよい。
　（光源装置）
　光源装置５０４３は、内視鏡５００１に術部を撮影する際の照射光を供給する。光源装置５０４３は、例えばＬＥＤ、レーザ光源又はこれらの組み合わせによって構成される白色光源から構成される。このとき、ＲＧＢレーザ光源の組み合わせにより白色光源が構成される場合には、各色（各波長）の出力強度及び出力タイミングを高精度に制御することができるため、光源装置５０４３において撮像画像のホワイトバランスの調整を行うことができる。また、この場合には、ＲＧＢレーザ光源それぞれからのレーザ光を時分割で観察対象に照射し、その照射タイミングに同期してカメラヘッド５００５の撮像素子の駆動を制御することにより、ＲＧＢそれぞれに対応した画像を時分割で撮像することも可能である。当該方法によれば、当該撮像素子にカラーフィルタを設けなくても、カラー画像を得ることができる。
　また、光源装置５０４３は、出力する光の強度を所定の時間ごとに変更するようにその駆動が制御されてもよい。その光の強度の変更のタイミングに同期してカメラヘッド５００５の撮像素子の駆動を制御して時分割で画像を取得し、その画像を合成することにより、いわゆる黒つぶれ及び白とびのない高ダイナミックレンジの画像を生成することができる。
　また、光源装置５０４３は、特殊光観察に対応した所定の波長帯域の光を供給可能に構成されてもよい。特殊光観察では、例えば、体組織における光の吸収の波長依存性を利用して、通常の観察時における照射光（すなわち、白色光）に比べて狭帯域の光を照射することにより、粘膜表層の血管等の所定の組織を高コントラストで撮影する、いわゆる狭帯域光観察（Narrow　Band　Imaging）が行われる。あるいは、特殊光観察では、励起光を照射することにより発生する蛍光により画像を得る蛍光観察が行われてもよい。蛍光観察では、体組織に励起光を照射し当該体組織からの蛍光を観察するもの（自家蛍光観察）、又はインドシアニングリーン（ICG）等の試薬を体組織に局注するとともに当該体組織にその試薬の蛍光波長に対応した励起光を照射し蛍光像を得るもの等が行われ得る。光源装置５０４３は、このような特殊光観察に対応した狭帯域光及び／又は励起光を供給可能に構成され得る。
[規則91に基づく訂正 18.05.2018]　
　（カメラヘッド及びＣＣＵ）
　図２１を参照して、内視鏡５００１のカメラヘッド５００５及びＣＣＵ５０３９の機能についてより詳細に説明する。図２１は、図２０に示すカメラヘッド５００５及びＣＣＵ５０３９の機能構成の一例を示すブロック図である。
[規則91に基づく訂正 18.05.2018]　
　図２１を参照すると、カメラヘッド５００５は、その機能として、レンズユニット５００７と、撮像部５００９と、駆動部５０１１と、通信部５０１３と、カメラヘッド制御部５０１５と、を有する。また、ＣＣＵ５０３９は、その機能として、通信部５０５９と、画像処理部５０６１と、制御部５０６３と、を有する。カメラヘッド５００５とＣＣＵ５０３９とは、伝送ケーブル５０６５によって双方向に通信可能に接続されている。
　まず、カメラヘッド５００５の機能構成について説明する。レンズユニット５００７は、鏡筒５００３との接続部に設けられる光学系である。鏡筒５００３の先端から取り込まれた観察光は、カメラヘッド５００５まで導光され、当該レンズユニット５００７に入射する。レンズユニット５００７は、ズームレンズ及びフォーカスレンズを含む複数のレンズが組み合わされて構成される。レンズユニット５００７は、撮像部５００９の撮像素子の受光面上に観察光を集光するように、その光学特性が調整されている。また、ズームレンズ及びフォーカスレンズは、撮像画像の倍率及び焦点の調整のため、その光軸上の位置が移動可能に構成される。
　撮像部５００９は撮像素子によって構成され、レンズユニット５００７の後段に配置される。レンズユニット５００７を通過した観察光は、当該撮像素子の受光面に集光され、光電変換によって、観察像に対応した画像信号が生成される。撮像部５００９によって生成された画像信号は、通信部５０１３に提供される。
　撮像部５００９を構成する撮像素子としては、例えばＣＭＯＳ（Complementary　Metal　Oxide　Semiconductor）タイプのイメージセンサであり、Ｂａｙｅｒ配列を有するカラー撮影可能なものが用いられる。なお、当該撮像素子としては、例えば４Ｋ以上の高解像度の画像の撮影に対応可能なものが用いられてもよい。術部の画像が高解像度で得られることにより、術者５０６７は、当該術部の様子をより詳細に把握することができ、手術をより円滑に進行することが可能となる。
　また、撮像部５００９を構成する撮像素子は、３Ｄ表示に対応する右目用及び左目用の画像信号をそれぞれ取得するための１対の撮像素子を有するように構成される。３Ｄ表示が行われることにより、術者５０６７は術部における生体組織の奥行きをより正確に把握することが可能になる。なお、撮像部５００９が多板式で構成される場合には、各撮像素子に対応して、レンズユニット５００７も複数系統設けられる。
　また、撮像部５００９は、必ずしもカメラヘッド５００５に設けられなくてもよい。例えば、撮像部５００９は、鏡筒５００３の内部に、対物レンズの直後に設けられてもよい。
　駆動部５０１１は、アクチュエータによって構成され、カメラヘッド制御部５０１５からの制御により、レンズユニット５００７のズームレンズ及びフォーカスレンズを光軸に沿って所定の距離だけ移動させる。これにより、撮像部５００９による撮像画像の倍率及び焦点が適宜調整され得る。
　通信部５０１３は、ＣＣＵ５０３９との間で各種の情報を送受信するための通信装置によって構成される。通信部５０１３は、撮像部５００９から得た画像信号をＲＡＷデータとして伝送ケーブル５０６５を介してＣＣＵ５０３９に送信する。この際、術部の撮像画像を低レイテンシで表示するために、当該画像信号は光通信によって送信されることが好ましい。手術の際には、術者５０６７が撮像画像によって患部の状態を観察しながら手術を行うため、より安全で確実な手術のためには、術部の動画像が可能な限りリアルタイムに表示されることが求められるからである。光通信が行われる場合には、通信部５０１３には、電気信号を光信号に変換する光電変換モジュールが設けられる。画像信号は当該光電変換モジュールによって光信号に変換された後、伝送ケーブル５０６５を介してＣＣＵ５０３９に送信される。
　また、通信部５０１３は、ＣＣＵ５０３９から、カメラヘッド５００５の駆動を制御するための制御信号を受信する。当該制御信号には、例えば、撮像画像のフレームレートを指定する旨の情報、撮像時の露出値を指定する旨の情報、並びに／又は撮像画像の倍率及び焦点を指定する旨の情報等、撮像条件に関する情報が含まれる。通信部５０１３は、受信した制御信号をカメラヘッド制御部５０１５に提供する。なお、ＣＣＵ５０３９からの制御信号も、光通信によって伝送されてもよい。この場合、通信部５０１３には、光信号を電気信号に変換する光電変換モジュールが設けられ、制御信号は当該光電変換モジュールによって電気信号に変換された後、カメラヘッド制御部５０１５に提供される。
　なお、上記のフレームレートや露出値、倍率、焦点等の撮像条件は、取得された画像信号に基づいてＣＣＵ５０３９の制御部５０６３によって自動的に設定される。つまり、いわゆるＡＥ（Auto　Exposure）機能、ＡＦ（Auto　Focus）機能及びＡＷＢ（Auto　White　Balance）機能が内視鏡５００１に搭載される。
　カメラヘッド制御部５０１５は、通信部５０１３を介して受信したＣＣＵ５０３９からの制御信号に基づいて、カメラヘッド５００５の駆動を制御する。例えば、カメラヘッド制御部５０１５は、撮像画像のフレームレートを指定する旨の情報及び／又は撮像時の露光を指定する旨の情報に基づいて、撮像部５００９の撮像素子の駆動を制御する。また、例えば、カメラヘッド制御部５０１５は、撮像画像の倍率及び焦点を指定する旨の情報に基づいて、駆動部５０１１を介してレンズユニット５００７のズームレンズ及びフォーカスレンズを適宜移動させる。カメラヘッド制御部５０１５は、更に、鏡筒５００３やカメラヘッド５００５を識別するための情報を記憶する機能を備えてもよい。
　なお、レンズユニット５００７や撮像部５００９等の構成を、気密性及び防水性が高い密閉構造内に配置することで、カメラヘッド５００５について、オートクレーブ滅菌処理に対する耐性を持たせることができる。
　次に、ＣＣＵ５０３９の機能構成について説明する。通信部５０５９は、カメラヘッド５００５との間で各種の情報を送受信するための通信装置によって構成される。通信部５０５９は、カメラヘッド５００５から、伝送ケーブル５０６５を介して送信される画像信号を受信する。この際、上記のように、当該画像信号は好適に光通信によって送信され得る。この場合、光通信に対応して、通信部５０５９には、光信号を電気信号に変換する光電変換モジュールが設けられる。通信部５０５９は、電気信号に変換した画像信号を画像処理部５０６１に提供する。
　また、通信部５０５９は、カメラヘッド５００５に対して、カメラヘッド５００５の駆動を制御するための制御信号を送信する。当該制御信号も光通信によって送信されてよい。
　画像処理部５０６１は、カメラヘッド５００５から送信されたＲＡＷデータである画像信号に対して各種の画像処理を施す。当該画像処理としては、例えば現像処理、高画質化処理（帯域強調処理、超解像処理、ＮＲ（Noise　reduction）処理及び／又は手ブレ補正処理等）、並びに／又は拡大処理（電子ズーム処理）等、各種の公知の信号処理が含まれる。また、画像処理部５０６１は、ＡＥ、ＡＦ及びＡＷＢを行うための、画像信号に対する検波処理を行う。
　画像処理部５０６１は、ＣＰＵやＧＰＵ等のプロセッサによって構成され、当該プロセッサが所定のプログラムに従って動作することにより、上述した画像処理や検波処理が行われ得る。なお、画像処理部５０６１が複数のＧＰＵによって構成される場合には、画像処理部５０６１は、画像信号に係る情報を適宜分割し、これら複数のＧＰＵによって並列的に画像処理を行う。
　制御部５０６３は、内視鏡５００１による術部の撮像、及びその撮像画像の表示に関する各種の制御を行う。例えば、制御部５０６３は、カメラヘッド５００５の駆動を制御するための制御信号を生成する。この際、撮像条件がユーザによって入力されている場合には、制御部５０６３は、当該ユーザによる入力に基づいて制御信号を生成する。あるいは、内視鏡５００１にＡＥ機能、ＡＦ機能及びＡＷＢ機能が搭載されている場合には、制御部５０６３は、画像処理部５０６１による検波処理の結果に応じて、最適な露出値、焦点距離及びホワイトバランスを適宜算出し、制御信号を生成する。
　また、制御部５０６３は、画像処理部５０６１によって画像処理が施された画像信号に基づいて、術部の画像を表示装置５０４１に表示させる。この際、制御部５０６３は、各種の画像認識技術を用いて術部画像内における各種の物体を認識する。例えば、制御部５０６３は、術部画像に含まれる物体のエッジの形状や色等を検出することにより、鉗子等の術具、特定の生体部位、出血、エネルギー処置具５０２１使用時のミスト等を認識することができる。制御部５０６３は、表示装置５０４１に術部の画像を表示させる際に、その認識結果を用いて、各種の手術支援情報を当該術部の画像に重畳表示させる。手術支援情報が重畳表示され、術者５０６７に提示されることにより、より安全かつ確実に手術を進めることが可能になる。
　カメラヘッド５００５及びＣＣＵ５０３９を接続する伝送ケーブル５０６５は、電気信号の通信に対応した電気信号ケーブル、光通信に対応した光ファイバ、又はこれらの複合ケーブルである。
　ここで、図示する例では、伝送ケーブル５０６５を用いて有線で通信が行われていたが、カメラヘッド５００５とＣＣＵ５０３９との間の通信は無線で行われてもよい。両者の間の通信が無線で行われる場合には、伝送ケーブル５０６５を手術室内に敷設する必要がなくなるため、手術室内における医療スタッフの移動が当該伝送ケーブル５０６５によって妨げられる事態が解消され得る。
　以上、本開示に係る技術が適用され得る内視鏡手術システム５０００の一例について説明した。なお、ここでは、一例として内視鏡手術システム５０００について説明したが、本開示に係る技術が適用され得るシステムはかかる例に限定されない。例えば、本開示に係る技術は、検査用軟性内視鏡システムや顕微鏡手術システムに適用されてもよい。
　本開示に係る技術は、以上説明した構成に表示装置５０４１よりも画面解像度の低い第２の表示装置を追加した場合に、ＣＣＵ５０３９にて、カメラヘッド５００５により撮像された画像から第２の表示装置に表示させる画像を生成する処理において好適に適用され得る。これにより、画面解像度が低い第２の表示装置の画面で、各分割エリアの位置でのフォーカス状態を視認することが可能な映像信号が得られる。したがって、術者５０６７は、第２の表示装置の画面に表示させる画像の領域を移動させる操作を要することなく、任意の分割エリアに対してフォーカスを合わせる操作を開始でき、迅速にフォーカス調整を行うことができるので、手術をより安全にかつより確実に行うことが可能になる。
　なお、本技術は以下のような構成もとることができる。
（１）撮像素子を有する撮像部と、
　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　前記第１の映像信号処理部により生成された前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
　前記第２の映像信号を表示するビューファインダーと
　を具備する撮像装置。
（２）前記（１）に記載の撮像装置であって、
　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである
　撮像装置。
（３）前記（１）または（２）に記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分するように構成される
　撮像装置。
（４）前記（３）に記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置するように構成される
　撮像装置。
（５）前記（１）ないし（４）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定するように構成される
　撮像装置。
（６）前記（１）ないし（５）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、
　前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成するダウンコンバータと、
　前記第２の映像信号と前記第３の映像信号とを切り替える切替部と
　をさらに具備する
　撮像装置。
（７）前記（１）ないし（６）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行うディテール処理部をさらに有する
　撮像装置。
（８）前記（１）ないし（７）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部により生成された前記第２の映像信号を外部機器に出力する出力部を
　さらに具備する撮像装置。
（９）前記（１）ないし（８）のいずれかに記載の撮像装置であって、
　前記分割エリアの数のユーザによる設定情報を受け付ける第１の操作子を含む複数の操作子群を有する操作入力部と、
　前記制御部は、撮影時、前記第１の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（１０）前記（９）に記載の撮像装置であって、
　前記操作子群は、前記ブロックのサイズのユーザによる設定情報を受け付ける第２の操作子をさらに含み、
　前記制御部は、撮影時、前記第２の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（１１）前記（９）または（１０）に記載の撮像装置であって、
　前記操作子群は、前記ブロックの位置のユーザによる設定情報を受け付ける第３の操作子を含み、
　前記制御部は、撮影時、前記第３の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（１２）前記（９）ないし（１１）のいずれかに記載の撮像装置であって、
　前記操作子群は、前記第１の映像信号を前記第１のサイズの１以上の分割エリアと前記第２のサイズの複数の分割エリアとに区分することのオン／オフの設定情報をユーザより受け付ける第４の操作子を含み、
　前記制御部は、撮影時、前記第４の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（１３）前記（１２）に記載の撮像装置であって、
　前記操作子群における前記第１の操作子、前記第２の操作子、前記第３の操作子および前記第４の操作子の割り当てを設定可能なユーザインタフェースをさらに具備する
　撮像装置。
（１４）撮像素子を有する撮像部と、
　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　外縁部の前記第１の映像信号をダウンコンバートしてダウンコンバート映像を生成し、前記外縁部の内側の領域の前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによってブロック連結映像を生成し、前記ダウンコンバート映像と前記ブロック連結映像とを繋ぎ合せて前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
　前記第２の映像信号を表示するビューファインダーと
　を具備する撮像装置。
（１５）前記（１４）に記載の撮像装置であって、
　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである
　撮像装置。
（１６）前記（１４）または（１５）に記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分するように構成される
　撮像装置。
（１７）前記（１６）に記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置するように構成される
　撮像装置。
（１８）前記（１４）ないし（１７）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定するように構成される
　撮像装置。
（１９）前記（１４）ないし（１８）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、
　前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成するダウンコンバータと、
　前記第２の映像信号と前記第３の映像信号とを切り替える切替部と
　をさらに具備する
　撮像装置。
（２０）前記（１４）ないし（１８）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行うディテール処理部をさらに有する
　撮像装置。
（２１）前記（１４）ないし（２０）のいずれかに記載の撮像装置であって、
　前記第２の映像信号処理部により生成された前記第２の映像信号を外部機器に出力する出力部を
　さらに具備する撮像装置。
（２２）前記（１４）ないし（２０）のいずれかに記載の撮像装置であって、
　前記分割エリアの数のユーザによる設定情報を受け付ける第１の操作子を含む複数の操作子群を有する操作入力部と、
　前記制御部は、撮影時、前記第１の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（２３）前記（２２）に記載の撮像装置であって、
　前記操作子群は、前記ブロックのサイズのユーザによる設定情報を受け付ける第２の操作子をさらに含み、
　前記制御部は、撮影時、前記第２の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（２４）前記（２２）または（２３）に記載の撮像装置であって、
　前記操作子群は、前記ブロックの位置のユーザによる設定情報を受け付ける第３の操作子を含み、
　前記制御部は、撮影時、前記第３の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（２５）前記（２２）ないし（２４）のいずれかに記載の撮像装置であって、
　前記操作子群は、前記第１の映像信号を前記第１のサイズの１以上の分割エリアと前記第２のサイズの複数の分割エリアとに区分することのオン／オフの設定情報をユーザより受け付ける第４の操作子を含み、
　前記制御部は、撮影時、前記第４の操作子の状態を検出し、前記設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
　撮像装置。
（２６）前記（２５）に記載の撮像装置であって、
　前記操作子群における前記第１の操作子、前記第２の操作子、前記第３の操作子および前記第４の操作子の割り当てを設定可能なユーザインタフェースをさらに具備する
　撮像装置。
（２７）撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
　前記第１の映像信号処理部により生成された前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と
　を具備する映像信号処理装置。
（２８）前記（２７）に記載の映像信号処理装置であって、
　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである
　映像信号処理装置。
（２９）前記（２７）または（２８）に記載の映像信号処理装置であって、
　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分するように構成される
　映像信号処理装置。
（３０）前記（２９）に記載の映像信号処理装置であって、
　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置するように構成される
　映像信号処理装置。
（３１）前記（２７）ないし（３０）のいずれかに記載の映像信号処理装置であって、
　前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定するように構成される
　映像信号処理装置。
（３２）前記（２７）ないし（３１）のいずれかに記載の映像信号処理装置であって、
　前記第２の映像信号処理部は、
　前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成するダウンコンバータと、
　前記第２の映像信号と前記第３の映像信号とを切り替える切替部と
　をさらに具備する映像信号処理装置。
（３３）前記（２７）ないし（３２）のいずれかに記載の映像信号処理装置であって、
　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行うディテール処理部をさらに有する
　映像信号処理装置。
（３４）第１の映像信号処理部が、撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成し、
　第２の映像信号処理部が、前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する
　映像信号処理方法。
（３５）前記（３４）に記載の映像信号処理方法であって、
　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである
　映像信号処理方法。
（３６）前記（３４）または（３５）に記載の映像信号処理方法であって、
　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分する
　映像信号処理方法。
（３７）前記（３６）に記載の映像信号処理方法であって、
　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置する
　映像信号処理方法。
（３８）前記（３４）ないし（３７）のいずれかに記載の映像信号処理方法であって、
　前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定する
　映像信号処理方法。
（３９）前記（３４）ないし（３８）のいずれかに記載の映像信号処理方法であって、
　前記第２の映像信号処理部は、
　前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成し、
　前記第２の映像信号と前記第３の映像信号とを切り替えて出力する
　映像信号処理方法。
（４０）前記（３４）ないし（３９）のいずれかに記載の映像信号処理方法であって、
　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行う
　映像信号処理方法。
　１…撮像装置
　１１…光学ブロック
　１２…撮像部
　１３…本線映像信号処理部
　１４…伝送部
　１５…ＶＦ信号処理部
　１６…ＶＦ
　１７…制御ユニット
　１８…操作入力部
　１５１…ダウンコンバータ
　１５２…ブロック連結部
　１５３…切替部
　１５４…ディテール処理部

Claims (17)

  1. 　撮像素子を有する撮像部と、
    　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
    　前記第１の映像信号処理部により生成された前記第１の映像信号の少なくとも一部を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
    　前記第２の映像信号を表示するビューファインダーと
    　を具備する撮像装置。
  2. 　請求項１に記載の撮像装置であって、
    　前記分割エリアのサイズは横３×縦３画素以上であり、前記ブロックのサイズは横２×縦１画素以上および横１×縦２画素以上のいずれかである
    　撮像装置。
  3. 　請求項２に記載の撮像装置であって、
    　前記第２の映像信号処理部は、前記第１の映像信号を第１のサイズの１以上の分割エリアと、前記第１のサイズより小さい第２のサイズの複数の分割エリアとに区分するように構成される
    　撮像装置。
  4. 　請求項３に記載の撮像装置であって、
    　前記第２の映像信号処理部は、前記第１のサイズの１以上の分割エリアを前記第１の映像信号による映像空間の中央部に配置し、前記第２のサイズの複数の分割エリアを前記第１のサイズの１以上の分割エリアの周囲に配置するように構成される
    　撮像装置。
  5. 　請求項４に記載の撮像装置であって、
    　前記第２の映像信号処理部は、個々の前記ブロックを、複数の分割エリアに跨るような位置に設定するように構成される
    　撮像装置。
  6. 　請求項１に記載の撮像装置であって、
    　前記第２の映像信号処理部は、
    　前記第１の映像信号からダウンコンバートによって前記第２の解像度を有する第３の映像信号を生成するダウンコンバータと、
    　前記第２の映像信号と前記第３の映像信号とを切り替える切替部と
    　をさらに具備する撮像装置。
  7. 　請求項１に記載の撮像装置であって、
    　前記第２の映像信号処理部は、前記第２の映像信号の輪郭を強調する処理を、前記ブロック間の繋ぎ目をスキップして行うディテール処理部をさらに有する
    　撮像装置。
  8. 　請求項１に記載の撮像装置であって、
    　前記第２の映像信号処理部により生成された前記第２の映像信号を外部機器に出力する出力部を
    　さらに具備する撮像装置。
  9. 　請求項１に記載の撮像装置であって、
    　ユーザによる操作を受け付ける少なくとも1つ以上の操作子を有する操作入力部を更に具備し、
    　前記制御部は、撮影時、前記少なくとも1つ以上の操作子の状態を検出し、前記操作に基づいた設定情報を前記第２の映像信号処理部の動作にリアルタイムで反映させるように構成される
    　撮像装置。
  10. 　請求項９に記載の撮像装置であって、
    　前記設定情報は前記分割エリアの数である
    　撮像装置。
  11. 　請求項９に記載の撮像装置であって、
    　前記設定情報は前記ブロックのサイズである
    　撮像装置。
  12. 　請求項９に載の撮像装置であって、
    　前記設定情報は前記ブロックの位置である
    　撮像装置。
  13. 　請求項９に記載の撮像装置であって、
    　前記設定情報は前記第１の映像信号を前記第１のサイズの１以上の分割エリアと前記第２のサイズの複数の分割エリアとに区分することのオン／オフである
    　撮像装置。
  14. 　撮像素子を有する撮像部と、
    　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
    　外縁部の前記第１の映像信号をダウンコンバートしてダウンコンバート映像を生成し、前記外縁部の内側の領域の前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによってブロック連結映像を生成し、前記ダウンコンバート映像と前記ブロック連結映像とを繋ぎ合せて前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
    　前記第２の映像信号を表示するビューファインダーと
    　を具備する撮像装置。
  15. 　撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
    　前記第１の映像信号処理部により生成された前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と
    　を具備する映像信号処理装置。
  16. 　第１の映像信号処理部が、撮像装置により得られた画素信号から第１の解像度の第１の映像信号を生成し、
    　第２の映像信号処理部が、前記第１の映像信号を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する
    　映像信号処理方法。
  17. 　撮像素子を有する撮像部と、
    　前記撮像部により得られた画素信号から第１の解像度の第１の映像信号を生成する第１の映像信号処理部と、
    　前記第１の映像信号処理部により生成された前記第１の映像信号の少なくとも一部を空間的に区分する複数の分割エリアを設定し、個々の前記分割エリア毎に、前記第１の映像信号から対応する前記分割エリアのサイズ未満の領域の前記第１の映像信号をブロックとして切り出し、互いに繋ぎ合せることによって、前記第１の解像度より低い第２の解像度の第２の映像信号を生成する第２の映像信号処理部と、
    　前記第２の映像信号を出力する出力部と
    　を具備する撮像装置。
PCT/JP2018/008601 2017-03-15 2018-03-06 撮像装置、映像信号処理装置および映像信号処理方法 WO2018168578A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201880016329.3A CN110383817B (zh) 2017-03-15 2018-03-06 图像拾取设备、视频信号处理设备和视频信号处理方法
US16/486,343 US11039067B2 (en) 2017-03-15 2018-03-06 Image pickup apparatus, video signal processing apparatus, and video signal processing method
EP18768349.5A EP3598735A4 (en) 2017-03-15 2018-03-06 IMAGING DEVICE, VIDEO SIGNAL PROCESSING DEVICE, AND VIDEO SIGNAL PROCESSING METHOD
JP2019505907A JP7092111B2 (ja) 2017-03-15 2018-03-06 撮像装置、映像信号処理装置および映像信号処理方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-050621 2017-03-15
JP2017050621 2017-03-15

Publications (1)

Publication Number Publication Date
WO2018168578A1 true WO2018168578A1 (ja) 2018-09-20

Family

ID=63523893

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/008601 WO2018168578A1 (ja) 2017-03-15 2018-03-06 撮像装置、映像信号処理装置および映像信号処理方法

Country Status (5)

Country Link
US (1) US11039067B2 (ja)
EP (1) EP3598735A4 (ja)
JP (1) JP7092111B2 (ja)
CN (1) CN110383817B (ja)
WO (1) WO2018168578A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3586717B1 (en) * 2017-03-27 2023-07-05 Sony Olympus Medical Solutions Inc. Control device and endoscope system
CN114500702B (zh) * 2022-01-30 2023-01-06 上海傲显科技有限公司 基于子像素排列分段方法、移动终端和终端可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128333A1 (en) * 2003-12-15 2005-06-16 Samsung Techwin Co., Ltd. Method of controlling digital photographing apparatus
JP2007259104A (ja) * 2006-03-23 2007-10-04 Fujifilm Corp ２画面間の移動ベクトル算出方法及びその装置
JP2007336257A (ja) 2006-06-15 2007-12-27 Matsushita Electric Ind Co Ltd フォーカスアシスト機能付撮像装置
JP2014222801A (ja) * 2013-05-13 2014-11-27 ソニー株式会社 撮像装置、撮像方法、プログラム
JP2016066838A (ja) * 2014-09-22 2016-04-28 キヤノン株式会社 撮像装置、表示装置の制御方法ならびにプログラム
JP2016197819A (ja) * 2015-04-03 2016-11-24 キヤノン株式会社 表示制御装置及びその制御方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4658401B2 (ja) 2001-07-27 2011-03-23 オリンパス株式会社 撮像装置
JP2005142680A (ja) * 2003-11-04 2005-06-02 Olympus Corp 画像処理装置
US20100214445A1 (en) * 2009-02-20 2010-08-26 Sony Ericsson Mobile Communications Ab Image capturing method, image capturing apparatus, and computer program
JP5490514B2 (ja) * 2009-12-22 2014-05-14 三星電子株式会社 撮像装置及び撮像方法
US8558915B2 (en) 2009-12-22 2013-10-15 Samsung Electronics Co., Ltd. Photographing apparatus and method
KR20140054518A (ko) * 2012-10-29 2014-05-09 삼성전자주식회사 영상처리장치 및 그 제어방법
US10491828B2 (en) 2015-04-03 2019-11-26 Canon Kabushiki Kaisha Display control apparatus and control method of the same
US20160295122A1 (en) * 2015-04-03 2016-10-06 Canon Kabushiki Kaisha Display control apparatus, display control method, and image capturing apparatus

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128333A1 (en) * 2003-12-15 2005-06-16 Samsung Techwin Co., Ltd. Method of controlling digital photographing apparatus
JP2007259104A (ja) * 2006-03-23 2007-10-04 Fujifilm Corp ２画面間の移動ベクトル算出方法及びその装置
JP2007336257A (ja) 2006-06-15 2007-12-27 Matsushita Electric Ind Co Ltd フォーカスアシスト機能付撮像装置
JP2014222801A (ja) * 2013-05-13 2014-11-27 ソニー株式会社 撮像装置、撮像方法、プログラム
JP2016066838A (ja) * 2014-09-22 2016-04-28 キヤノン株式会社 撮像装置、表示装置の制御方法ならびにプログラム
JP2016197819A (ja) * 2015-04-03 2016-11-24 キヤノン株式会社 表示制御装置及びその制御方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3598735A4

Also Published As

Publication number Publication date
JPWO2018168578A1 (ja) 2020-05-14
US20190394395A1 (en) 2019-12-26
CN110383817B (zh) 2021-06-29
US11039067B2 (en) 2021-06-15
CN110383817A (zh) 2019-10-25
EP3598735A1 (en) 2020-01-22
JP7092111B2 (ja) 2022-06-28
EP3598735A4 (en) 2020-03-11

Similar Documents

Publication Publication Date Title
JP7095693B2 (ja) 医療用観察システム
EP3571662A1 (en) Video signal processing apparatus, video signal processing method, and program for dynamic range compression
WO2019239942A1 (ja) 手術用観察装置、手術用観察方法、手術用光源装置、及び手術用の光照射方法
US11729519B2 (en) Video signal processing apparatus, video signal processing method, and image-capturing apparatus
WO2018235608A1 (ja) 手術システムおよび手術用撮像装置
WO2018230510A1 (ja) 画像処理装置、画像処理方法および撮像システム
WO2018168578A1 (ja) 撮像装置、映像信号処理装置および映像信号処理方法
US11729493B2 (en) Image capture apparatus and image capture method
JP7063321B2 (ja) 撮像装置、映像信号処理装置および映像信号処理方法
WO2018142993A1 (ja) 発光制御装置、発光制御方法、プログラム、発光装置、および撮像装置
WO2020203265A1 (ja) 映像信号処理装置、映像信号処理方法および撮像装置
WO2018043205A1 (ja) 医療用画像処理装置、医療用画像処理方法、プログラム
WO2021010020A1 (ja) 画像処理装置、撮像装置、画像処理方法、プログラム
JP7456385B2 (ja) 画像処理装置、および画像処理方法、並びにプログラム
WO2022004250A1 (ja) 医療システム、情報処理装置及び情報処理方法
WO2023176133A1 (ja) 内視鏡用保持装置、内視鏡手術システム、及び制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18768349

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019505907

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018768349

Country of ref document: EP

Effective date: 20191015