JP2020150364A - Information processing system, information processing device, and program - Google Patents
Information processing system, information processing device, and program Download PDFInfo
- Publication number
- JP2020150364A JP2020150364A JP2019044816A JP2019044816A JP2020150364A JP 2020150364 A JP2020150364 A JP 2020150364A JP 2019044816 A JP2019044816 A JP 2019044816A JP 2019044816 A JP2019044816 A JP 2019044816A JP 2020150364 A JP2020150364 A JP 2020150364A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- original image
- information processing
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 109
- 239000000203 mixture Substances 0.000 claims description 54
- 238000001514 detection method Methods 0.000 claims description 22
- 238000000034 method Methods 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 2
- 238000009966 trimming Methods 0.000 abstract description 99
- 238000012545 processing Methods 0.000 abstract description 12
- 238000004891 communication Methods 0.000 description 28
- 238000010586 diagram Methods 0.000 description 10
- 238000012986 modification Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 238000007781 pre-processing Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 101100088247 Picea mariana RPL13A gene Proteins 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Landscapes
- Editing Of Facsimile Originals (AREA)
Abstract
Description
本発明は、情報処理システム、情報処理装置およびプログラムに関する。 The present invention relates to information processing systems, information processing devices and programs.
画像のトリミングを行う発明として、例えば特許文献１に開示された画像処理装置がある。この画像処理装置は、ユーザにより画像が選択されると、選択された対象画像の特徴部分を検出し、検出した特徴部分を含むトリミング範囲の候補を複数設定する。画像処理装置は、複数のトリミング範囲の候補を表示し、候補の一つがユーザにより選択されると、トリミング枠を対象画像上に表示する。トリミング枠は、ユーザにより微調整が可能となっている。画像処理装置は、印刷をユーザから指示されると、微調整された範囲で対象画像のトリミングを行い、トリミングされた画像を印刷する。 As an invention for trimming an image, for example, there is an image processing apparatus disclosed in Patent Document 1. When an image is selected by the user, this image processing device detects a feature portion of the selected target image and sets a plurality of candidates for a trimming range including the detected feature portion. The image processing device displays a plurality of candidates for the trimming range, and when one of the candidates is selected by the user, the trimming frame is displayed on the target image. The trimming frame can be finely adjusted by the user. When the user instructs the image processing device to print, the image processing device trims the target image within a finely adjusted range and prints the trimmed image.
トリミングの対象となる画像がユーザにより選択されてから画像の特徴部分を検出し、検出した特徴部分についてトリミングの候補を設定する場合、画像が選択されてから特徴部分の検出を行うため、候補の表示までに時間を要することとなる。 When the feature part of the image is detected after the image to be trimmed is selected by the user and the trimming candidate is set for the detected feature part, the feature part is detected after the image is selected. It will take time to display.
本発明は、トリミングの対象となる画像が選択されてから画像の特徴部分を検出する構成と比較して、短時間でトリミングの候補を提示することを目的とする。 An object of the present invention is to present a trimming candidate in a short time as compared with a configuration in which a feature portion of an image is detected after an image to be trimmed is selected.
本発明の請求項１に係る情報処理システムは、原画像を取得する取得手段と、前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段とを備える。 The information processing system according to claim 1 of the present invention includes an acquisition means for acquiring an original image, a detection means for detecting a feature portion of the original image when the acquisition means acquires the original image, and the detection means. When the data generation means for generating the area data representing the area including the featured feature portion and the information for identifying the original image are received, a presentation showing the user an image representing the area corresponding to the area data in the original image. Provide means.
本発明の請求項２に係る情報処理システムにおいては、前記原画像を記憶する記憶手段を有し、前記取得手段は、前記原画像を前記記憶手段から取得し、前記領域データは、前記原画像を識別する情報を含み、前記提示手段は、前記領域データが含む識別情報で識別される原画像から生成する。 The information processing system according to claim 2 of the present invention has a storage means for storing the original image, the acquisition means acquires the original image from the storage means, and the area data is the original image. The presenting means is generated from an original image identified by the identification information included in the area data.
本発明の請求項３に係る情報処理システムにおいては、第１装置は、前記取得手段と、前記検出手段と、前記データ生成手段と、前記領域データを送信する送信手段とを有し、第２装置は、前記提示手段と、前記送信手段から送信された前記領域データを受信する受信手段とを有し、前記提示手段は、前記受信手段が受信した前記領域データが表す領域の画像を前記領域データが含む識別情報で識別される原画像から生成する。 In the information processing system according to claim 3 of the present invention, the first apparatus has the acquisition means, the detection means, the data generation means, and the transmission means for transmitting the area data. The apparatus has the presenting means and a receiving means for receiving the area data transmitted from the transmitting means, and the presenting means captures an image of the area represented by the area data received by the receiving means in the area. Generated from the original image identified by the identification information contained in the data.
本発明の請求項４に係る情報処理システムにおいては、前記領域データは、それぞれ異なる複数の領域を表し、前記提示手段は、前記複数の領域毎に対応した画像を提示する。 In the information processing system according to claim 4 of the present invention, the area data represents a plurality of different areas, and the presenting means presents an image corresponding to each of the plurality of areas.
本発明の請求項５に係る情報処理システムにおいては、前記複数の領域のいずれかは、前記原画像の領域より広い領域である。 In the information processing system according to claim 5 of the present invention, any one of the plurality of regions is a region wider than the region of the original image.
本発明の請求項６に係る情報処理システムにおいては、前記提示手段は、前記原画像に対して予め定められた条件を満たす見本画像の領域データを取得し、取得した領域データが表す領域の画像を前記原画像から生成する。 In the information processing system according to claim 6 of the present invention, the presenting means acquires area data of a sample image satisfying a predetermined condition with respect to the original image, and an image of an area represented by the acquired area data. Is generated from the original image.
本発明の請求項７に係る情報処理システムにおいては、前記提示手段は、前記見本画像の構図に対応した画像を前記原画像から生成し、取得した領域データが表す領域の画像を前記見本画像から生成した画像から生成する。 In the information processing system according to claim 7 of the present invention, the presenting means generates an image corresponding to the composition of the sample image from the original image, and obtains an image of a region represented by the acquired region data from the sample image. Generate from the generated image.
本発明の請求項８に係る情報処理装置は、原画像を取得する取得手段と、前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段とを備える。 The information processing apparatus according to claim 8 of the present invention includes an acquisition means for acquiring an original image, a detection means for detecting a feature portion of the original image when the acquisition means acquires the original image, and the detection means for detecting the characteristic portion of the original image. When the data generation means for generating the area data representing the area including the featured feature portion and the information for identifying the original image are received, a presentation showing the user an image representing the area corresponding to the area data in the original image. Provide means.
本発明の請求項９に係るプログラムは、コンピュータを、原画像を取得する取得手段と、前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段として機能させるためのプログラムである。 The program according to claim 9 of the present invention comprises a computer with an acquisition means for acquiring an original image, a detection means for detecting a feature portion of the original image when the acquisition means acquires the original image, and the detection means. Upon receiving the data generation means for generating the area data representing the area including the detected feature portion and the information for identifying the original image, the user is presented with an image representing the area corresponding to the area data in the original image. It is a program for functioning as a presentation means.
本発明の請求項１に係る情報処理システムによれば、トリミングの対象となる画像が選択されてから画像の特徴部分を検出する構成と比較して、短時間で画像の特徴部分を含む領域の候補を提示することができる。
本発明の請求項２に係る情報処理システムによれば、記憶されている画像が選択されてから画像の特徴部分を検出する構成と比較して、短時間で画像の特徴部分を含む領域の候補を提示することができる。
本発明の請求項３に係る情報処理システムによれば、第１装置へ短時間で画像の特徴部分を含む領域の候補を提示することができる。
本発明の請求項４に係る情報処理システムによれば、画像の特徴部分を含む領域の候補となる画像を短時間で複数提示することができる。
本発明の請求項５に係る情報処理システムによれば、原画像より広い領域をユーザに提示することができる。
本発明の請求項６に係る情報処理システムによれば、画像の特徴部分を含む領域の候補となる画像として、見本画像における画像の特徴部分を含む領域の候補と同様の画像を提示することができる。
本発明の請求項７に係る情報処理システムによれば、画像の特徴部分を含む領域の候補となる画像として、見本画像における画像の特徴部分を含む領域の複数の候補と同様の画像を提示することができる。
本発明の請求項８に係る情報処理装置によれば、トリミングの対象となる画像が選択されてから画像の特徴部分を検出する構成と比較して、短時間で画像の特徴部分を含む領域の候補を提示することができる。
本発明の請求項９に係るプログラムによれば、トリミングの対象となる画像が選択されてから画像の特徴部分を検出する構成と比較して、短時間で画像の特徴部分を含む領域の候補を提示することができる。
According to the information processing system according to claim 1 of the present invention, a region including a feature portion of an image can be detected in a short time as compared with a configuration in which a feature portion of the image is detected after the image to be trimmed is selected. Candidates can be presented.
According to the information processing system according to claim 2 of the present invention, a candidate for an area including a feature portion of an image can be obtained in a short time as compared with a configuration in which a feature portion of an image is detected after a stored image is selected. Can be presented.
According to the information processing system according to claim 3 of the present invention, it is possible to present a candidate region including a feature portion of an image to the first apparatus in a short time.
According to the information processing system according to claim 4 of the present invention, it is possible to present a plurality of candidate images of a region including a feature portion of an image in a short time.
According to the information processing system according to claim 5 of the present invention, a wider area than the original image can be presented to the user.
According to the information processing system according to claim 6 of the present invention, as a candidate image of the region including the feature portion of the image, an image similar to the candidate of the region including the feature portion of the image in the sample image can be presented. it can.
According to the information processing system according to claim 7 of the present invention, as a candidate image of the region including the feature portion of the image, the same image as a plurality of candidates of the region including the feature portion of the image in the sample image is presented. be able to.
According to the information processing apparatus according to claim 8 of the present invention, a region including a feature portion of an image can be detected in a short time as compared with a configuration in which a feature portion of the image is detected after the image to be trimmed is selected. Candidates can be presented.
According to the program according to claim 9 of the present invention, a candidate for a region including the feature portion of the image can be selected in a short time as compared with a configuration in which the feature portion of the image is detected after the image to be trimmed is selected. Can be presented.
［実施形態］
（全体構成）
図１は、本発明の一実施形態である情報処理システム１に係る装置を示した図である。情報処理システム１は、情報処理の一例として画像データが示す画像のトリミング処理を実行するシステムであり、トリミング処理を施す画像についてトリミングの構図の候補を複数提示する機能や、提示した複数の候補の中からユーザにより選択された構図で画像のトリミング処理を行う機能を有する。通信回線２は、データ通信が行われる通信回線であり、データ通信を行う複数のコンピュータ装置が接続される。通信回線２には、例えば有線ＬＡＮ（Local Area Network）および無線ＬＡＮ、ＷＡＮ（Wide Area Network），インターネット等が含まれる。
[Embodiment]
(overall structure)
FIG. 1 is a diagram showing an apparatus according to an information processing system 1 according to an embodiment of the present invention. The information processing system 1 is a system that executes a trimming process of an image indicated by image data as an example of information processing, and has a function of presenting a plurality of trimming composition candidates for the image to be trimmed and a plurality of presented candidates. It has a function to perform image trimming processing with a composition selected by the user. The communication line 2 is a communication line on which data communication is performed, and a plurality of computer devices that perform data communication are connected to the communication line 2. The communication line 2 includes, for example, a wired LAN (Local Area Network), a wireless LAN, a WAN (Wide Area Network), the Internet, and the like.
本発明に係る情報処理装置の一例である情報処理端末装置１０は、データ通信を行う装置であり、例えば、デスクトップ型のパーソナルコンピュータである。情報処理端末装置１０は、有線又は無線で通信回線２に接続し、通信回線２を介してデータ通信を行う。本実施形態においては、複数の情報処理端末装置１０が通信回線２に接続可能であるが、図１においては、図面が煩雑になるのを防ぐため、一つの情報処理端末装置１０のみを示している。なお、情報処理端末装置１０は、デスクトップ型のパーソナルコンピュータに限定されるものではなく、例えば、ラップトップ型のパーソナルコンピュータ、タブレット端末、スマートフォンであってもよい。 The information processing terminal device 10 which is an example of the information processing device according to the present invention is a device that performs data communication, for example, a desktop personal computer. The information processing terminal device 10 is connected to the communication line 2 by wire or wirelessly, and performs data communication via the communication line 2. In the present embodiment, a plurality of information processing terminal devices 10 can be connected to the communication line 2, but in FIG. 1, only one information processing terminal device 10 is shown in order to prevent the drawings from becoming complicated. There is. The information processing terminal device 10 is not limited to the desktop type personal computer, and may be, for example, a laptop type personal computer, a tablet terminal, or a smartphone.
情報処理端末装置１０は、画像のトリミングを希望するユーザにより操作される。ユーザは、情報処理端末装置１０を操作して情報処理装置２０へアクセスし、トリミング処理が施される画像を選択する操作や、選択した画像に対応して提示される複数のトリミングの構図の中から希望する構図を選択する操作を行ってもよい。また、情報処理端末装置１０において、トリミングするフレームの構図に関する属性情報や、表示したい画像部に透過情報を指定し、表示したくない画像部に他の色、背景色や背景画像などを指定するマスク情報の設定ができるようにしてもよい。この属性情報とは、構図に関して定義された識別情報のことである。 The information processing terminal device 10 is operated by a user who desires to trim an image. The user operates the information processing terminal device 10 to access the information processing device 20 and selects an image to be trimmed, or in a plurality of trimming compositions presented corresponding to the selected image. You may perform the operation of selecting the desired composition from. Further, in the information processing terminal device 10, attribute information related to the composition of the frame to be trimmed, transparent information is specified for the image portion to be displayed, and another color, background color, background image, or the like is specified for the image portion that is not desired to be displayed. The mask information may be set. This attribute information is the identification information defined for the composition.
情報処理装置２０は、入力された画像に対してトリミング処理を施す装置である。情報処理装置２０は、トリミング処理を施す画像として入力された画像について、トリミングの構図の候補をユーザに複数提示し、提示した複数候補の中から選択された構図に応じてトリミング処理を行う。また、予めユーザがトリミングの構図に関する属性情報を入力していた場合は、トリミングの構図の候補を提示してユーザに選択させる処理を省略してもよい。 The information processing device 20 is a device that performs a trimming process on an input image. The information processing device 20 presents a plurality of candidates for the composition of trimming to the user with respect to the image input as the image to be trimmed, and performs the trimming process according to the composition selected from the plurality of presented candidates. Further, when the user has input the attribute information related to the trimming composition in advance, the process of presenting the trimming composition candidate and letting the user select it may be omitted.
（情報処理端末装置１０の構成）
図２は、情報処理端末装置１０のハードウェア構成の一例を示したブロック図である。ディスプレイ１０３は、例えば、文字やＧＵＩ（Graphical User Interface）などを表示する液晶ディスプレイ装置である。操作部１０４は、入力機器であるキーボード及びマウスを有し、ユーザに操作される。通信部１０５は、通信回線２を介したデータ通信を行う通信インターフェースとして機能する。通信部１０５は、本発明に係る送信手段および受信手段の一例である。
(Configuration of Information Processing Terminal Device 10)
FIG. 2 is a block diagram showing an example of the hardware configuration of the information processing terminal device 10. The display 103 is, for example, a liquid crystal display device that displays characters, a GUI (Graphical User Interface), and the like. The operation unit 104 has a keyboard and a mouse as input devices, and is operated by the user. The communication unit 105 functions as a communication interface for performing data communication via the communication line 2. The communication unit 105 is an example of a transmitting means and a receiving means according to the present invention.
記憶部１０２は、例えばハードディスク装置などの記憶装置を有しており、オペレーティングシステムのプログラムやアプリケーションプログラム、アプリケーションプログラムが使用するデータを記憶する。記憶部１０２は、アプリケーションプログラムとして、例えば、Ｗｅｂブラウザのアプリケーションプログラムを記憶する。本実施形態においては、情報処理端末装置１０は、アプリケーションプログラムにより実現するＷｅｂブラウザで情報処理装置２０へアクセスする。 The storage unit 102 has a storage device such as a hard disk device, and stores operating system programs, application programs, and data used by the application programs. The storage unit 102 stores, for example, an application program of a Web browser as an application program. In the present embodiment, the information processing terminal device 10 accesses the information processing device 20 with a Web browser realized by an application program.
制御部１０１は、ＣＰＵ（Central Processing Unit）及びメモリを有している。情報処理端末装置１０において実現する機能は、記憶部１０２に記憶されているプログラム（ソフトウェア）をＣＰＵ、メモリなどのハードウェア上に読み込ませることでＣＰＵが演算を行い、記憶部１０２の制御、通信部１０５の制御、メモリ及び記憶部１０２におけるデータの読み出し及び／又は書き込みの制御を行うことで実現される。 The control unit 101 has a CPU (Central Processing Unit) and a memory. The function realized in the information processing terminal device 10 is that the CPU performs calculations by reading the program (software) stored in the storage unit 102 onto hardware such as the CPU and memory, and controls and communicates with the storage unit 102. It is realized by controlling the unit 105 and controlling the reading and / or writing of data in the memory and the storage unit 102.
（情報処理装置２０の構成）
図３は、情報処理装置２０のハードウェア構成の一例を示したブロック図である。通信部２０５は、通信回線２を介したデータ通信を行う通信インターフェースとして機能する。通信部２０５は、本発明に係る送信手段および受信手段の一例である。
(Configuration of Information Processing Device 20)
FIG. 3 is a block diagram showing an example of the hardware configuration of the information processing device 20. The communication unit 205 functions as a communication interface for performing data communication via the communication line 2. The communication unit 205 is an example of a transmitting means and a receiving means according to the present invention.
記憶部２０２は、例えばハードディスク装置などの記憶装置を有しており、オペレーティングシステムのプログラムやアプリケーションプログラム、アプリケーションプログラムが使用するデータを記憶する。記憶部２０２は、アプリケーションプログラムとして、例えば、ユーザが選択した画像に対してトリミング処理を施すアプリケーションプログラムを記憶する。また、記憶部２０２は、トリミングが行われる画像を示す画像データや、トリミングが行われた後の画像を示す画像データや画像データに対してマスク情報を付加したデータ（複数レイヤーをもつ状態、または文書データの形式で保持してもよい）、本発明に係るトリミングデータを記憶する。文書データとは、例えば、透明と透明でない情報を区別するための手段を有し、画像に画像を重ねたマスクやレイヤー構造をもつデザインデータ、画像にベクター情報をマスクしたものを示す。トリミングデータの詳細については後述する。記憶部２０２は、本発明に係る記憶手段の一例である。 The storage unit 202 has a storage device such as a hard disk device, and stores operating system programs, application programs, and data used by the application programs. The storage unit 202 stores, for example, an application program that performs trimming processing on an image selected by the user as an application program. Further, the storage unit 202 includes image data indicating an image to be trimmed, image data indicating an image after trimming, and data in which mask information is added to the image data (a state having a plurality of layers, or data having mask information added to the image data. The trimming data according to the present invention may be stored in the form of document data). The document data includes, for example, a means for distinguishing between transparent and non-transparent information, a mask in which an image is superimposed on an image, design data having a layer structure, and a masked vector information on an image. Details of the trimming data will be described later. The storage unit 202 is an example of the storage means according to the present invention.
制御部２０１は、ＣＰＵ（Central Processing Unit）及びメモリを有している。情報処理装置２０において実現する機能は、記憶部２０２に記憶されているプログラム（ソフトウェア）をＣＰＵ、メモリなどのハードウェア上に読み込ませることでＣＰＵが演算を行い、記憶部２０２の制御、通信部２０５の制御、メモリ及び記憶部２０２におけるデータの読み出し及び／又は書き込みの制御を行うことで実現される。 The control unit 201 has a CPU (Central Processing Unit) and a memory. The function realized in the information processing apparatus 20 is that the CPU performs calculations by loading the program (software) stored in the storage unit 202 onto hardware such as the CPU and memory, and controls the storage unit 202 and the communication unit. It is realized by controlling 205 and controlling reading and / or writing of data in the memory and storage unit 202.
（情報処理装置２０の機能構成）
図４は、情報処理装置２０において実現する機能のうち、本発明に係る特徴的な機能の構成を示した機能ブロック図である。取得部２００１は、後述する対象画像データを取得し、取得した対象画像データを記憶部２０２に記憶させる。取得部２００１は、本発明に係る取得手段の一例である。検出部２００２は、対象画像データが示す対象画像の特徴部分を検出する。検出部２００２は、本発明に係る検出手段の一例である。データ生成部２００３は、対象画像において検出部２００２が検出した特徴部分を含む領域を表すトリミングデータを生成する。トリミングデータは、本発明に係る領域データの一例であり、データ生成部２００３は、本発明に係るデータ生成手段の一例である。提示部２００４は、トリミングデータが示す領域の画像を対象画像から生成し、生成した画像を情報処理端末装置１０のユーザに提示する。提示部２００４は、本発明に係る提示手段の一例である。
(Functional configuration of information processing device 20)
FIG. 4 is a functional block diagram showing a configuration of characteristic functions according to the present invention among the functions realized by the information processing apparatus 20. The acquisition unit 2001 acquires the target image data described later, and stores the acquired target image data in the storage unit 202. The acquisition unit 2001 is an example of the acquisition means according to the present invention. The detection unit 2002 detects a characteristic portion of the target image indicated by the target image data. The detection unit 2002 is an example of the detection means according to the present invention. The data generation unit 2003 generates trimming data representing an area including a feature portion detected by the detection unit 2002 in the target image. The trimming data is an example of the area data according to the present invention, and the data generation unit 2003 is an example of the data generation means according to the present invention. The presentation unit 2004 generates an image of the region indicated by the trimming data from the target image, and presents the generated image to the user of the information processing terminal device 10. The presentation unit 2004 is an example of the presentation means according to the present invention.
（実施形態の動作例）
次に本実施形態の動作例について、トリミング処理が施される画像としてユーザが選択可能な画像に対して前処理を行うときの動作例と、ユーザが選択した画像に対してトリミング処理を施すときの動作例を説明する。
(Operation example of the embodiment)
Next, regarding the operation example of the present embodiment, when performing preprocessing on an image that can be selected by the user as an image to be trimmed, and when performing trimming processing on the image selected by the user. An operation example of is described.
まず、トリミング処理が施される画像としてユーザが選択可能な画像に対して前処理を行うときの動作例を説明する。情報処理装置２０の記憶部２０２には、トリミング処理が施される画像としてユーザが選択可能な画像を示す画像データが記憶される。説明の便宜上、トリミング処理が施される画像としてユーザが選択可能な画像を示す画像データを対象画像データと称する。対象画像データが示す画像は、本発明に係る原画像の一例である。対象画像データは、情報処理装置２０の管理者がコンピュータ装置を操作することにより、通信回線２を介して情報処理装置２０へアクセスして記憶部２０２に記憶させてもよい。また、情報処理端末装置１０のユーザが、デジタルカメラで撮影した画像の画像データを情報処理端末装置１０に転送し、転送された画像データを情報処理端末装置１０から情報処理装置２０へ送信して対象画像データとして記憶部２０２に記憶させてもよい。対象画像データを記憶部２０２に記憶させる際には、通信部２０５が受信した対象画像データを取得部２００１が取得し、取得部２００１は、取得した対象画像データを記憶部２０２に記憶させる。 First, an operation example when preprocessing is performed on an image that can be selected by the user as an image to be trimmed will be described. The storage unit 202 of the information processing device 20 stores image data indicating an image that can be selected by the user as an image to be trimmed. For convenience of explanation, image data indicating an image that can be selected by the user as an image to be trimmed is referred to as target image data. The image indicated by the target image data is an example of the original image according to the present invention. The target image data may be stored in the storage unit 202 by accessing the information processing device 20 via the communication line 2 by the administrator of the information processing device 20 operating the computer device. Further, the user of the information processing terminal device 10 transfers the image data of the image taken by the digital camera to the information processing terminal device 10, and transmits the transferred image data from the information processing terminal device 10 to the information processing device 20. It may be stored in the storage unit 202 as the target image data. When the target image data is stored in the storage unit 202, the acquisition unit 2001 acquires the target image data received by the communication unit 205, and the acquisition unit 2001 stores the acquired target image data in the storage unit 202.
図５は、記憶部２０２に対象画像データが記憶されたときに制御部２０１が行う前処理の流れを示したフローチャートである。制御部２０１（検出部２００２）は、記憶部２０２に対象画像データが記憶されると、対象画像データが示す画像（以下、対象画像と称する）を解析し、対象画像において特徴がある部分を検出する（ステップＳＡ１）。例えば、ここで制御部２０１は、人間の顔、人間の身体、動物、物などを特徴部分として検出する。特徴部分の検出は、公知の検出技術を用いて行われる。なお、検出される特徴部分は上述のものに限定されるものではなく、例えば、対象画像においてフォーカスが合っている部分を特徴部分として検出してもよく、エッジ強度やカラーコントラストといった画像の物理的特徴に基づいて、画像中から人間の注目を集める領域を抽出し、抽出した領域を特徴部分として検出してもよい。 FIG. 5 is a flowchart showing the flow of preprocessing performed by the control unit 201 when the target image data is stored in the storage unit 202. When the target image data is stored in the storage unit 202, the control unit 201 (detection unit 2002) analyzes the image indicated by the target image data (hereinafter referred to as the target image) and detects a characteristic portion of the target image. (Step SA1). For example, here, the control unit 201 detects a human face, a human body, an animal, an object, or the like as feature portions. The detection of the feature portion is performed using a known detection technique. The feature portion to be detected is not limited to the above. For example, a focused portion in the target image may be detected as the feature portion, and the physical image such as edge strength and color contrast may be detected. A region that attracts human attention may be extracted from the image based on the feature, and the extracted region may be detected as a feature portion.
例えば、制御部２０１は、対象画像データが示す画像が図６に例示した画像である場合、顔や身体を検出し、人間の顔の領域Ａ１１や人間の身体の領域Ａ１２を特徴部分として検出する。また、制御部２０１は、注目を集める領域として顔の領域を検出する。 For example, when the image indicated by the target image data is the image illustrated in FIG. 6, the control unit 201 detects the face and body, and detects the human face region A11 and the human body region A12 as feature portions. .. In addition, the control unit 201 detects a facial region as an region that attracts attention.
次に制御部２０１（データ生成部２００３）は、予め定められたアスペクト比のフレーム（枠）で対象画像のトリミングの構図の候補を複数決定し（ステップＳＡ２）、決定した候補を示すトリミングデータを生成する（ステップＳＡ３）。 Next, the control unit 201 (data generation unit 2003) determines a plurality of candidates for the composition of the trimming of the target image in a frame (frame) having a predetermined aspect ratio (step SA2), and determines trimming data indicating the determined candidates. Generate (step SA3).
具体的には、例えば制御部２０１は、図７に例示したように、検出した特徴部分の領域Ａ１１を中央に配置するセンタリング構図の領域Ａ２１をトリミングの構図の第１候補とする。制御部２０１は、対象画像の左上頂点を対象画像の座標の原点（０，０）とし、領域Ａ２１の左上頂点ｖ２１の座標（０．２５，０．１）と右下頂点ｖ２２の座標（０．７５，０．６）を構図の第１候補を示す情報としてトリミングデータに含める。なお、領域Ａ２１の左上頂点ｖ２１の座標の値と右下頂点ｖ２２の座標の値は、対象画像の幅および高さをそれぞれ１としてスケーリングしたときの値としている。 Specifically, for example, as illustrated in FIG. 7, the control unit 201 sets the region A21 of the centering composition in which the region A11 of the detected feature portion is arranged in the center as the first candidate for the trimming composition. The control unit 201 sets the upper left vertex of the target image as the origin (0,0) of the coordinates of the target image, and sets the coordinates (0.25, 0.1) of the upper left vertex v21 of the area A21 and the coordinates (0) of the lower right vertex v22. .75, 0.6) is included in the trimming data as information indicating the first candidate for composition. The coordinate value of the upper left apex v21 and the coordinate value of the lower right apex v22 of the area A21 are values when scaled with the width and height of the target image as 1 respectively.
また、例えば制御部２０１は、図８に例示したように、注目を集める領域として検出した顔の領域を、フレーム内を縦横に三分割する仮想線の交点に配置した三分割構図である領域Ａ３１をトリミングの構図の第２候補とする。制御部２０１は、対象画像の左上頂点を画像の座標の原点（０，０）とし、領域Ａ３１の左上頂点ｖ３１の座標（０．２，０．０）と右下頂点ｖ３２の座標（１．０，０．８）を構図の第２候補を示す情報としてトリミングデータに含める。 Further, for example, as illustrated in FIG. 8, the control unit 201 has a three-division composition in which the face region detected as a region of interest is arranged at the intersection of virtual lines that vertically and horizontally divide the frame into three regions A31. Is the second candidate for the composition of trimming. The control unit 201 sets the upper left vertex of the target image as the origin (0,0) of the coordinates of the image, and sets the coordinates (0.2,0.0) of the upper left vertex v31 of the area A31 and the coordinates of the lower right vertex v32 (1. 0, 0.8) is included in the trimming data as information indicating the second candidate for composition.
また、例えば制御部２０１は、図９に例示したように、フレーム内に領域Ａ１１の一部を含む構図である領域Ａ４１をトリミングの構図の第３候補とする。制御部２０１は、対象画像の左上頂点を画像の座標の原点（０，０）とし、領域Ａ４１の左上頂点ｖ４１の座標（０．５，０．１）と右下頂点ｖ４２の座標（０．８，０．４）を構図の第３候補示す情報としてトリミングデータに含める。 Further, for example, the control unit 201 uses the region A41, which is a composition including a part of the region A11 in the frame, as the third candidate for the trimming composition, as illustrated in FIG. The control unit 201 sets the upper left vertex of the target image as the origin (0,0) of the coordinates of the image, and sets the coordinates (0.5,0.1) of the upper left vertex v41 of the area A41 and the coordinates of the lower right vertex v42 (0. 8.0.4) is included in the trimming data as information indicating the third candidate for composition.
なお、トリミングの構図の候補として、領域Ａ１２をセンタリング構図とした構図や、領域Ａ１２の一部を含む構図をトリミングの構図の候補とし、これらの構図の左上頂点の座標および右下頂点の座標をトリミングデータに含めてもよい。 As a candidate for the trimming composition, a composition with the area A12 as the centering composition or a composition including a part of the area A12 as a candidate for the trimming composition, and the coordinates of the upper left vertex and the coordinates of the lower right vertex of these compositions It may be included in the trimming data.
図１０は、制御部２０１が生成するトリミングデータの内容の一例を示した図である。トリミングデータは、生成されるときに用いられた対象画像の情報として、対象画像のアスペクト比と、対象画像を示す対象画像データを識別する情報である画像識別情報を含み、対象画像のトリミングを行うときに画像を切り取るフレーム（枠）の情報として、フレームのアスペクト比を含む。また、トリミングデータは、上述した構図の第１候補、第２候補および第３候補の左上頂点の座標と右下頂点の座標を含む。生成されたトリミングデータは、記憶部２０２に記憶される（ステップＳＡ４）。ここで、画像識別情報は、画像毎に付加されて識別子でもよいし、ファイル管理における格納場所を示すアドレス情報であってもよい。 FIG. 10 is a diagram showing an example of the contents of the trimming data generated by the control unit 201. The trimming data includes the aspect ratio of the target image and the image identification information which is the information for identifying the target image data indicating the target image as the information of the target image used at the time of generation, and trims the target image. The aspect ratio of the frame is included as the information of the frame that sometimes cuts the image. Further, the trimming data includes the coordinates of the upper left vertex and the coordinates of the lower right vertex of the first candidate, the second candidate, and the third candidate of the composition described above. The generated trimming data is stored in the storage unit 202 (step SA4). Here, the image identification information may be an identifier added to each image, or may be address information indicating a storage location in file management.
次に、ユーザが選択した画像に対してトリミング処理を施すときの動作例について説明する。図１１は、ユーザが選択した画像に対してトリミング処理を施すときの動作を説明するためのシーケンス図である。 Next, an operation example when performing the trimming process on the image selected by the user will be described. FIG. 11 is a sequence diagram for explaining an operation when a trimming process is performed on an image selected by the user.
ユーザは、記憶部２０２に記憶されている対象画像データが示す対象画像にトリミング処理を施す場合、情報処理端末装置１０で実行されているＷｅｂブラウザを操作し、情報処理装置２０へアクセスする（ステップＳＢ１）。 When the target image indicated by the target image data stored in the storage unit 202 is trimmed, the user operates the Web browser executed by the information processing terminal device 10 to access the information processing device 20 (step). SB1).
情報処理装置２０は、情報処理端末装置１０からアクセスされると、記憶部２０２に記憶されている対象画像データが示す対象画像の一覧のＷｅｂページを生成し（ステップＳＢ２）、生成したＷｅｂページのデータを情報処理端末装置１０へ送信する（ステップＳＢ３）。情報処理端末装置１０は、情報処理装置２０から送信されたデータに従って、対象画像の一覧のＷｅｂページを表示する（ステップＳＢ４）。ユーザが、表示された対象画像の一覧の中からトリミング処理を施す対象画像を選択する操作を操作部１０４で行うと（ステップＳＢ５）、制御部１０１は、ユーザが選択した対象画像を示す情報を情報処理装置２０へ送信する（ステップＳＢ６）。 When the information processing device 20 is accessed from the information processing terminal device 10, it generates a Web page of a list of target images indicated by the target image data stored in the storage unit 202 (step SB2), and the generated Web page. Data is transmitted to the information processing terminal device 10 (step SB3). The information processing terminal device 10 displays a Web page of a list of target images according to the data transmitted from the information processing device 20 (step SB4). When the operation unit 104 performs an operation of selecting the target image to be trimmed from the list of the displayed target images (step SB5), the control unit 101 provides information indicating the target image selected by the user. It is transmitted to the information processing device 20 (step SB6).
制御部２０１は、ユーザが選択した対象画像を示す情報を受信する。制御部２０１は、受信した情報で特定される対象画像から生成されて記憶部２０２に記憶されているトリミングデータを取得し、さらに、取得したトリミングデータに含まれている画像識別情報に対応する対象画像データを記憶部２０２から取得する（ステップＳＢ７）。制御部２０１は、取得したトリミングデータに含まれている座標を取得し、取得した座標により特定される構図の画像を対象画像データが示す対象画像から生成する（ステップＳＢ８）。 The control unit 201 receives information indicating the target image selected by the user. The control unit 201 acquires the trimming data generated from the target image specified by the received information and stored in the storage unit 202, and further, the target corresponding to the image identification information included in the acquired trimming data. Image data is acquired from the storage unit 202 (step SB7). The control unit 201 acquires the coordinates included in the acquired trimming data, and generates an image of the composition specified by the acquired coordinates from the target image indicated by the target image data (step SB8).
例えば、図６に示した対象画像がユーザにより選択された場合、制御部２０１（提示部２００４）は、対象画像から生成された図１０に示すトリミングデータに含まれる座標を取得し、取得した座標で図１２（ａ）〜（ｃ）に示す構図の画像を生成する。図１２（ａ）は、構図の第１候補の座標に従って生成された画像であり、図１２（ｂ）は、構図の第２候補の座標に従って生成された画像であり、図１２（ｃ）は、構図の第３候補の座標に従って生成された画像である。以下、図１２（ａ）〜（ｃ）に示す画像を、説明の便宜上、候補画像と称する。制御部２０１（提示部２００４）は、候補画像を生成すると、対象画像と、生成した複数の候補画像を含み、複数の候補画像のいずれかをユーザに選択させるＷｅｂページを生成し（ステップＳＢ９）、生成したＷｅｂページのデータを情報処理端末装置１０へ送信する（ステップＳＢ１０）。この候補画像は、実際にトリミング処理した画像データでもよいが、構図だけユーザに理解されればよいため、対象画像を縮小した画像データをトリミングデータに定義された座標に基づき切り抜いた画像データでもよいし、対象画像の縮小画像に対しトリミングデータに定義された座標の領域の外側の領域をマスクする情報を縮小画像とともに送信するようにしてもよい。また、縮小画像とともにトリミングデータのみを情報処理端末装置１０に送信し、情報処理端末装置１０は受信した縮小画像とトリミングデータに基づき、候補画像を生成して表示しユーザに提示するようにしてもよい。 For example, when the target image shown in FIG. 6 is selected by the user, the control unit 201 (presentation unit 2004) acquires the coordinates included in the trimming data shown in FIG. 10 generated from the target image, and the acquired coordinates. To generate images of the compositions shown in FIGS. 12 (a) to 12 (c). FIG. 12 (a) is an image generated according to the coordinates of the first candidate of the composition, FIG. 12 (b) is an image generated according to the coordinates of the second candidate of the composition, and FIG. 12 (c) is an image generated. , It is an image generated according to the coordinates of the third candidate of the composition. Hereinafter, the images shown in FIGS. 12A to 12C will be referred to as candidate images for convenience of explanation. When the candidate image is generated, the control unit 201 (presentation unit 2004) generates a Web page that includes the target image and the generated plurality of candidate images and allows the user to select one of the plurality of candidate images (step SB9). , The generated Web page data is transmitted to the information processing terminal device 10 (step SB10). This candidate image may be image data actually trimmed, but since only the composition needs to be understood by the user, the image data obtained by reducing the target image may be cropped based on the coordinates defined in the trimming data. Then, information for masking the area outside the area of the coordinates defined in the trimming data may be transmitted together with the reduced image for the reduced image of the target image. Further, only the trimming data is transmitted to the information processing terminal device 10 together with the reduced image, and the information processing terminal device 10 generates and displays a candidate image based on the received reduced image and the trimming data and presents it to the user. Good.
情報処理端末装置１０は、情報処理装置２０から送信されたデータに従って、複数の候補画像のいずれかをユーザに選択させるＷｅｂページを表示する（ステップＳＢ１１）。図１３は、候補画像をユーザに選択させるＷｅｂページの一例を示した図である。ユーザは、表示された候補画像のいずれかを選択する操作を操作部１０４で行う。ユーザが、候補画像のいずれかを選択（ステップＳＢ１２）した後、図１３に示す保存ボタンをクリックする操作を行うと、情報処理端末装置１０は、ユーザが選択した候補画像を示す情報を情報処理装置２０へ送信する（ステップＳＢ１３）。 The information processing terminal device 10 displays a Web page that allows the user to select one of a plurality of candidate images according to the data transmitted from the information processing device 20 (step SB11). FIG. 13 is a diagram showing an example of a Web page that allows the user to select a candidate image. The user performs an operation of selecting one of the displayed candidate images on the operation unit 104. When the user clicks the save button shown in FIG. 13 after selecting one of the candidate images (step SB12), the information processing terminal device 10 processes information indicating the candidate image selected by the user. It is transmitted to the device 20 (step SB13).
制御部２０１は、ユーザが選択した候補画像を示す情報を受信する。制御部２０１は、ユーザが選択した候補画像を受信した情報から特定し、特定した候補画像を生成する際に使用した座標を、ステップＳＢ７で取得したトリミングデータから取得する（ステップＳＢ１４）。例えば、ユーザが選択した候補画像が図１３に示したように第２候補の画像である場合、制御部２０１は、第２候補の画像を生成するときに使用した左上頂点の座標（０．２，０．０）と右下頂点の座標（１．０，０．８）を図１０のトリミングデータから取得する。 The control unit 201 receives information indicating a candidate image selected by the user. The control unit 201 identifies the candidate image selected by the user from the received information, and acquires the coordinates used when generating the specified candidate image from the trimming data acquired in step SB7 (step SB14). For example, when the candidate image selected by the user is the second candidate image as shown in FIG. 13, the control unit 201 uses the coordinates of the upper left vertex (0.2) used when generating the second candidate image. , 0.0) and the coordinates (1.0, 0.8) of the lower right vertex are obtained from the trimming data of FIG.
次に制御部２０１は、ステップＳＢ７で取得した対象画像データが示す対象画像を、取得した座標でトリミング処理し（ステップＳＢ１５）、対象画像をトリミングして生成した画像を、記憶部２０２に記憶させる（ステップＳＢ１６）。このトリミング処理においいて、実際に対象画像データを選択された構図に対応したトリミングデータの座標に基づいて切り抜く処理を行ってもよい。また、対象画像に対して加工処理を行わず、選択された構図に対応したトリミングデータとともに保存するのみでもよい。 Next, the control unit 201 trims the target image indicated by the target image data acquired in step SB7 at the acquired coordinates (step SB15), and stores the image generated by trimming the target image in the storage unit 202. (Step SB16). In this trimming process, the target image data may be cropped based on the coordinates of the trimming data corresponding to the selected composition. Further, the target image may not be processed and may be only saved together with the trimming data corresponding to the selected composition.
［変形例］
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。例えば、上述の実施形態を以下のように変形して本発明を実施してもよい。なお、上述した実施形態及び以下の変形例は、各々を組み合わせてもよい。
[Modification example]
Although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments, and can be implemented in various other embodiments. For example, the present invention may be carried out by modifying the above-described embodiment as follows. The above-described embodiment and the following modifications may be combined.
上述した実施形態においては、トリミングデータの生成を情報処理装置２０が行っているが、トリミングデータの生成を行う装置は情報処理装置２０に限定されるものではなく、情報処理端末装置１０がトリミングデータの生成を行ってもよい。この変形例の場合、例えば、情報処理端末装置１０は、情報処理システム１を利用するアプリケーションプログラムを記憶し、情報処理端末装置１０は、本発明に係る第１装置となり、情報処理装置２０は、本発明に係る第２装置となる。このアプリケーションプログラムを実行した制御部１０１は、図５に示した処理を実行し、記憶部１０２に記憶されている対象画像データからトリミングデータを生成する。制御部１０１は、ユーザがトリミング処理を施す対象画像データを選択する操作を行うと、ユーザが選択した対象画像データと、当該対象画像データから生成したトリミングデータを情報処理装置２０へ送信する。制御部２０１は、情報処理端末装置１０が送信した対象画像データとトリミングデータを受信する。制御部２０１は、受信した対象画像データを記憶部２０２に記憶させ、トリミングデータに含まれている画像を識別する情報のうちのひとつである格納場所の情報を、記憶部２０２における対象画像データの格納場所に更新する。 In the above-described embodiment, the information processing device 20 generates the trimming data, but the device that generates the trimming data is not limited to the information processing device 20, and the information processing terminal device 10 generates the trimming data. May be generated. In the case of this modification, for example, the information processing terminal device 10 stores an application program that uses the information processing system 1, the information processing terminal device 10 becomes the first device according to the present invention, and the information processing device 20 is This is the second device according to the present invention. The control unit 101 that executes this application program executes the process shown in FIG. 5 and generates trimming data from the target image data stored in the storage unit 102. When the user performs an operation of selecting the target image data to be trimmed, the control unit 101 transmits the target image data selected by the user and the trimming data generated from the target image data to the information processing device 20. The control unit 201 receives the target image data and the trimming data transmitted by the information processing terminal device 10. The control unit 201 stores the received target image data in the storage unit 202, and stores the storage location information, which is one of the information for identifying the image included in the trimming data, in the storage unit 202 of the target image data. Update to storage location.
制御部２０１は、受信したトリミングデータに含まれている座標を取得し、取得した座標により特定される構図の候補画像を、受信した対象画像データが示す対象画像から生成する。制御部２０１は、候補画像を生成すると、複数の候補画像のいずれかをユーザに選択させるＷｅｂページを生成し、生成したＷｅｂページのデータを情報処理端末装置１０へ送信する。アプリケーションプログラムを実行中の制御部１０１は、情報処理装置２０から送信されたデータに従って、複数の候補画像のいずれかをユーザに選択させるＷｅｂページを表示する。ユーザが、候補画像のいずれかを選択した後、図１３に示す保存ボタンをクリックする操作を行うと、制御部１０１は、ユーザが選択した候補画像を示す情報を情報処理装置２０へ送信する。制御部２０１は、ユーザが選択した候補画像を示す情報を受信する。制御部２０１は、ユーザが選択した候補画像を受信した情報から特定し、特定した候補画像を生成する際に使用した座標を、情報処理端末装置１０から受信したトリミングデータから取得する。次に制御部２０１は、情報処理端末装置１０から受信した対象画像データが示す対象画像を、取得した座標でトリミングし、対象画像をトリミングして生成した画像を、記憶部２０２に記憶させる。
また、この変形例においては、情報処理端末装置１０は、Ｗｅｂブラウザでオンライン上の文書を編集する際に、生成したトリミングデータと対象画像の対象画像データを文書編集を行うサーバ装置へ送信し、サーバ装置は、送信されたトリミングデータと対象画像データからトリミングされた画像を生成し、生成した画像を文書に埋め込むようにしてもよい。
The control unit 201 acquires the coordinates included in the received trimming data, and generates a candidate image of the composition specified by the acquired coordinates from the target image indicated by the received target image data. When the candidate image is generated, the control unit 201 generates a Web page that allows the user to select one of the plurality of candidate images, and transmits the generated Web page data to the information processing terminal device 10. The control unit 101, which is executing the application program, displays a Web page that allows the user to select one of a plurality of candidate images according to the data transmitted from the information processing device 20. When the user clicks the save button shown in FIG. 13 after selecting one of the candidate images, the control unit 101 transmits information indicating the candidate image selected by the user to the information processing device 20. The control unit 201 receives information indicating a candidate image selected by the user. The control unit 201 identifies the candidate image selected by the user from the received information, and acquires the coordinates used when generating the specified candidate image from the trimming data received from the information processing terminal device 10. Next, the control unit 201 trims the target image indicated by the target image data received from the information processing terminal device 10 with the acquired coordinates, and stores the image generated by trimming the target image in the storage unit 202.
Further, in this modification, the information processing terminal device 10 transmits the generated trimming data and the target image data of the target image to the server device that edits the document when editing the document online with the Web browser. The server device may generate a trimmed image from the transmitted trimming data and the target image data, and embed the generated image in the document.
本発明においては、制御部２０１は、ステップＳＢ８で生成した複数の候補画像を一時的に記憶し、ユーザが選択した候補画像を示す情報をステップＳＢ１３で受信すると、受信した情報が示す候補画像を一時的に記憶している候補画像の中から取得し、取得した候補画像を、対象画像をトリミングした画像として記憶部２０２に記憶させてもよい。 In the present invention, the control unit 201 temporarily stores a plurality of candidate images generated in step SB8, and when the information indicating the candidate image selected by the user is received in step SB13, the candidate image indicated by the received information is received. The candidate image acquired from the temporarily stored candidate images may be stored in the storage unit 202 as an image obtained by trimming the target image.
上述した実施形態においては、対象画像をトリミングして得た画像は情報処理装置２０の記憶部２０２に記憶されるが、対象画像をトリミングして得た画像を情報処理端末装置１０へ送信し、情報処理端末装置１０にも記憶するようにしてもよい。 In the above-described embodiment, the image obtained by trimming the target image is stored in the storage unit 202 of the information processing device 20, but the image obtained by trimming the target image is transmitted to the information processing terminal device 10. It may be stored in the information processing terminal device 10.
本発明においては、複数の候補画像を情報処理端末装置１０に表示させる際には、対象画像を縮小した画像の画像データと、対象画像から生成したトリミングデータを情報処理装置２０から情報処理端末装置１０へ送信し、情報処理端末装置１０は、対象画像を縮小した画像の画像データと、対象画像から生成したトリミングデータを受信し、受信した画像データが示す画像に対して、受信したトリミングデータに含まれる座標で候補画像を生成して表示してもよい。 In the present invention, when displaying a plurality of candidate images on the information processing terminal device 10, the information processing terminal device 20 transmits the image data of the image obtained by reducing the target image and the trimming data generated from the target image. The information processing terminal device 10 receives the image data of the image obtained by reducing the target image and the trimming data generated from the target image, and uses the received trimming data for the image indicated by the received image data. Candidate images may be generated and displayed with the included coordinates.
本発明においては、候補画像を生成する方法は上述の実施形態の方法に限定されるものではなく、他の方法であってもよい。例えば、記憶部２０２は、予め定められた画像を見本画像として記憶部２０２に複数記憶する。制御部２０１は、対象画像の特徴部分と見本画像の特徴部分とを比較し、対象画像の特徴部分と同じ特徴部分を有する見本画像を特定する。例えば、制御部２０１は、図１４の見本画像があり、図６の画像が対象画像である場合、共に特徴部分として人間の顔があるため、図１４の見本画像を特定し、見本画像の構図と同じ構図の候補画像を対象画像から生成する。 In the present invention, the method for generating the candidate image is not limited to the method of the above-described embodiment, and may be another method. For example, the storage unit 202 stores a plurality of predetermined images as sample images in the storage unit 202. The control unit 201 compares the feature portion of the target image with the feature portion of the sample image, and identifies a sample image having the same feature portion as the feature portion of the target image. For example, when the control unit 201 has the sample image of FIG. 14 and the image of FIG. 6 is the target image, the control unit 201 identifies the sample image of FIG. 14 and composes the sample image because both have a human face as a feature portion. A candidate image with the same composition as is generated from the target image.
具体的には、制御部２０１は、画像解析により顔の領域の位置と大きさを検出する。制御部２０１は、図１５に示すように顔の領域を正方形とし、図１５（ａ）に示す見本画像の顔の領域の１辺の長さをＬrefとし、図１５（ｂ）に示す対象画像の顔の領域の１辺の長さをＬsrcとする。また、制御部２０１は、見本画像の顔の領域の左上頂点ｖ５１の座標を（Ｘref，Ｙref）とし、対象画像の顔の領域の左上頂点ｖ５２の座標を（Ｘsrc，Ｙsrc）とし、図１５（ｃ）に示す候補画像の左上頂点の座標ｖ６１の座標を（Ｘul，Ｙul）とし、候補画像の右下頂点の座標ｖ６２の座標を（Ｘdr，Ｙdr）とする。 Specifically, the control unit 201 detects the position and size of the face region by image analysis. The control unit 201 has a square face area as shown in FIG. 15, and the length of one side of the face area of the sample image shown in FIG. 15 (a) is L ref, and the object shown in FIG. 15 (b). Let L src be the length of one side of the face area of the image. Further, the control unit 201 sets the coordinates of the upper left apex v51 of the face area of the sample image as (X ref , Y ref ) and the coordinates of the upper left apex v52 of the face area of the target image as (X src , Y src ). , The coordinates of the coordinates v61 of the upper left apex of the candidate image shown in FIG. 15C are (X ul , Y ul ), and the coordinates of the coordinates v62 of the lower right apex of the candidate image are (X dr , Y dr ).
見本画像と対象画像の比率Ｎは、Ｎ＝Ｌsrc／Ｌrefとなる。見本画像のアスペクト比がＲrefのとき、座標ｖ６１と座標ｖ６２は、以下の式で算出される。
Ｘul＝Ｘsrc−ＮＸref
Ｙul＝Ｙsrc−ＮＹref
Ｘdr＝Ｎ（１＋Ｘref）−Ｘsrc
Ｙdr＝Ｎ（１＋Ｙref）−Ｙsrc
The ratio N of the sample image and the target image is N = L src / L ref . When the aspect ratio of the sample image is R ref , the coordinates v61 and the coordinates v62 are calculated by the following equations.
X ul = X src −NX ref
Y ul = Y src- NY ref
X dr = N (1 + X ref ) -X src
Y dr = N (1 + Y ref ) -Y src
上述した実施形態においては、候補画像は対象画像の一部を切り取った画像であるが、候補画像の構図は実施形態の構図に限定されるものではない。例えば、制御部２０１は、候補画像を生成するときのフレームのサイズを対象画像より大きなものとし、対象画像より大きなサイズのフレーム内に対象画像を収めて候補画像を生成してもよい。図１６は、対象画像より大きなサイズのフレーム内に対象画像を収めて生成した候補画像の一例を示した図である。図１６に示す候補画像においては、フレームを縦および横に三分割する仮想線の交点に対象画像の特徴部分が位置した構図となっており、候補画像の左上頂点の座標ｖ７１は（−０．４，−１．０）であり、候補画像の右下頂点の座標ｖ７２は（１．２，１．０）となっている。 In the above-described embodiment, the candidate image is an image obtained by cutting out a part of the target image, but the composition of the candidate image is not limited to the composition of the embodiment. For example, the control unit 201 may set the size of the frame when generating the candidate image to be larger than the target image, and may generate the candidate image by storing the target image in a frame having a size larger than the target image. FIG. 16 is a diagram showing an example of a candidate image generated by accommodating the target image in a frame having a size larger than the target image. In the candidate image shown in FIG. 16, the composition is such that the characteristic portion of the target image is located at the intersection of the virtual lines that divide the frame into three vertically and horizontally, and the coordinate v71 of the upper left vertex of the candidate image is (-0. 4, −1.0), and the coordinates v72 of the lower right vertex of the candidate image are (1.2, 1.0).
上述した実施形態においては、対象画像からトリミングデータを生成しているが、対象画像を縮小した画像（縮小画像）を対象にしてトリミングデータを生成してもよい。トリミング処理した候補画像も縮小画像を生成し、選択後、改めて対象画像に対してトリミング処理を施すことで処理効率が向上する。例えば、対象画像が印刷用画像や高解像度ディスプレイ用(デジタルサイネージなど)に利用する場合、または高解像度カメラで取得した画像の場合には大容量画像が使われるが、トリミングするなどのレイアウトを決める作業においては縮小画像の方が好ましい。 In the above-described embodiment, the trimming data is generated from the target image, but the trimming data may be generated for the image (reduced image) obtained by reducing the target image. A reduced image is also generated for the trimmed candidate image, and after selection, the target image is trimmed again to improve the processing efficiency. For example, if the target image is used for a print image or a high-resolution display (digital signage, etc.), or if the image is acquired by a high-resolution camera, a large-capacity image is used, but the layout such as trimming is decided. A reduced image is preferable in the work.
本発明においては、トリミングデータに対して、各候補画像の効果を示す情報を含めるようにしてもよい。例えば、図１０に示したトリミングデータにおいて、第１候補の項目に対して、「主題が明確になる」との情報を対応付けて含め、第２候補の項目に対して、「自然な印象になる」との情報を対応付けて含め、第３候補の項目に対して、「インパクトを与える」との情報を対応付けて含めてもよい。また、制御部２０１は、複数の候補画像のいずれかをユーザに選択させるＷｅｂページを生成する際に、各候補画像に対応付けて、トリミングデータに含まれている候補画像の効果を記載してもよい。 In the present invention, the trimming data may include information indicating the effect of each candidate image. For example, in the trimming data shown in FIG. 10, the information that "the subject becomes clear" is included in association with the first candidate item, and the second candidate item is "naturally impressed". The information "becomes" may be included in association with the information "to give an impact" to the item of the third candidate. Further, the control unit 201 describes the effect of the candidate image included in the trimming data in association with each candidate image when generating a Web page for allowing the user to select one of the plurality of candidate images. May be good.
本発明においては、トリミングデータにおいて、対象画像の特徴部分の情報を含めるようにしてもよい。例えば、制御部２０１は、図６に示したように顔を特徴部分として検出した場合、特徴部分にある被写体の情報として、顔を示す「face」との情報と、特徴部分の領域Ａ１１の一辺の長さの情報として「０．２」との情報と、領域Ａ１１の左上頂点の座標の情報をトリミングデータに含める。この構成によれば、制御部２０１は、上述した変形例で対象画像と同じ被写体である見本画像を特定する際に、特徴部分の被写体の情報が同じであるトリミングデータを検索し、検索でヒットしたトリミングデータに含まれている格納場所の情報から、対象画像と同じ被写体である見本画像を取得する。 In the present invention, the trimming data may include information on the feature portion of the target image. For example, when the control unit 201 detects a face as a feature portion as shown in FIG. 6, the information of the subject in the feature portion includes the information of the “face” indicating the face and one side of the region A11 of the feature portion. The information of "0.2" and the information of the coordinates of the upper left vertex of the area A11 are included in the trimming data as the information of the length of. According to this configuration, when the control unit 201 identifies a sample image that is the same subject as the target image in the above-described modification, it searches for trimming data that has the same subject information in the feature portion, and hits in the search. A sample image that is the same subject as the target image is acquired from the storage location information included in the trimming data.
本発明においては、上述した変形例のように、対象画像の特徴部分の領域の情報をトリミングデータに含める場合、制御部２０１は、対象画像の候補画像を生成するときに、特徴部分の被写体の情報が類似するトリミングデータを検索し、検索でヒットしたトリミングデータに含まれている格納場所の情報から、対象画像と同じ被写体である見本画像の画像データを取得し、取得した画像データが示す見本画像と同じ構図の画像を対象画像から生成して候補画像としてもよい。また、この変形例においては、制御部２０１は、見本画像と同じ構図の候補画像を生成した場合、見本画像のトリミングデータに含まれている座標を用いて複数の候補画像を生成してもよい。 In the present invention, when the information of the region of the feature portion of the target image is included in the trimming data as in the above-described modification, the control unit 201 receives the subject of the feature portion when generating the candidate image of the target image. Search for trimming data with similar information, acquire image data of a sample image that is the same subject as the target image from the storage location information included in the trimming data hit in the search, and the sample indicated by the acquired image data. An image having the same composition as the image may be generated from the target image and used as a candidate image. Further, in this modification, when the control unit 201 generates a candidate image having the same composition as the sample image, the control unit 201 may generate a plurality of candidate images using the coordinates included in the trimming data of the sample image. ..
本発明においては、制御部２０１は、候補画像を生成する際に上述した変形例で対象画像に対する見本画像を特定し、特定した見本画像から生成したトリミングデータに含まれている座標で対象画像から候補画像を生成してもよい。また、特徴部分が類似である対象画像が複数ある場合、複数の対象画像に対して一つの見本画像を特定し、特定した見本画像から生成したトリミングデータに含まれている座標で複数の対象画像の各々から候補画像を生成してもよい。 In the present invention, the control unit 201 specifies a sample image for the target image in the above-described modification when generating the candidate image, and from the target image at the coordinates included in the trimming data generated from the specified sample image. Candidate images may be generated. When there are a plurality of target images having similar feature portions, one sample image is specified for the plurality of target images, and a plurality of target images are used at the coordinates included in the trimming data generated from the specified sample images. Candidate images may be generated from each of the above.
上述した実施形態においては、ユーザが情報処理端末装置１０において行った操作に応じて選択された構図に応じて、トリミングされた画像が情報処理装置２０に記憶されるが、予めユーザが構図を設定することにより、画像データが情報処理装置２０に記憶されると、設定された構図でトリミングされた画像を記憶する構成としてもよい。 In the above-described embodiment, the trimmed image is stored in the information processing device 20 according to the composition selected according to the operation performed by the user in the information processing terminal device 10, but the user sets the composition in advance. By doing so, when the image data is stored in the information processing device 20, the image trimmed with the set composition may be stored.
上述した実施形態においては、対象画像データが示す画像は、原画像であるが、原画像を縮小した画像であってもよい。この場合、トリミングの構図の候補を縮小された画像で提供し、ユーザに選択された構図で原画像をトリミング処理してもよい。 In the above-described embodiment, the image indicated by the target image data is an original image, but an image obtained by reducing the original image may be used. In this case, the trimming composition candidate may be provided as a reduced image, and the original image may be trimmed with the composition selected by the user.
本発明に係る各装置のプログラムは、磁気記録媒体（磁気テープ、磁気ディスク（ＨＤＤ（Hard Disk Drive）、ＦＤ（Flexible Disk））など）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータ読取り可能な記録媒体に記憶した状態で提供し、インストールしてもよい。また、通信回線を介してプログラムをダウンロードしてインストールしてもよい。 The program of each device according to the present invention includes a magnetic recording medium (magnetic tape, magnetic disk (HDD (Hard Disk Drive), FD (Flexible Disk), etc.)), optical recording medium (optical disk, etc.), optical magnetic recording medium, semiconductor. It may be provided and installed in a state of being stored in a computer-readable recording medium such as a memory. Alternatively, the program may be downloaded and installed via a communication line.
１…情報処理システム、２…通信回線、１０…情報処理端末装置、２０…情報処理装置、１０１…制御部、１０２…記憶部、１０３…ディスプレイ、１０４…操作部、１０５…通信部、２０１…制御部、２０２…記憶部、２０５…通信部、２００１…取得部、２００２…検出部、２００３…データ生成部、２００４…提示部 1 ... Information processing system, 2 ... Communication line, 10 ... Information processing terminal device, 20 ... Information processing device, 101 ... Control unit, 102 ... Storage unit, 103 ... Display, 104 ... Operation unit, 105 ... Communication unit, 201 ... Control unit, 202 ... Storage unit, 205 ... Communication unit, 2001 ... Acquisition unit, 2002 ... Detection unit, 2003 ... Data generation unit, 2004 ... Presentation unit
Claims (9)
前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、
前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、
前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段と
を備える情報処理システム。 Acquisition method to acquire the original image and
When the acquisition means acquires the original image, the detection means for detecting the feature portion of the original image and
A data generation means for generating area data representing an area including a feature portion detected by the detection means, and a data generation means.
An information processing system including a presentation means that presents an image representing an area corresponding to the area data in the original image to a user when receiving information for identifying the original image.
前記取得手段は、前記原画像を前記記憶手段から取得し、
前記領域データは、前記原画像を識別する情報を含み、
前記提示手段は、前記領域データが含む識別情報で識別される原画像から生成する
請求項１に記載の情報処理システム。 It has a storage means for storing the original image, and has
The acquisition means acquires the original image from the storage means and obtains the original image.
The area data includes information that identifies the original image.
The information processing system according to claim 1, wherein the presentation means is generated from an original image identified by identification information included in the area data.
前記取得手段と、前記検出手段と、前記データ生成手段と、
前記領域データを送信する送信手段と
を有し、
第２装置は、
前記提示手段と、
前記送信手段から送信された前記領域データを受信する受信手段と
を有し、
前記提示手段は、前記受信手段が受信した前記領域データが表す領域の画像を前記領域データが含む識別情報で識別される原画像から生成する
請求項２に記載の情報処理システム。 The first device is
The acquisition means, the detection means, the data generation means,
It has a transmission means for transmitting the area data, and has
The second device is
With the presentation means
It has a receiving means for receiving the area data transmitted from the transmitting means, and has.
The information processing system according to claim 2, wherein the presenting means generates an image of a region represented by the region data received by the receiving means from an original image identified by identification information included in the region data.
前記提示手段は、前記複数の領域毎に対応した画像を提示する
請求項１に記載の情報処理システム。 The area data represents a plurality of different areas.
The information processing system according to claim 1, wherein the presentation means presents an image corresponding to each of the plurality of regions.
請求項４に記載の情報処理システム。 The information processing system according to claim 4, wherein any of the plurality of regions is a region wider than the region of the original image.
前記原画像に対して予め定められた条件を満たす見本画像の領域データを取得し、取得した領域データが表す領域の画像を前記原画像から生成する
請求項１に記載の情報処理システム。 The presentation means
The information processing system according to claim 1, wherein the area data of a sample image satisfying a predetermined condition with respect to the original image is acquired, and an image of the area represented by the acquired area data is generated from the original image.
前記見本画像の構図に対応した画像を前記原画像から生成し、取得した領域データが表す領域の画像を前記見本画像から生成した画像から生成する
請求項６に記載の情報処理システム。 The presentation means
The information processing system according to claim 6, wherein an image corresponding to the composition of the sample image is generated from the original image, and an image of a region represented by the acquired area data is generated from the image generated from the sample image.
前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、
前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、
前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段と
を備える情報処理装置。 Acquisition method to acquire the original image and
When the acquisition means acquires the original image, the detection means for detecting the feature portion of the original image and
A data generation means for generating area data representing an area including a feature portion detected by the detection means, and a data generation means.
An information processing device including a presentation means that presents an image representing an area corresponding to the area data in the original image to a user when receiving information for identifying the original image.
原画像を取得する取得手段と、
前記取得手段が前記原画像を取得すると前記原画像の特徴部分を検出する検出手段と、
前記検出手段で検出された特徴部分を含む領域を表す領域データを生成するデータ生成手段と、
前記原画像を識別する情報を受付けると、前記原画像における前記領域データに対応する領域を表す画像をユーザに提示する提示手段
として機能させるためのプログラム。 Computer,
Acquisition method to acquire the original image and
When the acquisition means acquires the original image, the detection means for detecting the feature portion of the original image and
A data generation means for generating area data representing an area including a feature portion detected by the detection means, and a data generation means.
A program for functioning as a presentation means for presenting an image representing an area corresponding to the area data in the original image to a user when the information for identifying the original image is received.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019044816A JP7310178B2 (en) | 2019-03-12 | 2019-03-12 | Information processing system, information processing device and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019044816A JP7310178B2 (en) | 2019-03-12 | 2019-03-12 | Information processing system, information processing device and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020150364A true JP2020150364A (en) | 2020-09-17 |
| JP7310178B2 JP7310178B2 (en) | 2023-07-19 |
Family
ID=72430788
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019044816A Active JP7310178B2 (en) | 2019-03-12 | 2019-03-12 | Information processing system, information processing device and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7310178B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022201824A1 (en) * | 2021-03-26 | 2022-09-29 | ソニーグループ株式会社 | Information processing device and method, and program |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005182767A (en) * | 2003-11-27 | 2005-07-07 | Fuji Photo Film Co Ltd | Image editing apparatus, method, and program |
| JP2006279643A (en) * | 2005-03-30 | 2006-10-12 | Seiko Epson Corp | Image trimming having reduced load on user |
| JP2007243733A (en) * | 2006-03-09 | 2007-09-20 | Fujifilm Corp | Image management apparatus and method, imaging apparatus, program, and image ordering slip |
| JP2009176164A (en) * | 2008-01-25 | 2009-08-06 | Sharp Corp | Image processing device and image processing method |
| JP2010267180A (en) * | 2009-05-18 | 2010-11-25 | Olympus Corp | Image processing apparatus, electronic device, and program |
| JP2016178553A (en) * | 2015-03-20 | 2016-10-06 | 株式会社Pfu | Image processing device, region detection method, and computer program |
-
2019
- 2019-03-12 JP JP2019044816A patent/JP7310178B2/en active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005182767A (en) * | 2003-11-27 | 2005-07-07 | Fuji Photo Film Co Ltd | Image editing apparatus, method, and program |
| JP2006279643A (en) * | 2005-03-30 | 2006-10-12 | Seiko Epson Corp | Image trimming having reduced load on user |
| JP2007243733A (en) * | 2006-03-09 | 2007-09-20 | Fujifilm Corp | Image management apparatus and method, imaging apparatus, program, and image ordering slip |
| JP2009176164A (en) * | 2008-01-25 | 2009-08-06 | Sharp Corp | Image processing device and image processing method |
| JP2010267180A (en) * | 2009-05-18 | 2010-11-25 | Olympus Corp | Image processing apparatus, electronic device, and program |
| JP2016178553A (en) * | 2015-03-20 | 2016-10-06 | 株式会社Pfu | Image processing device, region detection method, and computer program |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022201824A1 (en) * | 2021-03-26 | 2022-09-29 | ソニーグループ株式会社 | Information processing device and method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7310178B2 (en) | 2023-07-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10269164B1 (en) | Creating custom stickers for use on a messaging system | |
| US8601369B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| US8952989B2 (en) | Viewer unit, server unit, display control method, digital comic editing method and non-transitory computer-readable medium | |
| US20150212713A1 (en) | Information processing apparatus, information processing method, and computer-readable recording medium | |
| JP6206202B2 (en) | Information processing apparatus and information processing program | |
| CN109063197A (en) | Image search method, device, computer equipment and storage medium | |
| JP6237135B2 (en) | Information processing apparatus and information processing program | |
| JP7310178B2 (en) | Information processing system, information processing device and program | |
| JP2007066081A (en) | Electronic conference device, and electronic conference device control program | |
| US10839774B2 (en) | Content providing apparatus and computer program | |
| JP4305325B2 (en) | Sticky note information processing method, sticky note information processing system, and sticky note information processing program | |
| CN101114279A (en) | Document production support device, methods thereof and storage medium | |
| JP5528410B2 (en) | Viewer device, server device, display control method, electronic comic editing method and program | |
| JP5541868B2 (en) | Image search command system and operation control method thereof | |
| JP4693167B2 (en) | Form search device, form search method, program, and computer-readable storage medium | |
| JP2001005911A (en) | Character input device and display controlling method | |
| JP2005311729A (en) | Device and program for preparing file name | |
| JP4464116B2 (en) | Image display control device, control method for image display control device, program, and recording medium | |
| JP2009015774A (en) | Information processing unit and information processing method | |
| JP6989769B2 (en) | Information processing systems, information processing system control methods, and programs | |
| US10459681B2 (en) | Information processing apparatus, information processing method, and storage medium | |
| JP2009211283A (en) | Cursor management device and computer program | |
| JPH0325235Y2 (en) | ||
| JP3918921B2 (en) | Pointer moving method, program, and recording medium | |
| JP6476985B2 (en) | Display device, display system, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220228 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220928 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221205 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230328 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230526 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230606 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230619 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7310178 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |