WO2018110490A1 - 情報処理装置、遺伝情報作成方法及びプログラム - Google Patents
情報処理装置、遺伝情報作成方法及びプログラム Download PDFInfo
- Publication number
- WO2018110490A1 WO2018110490A1 PCT/JP2017/044334 JP2017044334W WO2018110490A1 WO 2018110490 A1 WO2018110490 A1 WO 2018110490A1 JP 2017044334 W JP2017044334 W JP 2017044334W WO 2018110490 A1 WO2018110490 A1 WO 2018110490A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- genetic
- person
- phenotype
- image
- expression
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/535—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/55—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Definitions
- Non-Patent Document 1 may be insufficient from the viewpoint of a technique for identifying a person based on a genetic phenotype.
- the above-described technique is insufficient as a technique for narrowing a large group to a small group.
- an object of the present invention is to provide an information processing apparatus, a genetic information creation method, and a program that contribute to easy confirmation of genetic information related to an object shown in an image.
- a genetic phenotype of a biological sample is stored in a storage unit that stores biological sample information including the genetic phenotype of the biological sample, and an image obtained by imaging an unspecified number of persons.
- An extraction unit that individually identifies a person who can recognize an expression part in which the expression appears, extracts an expression part in which a genetic phenotype appears from the image of each specified person, and a phenotype of the expression part extracted by the extraction unit Comparing the phenotype determined by the phenotype determination unit with the genetic phenotype of the biological sample and comparing the provider of the biological sample with the person in the person image Is provided with an identity determination unit that determines whether or not the same person and an output unit that outputs information about the person determined to be the same by the identity determination unit.
- a step of extracting an expression portion in which an organism's genetic phenotype appears from an image and a step of creating genetic information about the organism appearing in the image based on the extracted expression portion. And a method for generating genetic information.
- an information processing apparatus a genetic information creation method, and a program that contribute to easy confirmation of genetic information related to an object shown in an image.
- the information processing apparatus 100 includes an extraction unit 101 and a genetic information creation unit 102.
- the extraction unit 101 extracts an expression part (phenotypical part) where a genetic phenotype of an organism appears from an image.
- the genetic information creation unit 102 creates genetic information related to a living thing appearing in the image based on the expression part extracted by the extraction unit 101.
- the information processing apparatus 100 according to the embodiment makes it possible to easily confirm genetic information related to an object shown in an image. For example, it is possible to easily identify a person based on a genetic phenotype.
- the determination person has a montage created based on biological sample information obtained from the biological sample and a human image captured by a security camera or the like, and inputs the human image to the information processing apparatus 100.
- the information processing apparatus 100 has in advance a list in which expression parts to be extracted from a person image are described (hereinafter referred to as an expression part list).
- the expression list lists the positions that should be watched by the judges, such as “hairline”, “earlobe”, “hair whorl”, and “nape”. The parts that should be ignored by the judges are not listed.
- the information processing apparatus 100 creates and outputs “genetic information” listing the names of the extracted expression parts. That is, the genetic information lists expressions that can be recognized in the person image. In other words, in the genetic information, information obtained by excluding expression parts that cannot be recognized in the human image from the expression parts listed in the expression part list is listed.
- the judgment person refers to the genetic information, compares the montage with the person image, and determines whether the biological sample provider (judgment criterion) and the person imaged by the security camera (judgment control) match or are similar to each other. Is determined visually. At that time, the judgment person may just watch the expression parts listed in the genetic information such as “the hairline of the bangs”, and can judge that the expression parts not listed in the genetic information such as “tsumuji” may be ignored. That is, it is possible for the determination person to save time and effort for determining which expression part can be used for determining a person appearing in the image.
- connection lines between the blocks in each drawing include both bidirectional and unidirectional directions.
- the unidirectional arrow schematically shows the main signal (data) flow and does not exclude bidirectionality.
- the creature in the image includes “person”, and thus “image” is also referred to as “person image”.
- “living creatures shown in an image” includes animals and plants, and is not limited to “persons”.
- “living organism” is “pea (bean)”
- “expression part” includes “bean”, “flower”, etc.
- genetic phenotype is “with wrinkle (or without)” or “red” (Or white) ".
- “person appearing in a person image” corresponds to “determination control”, and “provider of biological sample” corresponds to “determination criterion”. Also, “identical” means that the judgment control and the judgment criterion are the same person, and “identity” means whether the genetic phenotype of the judgment control and the genetic phenotype of the judgment reference match. It is judged by.
- the “biological sample information” is information indicating the genetic phenotype of the biological sample provider.
- the genetic phenotype of the biological sample provider is “Fuji amount”, “plump ears”, This is information indicating that “eye color is black” and “black hair”.
- Genetic information is information about a living thing appearing in an image, in particular, information obtained by the information processing apparatus 100, an expression part that can be extracted from the image, a genetic phenotype of a living thing (ie, a judgment reference) appearing in the image, And / or the identity determination result.
- FIG. 2 is a block diagram illustrating an example of a hardware configuration of the information processing apparatus 10 according to the first embodiment.
- the information processing apparatus 10 is a so-called computer and has, for example, the configuration illustrated in FIG.
- the information processing apparatus 10 includes a CPU (Central Processing Unit) 11, a memory 12, an input / output interface 13, and a NIC (Network Interface Card) 14 that are communication means, which are connected to each other via an internal bus.
- a CPU Central Processing Unit
- memory 12 a memory
- input / output interface 13 a memory
- NIC Network Interface Card
- the configuration illustrated in FIG. 2 is not intended to limit the hardware configuration of the information processing apparatus 10.
- the information processing apparatus 10 may include hardware (not shown) or may not include the NIC 14 or the like as necessary.
- the number of CPUs 11 and the like included in the information processing apparatus 10 is not limited to the example illustrated in FIG. 3.
- a plurality of CPUs 11 may be included in the information processing apparatus 10.
- the memory 12 is a RAM (Random Access Memory), a ROM (Read Only Memory), or an auxiliary storage device (hard disk or the like).
- the input / output interface 13 is a means to be an interface of a display device and an input device (not shown).
- the display device is, for example, a liquid crystal display.
- the input device is a device that accepts user operations such as a keyboard and a mouse, for example.
- the input device also includes an external storage device such as a USB (Universal Serial Bus) memory.
- USB Universal Serial Bus
- FIG. 3 is a diagram illustrating an example of a processing configuration of the information processing apparatus 10 according to the first embodiment.
- the information processing apparatus 10 includes a storage unit 110, an input unit 120, an extraction unit 130, a genetic information creation unit 140, and an output unit 150.
- the storage unit 110 is configured by a RAM or the like of the memory 12 and stores information and the like necessary for the operation of the information processing apparatus 10. In addition, the storage unit 110 stores the above-described expression location list, information for extracting an expression location by image processing, and the like.
- the input unit 120 is a means for inputting a person image.
- the input unit 120 functions as an input interface for a person image or the like.
- the person image is, for example, an image of a person imaged by a security camera or a surveillance camera, and is input to the information processing apparatus 10 via an information storage medium such as a USB memory or a network.
- FIG. 4 is a diagram illustrating an example of an expression location list including expression locations to be extracted by the extraction unit 130.
- the extraction unit 130 attempts to extract at least “a hairline of bangs” and “earlobe” from a person image.
- the extraction unit 130 stores in the storage unit 110 information regarding whether or not each expression location described in the expression location list has been successfully extracted.
- the extraction unit 130 performs the image processing on the person image, thereby extracting the expression part described in the expression part list. More specifically, the extraction unit 130 compares a general face outline stored in the storage unit 110 with a person's face outline in the person image, and extracts a face region. Thereafter, the extraction unit 130 performs processing such as determining whether or not the pattern of the expression part described in the expression part list stored in the storage unit 110 can be extracted. It should be noted that a technique such as Reference Document 1 (Japanese Patent Laid-Open No. 2005-242432) describing a face authentication technique can be applied to extraction of an expression part by the extraction unit 130.
- Reference Document 1 Japanese Patent Laid-Open No. 2005-242432
- the genetic information creation unit 140 creates genetic information about the person in the person image based on the expression part that has been successfully extracted by the extraction unit 130. For example, the genetic information creation unit 140 uses the information including the name of the expression part (for example, “the hairline of the bangs”) determined to be extractable (successfully extracted) by the extraction unit 130 as genetic information. The genetic information creation unit 140 passes the created genetic information to the output unit 150.
- the name of the expression part for example, “the hairline of the bangs”
- the genetic information creation unit 140 passes the created genetic information to the output unit 150.
- the output unit 150 is a means for outputting the genetic information created by the genetic information creation unit 140 to the outside.
- the output unit 150 may print out genetic information or display it on a monitor as image information.
- the output unit 150 may reflect the genetic information on the person image that is the basis for extracting the expression portion and output the reflected image. For example, when “hairline” and “earlobe” are extracted from a person image, the output unit 150 performs processing such as enclosing with a red circle so as to emphasize the forehead part and the earlobe part of the person image. May be.
- FIG. 5 is a flowchart showing an example of the operation of the information processing apparatus 10 according to the first embodiment.
- the information processing apparatus 10 extracts an expression portion where a genetic phenotype appears from a person image (step S101), and creates genetic information of a person shown in the person image based on the extracted expression portion (step S102). ). Thereafter, the information processing apparatus 10 outputs the created genetic information by a predetermined method (step S103).
- the information processing apparatus 10 selects the expression parts that can be recognized in the human image from the expression parts listed in the expression part list, and genetic information that lists the names of the parts. Is output.
- the determination person it is possible for the determination person to save time and effort for determining which expression part can be used for determination of the person shown in the image, so that person identification based on the genetic phenotype becomes easy.
- the determination person only needs to know whether or not the genetic phenotype of the biological sample provider matches the genetic phenotype of the person in the person image. If such an information processing apparatus 10 is used, there is no need to create a montage. However, in addition to the determination, it is of course possible for the determination person to compare the montage with the person image.
- the determination person can determine the genetic expression of the biological sample provider. It is no longer necessary to determine whether the type matches the genetic phenotype of the person in the person image.
- such an embodiment will be described as a second embodiment.
- the information processing apparatus 10 according to the second embodiment further includes a phenotype determination unit 160 and an identity determination unit 170, and the information processing apparatus 10 according to the first embodiment It differs in the following points.
- the input unit 120 inputs biological sample information including the genetic phenotype of the biological sample.
- the input biological sample information is stored in the storage unit 110.
- the biological sample information is information including the genetic phenotype (excellent or inferior) of the biological sample provider (for example, a criminal who has left blood stains at the incident site).
- the name of the expression location is associated with a genetic phenotype such as “Fuji forehead (dominant)” or “poor ear: non plump ears” (see FIG. 8).
- the phenotype determination unit 160 determines whether the shape of the expression portion “bang hairline” is a dominant character (so-called Fuji amount) or a recessive character (non-Fuji amount). At this time, the phenotype determination unit 160 cuts out the shape of the hairline from the person image, compares the cut out shape with a previously prepared M-shaped pattern, and determines whether it is a Fuji forehead based on the matching condition. .
- the identity determination unit 170 compares the biological sample information with the determination result by the phenotype determination unit 160 to determine whether the provider of the biological sample and the person in the person image are the same person. It is means to do.
- the identity determination unit 170 may perform threshold processing on the number of matches of the genetic phenotype derived from the biological sample information and the person image to determine the identity of the person. Further, the identity determination unit 170 may calculate the reliability (probability) of person identification based on the number of matches of the genetic phenotype.
- the genetic information creation unit 140 creates genetic information including the determination results by the phenotype determination unit 160 and the identity determination unit 170. For example, the genetic information creation unit 140 creates information (determination result by the phenotype determination unit 160) that associates the name of the expression part that is determined to be extractable by the extraction unit 130 with its superiority and inferiority. Information may be used (see FIG. 9A). Alternatively, the genetic information creation unit 140 may create information indicating whether the donor of the biological sample and the person in the person image are the same person, and may use the information as genetic information (see FIG. 9B). Furthermore, the genetic information creation unit 140 may create information including the determination results by the two determination units and use the information as genetic information.
- genetic information is created based on the biological sample information input to the information processing apparatus 10, so that person identification based on a genetic phenotype can be performed. It becomes easier.
- the weight may be associated with a genetic phenotype.
- a low weight may be applied when the shape of the hairline of the bangs is largely dissociated from the M-shaped pattern, and a high weight may be applied when the shape is very close to the M-shaped pattern.
- the Fuji of the person in the person image is prominent, the genetic phenotype related to the shape of the hairline becomes more important than other genetic phenotypes, resulting in person identification Accuracy is improved.
- a profile relating to the genetic phenotype of a person (determination control) in a person image is created, and the identity of the person and the donor of the biological sample (determination criterion) is determined.
- the disclosure of the present application is not limited to the above-described embodiment.
- the disclosure is applied to a technique for searching a person having a genetic phenotype profile of a biological sample provider from images or videos obtained by imaging an unspecified number of persons. You can also.
- the extraction unit 130 individually identifies and identifies a person who can recognize the expression portion in which the genetic phenotype of the biological sample appears from an image obtained by imaging an unspecified number of persons. An expression part where a genetic phenotype appears is extracted from a human image. For example, in the example of FIG. 12, the extraction unit 130 identifies persons who can recognize “the hairline of the bangs”, “earlobe”, “eyes color”, and “hair color”, and extracts their expression locations. .
- an image obtained by imaging a crowd or an image obtained by imaging a person passing through a gate indicates that the person has a specific genetic phenotype profile.
- Annotation can be added.
- Such an information processing apparatus 10 also facilitates person identification based on a genetic phenotype.
- the processing configuration of the information processing apparatus 10 described in the first to fourth embodiments is merely an example, and is not intended to limit the configuration of the information processing apparatus.
- the functions of the extraction unit 130 and the genetic information creation unit 140 may be realized by different devices.
- the extraction unit 130 may individually extract a plurality of person expression portions from one or a plurality of person images, and the genetic information creation unit 140 may create individual person genetic information.
- the computer can function as a genetic information creation device that creates information related to genetic information. Furthermore, the genetic information creation method can be executed by a computer by causing the computer program to be executed.
- [Appendix 1] The information processing apparatus according to the first aspect described above.
- Appendix 2 The information processing apparatus according to appendix 1, wherein the image is a person image obtained by imaging a person, and the genetic information creation unit creates genetic information of the person shown in the person image.
- Appendix 3 A phenotype determination unit that determines the superiority or inferiority of the expression part extracted by the extraction unit; The information processing apparatus according to appendix 2, wherein the genetic information creation unit creates genetic information including the phenotype determined by the phenotype determination unit.
- [Appendix 6] The information according to any one of appendices 3 to 5, wherein the phenotype determination unit determines the phenotype of the expression part by performing image processing by pattern matching on the expression part extracted by the extraction unit. Processing equipment.
- the identity determination unit determines whether the provider of the biological sample and the person in the person image are the same person by using a weight assigned to each expression location or each genetic phenotype.
- the information processing apparatus according to appendix 4 wherein:
- [Appendix 8] The information processing apparatus according to appendix 7, wherein the weight assigned to each of the expression parts or each of the genetic phenotypes is configured to be changeable.
- Appendix 9 This is the same as the information processing apparatus according to the second viewpoint described above.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Geometry (AREA)
- Image Analysis (AREA)
- Collating Specific Patterns (AREA)
- Processing Or Creating Images (AREA)
Abstract
本発明は、画像に写る対象に関する遺伝情報を容易に確認できることに寄与する情報処理装置を提供する。情報処理装置は、抽出部と、遺伝情報作成部と、を備える。抽出部は、画像から生物の遺伝的表現型が現れる表現箇所を抽出する。遺伝情報作成部は、抽出部によって抽出された表現箇所に基づき、画像に写る生物に関する遺伝情報を作成する。上記画像は人物を撮像した人物画像であり、遺伝情報作成部は、人物画像に写る人物の遺伝情報を作成してもよい。
Description
(関連出願についての記載)
本発明は、日本国特許出願:特願2016-240559号(2016年12月12日出願)の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
本発明は、情報処理装置、遺伝情報作成方法及びプログラムに関する。特に、人物が撮像された画像等を取り扱う情報処理装置、遺伝情報作成方法及びプログラムに関する。
本発明は、日本国特許出願:特願2016-240559号(2016年12月12日出願)の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
本発明は、情報処理装置、遺伝情報作成方法及びプログラムに関する。特に、人物が撮像された画像等を取り扱う情報処理装置、遺伝情報作成方法及びプログラムに関する。
例えば、いわゆる富士額(widow's peak)は、親から子へと遺伝される前髪の生え際の形状に関する遺伝的表現型であると言われている。遺伝的表現型に関連する遺伝子は20種類以上同定されており、近年では毛髪や血液などの生体サンプルから得られる生体サンプル情報に基づいて顔のモンタージュを作成する技術も開発されている(非特許文献1)。このような技術は、例えば、事件現場に残された血痕から犯人のモンタージュを作成することに役立つと考えられている。
PLOS GENETICS、"Modeling 3D Facial Shape from DNA"、2014年3月20日、[online]、[平成28年10月4日検索]、インターネット〈URL:http://dx.doi.org/10.1371/journal.pgen.1004224〉
以下の分析は、本発明の観点からなされたものである。なお、上記先行技術文献の各開示を、本書に引用をもって繰り込むものとする。
上述の非特許文献1に開示された技術は、遺伝的表現型に基づいて人物を特定する技術の観点から不十分な場合がある。特に、上述の技術は、多人数の集団を少人数の集団に絞り込む技術としては不十分である。
例えば、防犯カメラによって撮像された不特定多数の人物の中からモンタージュに似た人物を探し出そうとしても、各人物がモンタージュと一致する遺伝的表現型を全て有するか否かは一目で判断できない。つまり、個々の人物の判定に長い時間を要するため、不特定多数の人物を判定対照とすることは非現実的である。そのため、遺伝的表現型に基づく人物特定を補助するツールの開発が必要であると考えられる。
そこで、本発明では、画像に写る対象に関する遺伝情報を容易に確認できることに寄与する、情報処理装置、遺伝情報作成方法及びプログラムを提供することを目的とする。
本発明の第1の視点によれば、画像から生物の遺伝的表現型が現れる表現箇所(phenotypical part)を抽出する抽出部と、前記抽出部によって抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成する遺伝情報作成部と、を備える、情報処理装置が提供される。
本発明の第2の視点によれば、生体サンプルの遺伝的表現型を含む生体サンプル情報を記憶する記憶部と、不特定多数の人物を撮像した画像の中から、生体サンプルの遺伝的表現型が現れる表現箇所を認識可能な人物を個々に特定し、特定された各人物の画像から遺伝的表現型が現れる表現箇所を抽出する抽出部と、前記抽出部によって抽出された表現箇所の表現型を判定する表現型判定部と、前記表現型判定部により判定された前記表現型と、前記生体サンプルの遺伝的表現型とを比較して、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する同一性判定部と、前記同一性判定部によって同一であると判定された人物に関する情報を出力する出力部と、を備える、情報処理装置が提供される。
本発明の第3の視点によれば、画像から生物の遺伝的表現型が現れる表現箇所を抽出するステップと、前記抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成するステップと、を含む、遺伝情報作成方法が提供される。
本発明の第4の視点によれば、画像から生物の遺伝的表現型が現れる表現箇所を抽出する処理と、前記抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成する処理と、をコンピュータに実行させるプログラムが提供される。
なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント(non-transient)なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。
なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント(non-transient)なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。
本発明の各視点によれば、画像に写る対象に関する遺伝情報を容易に確認できることに寄与する、情報処理装置、遺伝情報作成方法及びプログラムが、提供される。
本発明のとり得る好適な実施形態について図面を参照して詳細に説明する。なお、以下の記載に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、図中の回路構造における接続線は格別の指定がない限り双方向を含み、一方向矢印の場合にも逆方向を排除するものではない。
先ず、図1を参照しつつ、一実施形態の概要を説明する。図1に示すように、一実施形態に係る情報処理装置100は、抽出部101と、遺伝情報作成部102と、を備える。抽出部101は、画像から生物の遺伝的表現型が現れる表現箇所(phenotypical part)を抽出する。遺伝情報作成部102は、抽出部101によって抽出された表現箇所に基づき、画像に写る生物に関する遺伝情報を作成する。一実施形態に係る情報処理装置100によって画像に写る対象に関する遺伝情報を容易に確認可能となり、例えば、遺伝的表現型に基づく人物特定を容易にすることができる。
具体的な一例として、毛髪や血液などの生体サンプルの提供者(判定基準)と、防犯カメラによって撮像された人物(判定対照)とが一致又は類似するか否かを、判定人が判定する場合について説明する。
判定人は、生体サンプルから得られる生体サンプル情報に基づいて作成されたモンタージュと防犯カメラ等によって撮像された人物画像とを有しており、人物画像を情報処理装置100に入力する。情報処理装置100は、人物画像から抽出すべき表現箇所が記載されたリスト(以下、表現箇所リストと表記する)を予め有している。表現箇所リストには、「前髪の生え際(hairline)」、「耳たぶ(earlobe)」、「つむじ(hair whorl)」などの判定人が注視すべき箇所が列挙されており、「うなじ(nape)」など判定人が無視すべき箇所については列挙されない。
情報処理装置100は、入力された人物画像を解析して、表現箇所リストに列挙された箇所を、人物画像において認識可能であれば抽出する。例えば、図1に示す例では、情報処理装置100は、人物画像において「前髪の生え際」及び「耳たぶ」が認識可能であるためそれらの箇所を抽出し、「つむじ」は認識不可能であるため抽出しない。
そして、情報処理装置100は、抽出された表現箇所の名称を列挙した「遺伝情報」を作成して出力する。つまり、遺伝情報には、人物画像において認識可能な表現箇所が列挙される。言い換えると、遺伝情報には、表現箇所リストに列挙された表現箇所の中から、人物画像において認識不可能な表現箇所を除いたものが列挙される。
判定人は、遺伝情報を参照しつつ、モンタージュと人物画像とを比較して、生体サンプルの提供者(判定基準)と防犯カメラによって撮像された人物(判定対照)が一致又は類似するか否かを目視で判定する。その際、判定人は、「前髪の生え際」などの遺伝情報に列挙された表現箇所を注視すればよく、「つむじ」などの遺伝情報に列挙されない表現箇所は無視しても良いと判断できる。つまり、判定人にとっては、どの表現箇所が画像に写る人物の判定に利用できるかについて判断する手間を省くことができる。
以下に具体的な実施の形態について、図面を参照してさらに詳しく説明する。なお、各実施形態において同一構成要素には同一の符号を付し、その説明を省略する。また、各図におけるブロック間の接続線は、双方向及び単方向の双方を含む。一方向矢印については、主たる信号(データ)の流れを模式的に示すものであり、双方向性を排除するものではない。
先ず、本願において使用する用語について説明する。
「表現箇所」とは、遺伝によって外観に多様な形質が現れる箇所を意味し、「遺伝的表現型又は表現型」とは、表現箇所に現れる形質、タイプ、身体的特徴を意味する。例えば、表現箇所「前髪の生え際」に現れる遺伝的表現型には優性形質(いわゆる富士額:widow's peak)及び劣性形質(非富士額:non widow's peak)が存在する。
「表現箇所」とは、遺伝によって外観に多様な形質が現れる箇所を意味し、「遺伝的表現型又は表現型」とは、表現箇所に現れる形質、タイプ、身体的特徴を意味する。例えば、表現箇所「前髪の生え際」に現れる遺伝的表現型には優性形質(いわゆる富士額:widow's peak)及び劣性形質(非富士額:non widow's peak)が存在する。
なお以下の説明はメンデルの法則が成立することを前提とし、遺伝的表現型に優性形質(dominant type)及び劣性形質(recessive type)が存在する場合について説明するが、メンデルの法則が成り立たない場合であっても外観から遺伝的表現型が区別できれば良い。例えば、不完全優性が現れる場合であっても、優性ホモの形質、劣性ホモの形質、ヘテロの形質が外観から区別される場合には適用可能である。また、例えば、多様性がSNP(single nucleotide polymorphism)によって現れる遺伝的表現型に関しては、塩基のタイプによって外観が区別可能であれば適用可能である。
「画像に写る生物」は「人物」を含み、そのため、「画像」は「人物画像」とも言い換えられる。しかしながら、「画像に写る生物」は動植物も含み、「人物」に限定されない。例えば、「生物」が「エンドウ(豆)」である場合には、「表現箇所」は「豆」や「花」などを含み、遺伝的表現型は「しわ有り(又は無し)」や「赤(又は白)」などを含む。
上記の概要に記載されるように、「人物画像に写る人物」は「判定対照」に相当し、「生体サンプルの提供者」は「判定基準」に相当する。また、「同一」とは、判定対照と判定基準とが同一人物であることを意味し、「同一性」は判定対照の遺伝的表現型と判定基準の遺伝的表現型とが一致するか否かによって判定される。
「生体サンプル情報」とは、生体サンプルの提供者の遺伝的表現型を示す情報であり、例えば、生体サンプルの提供者の遺伝的表現型が「富士額」、「福耳(plump ears)」、「眼の色が黒」かつ「黒髪」であることを示す情報である。
「遺伝情報」とは、画像に写る生物に関する情報、特に、情報処理装置100によって得られる情報であり、画像から抽出可能な表現箇所、画像に写る生物(すなわち判定対照)の遺伝的表現型、及び/又は、同一性の判定結果などを含む。
[第1の実施形態]
第1の実施形態に係る情報処理装置10について図面を参照しつつ、説明する。
第1の実施形態に係る情報処理装置10について図面を参照しつつ、説明する。
[ハードウェア構成]
初めに、第1の実施形態に係る情報処理装置10のハードウェア構成を説明する。図2は、第1の実施形態に係る情報処理装置10のハードウェア構成の一例を示すブロック図である。
初めに、第1の実施形態に係る情報処理装置10のハードウェア構成を説明する。図2は、第1の実施形態に係る情報処理装置10のハードウェア構成の一例を示すブロック図である。
情報処理装置10は、いわゆるコンピュータであり、例えば、図2に例示する構成を備える。例えば、情報処理装置10は、内部バスにより相互に接続される、CPU(Central Processing Unit)11、メモリ12、入出力インターフェイス13及び通信手段であるNIC(Network Interface Card)14等を備える。
但し、図2に示す構成は、情報処理装置10のハードウェア構成を限定する趣旨ではない。情報処理装置10は、図示しないハードウェアを含んでもよいし、必要に応じてNIC14等を備えていなくともよい。また、情報処理装置10に含まれるCPU11等の数も図3の例示に限定する趣旨ではなく、例えば、複数のCPU11が情報処理装置10に含まれていてもよい。
メモリ12は、RAM(Random Access Memory)、ROM(Read Only Memory)、補助記憶装置(ハードディスク等)である。
入出力インターフェイス13は、図示しない表示装置や入力装置のインターフェイスとなる手段である。表示装置は、例えば、液晶ディスプレイ等である。入力装置は、例えば、キーボードやマウス等のユーザ操作を受け付ける装置である。また、入力装置には、USB(Universal Serial Bus)メモリ等の外部記憶装置も含まれる。
情報処理装置10の機能は、後述する各種処理モジュールにより実現される。当該処理モジュールは、例えば、メモリ12に格納されたプログラムをCPU11が実行することで実現される。また、そのプログラムは、ネットワークを介してダウンロードするか、あるいは、プログラムを記憶した記憶媒体を用いて、更新することができる。さらに、上記処理モジュールは、半導体チップにより実現されてもよい。即ち、上記処理モジュールが行う機能を何らかのハードウェア、及び/又は、ソフトウェアで実行する手段があればよい。
続いて、各装置の処理構成(処理モジュール)について説明する。
[処理構成]
図3は、第1の実施形態に係る情報処理装置10の処理構成の一例を示す図である。図3に示すように、情報処理装置10は、記憶部110、入力部120、抽出部130、遺伝情報作成部140、及び出力部150を有する。
図3は、第1の実施形態に係る情報処理装置10の処理構成の一例を示す図である。図3に示すように、情報処理装置10は、記憶部110、入力部120、抽出部130、遺伝情報作成部140、及び出力部150を有する。
記憶部110は、メモリ12のRAM等により構成され、情報処理装置10の動作に必要な情報等を記憶する。また、記憶部110は、上述の表現箇所リストや、画像処理により表現箇所を抽出するための情報等を記憶する。
入力部120は、人物画像を入力する手段である。入力部120は、人物画像等の入力インターフェイスとして機能する。なお、人物画像とは、例えば、防犯カメラや監視カメラによって撮像された人物を撮像した画像であり、USBメモリなどの情報記憶媒体や、ネットワークを介して情報処理装置10に入力される。
抽出部130は、入力部120を介して入力された画像から遺伝的表現型が現れる表現箇所を抽出する手段である。抽出部130は、人物画像に対して画像処理を施すことで、表現箇所リストに記載された表現箇所の抽出を試みる。
図4は、抽出部130が抽出すべき表現箇所を含む表現箇所リストの一例を示す図である。図4を参照すると、抽出部130は、少なくとも「前髪の生え際」、「耳たぶ」を人物画像から抽出することを試みる。抽出部130は、表現箇所リストに記載された各表現箇所の抽出に成功したか否かに関する情報を記憶部110に格納する。
なお、抽出部130による表現箇所の抽出処理には種々の方法を用いることができる。例えば、抽出部130は、人物画像に対して画像処理を施すことにより、表現箇所リストに記載された表現箇所を抽出する。より具体的には、抽出部130は、記憶部110に格納された一般的な顔の輪郭線と人物画像の中の人物の顔の輪郭線とを比較して、顔領域を抽出する。その後、抽出部130は、記憶部110に格納された表現箇所リストに記載された表現箇所のパターンが抽出できるか否かを各々判定する等の処理を行う。なお、抽出部130による表現箇所の抽出に関しては顔認証技術が記載された参考文献1(特開2005-242432号公報)等の技術を応用することができる。
遺伝情報作成部140は、抽出部130による抽出が成功した表現箇所に基づき、人物画像に写る人物に関する遺伝情報を作成する。例えば、遺伝情報作成部140は、抽出部130によって抽出可能であると判定された(抽出に成功した)表現箇所の名称(例えば、「前髪の生え際」)を含む情報を遺伝情報とする。遺伝情報作成部140は、作成した遺伝情報を出力部150に引き渡す。
出力部150は、遺伝情報作成部140が作成した遺伝情報を外部に出力するための手段である。例えば、出力部150は、遺伝情報をプリントアウトしても良いし、画像情報としてモニタに表示してもよい。あるいは、出力部150は、表現箇所の抽出の基になった人物画像に遺伝情報を反映して出力してもよい。例えば、人物画像から「前髪の生え際」と「耳たぶ」が抽出された場合には、出力部150は、人物画像の額部分と耳たぶの部分を強調するように、赤丸で囲う等の加工を施しても良い。
図5は、第1の実施形態に係る情報処理装置10の動作の一例を示すフローチャートである。
初めに、情報処理装置10は、人物画像から遺伝的表現型が現れる表現箇所を抽出し(ステップS101)、抽出された表現箇所に基づき、人物画像に写る人物の遺伝情報を作成する(ステップS102)。その後、情報処理装置10は、所定の方法により当該作成された遺伝情報を出力する(ステップS103)。
例えば、図6(a)に示す人物画像が情報処理装置10に入力された場合を考える。この場合、当該人物画像から「前髪の生え際」と「耳たぶ」が抽出可能であるので、図6(a)の人物画像に対応する遺伝情報には上記抽出された2つの表現箇所の名称が含まれる。また、図6(b)に示す人物画像が情報処理装置10に入力された場合を考える。この場合、当該人物画像には「耳たぶ」が写っていないので、「耳たぶ」は遺伝情報に含まれず、「前髪の生え際」が遺伝情報に含まれることになる。
このように、第1の実施形態に係る情報処理装置10は、表現箇所リストに列挙された表現箇所の中から人物画像において認識可能な表現箇所を選択し、その箇所の名称を列挙した遺伝情報を出力する。その結果、判定人にとっては、どの表現箇所が画像に写る人物の判定に利用できるかについて判断する手間を省くことができるため、遺伝的表現型に基づく人物特定が容易になる。
[第2の実施形態]
第2の実施形態に係る情報処理装置10は、抽出部130によって抽出された表現箇所に現れる遺伝的表現型(例えば、富士額であるか否か)を判定し、その判定結果を含む遺伝情報を作成する。
第2の実施形態に係る情報処理装置10は、抽出部130によって抽出された表現箇所に現れる遺伝的表現型(例えば、富士額であるか否か)を判定し、その判定結果を含む遺伝情報を作成する。
図1を参照しつつ説明した上述の概要に沿って第2の実施形態を概説すると、第2の実施形態に係る情報処理装置10によれば、判定人は、人物画像に写る人物の遺伝的表現型に関する遺伝情報を得ることができる。このような遺伝情報を参照した判定人は、生体サンプルの提供者の遺伝的表現型と比較することで、生体サンプルの提供者と人物画像中の人物が一致又は類似するか否かを判断することができる。
特に、人物特定において、判定人は、生体サンプルの提供者の遺伝的表現型と人物画像中の人物の遺伝的表現型とが一致するか否かが分かればよいので、第2の実施形態に係る情報処理装置10を用いれば、モンタージュを作成する必要すらなくなる。但し、当該判断に加え、判定人がモンタージュと人物画像とを比較することももちろん可能である。
また、生体サンプルの提供者の遺伝的表現型と人物画像中の人物の遺伝的表現型との一致性を情報処理装置10が判定すれば、判定人は、生体サンプルの提供者の遺伝的表現型と人物画像中の人物の遺伝的表現型とが一致するか否かを判定する必要すらなくなる。以下では、このような実施形態を第2の実施形態として説明する。
第2の実施形態に係る情報処理装置10は、図7に示すように表現型判定部160と、同一性判定部170と、を更に有し、第1の実施形態に係る情報処理装置10と以下の点で異なる。
入力部120は、生体サンプルの遺伝的表現型を含む生体サンプル情報を入力する。入力された生体サンプル情報は、記憶部110に格納される。なお、生体サンプル情報とは、生体サンプルの提供者(例えば、事件現場に血痕を残した犯人)の遺伝的表現型(優劣)を含む情報である。例えば、生体サンプル情報においては、表現箇所の名称と、「富士額(優性)」、「貧乏耳:non plump ears(劣性)」といった遺伝的表現型とが対応付けられる(図8参照)。
表現型判定部160は、抽出部130によって抽出された表現箇所の表現型を判定する手段である。
具体的には、表現型判定部160は、抽出部130によって抽出可能であると判定された表現箇所に対応する領域を人物画像において特定する。その後、表現型判定部160は、抽出部130により抽出された表現箇所に対してパターンマッチング等の画像処理を施すことにより、表現箇所の表現型を判定する。より具体的には、表現型判定部160は、特定した領域と予め用意されたパターンを比較し、当該領域の表現型を決定する。
例えば、表現型判定部160は、表現箇所「前髪の生え際」の形状が、優性形質(いわゆる富士額)であるか劣性形質(非富士額)であるかを判定する。この時に、表現型判定部160は、人物画像から前髪の生え際の形状を切り出し、当該切り出した形状と予め用意したM字型のパターンを比較し、その一致具合により富士額か否かを判定する。
あるいは、表現型判定部160は、機械学習による学習モデルにより遺伝的表現型の優劣を判定してもよい。具体的には、額の部分が写っている多数のサンプル画像と、各画像の前髪の生え際の形状が富士額か否かが判定済みの情報と、を教師データとして使用し、学習モデルを構築する。表現型判定部160は、人物画像から前髪の生え際が写る画像を学習モデルに入力し、判定結果(富士額か否か)を取得してもよい。
同一性判定部170は、上記生体サンプル情報と、表現型判定部160による判定結果と、を比較して、生体サンプルの提供者と人物画像中の人物とが同一人物であるか否かを判定する手段である。
具体的には、同一性判定部170は、生体サンプル情報を記憶部110から読み出し、生体サンプル情報に含まれる遺伝的表現型と表現型判定部160による判定結果を突き合わせる。そして、同一性判定部170は、全ての遺伝的表現型の判定結果が生体サンプル情報の各表現型と一致する場合には、生体サンプル情報の提供者と人物画像中の人物が同一人物であると判定する(両人物は同一人物である可能性が高いと判定する)。例えば、図8の例では、少なくとも、人物画像から導出される「前髪の生え際」の形状が「富士額」であり「耳たぶ」の形状が「貧乏耳」で有る場合に、図8の生体サンプル情報の提供者と人物画像に写る人物が同一であると判定され得る。
あるいは、同一性判定部170は、生体サンプル情報と人物画像から導出した遺伝的表現型の一致数に対して閾値処理を施し、人物の同一性を判定してもよい。さらに、同一性判定部170は、遺伝的表現型の一致数に基づき、人物特定の信頼性(確からしさ)を算出してもよい。
遺伝情報作成部140は、表現型判定部160や同一性判定部170による判定結果を含む遺伝情報を作成する。例えば、遺伝情報作成部140は、抽出部130によって抽出可能であると判定された表現箇所の名称と、その優劣とを対応付けた情報(表現型判定部160による判定結果)を作成し、遺伝情報としてもよい(図9(a)参照)。あるいは、遺伝情報作成部140は、生体サンプルの提供者と人物画像中の人物とが同一人物であるか否かを示す情報を作成し、遺伝情報としてもよい(図9(b)参照)。さらに、遺伝情報作成部140は、2つの判定部による判定結果を含む情報を作成し、遺伝情報としてもよい。あるいは、遺伝情報作成部140は、生体サンプルと人物画像中の人物との間で、いずれの遺伝的表現型が一致し、いずれの遺伝的表現型が一致しないかを示す情報を作成し、遺伝情報としてもよい(図9(c)参照)。作成された遺伝情報は、出力部150を介して外部に出力される。
図10は、第2の実施形態に係る情報処理装置の動作の一例を示すフローチャートである。情報処理装置10は、人物画像を入力し、人物画像から遺伝的表現型が現れる表現箇所を抽出する(ステップS201)。さらに、情報処理装置10は、抽出された表現箇所の表現型を判定する(ステップS202)。さらに、情報処理装置100は、生体サンプルの提供者と人物画像中の人物とが同一人物であるか否かを判定する(ステップS203)。その後、判定結果を含む遺伝情報が出力される(ステップS204)。
このように、第2の実施形態に係る情報処理装置10によれば、情報処理装置10に入力された生体サンプル情報に基づき、遺伝情報が作成されるので、遺伝的表現型に基づく人物特定が更に容易になる。
[第3の実施形態]
例えば、瞳の色や髪の色などの遺伝的表現型は、カラーコンタクトレンズやヘアカラーによって外見上、変化している場合も多い。このような遺伝的表現型やその表現箇所については、人物特定における重みを軽く(小さく)することが有効であると考えられる。そこで、第3の実施形態として、表現箇所に重み付けをした場合について説明する。
例えば、瞳の色や髪の色などの遺伝的表現型は、カラーコンタクトレンズやヘアカラーによって外見上、変化している場合も多い。このような遺伝的表現型やその表現箇所については、人物特定における重みを軽く(小さく)することが有効であると考えられる。そこで、第3の実施形態として、表現箇所に重み付けをした場合について説明する。
具体的に説明すると、第3の実施形態に係る情報処理装置10は、第2の実施形態に係る情報処理装置10と以下の点で異なる。
記憶部110に予め格納される表現箇所リストには、遺伝的表現型の名称と、表現箇所に付与された重みと、を対応付けた情報が格納される(図11参照)。遺伝的表現型の重みの設定に関し、原則的には、変化する傾向が高い表現箇所には低い重みが与えられる。対して、外見上、変化する傾向が低い表現箇所には高い重みが与えられる。この重みの設定は、不動のものとしてもよいが、表現箇所の重みは、上述のモンタージュ作成技術の発展などに伴って随時更新され得るし、判定対照の集団の特徴や、生体サンプルの遺伝的表現型によっても適宜変更され得る。そのため、図11に示すような表現箇所リストの重みは適宜更新されることが望ましい。つまり、記憶部110に格納された表現箇所リストの重み(表現箇所の各々に付与された重み)は変更可能に構成されていることが望ましい。
同一性判定部170は、表現箇所に各々付与された重みを用いて、生体サンプル情報の提供者と人物画像中の人物とが同一人物であるか否かを判定する。具体的一例を挙げて説明すると、同一性判定部170は、生体サンプル情報と人物画像中の人物との間で一致した表現箇所の重みを合計し、その合計と予め設定された重み閾値とを比較する。そして、同一性判定部170は、重みの合計が重み閾値以上である場合には、生体サンプル情報の提供者と人物画像中の人物とが一致すると判定する。
遺伝情報作成部140は、上記同一性判定部170により算出された重みの合計を人物特定のスコア(信頼度)とし、遺伝情報に含めることができる。当該遺伝情報は、出力部150を介して外部に出力される。
遺伝情報作成部140は、生体サンプルの遺伝的表現型と人物画像中の人物の遺伝的表現型との一致について判定せずに(人物の同一性を判定せずに)、遺伝的表現型に付与された重みの合計値だけを出力するようにしても良い。この重みの合計値は、生体サンプルの提供者と、人物画像中の人物との間の一致度合いとして判定人に認識される。
あるいは、重みは、遺伝的表現型と関連付けても良い。例えば、前髪の生え際の形状がM字パターンから大きく解離している場合には低い重みを付与し、当該形状がM字パターンに極めて近い場合には高い重みを付与してもよい。このようにすれば、人物画像中の人物の富士額が顕著である場合に、生え際の形状に関する遺伝的表現型が他の遺伝的表現型よりも重要視されることになり、結果として人物特定の精度が改善される。
このように、第3の実施形態に係る情報処理装置10は、有効な表現箇所や遺伝的表現型を重視して同一性を判定するため、判定の精度が改善される。
[第4の実施形態]
ところで、上述の実施形態は、端的に言えば、人物画像中の人物(判定対照)の遺伝的表現型に関するプロファイルを作成し、その人物と生体サンプルの提供者(判定基準)の同一性を判定する技術である。本願開示は、上述の実施形態に限らず、例えば、生体サンプルの提供者の遺伝的表現型プロファイルを有する人物を不特定多数の人物を撮像した画像又は映像の中から検索する技術に応用することもできる。
ところで、上述の実施形態は、端的に言えば、人物画像中の人物(判定対照)の遺伝的表現型に関するプロファイルを作成し、その人物と生体サンプルの提供者(判定基準)の同一性を判定する技術である。本願開示は、上述の実施形態に限らず、例えば、生体サンプルの提供者の遺伝的表現型プロファイルを有する人物を不特定多数の人物を撮像した画像又は映像の中から検索する技術に応用することもできる。
具体的に説明すると、図7に示す構成において、記憶部110は、例えば、不特定多数の人物を撮像した画像又は映像を記憶する。あるいは、入力部120が、外部のデータベースサーバ等の複数の人物を撮像した画像が格納されたサーバにアクセスし、当該画像を入手してもよい。
入力部120は、生体サンプルの提供者の遺伝的表現型プロファイルとして、表現箇所を含む遺伝的表現型のリストが入力される(図12参照)。図12には、「富士額」、「貧乏耳」、「青い瞳」、「黒髪」という身体的特徴を有する人物が検索の対象となることが示されている。
上記人物の検索を実現するため、抽出部130は、不特定多数の人物を撮像した画像の中から生体サンプルの遺伝的表現型が現れる表現箇所を認識可能な人物を個々に特定し、特定した人物の画像から遺伝的表現型が現れる表現箇所を抽出する。例えば、図12の例では、抽出部130は、「前髪の生え際」、「耳たぶ」、「瞳の色」及び「髪の色」を認識可能な人物を特定し、それらの表現箇所を抽出する。
表現型判定部160は、抽出部130によって特定された表現箇所の表現型を判定する。さらに、同一性判定部170は、表現型判定部160による判定結果と生体サンプルの遺伝的表現型とを比較して、生体サンプルの提供者と人物画像中の人物とが同一人物であるか否かを判定する。出力部150は、同一性判定部170によって遺伝的表現型プロファイルに合致すると判断された人物に関する情報(例えば、記憶部110に格納された画像を特定する情報)を出力する。
第4の実施形態に係る情報処理装置10によれば、例えば、群衆を撮像した画像や、ゲートを通過する人物を撮像した映像に、特定の遺伝的表現型プロファイルを有する人物であることを示す注釈(遺伝情報)を付加することができる。このような情報処理装置10によっても遺伝的表現型に基づく人物特定が容易になる。
第1乃至第4の実施形態にて説明した情報処理装置10の処理構成は例示であって、情報処理装置の構成を限定する趣旨ではない。例えば、抽出部130や遺伝情報作成部140の各機能が異なる装置により実現されていてもよい。
上記実施形態では、主に人物が写る人物画像を処理の対象としたが、人物のみならず、各実施形態の情報処理装置は、生物における遺伝的表現型が現れる表現箇所を抽出する装置としても応用することができる。例えば、エンドウ豆を撮像した画像から、「しわの有無」や「豆の色」が遺伝的表現型であることを示す教育アプリケーションとしての応用が考えられる。また、顔画像における遺伝的表現型を抽出して表示する娯楽ツールとしての応用も考えられる。
上記実施形態において、人物画像中の人物は複数人であっても良い。すなわち、抽出部130が1枚又は複数枚の人物画像から、複数の人物の表現箇所を個々に抽出し、遺伝情報作成部140が個々の人物の遺伝情報を作成してもよい。
コンピュータの記憶部に、上述したコンピュータプログラムをインストールすることにより、コンピュータを遺伝情報に係る情報を作成する遺伝情報作成装置として機能させることができる。さらにまた、上述したコンピュータプログラムをコンピュータに実行させることにより、コンピュータにより遺伝情報作成方法を実行することができる。
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
[付記1]
上述の第1の視点に係る情報処理装置のとおりである。
[付記2]
前記画像は人物を撮像した人物画像であり、前記遺伝情報作成部は、前記人物画像に写る人物の遺伝情報を作成する、付記1に記載の情報処理装置。
[付記3]
前記抽出部によって抽出された表現箇所の優劣を判定する表現型判定部をさらに備え、
前記遺伝情報作成部は、前記表現型判定部により判定された表現型を含む遺伝情報を作成する、付記2に記載の情報処理装置。
[付記4]
生体サンプルの遺伝的表現型の優劣を含む生体サンプル情報と前記表現型判定部による判定結果を比較して、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する同一性判定部をさらに備え、
前記遺伝情報作成部は、前記同一性判定部による判定結果を含む遺伝情報を作成する付記3に記載の情報処理装置。
[付記5]
抽出すべき表現箇所を列挙した表現箇所リストを記憶する記憶部をさらに備え、
前記抽出部は、前記人物画像に対して画像処理を施すことにより、前記表現箇所リストに列挙された表現箇所を抽出する、付記3又は4に記載の情報処理装置。
[付記6]
前記表現型判定部は、前記抽出部により抽出された表現箇所に対してパターンマッチングによる画像処理を施すことにより、表現箇所の表現型を判定する、付記3乃至5のいずれか一に記載の情報処理装置。
[付記7]
前記同一性判定部は、表現箇所の各々、又は遺伝的表現型の各々に付与された重みを用いて、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する、付記4に記載の情報処理装置。
[付記8]
前記表現箇所の各々、又は遺伝的表現型の各々に付与された重みは変更可能に構成されている、付記7に記載の情報処理装置。
[付記9]
上述の第2の視点に係る情報処理装置のとおりである。
[付記10]
上述の第3の視点に係る遺伝情報作成方法のとおりである。
[付記11]
上述の第4の視点に係るプログラムのとおりである。
なお、付記9~付記11の形態は、付記1の形態と同様に、付記2の形態~付記8の形態に展開することが可能である。
[付記1]
上述の第1の視点に係る情報処理装置のとおりである。
[付記2]
前記画像は人物を撮像した人物画像であり、前記遺伝情報作成部は、前記人物画像に写る人物の遺伝情報を作成する、付記1に記載の情報処理装置。
[付記3]
前記抽出部によって抽出された表現箇所の優劣を判定する表現型判定部をさらに備え、
前記遺伝情報作成部は、前記表現型判定部により判定された表現型を含む遺伝情報を作成する、付記2に記載の情報処理装置。
[付記4]
生体サンプルの遺伝的表現型の優劣を含む生体サンプル情報と前記表現型判定部による判定結果を比較して、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する同一性判定部をさらに備え、
前記遺伝情報作成部は、前記同一性判定部による判定結果を含む遺伝情報を作成する付記3に記載の情報処理装置。
[付記5]
抽出すべき表現箇所を列挙した表現箇所リストを記憶する記憶部をさらに備え、
前記抽出部は、前記人物画像に対して画像処理を施すことにより、前記表現箇所リストに列挙された表現箇所を抽出する、付記3又は4に記載の情報処理装置。
[付記6]
前記表現型判定部は、前記抽出部により抽出された表現箇所に対してパターンマッチングによる画像処理を施すことにより、表現箇所の表現型を判定する、付記3乃至5のいずれか一に記載の情報処理装置。
[付記7]
前記同一性判定部は、表現箇所の各々、又は遺伝的表現型の各々に付与された重みを用いて、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する、付記4に記載の情報処理装置。
[付記8]
前記表現箇所の各々、又は遺伝的表現型の各々に付与された重みは変更可能に構成されている、付記7に記載の情報処理装置。
[付記9]
上述の第2の視点に係る情報処理装置のとおりである。
[付記10]
上述の第3の視点に係る遺伝情報作成方法のとおりである。
[付記11]
上述の第4の視点に係るプログラムのとおりである。
なお、付記9~付記11の形態は、付記1の形態と同様に、付記2の形態~付記8の形態に展開することが可能である。
なお、上記の非特許文献の開示を、本書に引用をもって繰り込むものとする。本発明の全開示(請求の範囲を含む)の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素(各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む)の多様な組み合わせ、又は選択ないし非選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。
10、100 情報処理装置
11 CPU(Central Processing Unit)
12 メモリ
13 入出力インターフェイス
14 NIC(Network Interface Card)
101 抽出部
102 遺伝情報作成部
110 記憶部
120 入力部
130 抽出部
140 遺伝情報作成部
150 出力部
160 表現型判定部
170 同一性判定部
11 CPU(Central Processing Unit)
12 メモリ
13 入出力インターフェイス
14 NIC(Network Interface Card)
101 抽出部
102 遺伝情報作成部
110 記憶部
120 入力部
130 抽出部
140 遺伝情報作成部
150 出力部
160 表現型判定部
170 同一性判定部
Claims (11)
- 画像から生物の遺伝的表現型が現れる表現箇所を抽出する抽出部と、
前記抽出部によって抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成する遺伝情報作成部と、
を備える、情報処理装置。 - 前記画像は人物を撮像した人物画像であり、前記遺伝情報作成部は、前記人物画像に写る人物の遺伝情報を作成する、請求項1に記載の情報処理装置。
- 前記抽出部によって抽出された表現箇所の表現型を判定する表現型判定部をさらに備え、
前記遺伝情報作成部は、前記表現型判定部により判定された表現型を含む遺伝情報を作成する、請求項2に記載の情報処理装置。 - 生体サンプルの遺伝的表現型を含む生体サンプル情報と前記表現型判定部による判定結果を比較して、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する同一性判定部をさらに備え、
前記遺伝情報作成部は、前記同一性判定部による判定結果を含む遺伝情報を作成する請求項3に記載の情報処理装置。 - 抽出すべき表現箇所を列挙した表現箇所リストを記憶する記憶部をさらに備え、
前記抽出部は、前記人物画像に対して画像処理を施すことにより、前記表現箇所リストに列挙された表現箇所を抽出する、請求項3又は4に記載の情報処理装置。 - 前記表現型判定部は、前記抽出部により抽出された表現箇所に対してパターンマッチングによる画像処理を施すことにより、表現箇所の表現型を判定する、請求項3乃至5のいずれか一項に記載の情報処理装置。
- 前記同一性判定部は、表現箇所の各々、又は遺伝的表現型の各々に付与された重みを用いて、前記生体サンプルの提供者と前記人物画像中の人物とが同一人物であるか否かを判定する、請求項4に記載の情報処理装置。
- 前記表現箇所の各々、又は遺伝的表現型の各々に付与された重みは変更可能に構成されている、請求項7に記載の情報処理装置。
- 生体サンプルの遺伝的表現型を含む生体サンプル情報を記憶する記憶部と、
不特定多数の人物を撮像した画像の中から、前記生体サンプルの遺伝的表現型が現れる表現箇所を認識可能な人物を個々に特定し、特定された各人物の画像から遺伝的表現型が現れる表現箇所を抽出する抽出部と、
前記抽出部によって抽出された表現箇所の表現型を判定する表現型判定部と、
前記表現型判定部により判定された前記表現型と、前記生体サンプルの遺伝的表現型とを比較して、前記生体サンプルの提供者と人物画像中の人物とが同一人物であるか否かを判定する同一性判定部と、
前記同一性判定部によって同一であると判定された人物に関する情報を出力する出力部と、
を備える、情報処理装置。 - 画像から生物の遺伝的表現型が現れる表現箇所を抽出するステップと、
前記抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成するステップと、
を含む、遺伝情報作成方法。 - 画像から生物の遺伝的表現型が現れる表現箇所を抽出する処理と、
前記抽出された表現箇所に基づき、前記画像に写る生物に関する遺伝情報を作成する処理と、
をコンピュータに実行させるプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP17881789.6A EP3553737A4 (en) | 2016-12-12 | 2017-12-11 | INFORMATION PROCESSING DEVICE, METHOD FOR GENETIC INFORMATION AND PROGRAM GENERATION |
US16/468,568 US11074433B2 (en) | 2016-12-12 | 2017-12-11 | Information processing apparatus, genetic information generation method and program |
JP2018556659A JP6756377B2 (ja) | 2016-12-12 | 2017-12-11 | 情報処理装置、遺伝情報作成方法及びプログラム |
US17/360,323 US11842567B2 (en) | 2016-12-12 | 2021-06-28 | Information processing apparatus, genetic information generation method and program |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-240559 | 2016-12-12 | ||
JP2016240559 | 2016-12-12 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US16/468,568 A-371-Of-International US11074433B2 (en) | 2016-12-12 | 2017-12-11 | Information processing apparatus, genetic information generation method and program |
US17/360,323 Continuation US11842567B2 (en) | 2016-12-12 | 2021-06-28 | Information processing apparatus, genetic information generation method and program |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018110490A1 true WO2018110490A1 (ja) | 2018-06-21 |
Family
ID=62558765
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2017/044334 WO2018110490A1 (ja) | 2016-12-12 | 2017-12-11 | 情報処理装置、遺伝情報作成方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US11074433B2 (ja) |
EP (1) | EP3553737A4 (ja) |
JP (3) | JP6756377B2 (ja) |
WO (1) | WO2018110490A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11783925B2 (en) * | 2006-12-29 | 2023-10-10 | Kip Prod P1 Lp | Multi-services application gateway and system employing the same |
US12100140B2 (en) * | 2021-01-29 | 2024-09-24 | Fujifilm Corporation | Information processing apparatus, information processing method, and information processing program |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02107962A (ja) * | 1988-10-17 | 1990-04-19 | Hitachi Software Eng Co Ltd | Dnaパターン読み取り装置及びdnaパターン読み取り方法 |
JP2005242432A (ja) | 2004-02-24 | 2005-09-08 | Nec Soft Ltd | 顔認証システム及びその処理方法及びそのプログラム |
US20150086104A1 (en) * | 2013-09-25 | 2015-03-26 | The Procter & Gamble Company | Method and system for skin care consultation |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5733721A (en) * | 1992-11-20 | 1998-03-31 | The Board Of Regents Of The University Of Oklahoma | Cell analysis method using quantitative fluorescence image analysis |
US20020015950A1 (en) * | 1999-07-07 | 2002-02-07 | Karen Anne Jones | Atherosclerosis-associated genes |
AU2001270126A1 (en) * | 2000-06-23 | 2002-01-08 | Cytokinetics, Inc. | Image analysis for phenotyping sets of mutant cells |
US6599694B2 (en) * | 2000-12-18 | 2003-07-29 | Cytokinetics, Inc. | Method of characterizing potential therapeutics by determining cell-cell interactions |
JP3711038B2 (ja) * | 2001-06-15 | 2005-10-26 | バブコック日立株式会社 | 頭蓋骨スーパーインポーズ方法と装置 |
US7461006B2 (en) * | 2001-08-29 | 2008-12-02 | Victor Gogolak | Method and system for the analysis and association of patient-specific and population-based genomic data with drug safety adverse event data |
US20040019430A1 (en) * | 2001-11-21 | 2004-01-29 | Patrick Hurban | Methods and systems for analyzing complex biological systems |
JP2003181151A (ja) | 2001-12-20 | 2003-07-02 | Kireicom:Kk | 人形製造装置 |
AU2004234996B2 (en) * | 2003-05-01 | 2007-07-19 | Japan Science And Technology Agency | Array having substances fixed on support arranged with chromosomal order or sequence position information added thereto, process for producing the same, analytical system using the array and use of these |
WO2004109447A2 (en) * | 2003-05-30 | 2004-12-16 | Rosetta Inpharmatics Llc | Computer systems and methods for identifying surrogate markers |
US20050086035A1 (en) * | 2003-09-02 | 2005-04-21 | Pioneer Hi-Bred International, Inc. | Computer systems and methods for genotype to phenotype mapping using molecular network models |
US20050249667A1 (en) * | 2004-03-24 | 2005-11-10 | Tuszynski Jack A | Process for treating a biological organism |
US20060275899A1 (en) * | 2004-12-30 | 2006-12-07 | Stemlifeline, Inc. | Methods and compositions relating to embryonic stem cell lines |
WO2006073966A1 (en) * | 2004-12-30 | 2006-07-13 | Stemlifeline, Inc. | Methods and systems relating to embryonic stem cell lines |
JP4957056B2 (ja) * | 2006-04-11 | 2012-06-20 | パナソニック株式会社 | 顔認証システムおよび顔認証方法 |
JP2010522537A (ja) * | 2006-11-30 | 2010-07-08 | ナビジェニクス インコーポレイティド | 遺伝子分析系および方法 |
US20080131887A1 (en) * | 2006-11-30 | 2008-06-05 | Stephan Dietrich A | Genetic Analysis Systems and Methods |
JP4594945B2 (ja) * | 2007-02-13 | 2010-12-08 | 株式会社東芝 | 人物検索装置および人物検索方法 |
US20120004894A1 (en) * | 2007-09-21 | 2012-01-05 | Edwin Brian Butler | Systems, Methods and Apparatuses for Generating and using Representations of Individual or Aggregate Human Medical Data |
WO2009130693A2 (en) * | 2008-04-21 | 2009-10-29 | Mts Investments Inc. | System and method for statistical mapping between genetic information and facial image data |
WO2010006367A1 (en) * | 2008-07-16 | 2010-01-21 | Imprezzeo Pty Ltd | Facial image recognition and retrieval |
US20110081056A1 (en) * | 2009-10-05 | 2011-04-07 | Salafia Carolyn M | Automated placental measurement |
EP2641205B1 (en) * | 2010-11-17 | 2021-03-17 | Pioneer Hi-Bred International, Inc. | Prediction of phenotypes and traits based on the metabolome |
US9552637B2 (en) * | 2011-05-09 | 2017-01-24 | Catherine G. McVey | Image analysis for determining characteristics of groups of individuals |
JP6026119B2 (ja) * | 2012-03-19 | 2016-11-16 | 株式会社東芝 | 生体情報処理装置 |
WO2015017536A1 (en) * | 2013-07-31 | 2015-02-05 | The Board Of Trustees Of The Leland Stanford Junior University | Method and system for evaluating progression of age-related macular degeneration |
US9436892B2 (en) * | 2014-05-02 | 2016-09-06 | Hong Kong Applied Science And Technology Research Institute Co., Ltd. | Method and apparatus for facial detection using regional similarity distribution analysis |
CN112964625B (zh) * | 2015-03-06 | 2024-06-07 | 英国质谱公司 | 细胞群体分析 |
US10755078B2 (en) * | 2015-04-10 | 2020-08-25 | President And Fellows Of Harvard College | Methods and devices for live cell imaging analysis |
-
2017
- 2017-12-11 JP JP2018556659A patent/JP6756377B2/ja active Active
- 2017-12-11 EP EP17881789.6A patent/EP3553737A4/en not_active Ceased
- 2017-12-11 US US16/468,568 patent/US11074433B2/en active Active
- 2017-12-11 WO PCT/JP2017/044334 patent/WO2018110490A1/ja active Application Filing
-
2020
- 2020-08-27 JP JP2020143143A patent/JP6977834B2/ja active Active
-
2021
- 2021-06-28 US US17/360,323 patent/US11842567B2/en active Active
- 2021-11-11 JP JP2021184323A patent/JP7248086B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02107962A (ja) * | 1988-10-17 | 1990-04-19 | Hitachi Software Eng Co Ltd | Dnaパターン読み取り装置及びdnaパターン読み取り方法 |
JP2005242432A (ja) | 2004-02-24 | 2005-09-08 | Nec Soft Ltd | 顔認証システム及びその処理方法及びそのプログラム |
US20150086104A1 (en) * | 2013-09-25 | 2015-03-26 | The Procter & Gamble Company | Method and system for skin care consultation |
Non-Patent Citations (1)
Title |
---|
"Modeling 3D Facial Shape from DNA", PLOS GENETICS, 20 March 2014 (2014-03-20), Retrieved from the Internet <URL:http://dx.doi.org/10.1371/journal.pgen.1004224> |
Also Published As
Publication number | Publication date |
---|---|
EP3553737A4 (en) | 2019-11-06 |
JP2020198123A (ja) | 2020-12-10 |
JP6756377B2 (ja) | 2020-09-16 |
US20210326577A1 (en) | 2021-10-21 |
US11842567B2 (en) | 2023-12-12 |
JPWO2018110490A1 (ja) | 2019-11-07 |
JP6977834B2 (ja) | 2021-12-08 |
US20190303653A1 (en) | 2019-10-03 |
EP3553737A1 (en) | 2019-10-16 |
JP7248086B2 (ja) | 2023-03-29 |
US11074433B2 (en) | 2021-07-27 |
JP2022010253A (ja) | 2022-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108701216B (zh) | 一种人脸脸型识别方法、装置和智能终端 | |
CN112328999B (zh) | 双录质检方法、装置、服务器及存储介质 | |
CN107704834B (zh) | 微表情面审辅助方法、装置及存储介质 | |
Davison et al. | Samm: A spontaneous micro-facial movement dataset | |
US10719693B2 (en) | Method and apparatus for outputting information of object relationship | |
KR100969298B1 (ko) | 얼굴인식을 통한 영상에서의 사람 상호관계 추론 방법 | |
CN109376604B (zh) | 一种基于人体姿态的年龄识别方法和装置 | |
CN111310705A (zh) | 图像识别方法、装置、计算机设备及存储介质 | |
US20130071816A1 (en) | Methods and systems for building a universal dress style learner | |
KR101835333B1 (ko) | 얼굴 인식 서비스 제공 방법 | |
CN111902821B (zh) | 检测动作以阻止识别 | |
JP6535196B2 (ja) | 画像処理装置、画像処理方法および画像処理システム | |
CN112446302A (zh) | 一种人体姿态检测方法、系统、电子设备和存储介质 | |
JP7248086B2 (ja) | 情報処理装置、遺伝情報作成方法及びプログラム | |
CN107148628A (zh) | 用于基于特征进行认证的系统和方法 | |
JP2015219892A (ja) | 視線分析システムおよび視線分析装置 | |
JP6969878B2 (ja) | 識別器学習装置および識別器学習方法 | |
JP2014071610A (ja) | データ処理装置、名寄せ処理方法及びコンピュータプログラム | |
KR20190070179A (ko) | 사용자 등록 장치 및 방법 | |
Alburaiki et al. | Mobile based attendance system: face recognition and location detection using machine learning | |
US20160217565A1 (en) | Health and Fitness Monitoring via Long-Term Temporal Analysis of Biometric Data | |
CN111738199B (zh) | 图像信息验证方法、装置、计算装置和介质 | |
CN112800923A (zh) | 人体图像质量检测方法及装置、电子设备、存储介质 | |
KR101738057B1 (ko) | 사회감성 네트워크 구축 시스템 및 그 방법 | |
KR101847446B1 (ko) | 인지 데이터 네트워크 기반 시선 추적 서버 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17881789 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2018556659 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2017881789 Country of ref document: EP |