WO2021149505A1 - 統合検索システム - Google Patents

統合検索システム Download PDF

Info

Publication number
WO2021149505A1
WO2021149505A1 PCT/JP2021/000415 JP2021000415W WO2021149505A1 WO 2021149505 A1 WO2021149505 A1 WO 2021149505A1 JP 2021000415 W JP2021000415 W JP 2021000415W WO 2021149505 A1 WO2021149505 A1 WO 2021149505A1
Authority
WO
WIPO (PCT)
Prior art keywords
individual
search
answer
accuracy
integrated
Prior art date
Application number
PCT/JP2021/000415
Other languages
English (en)
French (fr)
Inventor
清木康
Original Assignee
清木康
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 清木康 filed Critical 清木康
Priority to US17/794,170 priority Critical patent/US11907297B2/en
Publication of WO2021149505A1 publication Critical patent/WO2021149505A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471Distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9038Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/10Pre-processing; Data cleansing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Definitions

  • the present invention relates to an integrated search system in which a lower layer device executes a search process using a database in response to a request from the upper layer device, and the upper layer device answers an inquiry.
  • Patent Document 1 there is a heterogeneous database integration system of Patent Document 1 as a system in which a lower layer device executes a search process using a database in response to a request from the upper layer device and the upper layer device answers an inquiry.
  • a data processing system capable of referencing a plurality of types of databases is composed of an upper layer device and a lower layer device, and the upper layer device should satisfy a plurality of inquiry items and answers of a plurality of inquiry items.
  • the control information group in the primitive format is issued, and the answers to the query from multiple types of databases in the primitive format are received from the lower layer device and combined based on the combination condition, and the combined answers are converted into the script format.
  • the lower layer device converts the issued control information in the primitive format into the control instruction corresponding to the corresponding type for the database of the corresponding type and outputs it, and outputs each processing result in the primitive format. Answers to the upper layer device.
  • the upper layer device can answer an inquiry based on the limited data amount.
  • the upper layer device It is not possible for the upper layer device to give a highly accurate answer based on a large amount of data by using a combination of a plurality of AI search devices learned from a large amount of data. Therefore, there is a demand for a system in which a plurality of AI search devices learned from a large amount of data are used in combination and an upper layer device can give a highly accurate answer based on a large amount of data. Further, at that time, in order for the upper layer device to give a more appropriate answer, it is desirable that the upper layer device evaluates the accuracy of the individual answer of each AI search device on the same scale.
  • the present invention is proposed in view of the above problems, enables a plurality of AI search devices trained with a large amount of data to be used in combination, and an upper layer device provides a highly accurate answer based on a large amount of data. It is an object of the present invention to provide an integrated search system capable of evaluating the accuracy of individual answers of each AI search device on the same scale.
  • the integrated search system of the present invention is an integrated search system including an upper layer integrated processing device and a plurality of lower layer individual AI search devices, and the integrated processing device includes a query recognition unit that recognizes a query and the above.
  • a search request generation unit that generates a search request in a primitive format to be output to each of the individual AI search devices in response to an inquiry, and a plurality of individual answers corresponding to the search request in the primitive format and the accuracy of the individual answers.
  • the normalization processing unit that receives from each of the individual AI search devices and acquires the normal accuracy obtained by normalizing the accuracy of the individual answer of each individual AI search device to the same scale, and each individual answer and its normal accuracy.
  • It has a question-and-answer generation unit that generates a corresponding question-and-answer, and the individual AI search device uses an individual database for AI and artificial intelligence in response to receiving a search request in the primitive format.
  • a search processing unit that searches the database, acquires individual answers corresponding to the search request in the primitive format from the individual database for AI, and acquires the accuracy of the individual answers, and the acquired individual answers and the accuracy of the individual answers. It is characterized by having an individual answer output unit which outputs to the integrated processing apparatus in the primitive format. According to this, it is possible to use a combination of a plurality of individual AI search devices trained with a large amount of data, and the integrated processing device, which is an upper layer device, generates highly accurate inquiry answers based on a large amount of data.
  • the integrated processing device which is the upper layer device, acquires the normal accuracy obtained by normalizing the accuracy of the individual answer of the individual AI search device to the same scale, so that the upper layer device determines the accuracy of the individual answer of each individual AI search device. It is possible to evaluate on the same scale, and further, by generating and answering the inquiry answer corresponding to the normal accuracy, it becomes possible to give a more accurate answer.
  • one individual database for AI and another individual AI search device searched by at least one individual AI search device among the individual databases for AI of the plurality of individual AI search devices search. It is characterized in that one individual database for AI is heterogeneous. According to this, it is possible to generate inquiry answers based on compound-eye evaluations and viewpoints by different types of individual databases for AI, and it is possible to provide more accurate answers. In addition, it is possible to generate an inquiry answer that fits a more complicated query.
  • one individual database for AI and another individual AI search device searched by at least one individual AI search device among the individual databases for AI of the plurality of individual AI search devices search. It is characterized in that one individual database for AI is of the same type. According to this, it is possible to generate an inquiry answer based on a deep evaluation and a viewpoint by the same kind of individual database for AI, and it is possible to give a more accurate answer. In addition, by generating inquiry answers based on evaluations using multiple individual databases for AI of the same type, inaccurate data may be set in a specific individual database for AI due to human error, etc., or the frequency of occurrence. Even when a large amount of over-learning data corresponding to a low event is set, it is possible to suppress the deterioration of accuracy that occurs in the inquiry and answer caused by these data.
  • each of the search processing units of the plurality of individual AI search devices searches the individual database for AI using artificial intelligence of deep learning, and the accuracy of the individual answer is determined as described above. It is characterized by acquiring the output value of the output layer indicating the prediction accuracy of the individual answer.
  • the individual AI search device which is a lower layer device, obtains an individual answer with extremely high accuracy and prediction accuracy based on the search process using deep learning, and is the upper layer device based on this. It is possible for the integrated processing device to generate and answer inquiries with extremely high accuracy and prediction accuracy.
  • the integrated search system of the present invention includes an individual non-AI search device in the lower layer, and the search request generation unit of the integrated processing device outputs to the individual non-AI search device in response to the query in a primitive format.
  • the search request is generated, and the inquiry answer generation unit of the integrated processing device generates the inquiry answer corresponding to the individual answer and the normal accuracy thereof and corresponding to the non-AI individual answer, and also generates the individual non-AI.
  • the search device searches the non-AI individual database and the non-AI individual database in response to the receipt of the primitive format search request, and the non-AI corresponding to the primitive format search request from the non-AI individual database.
  • It is characterized by having a search processing unit for acquiring individual answers and an individual answer output unit for outputting the acquired non-AI individual answers to the integrated processing apparatus in the primitive format. According to this, it is possible to generate inquiry answers based on various evaluations and viewpoints by a plurality of individual databases for AI and individual databases for non-AI, and it is possible to give more accurate answers. In addition to the individual answers of each individual AI search device, the individual answers from the individual database for non-AI can be integrated to generate and answer compound-eye inquiry answers suitable for more complicated inquiries.
  • the search request generation unit of the integrated processing device uses artificial intelligence from the data of the query to obtain the type of the individual database for AI, or the type of the individual database for AI and the non-AI. It is characterized in that feature points corresponding to the types of individual databases for use are extracted and a search request in the primitive format corresponding to the feature points is generated. According to this, a search request in a more appropriate primitive format that matches the query data such as the content of the query is generated, and an inquiry answer is generated based on the individual answer corresponding to the search request in the more appropriate primitive format. Therefore, it is possible to further improve the accuracy of the inquiry and answer and to provide a more accurate answer. In addition, it is possible to generate an accurate search request that exceeds the expectations of the search user by using the answer of the feature point extraction by artificial intelligence processing for the search request of the secondary inquiry, so to speak, the secondary inquiry. The accuracy of itself can be greatly enhanced.
  • the integrated search system of the present invention is characterized in that input data from a sensor that detects a required physical quantity is included in the query data. According to this, based on the inquiry corresponding to the detection status of the sensor such as the climate condition, the physical condition of the search user, and the condition of the physical quantity related to the search target, an inquiry answer matching the detection status of the sensor is generated. It becomes possible to answer.
  • the integrated search system of the present invention it is possible to use a plurality of AI search devices trained with a large amount of data in combination, and the upper layer device can give a highly accurate answer based on a large amount of data. , The upper layer device can evaluate the accuracy of the individual answer of each AI search device on the same scale.
  • the block diagram which shows the whole structure of the integrated search system of embodiment by this invention The block diagram which shows the structure of the integrated processing apparatus in the integrated search system of embodiment.
  • (A) is another example of an individual answer in a primitive format
  • (b) is an explanatory diagram illustrating another example of a non-AI individual answer in a primitive format.
  • (A) is an example of an integrated answer in a primitive format
  • (b) is an explanatory diagram illustrating another example of an integrated answer in a primitive format.
  • the integrated search system 1 of the embodiment according to the present invention includes an upper layer integrated processing device 2, a plurality of lower layer individual AI search devices 3, and a lower layer individual non-AI search device 4.
  • the lower layer individual AI search device 3 or the lower layer individual AI search device 3 and the individual non-AI search device 4 execute the search process using the database.
  • the integrated processing device 2 in the upper layer answers the inquiry based on the individual answers from the lower layer.
  • the individual non-AI search device 4 in the lower layer can be singular or plural as needed, and only a plurality of individual AI search devices 3 are provided in the lower layer, and the individual non-AI search device 4 is provided in the lower layer. It is also possible to use an integrated search system that does not include the device 4.
  • the upper layer integrated processing device 2 includes an arithmetic control unit 21 such as an MPU and a CPU, a storage unit 22 composed of an HDD, a flash memory, an EEPROM, a ROM, a RAM, and the like, and a mouse and a keyboard. , An input unit 23 such as a touch panel, an output unit 24 such as a display, and a communication interface 25, which are realized by a computer device such as a server.
  • arithmetic control unit 21 such as an MPU and a CPU
  • a storage unit 22 composed of an HDD, a flash memory, an EEPROM, a ROM, a RAM, and the like
  • a mouse and a keyboard a keyboard
  • An input unit 23 such as a touch panel
  • an output unit 24 such as a display
  • a communication interface 25 which are realized by a computer device such as a server.
  • the storage unit 22 has an integrated processing program storage unit 221 that stores a control program such as an integrated processing program that causes the arithmetic control unit 21 to execute a predetermined process, and stores the integrated processing program.
  • the search request generation program that causes the arithmetic control unit 21 to execute the search request generation process that generates the primitive format search request that is output in response to the query is an artificial intelligence program, and the search request generation program is stored.
  • the arithmetic control unit 21 is made to execute the search request generation process using the trained model stored in the trained model storage unit 222 of the unit 22. It is preferable to use a deep learning artificial intelligence program as the artificial intelligence program of the search request generation program.
  • the trained model includes the types of data corresponding to the types of the individual database 323 for AI of each individual AI search device 3 and the types of data corresponding to the types of the individual database 422 for non-AI of the individual non-AI search device 4. Is set and stored in the trained model storage unit 222.
  • the trained model includes the type of data corresponding to the type of the individual database for AI of each individual AI search device 3. Is set and stored in the trained model storage unit 222.
  • the storage unit 22 is for normalization that stores normalization data for normalizing the accuracy of each individual AI search device 3, which corresponds to the specified data that defines the accuracy of the individual answer of each individual AI search device 3. It has a data storage unit 223.
  • the storage unit 23 stores the combination condition storage unit 224 for storing the inquiry / answer generation unit 214 and the combination conditions for generating the inquiry / answer corresponding to the normal accuracy thereof and the non-AI individual answer from the individual non-AI search device 4.
  • the combination conditions for example, "equivalence of personal ID”, "acquisition”, “acquisition of average normal accuracy from normal accuracy” corresponding to individual answers from the individual AI search device 3 and the like are set.
  • the arithmetic control unit 21 executes a predetermined process according to the integrated processing program, and in cooperation with the integrated processing program, serves as the inquiry recognition unit 211, the search request generation unit 212, the normalization processing unit 213, and the inquiry answer generation unit 214. Executes the predetermined processing of.
  • the inquiry recognition unit 211 recognizes the inquiry or inquiry data input to the integrated processing device 2.
  • the client terminal 12 is connected to the integrated processing device 2 via the communication network 11 by the communication line, the basic inquiry transmitted from the client terminal 12 is input to the integrated processing device 2, and the integrated processing device is input.
  • Data is input from one or more sensors 5 electrically connected to 2.
  • the input data from the sensor 5 that detects the required physical quantity is input to the integrated processing device 2 as an auxiliary query.
  • the integrated processing device 2 or the inquiry recognition unit 211 acquires the detection data as an auxiliary query from the sensor 5 in response to the input of the basic query, and combines the basic query data and the auxiliary query data to query data. Recognize.
  • the integrated processing device 2 or the inquiry recognition unit 211 is transmitted from the client terminal 12 in response to the non-use input of the sensor detection data transmitted from the client terminal 12 or input by the integrated processing device 2. It is also good as a configuration for recognizing a basic inquiry as an inquiry or inquiry data. It should be noted that the integrated processing device 2 or the inquiry recognition unit 211 may recognize the basic inquiry transmitted from the client terminal 12 as an inquiry or inquiry data without connecting the sensor 5 itself to the integrated processing device 2. .. Further, in the integrated processing device 2, the inquiry itself transmitted or input from the client terminal 12 or the like includes the detection data of the sensor, and the inquiry recognition unit 211 includes the detection data of the sensor for the basic inquiry and the auxiliary inquiry. It is also good as a configuration for recognizing a combination of queries. Further, the inquiry recognition unit 211 of the integrated processing device 2 may recognize the input data itself from the sensor 5 that detects the required physical quantity as inquiry or inquiry data instead of the auxiliary inquiry.
  • the search request generation unit 212 generates a primitive format search request to be output to each of the individual AI search devices 3 in response to the query recognized by the inquiry recognition unit 211, and outputs the search request to the individual non-AI search device 4. Generate a search request in primitive format.
  • the search request generation unit 212 may be operated by the inquiry recognition unit 211. In response to the recognized query, only the search request in the primitive format to be output to each of the individual AI search devices 3 is generated.
  • the search request generation unit 212 in the present embodiment uses artificial intelligence from the query data, in other words, by processing of the arithmetic control unit 21 that cooperates with the search request generation program of the artificial intelligence program, respectively, as necessary.
  • the feature points corresponding to the type of the individual database for AI of the individual AI search device 3 and the feature points corresponding to the type of the individual database for non-AI of the individual non-AI search device 4 are extracted and correspond to each feature point.
  • the search request generation unit 212 may be used as necessary for the AI individual database of each individual AI search device 3.
  • the feature points corresponding to the types are extracted, and the search request in the primitive format corresponding to each feature point is generated.
  • the primitive format of the search request in the primitive format is a function interpreted and executed by the arithmetic control unit 21 of the integrated processing device 2, a function interpreted and executed by the arithmetic control unit 31 of the individual AI search device 3 described later, and an individual non-function described later.
  • This is a function call format that calls a function composed of one or a plurality of types of functions that are interpreted and executed by the arithmetic control unit 41 of the AI search device 4. Concatenation of multiple function descriptions in primitive format makes it possible to perform calculations that concatenate multiple functions.
  • the search request generation unit 212 of the integrated processing device 2 issues a search request in the function call format, which is a primitive format, to the individual AI search device 3 and the individual non-AI search device 4 in the lower layer, which will be described later, and the individual AI search device 3
  • the search processing unit 311 and the search processing unit 411 of the individual non-AI search device 4 execute the process corresponding to the search request, and the individual answer output unit 312 of the individual AI search device 3 and the individual answer of the individual non-AI search device 4
  • the output unit 412 outputs the search result of the interpretation execution result (data including the individual answer and its accuracy, or data including the non-AI individual answer) in the function call format which is the primitive format of the common data format, and the integrated processing device 2
  • the arithmetic control unit 21 receives the output data which is the search result and executes a process of passing the output data as an argument to the subsequent function defined by the join condition.
  • the normalization processing unit 213 receives individual answers and the accuracy of individual answers corresponding to the search request in the primitive format from each of the plurality of individual AI search devices 3, and each individual AI search device 3 of the normalization data storage unit 223. Using the normalization data corresponding to the specified data that defines the accuracy of the individual answers, the normal accuracy obtained by normalizing the accuracy of the individual answers of each individual AI search device 3 to the same scale is obtained.
  • the normalization data corresponding to the specified data that defines the accuracy of the individual answer of each individual AI search device 3 stored in the normalization data storage unit 223 is, for example, each individual AI search device 3.
  • the accuracy as an individual answer to be output is the maximum value and the minimum value of the values that can be taken.
  • the normalization data is the maximum value of the accuracy and the minimum value of the accuracy for each individual AI search device 3. .
  • the normalization processing unit 213 performs normalization processing of, for example, (accuracy of individual answer-minimum value of accuracy) / (maximum value of accuracy-minimum value of accuracy) for each individual AI search device 3 that has received individual answers. Is executed, and the accuracy of the individual answer for each individual AI search device 3 is normalized between 0.0 and 1.0.
  • the inquiry answer generation unit 214 uses the join condition corresponding to the query stored in the storage unit 22, and corresponds to the individual answer from the individual AI search device 3 and its normal accuracy, and is not from the individual non-AI search device 4. Generate inquiry answers corresponding to AI individual answers.
  • the inquiry / answer generation unit 214 uses the join conditions corresponding to the queries stored in the storage unit 22 and uses the individual AI. An individual answer from the search device 3 and an inquiry answer corresponding to the normal accuracy thereof are generated.
  • each individual AI search device 3 constituting the plurality of individual AI search devices 3 in the lower layer has an arithmetic control unit 31 such as an MPU and a CPU, and an HDD, a flash memory, an EEPROM, a ROM, and a RAM.
  • a plurality of computer terminals provided with a storage unit 32 composed of the above, an input unit 33 such as a mouse, a keyboard, and a touch panel, an output unit 34 such as a display, and a communication interface 35, and connected by a server or a communication connection network. It is realized by a computer device such as an aggregate of.
  • the storage unit 32 has an individual AI search processing program storage unit 321 that stores a control program such as an individual AI search processing program that causes the arithmetic control unit 31 to execute a predetermined process, and stores the individual AI search processing program.
  • the individual AI search processing program is an artificial intelligence program, and the individual AI search processing program causes the arithmetic control unit 21 to execute the individual AI search processing using the learned model stored in the learned model storage unit 322 of the storage unit 32. ..
  • a deep learning artificial intelligence program as the artificial intelligence program of the required individual AI search processing program of the required individual AI search device 3, and more preferably.
  • the individual AI search processing program of all the individual AI search devices 3 in the lower layer is an artificial intelligence program of deep learning (deep learning).
  • the storage unit 32 is provided with an individual database 323 for AI that stores data searched by the individual AI search process, and one or more individual databases 323 for AI can be installed as needed. be. Further, it is preferable that the individual database 323 for AI is updated as needed over time.
  • the database 323 for AI of the plurality of individual AI search devices 3 is provided with a different type of data, in other words, one individual AI search device 3 for searching different types of data and another individual AI search device 3. Further, among the individual database 323 for AI of the plurality of individual AI search devices 3, one individual database 323 for AI searched by one individual AI search device 3 and one AI searched by the other individual AI search device 3.
  • the individual database 323 for use is of the same type, in other words, one individual AI search device 3 for searching the same type of data and another individual AI search device 3 may be provided.
  • a plurality of individual AIs for searching different types of data are configured in which a different type of AI individual database 323 and the same type of AI individual database 323 are mixed.
  • a search device 3 may be provided, and a plurality of individual AI search devices 3 for searching the same type of data may be provided.
  • the arithmetic control unit 31 executes a predetermined process according to the individual AI search processing program, and executes a predetermined process as the search processing unit 311 and the individual answer output unit 312 in cooperation with the individual AI search processing program.
  • the search processing unit 311 uses artificial intelligence in response to receiving a search request in the primitive format from the integrated processing device 2, in other words, the arithmetic control unit 31 that cooperates with the individual AI search processing program of the artificial intelligence program.
  • the AI individual database 323 is searched, the individual answers corresponding to the search request in the primitive format are acquired from the AI individual database 323, and the accuracy of the acquired individual answers is acquired.
  • the search processing unit 311 searches the AI individual database 323 using the deep learning artificial intelligence, and individually determines the accuracy of the individual answer. Acquire the output value of the output layer that indicates the prediction accuracy of the answer.
  • the individual answer output unit 312 outputs the acquired individual answer and the accuracy of the individual answer to the integrated processing device 2 in a primitive format.
  • the lower layer individual non-AI search device 4 includes an arithmetic control unit 41 such as an MPU and a CPU, a storage unit 42 composed of an HDD, a flash memory, an EEPROM, a ROM, a RAM, and the like, and a mouse. , An input unit 43 such as a keyboard and a touch panel, an output unit 44 such as a display, and a communication interface 45, which are realized by a computer device such as a server or an aggregate of a plurality of computer terminals connected by a communication connection network. ..
  • the storage unit 42 has an individual non-AI search processing program storage unit 421 that stores a control program such as an individual non-AI search processing program that causes the arithmetic control unit 41 to execute a predetermined process, and stores the individual non-AI search processing program.
  • the individual non-AI search processing program is an individual search processing program that executes a search process that is not an artificial intelligence program, and causes the arithmetic control unit 21 to execute an individual search process that does not use artificial intelligence.
  • the storage unit 42 is provided with an individual database 422 for non-AI that stores data searched by the individual non-AI search process. Further, it is preferable that the individual database 422 for non-AI is updated at any time over time.
  • the arithmetic control unit 41 executes a predetermined process according to the individual non-AI search processing program, and executes a predetermined process as the search processing unit 411 and the individual answer output unit 412 in cooperation with the individual non-AI search processing program.
  • the search processing unit 411 searches the non-AI individual database 422 in response to receiving the primitive format search request from the integrated processing device 2, and the non-AI corresponding to the primitive format search request from the non-AI individual database 422. Get individual answers.
  • the individual answer output unit 412 outputs the acquired non-AI individual answer to the integrated processing device 2 in a primitive format.
  • search processing example by the integrated search system 1
  • a processing example of the inquiry example "identify the individual from the face image of the person captured by the camera and the fingerprint of the person, and acquire the position information of the current time of the person and the accuracy information of the person" is illustrated. ..
  • the inquiry recognition unit 211 of the integrated processing device 2 in the upper layer recognizes the inquiry data by combining the basic inquiry transmitted from the client terminal 12 and the auxiliary inquiry of the detection data input from the sensor 5 ( S1). For example, in a state where the client terminal 12 has a database of fingerprint images scanned in advance, the fingerprint image that the user judges to be highly probable from the client terminal 12, the face image captured from the camera sensor of the sensor 5, and the face image. The individual identification request of the person and the search request of the position information of the current time of the person are transmitted, and the inquiry recognition unit 211 of the integrated processing device 2 sends the individual identification request of the person of the face image corresponding to the basic inquiry and the person. The search request for the position information of the current time, the fingerprint image, and the face image corresponding to the auxiliary inquiry are recognized as the inquiry data.
  • the search request generation unit 212 of the integrated processing device 2 generates a search request in a primitive format to be output to each of the individual AI search devices 3 in response to the inquiry, and a primitive to be output to the individual non-AI search device 4.
  • feature points are extracted from the required query data, and the extracted feature points are used to generate a search request in a primitive format to be output to each of the individual AI search devices 3, and also to generate individual non-individual points.
  • a primitive format search request to be output to the AI search device 4 is generated (S2).
  • the timing of generating and outputting the primitive format search request to be output to each individual AI search device 3 and individual non-AI search device 4 is not limited to simultaneous parallel, and differs in time series as necessary.
  • the order is possible, and the result or a part of the individual answer of any individual AI search device 3 and the non-AI individual answer of any individual non-AI search device 4 can be used as another individual AI search device 3 or a part of the result. It is used as the data of the primitive format search request to be output to another individual non-AI search device 4, and the primitive format search request to be output to another individual AI search device 3 or another individual non-AI search device 4 is generated. It is also good as an output configuration.
  • a face image accuracy extraction request is generated as a primitive format search request to be output to the first individual AI search device 3 that executes face authentication, and the first individual AI search is performed.
  • a face image accuracy extraction request is generated as a primitive format search request to be output to the second individual AI search device 3 that executes the same type of face authentication as the device 3, and is different from the first and second individual AI search devices 3.
  • a fingerprint accuracy extraction request is generated as a primitive type search request to be output to the third individual AI search device 3 that executes a certain fingerprint authentication.
  • the individual non-AI search that searches the position information of the registered person at the current time is executed.
  • a search request in the primitive format to be output to the device 4 a personal position / space information extraction request including the specified personal ID is generated.
  • FIG. 6 shows an example of a search request in a primitive format.
  • the individual ID specified by the individual answer of the individual AI search device 3 is the individual ID corresponding to the individual answer having the maximum normal accuracy described later, the individual ID specified by a plurality of individual answers, or all the individual answers. It is possible to use the personal ID specified in the above, and if the personal ID specified in each individual response does not match, the subsequent search process can be stopped. Further, if necessary, when the face image captured from the client terminal 12 is insufficient for executing face recognition, the face part is extracted from this face image as a feature point by using an existing partial image extraction process or the like. Process is executed, a face part image is generated, and a search request in a primitive format is generated as corresponding to the face part image (feature point).
  • the integrated processing device 2 or the search request generation unit 212 outputs the generated primitive type search request to the corresponding individual AI search device 3 and individual non-AI search device 4 (S3).
  • necessary auxiliary data such as a face image for collation and a fingerprint image for collation are also output according to the search request in the primitive format.
  • the individual non-AI search is performed after the individual ID of the individual answer of the individual AI search device 3 is obtained.
  • a primitive format search request to be output to the device 4 is generated and output.
  • the search processing unit 311 of the individual AI search device 3 searches the individual database 323 for AI (S4-1), and responds to the search request in the primitive format from the individual database 323 for AI. In addition to acquiring the individual answers to be obtained, the accuracy of the acquired individual answers is acquired (S4-2).
  • the search processing unit 311 executes the search process by deep learning, the output value of the output layer indicating the prediction accuracy of the individual answer is acquired as the accuracy of the individual answer.
  • the search processing unit 311 of the first individual AI search device 3 that executes face authentication in the first individual AI search device 3 for searching the same type of data and the second individual AI search device 3 is a primitive.
  • Format search request In response to the reception of the face image accuracy extraction request, the AI individual database 323 in which data is accumulated by the face image feature amount is searched, and the primitive format search request: face image accuracy is searched from the AI individual database 323.
  • Individual answer corresponding to the extraction request Acquire the personal ID including the person's name, and acquire the accuracy of the individual answer corresponding to the personal ID such as the output value of the output layer.
  • the search processing unit 311 of the second individual AI search device 3 that executes face authentication has accumulated data in the face image feature amount in response to the reception of the primitive format search request: face image accuracy extraction request.
  • the search processing unit 311 of the third individual AI search device 3 that executes fingerprint authentication in the first individual AI search device 3 for searching different types of data and the third individual AI search device 3 searches in a primitive format.
  • Request In response to the receipt of the fingerprint accuracy extraction request, the AI individual database 323 in which data is accumulated by the fingerprint feature amount is searched, and the primitive format search request from the AI individual database 323: Individual corresponding to the fingerprint accuracy extraction request.
  • Answer In addition to acquiring the personal ID including the person's name, the accuracy of the individual answer corresponding to the personal ID such as the output value of the output layer is acquired.
  • the individual answer output unit 312 of the individual AI search device 3 outputs the acquired individual answer and the accuracy of the individual answer to the integrated processing device 2 in a primitive format (S4-3).
  • the individual answer output unit 312 of the first individual AI search device 3 that has executed face recognition outputs the individual ID of the individual answer and the accuracy of the individual answer corresponding to the individual ID to the integrated processing device 2 in a primitive format
  • the first The individual answer output unit 312 of the second individual AI search device 3 that executed face recognition that performed the same type of data search as the individual AI search device 3 of 1 is the individual ID of the individual answer and the individual answer corresponding to the individual ID.
  • the accuracy is output to the integrated processing device 2 in a primitive format.
  • the individual answer output unit 312 of the third individual AI search device 3 that executed the fingerprint authentication that performed a different type of data search with the first individual AI search device 3 corresponded to the individual ID and the individual ID of the individual answer.
  • the accuracy of the individual answer is output to the integrated processing device 2 in the primitive format.
  • the search processing unit 411 of the individual non-AI search device 4 searches the non-AI individual database 422 (S5-1), and searches the non-AI individual database 422 in the primitive format. Acquire non-AI individual answers corresponding to the search request of (S5-2).
  • the search processing unit 411 receives the search request in the primitive format: the personal position space information extraction request including the personal ID specified in the individual answers of the first, second, and third individual AI search devices 3.
  • the non-AI individual database 422 in which the personal position time information is accumulated is searched, and the non-AI individual database 422 such as the database in which the position information of the GPS data is updated at any time is changed to the personal ID of the search request in the primitive format.
  • the individual answer output unit 412 of the individual non-AI search device 4 outputs the acquired non-AI individual answer to the integrated processing device 2 in a primitive format (S5-3).
  • the individual answer output unit 412 of the individual non-AI search device 4 integrates the non-AI individual answer corresponding to the personal ID: personal position time information (position information of the current time of the person with the personal ID) in a primitive format.
  • FIG. 7 shows an example of an individual answer in a primitive format
  • FIG. 8 shows an example of a non-AI individual answer in a primitive format.
  • the integrated processing device 2 in the upper layer receives individual answers and accuracy of individual answers corresponding to the search request in the primitive format from each of the plurality of individual AI search devices 3, and also receives the search request in the primitive format from the individual non-AI search device 4. Receive a non-AI individual response corresponding to (S6).
  • S6 Receive a non-AI individual response corresponding to (S6).
  • the individual non-individual after the integrated processing device 2 receives the individual answer of the individual AI search device 3 and its accuracy.
  • the integrated processing device 2 receives the non-AI individual response of the AI search device 4.
  • the normalization processing unit 213 of the integrated processing device 2 determines the data storage unit 223 for normalization with respect to the individual answers corresponding to the search requests in the primitive format received from each of the plurality of individual AI search devices 3 and the accuracy of the individual answers. Using the normalization data corresponding to the specified data that defines the accuracy of the individual answer of each individual AI search device 3, the normal accuracy obtained by normalizing the accuracy of the individual answer of each individual AI search device 3 to the same scale. It is acquired and stored in a predetermined storage area of the storage unit 22 (S7).
  • the inquiry answer generation unit 214 of the integrated processing device 2 uses the coupling condition stored in the storage unit 22 to correspond to the individual answer from the individual AI search device 3 and its normal accuracy, and the individual non-AI search device 4 Generate an inquiry answer corresponding to a non-AI individual answer from (S8).
  • Normal accuracy, personal ID corresponding to the individual answer from the third individual AI search device 3 and its normal accuracy, non-AI individual answer from the individual non-AI search device 4 personal ID and personal position time information (person of personal ID) (Position information at the current time (time at the time of search)) is combined according to the combination conditions: "equivalence of personal ID", "acquisition”, “acquisition of average normality accuracy”, and integrated information (individual) as an inquiry answer.
  • the individual answer from the first individual AI search device 3 that executes face authentication the personal ID including the person's name and its accuracy 0.92.
  • the personal ID including person's name and its normal accuracy 0.914 the individual answer from the second individual AI search device 3 that executes face authentication: personal ID including person's name and its accuracy 0.84
  • the average normal accuracy (comprehensive evaluation accuracy) of the individual ID: 0.9347 is acquired according to the "acquisition of average normal accuracy" of the combination condition, and further combined.
  • Non-AI individual answer from individual non-AI search device 4 according to the conditions: Personal ID and personal position time information (position information at the current time (time at the time of search) of the person with personal ID) are combined and integrated as an inquiry answer.
  • Information person name included in personal ID and its comprehensive evaluation accuracy (average normal accuracy): 0.9347, position information of the current time (time at the time of search) of the person) is generated.
  • the integrated processing device 2 or the predetermined unit of the arithmetic control unit 21 transmits the generated inquiry answer to the client terminal 12 via the communication network 11, presents the inquiry answer, and answers (S9).
  • the integrated search system 1 of the present embodiment it is possible to use a plurality of individual AI search devices 3 trained with a large amount of data in combination, and the integrated processing device 2 which is an upper layer device is based on a large amount of data. It is possible to generate a highly accurate inquiry and answer, and it is possible to answer with this highly accurate inquiry and answer.
  • the individual AI search device 3 in the lower layer executes the search process using deep learning, it is possible to obtain individual answers with extremely high accuracy and prediction accuracy, and based on this, the integrated processing device 2 which is the upper layer.
  • the integrated processing device 2 which is the upper layer device acquires the normal accuracy obtained by normalizing the accuracy of the individual answer of the individual AI search device 3 to the same scale, so that the integrated processing device 2 of the upper layer is each individual AI search device.
  • the accuracy of the individual answers in 3 can be evaluated on the same scale, and further, by generating and answering the inquiry answers corresponding to the normal accuracy, it becomes possible to give a more accurate answer.
  • the individual non-AI search device 4 when the individual non-AI search device 4 is provided in the lower layer, it is possible to generate inquiry answers based on various evaluations and viewpoints by a plurality of individual databases 323 for AI and individual databases 422 for non-AI. , It is possible to give more accurate answers, and in addition to the individual answers of each individual AI search device 3, the individual answers from the individual database 422 for non-AI are integrated, and it is a compound eye that is suitable for more complicated inquiries. It is possible to generate and answer various questions and answers.
  • the search request generation unit 212 of the integrated processing device 2 uses artificial intelligence from the query data to correspond to the type of the individual database 323 for AI, or the type 323 of the individual database for AI and the type of the individual database 422 for non-AI.
  • the search request in the more appropriate primitive format that matches the query data such as the contents of the query is generated.
  • Inquiry answers can be generated based on individual answers corresponding to the appropriate primitive format search request. Therefore, it is possible to further improve the accuracy of the inquiry and answer and to provide a more accurate answer.
  • it is possible to generate an accurate search request that exceeds the expectations of the search user by using the answer of the feature point extraction by artificial intelligence processing for the search request of the secondary inquiry, so to speak, the secondary inquiry. The accuracy of itself can be greatly enhanced.
  • the detection status of the sensor 5 such as the state of the climate, the physical condition of the search user, and the state of the physical quantity related to the search target, etc. Based on the inquiry corresponding to the above, it is possible to generate an inquiry answer that matches the detection status of the sensor 5 and give an answer.
  • the integrated search system 1 including the integrated processing device 2 in the upper layer, the plurality of individual AI search devices 3 in the lower layer, and the individual non-AI search device 4 in the lower layer has been described.
  • the integrated search system includes an appropriate configuration including an upper layer integrated processing device and a plurality of lower layer individual AI search devices.
  • the upper layer integration without providing the lower layer individual non-AI search device 4. It may be an integrated search system composed of only the processing device 2 and a plurality of individual AI search devices 3 in the lower layer.
  • the normalization processing of the normalization processing unit in the present invention it is possible to use an appropriate configuration capable of obtaining the normal accuracy by normalizing the accuracy of the individual answer of the individual AI search device to the same scale. It is not limited to the normalization processing of the normalization processing unit 213 in the embodiment.
  • the accuracy of the individual answer of the individual AI search device in the present invention it is possible to use an appropriate accuracy within an applicable range other than the output value of the output layer indicating the prediction accuracy of the individual answer described above. It is possible to use an appropriate index indicating the prediction accuracy of the individual answer that can be acquired together with the acquisition of the individual answer in the AI search device.
  • the generation of the search request for the individual AI search device in the present invention is a process of extracting feature points from the query data in response to the query and generating a search request in a primitive format to be output using the extracted feature points.
  • the configuration is not limited, and it is also possible to generate and output a search request in a primitive format corresponding to a query without performing the feature point extraction process.
  • the individual answer acquired and output by the individual AI search device in the present invention and its accuracy are preferably composed of a plurality of answer elements in addition to the one composed of a single answer element.
  • FIG. 9 Even if the individual AI search device acquires, generates, and outputs individual answers such as a list composed of a plurality of answer elements consisting of a plurality of individual IDs and a plurality of probabilities corresponding to a plurality of personal IDs as in the example of a). good.
  • the non-AI individual response acquired and output by the individual non-AI search device in the present invention is also preferably composed of a plurality of response elements in addition to the one composed of a single response element.
  • an individual non-AI search for non-AI individual answers such as a list composed of a plurality of answer elements such as all possible answer elements corresponding to a specific personal ID.
  • the device may acquire, generate, and output.
  • a plurality of inquiry answers are used as an example.
  • a question answer consisting of all combinations of answer elements, or a question answer that extracts a plurality of items that are equal to or greater than the normal accuracy threshold stored in the storage unit of the integrated processing device, or stored in the storage unit of the integrated processing device. It is also preferable to generate, output, and present a plurality of inquiry answers corresponding to the set number.
  • the integrated processing device in the present invention serves as an inquiry answer to be output to a client terminal or the like, or as an inquiry answer to be output to a web server interposed between the integrated processing device and the client terminal, etc., as shown in FIG. 10A. It is also good to generate and output an integrated answer in primitive format as in the example. Also in this case, as in the example of FIG. 10B, an integrated answer in a primitive format such as a list composed of a plurality of answer elements may be generated and output.
  • the present invention can be used as a system in which the upper layer device answers the inquiry by using the search result of the database of the lower layer device when the upper layer device answers the inquiry.
  • Output unit 35 ... Communication interface 4 ... Individual non-AI search Device 41 ... Arithmetic control unit 411 ... Search processing unit 412 ... Individual answer output unit 42 ... Storage unit 421 ... Individual non-AI search processing program storage unit 422 ... Individual database for non-AI 43 ... Input unit 44 ... Output unit 45 ... Communication interface 5 ... Sensor 11 ... Communication network 12 ... Client terminal

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Fuzzy Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

上位層の統合処理装置2が、問合せを認識し、問合せに対応して個別AI検索装置3のそれぞれに出力するプリミティブ形式の検索要求を生成すると共に、プリミティブ形式の検索要求に対応する個別回答とその確度を複数の個別AI検索装置3から受け取り、各個別AI検索装置3の個別回答の確度を正規化して正規確度を取得し、個別回答及びその正規確度に対応する問合回答を生成し、下位層の個別AI検索装置3が、プリミティブ形式の検索要求の受け取りに応じて人工知能を用いてAI用個別データベース323を検索し、個別回答とその確度を取得してプリミティブ形式で統合処理装置2に出力する統合検索システム1。複数のAI検索装置を組み合わせて利用し、上位層装置が大量データに基づく確度の高い回答を行えると共に、上位層装置が各AI検索装置の個別回答の確度を同一尺度で評価できる。

Description

統合検索システム
 本発明は、上位層装置の要求に応じて下位層装置がデータベースを用いて検索処理を実行し、上位層装置が問合せに回答する統合検索システムに関する。
 従来、上位層装置の要求に応じて下位層装置がデータベースを用いて検索処理を実行し、上位層装置が問合せに回答するシステムとして特許文献1の異種データベース統合システムがある。特許文献1のシステムは、複数種のデータベースを参照可能なデータ処理システムが上位層装置と下位層装置で構成され、上位層装置が、複数の問い合わせ項目と、複数の問い合わせ項目の回答が満たすべき回答条件と、複数の問い合わせ項目に対する互いに異なる複数の回答項目をそれぞれの項目の互いに異なる値同士が満たすべき関係に基づいて結合するための結合条件とを含むスクリプト形式による問い合わせを受け取り、問い合わせを解釈してプリミティブ形式による制御情報群を発行し、且つ問い合わせに対するプリミティブ形式による複数種のデータベースからの回答を下位層装置より受け取って結合条件に基づいて結合し、結合した回答をスクリプト形式に変換して出力すると共に、下位層装置が、発行されたプリミティブ形式による制御情報を、それぞれに対応する種類のデータベースに対して当該種類に対応する制御命令に変換して出力し、それぞれの処理結果をプリミティブ形式で上位層装置に回答するものである。
特許第4533974号公報
 ところで、特許文献1のシステムは、画一的で限られたデータ量のデータベースの複数を組み合わせて利用し、上位層装置が問い合わせに対して限られたデータ量に基づく回答を行うことはできるものの、大量のデータで学習した複数のAI検索装置を組み合わせて利用し、上位層装置が大量データに基づく確度の高い回答を行うことはできない。そのため、大量のデータで学習した複数のAI検索装置を組み合わせて利用し、上位層装置が大量データに基づく確度の高い回答を行うことができるシステムが求められている。更に、その際、上位層装置がより適切な回答を行うため、上位層装置が各AI検索装置の個別回答の確度を同一尺度で評価することが望ましい。
 本発明は上記課題に鑑み提案するものであって、大量のデータで学習させた複数のAI検索装置を組み合わせて利用することを可能にし、上位層装置が大量データに基づく確度の高い回答を行うことができると共に、上位層装置が各AI検索装置の個別回答の確度を同一尺度で評価することができる統合検索システムを提供することを目的とする。
 本発明の統合検索システムは、上位層の統合処理装置と下位層の複数の個別AI検索装置を備える統合検索システムであって、前記統合処理装置は、問合せを認識する問合認識部と、前記問合せに対応して前記個別AI検索装置のそれぞれに出力するプリミティブ形式の検索要求を生成する検索要求生成部と、前記プリミティブ形式の検索要求に対応する個別回答と前記個別回答の確度を複数の前記個別AI検索装置のそれぞれから受け取り、それぞれの前記個別AI検索装置の個別回答の確度を同一尺度に正規化した正規確度を取得する正規化処理部と、それぞれの前記個別回答及びその前記正規確度に対応する問合回答を生成する問合回答生成部を有し、前記個別AI検索装置は、AI用個別データベースと、前記プリミティブ形式の検索要求の受け取りに応じて人工知能を用いて前記AI用個別データベースを検索し、前記AI用個別データベースから前記プリミティブ形式の検索要求に対応する個別回答を取得すると共に前記個別回答の確度を取得する検索処理部と、取得した前記個別回答と前記個別回答の確度を前記プリミティブ形式で前記統合処理装置に出力する個別回答出力部を有することを特徴とする。
 これによれば、大量のデータで学習させた複数の個別AI検索装置を組み合わせて利用することを可能にし、上位層装置である統合処理装置が大量データに基づく確度の高い問合回答を生成することができ、この確度の高い問合回答で回答することが可能となる。また、上位層装置である統合処理装置が個別AI検索装置の個別回答の確度を同一尺度に正規化した正規確度を取得することにより、上位層装置が各個別AI検索装置の個別回答の確度を同一尺度で評価することができ、更に、正規確度に対応する問合回答を生成して回答することにより、より的確な回答を行うことが可能となる。
 本発明の統合検索システムは、複数の前記個別AI検索装置のAI用個別データベースのうち、少なくとも一の個別AI検索装置が検索する一つの前記AI用個別データベースと他の個別AI検索装置が検索する一つの前記AI用個別データベースが異種であることを特徴とする。
 これによれば、異種のAI用個別データベースによる複眼的な評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となる。また、より複雑な問合せに適合する問合回答を生成することができる。
 本発明の統合検索システムは、複数の前記個別AI検索装置のAI用個別データベースのうち、少なくとも一の個別AI検索装置が検索する一つの前記AI用個別データベースと他の個別AI検索装置が検索する一つの前記AI用個別データベースが同種であることを特徴とする。
 これによれば、同種のAI用個別データベースによる深度の深い評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となる。また、複数の同種のAI用個別データベースを用いた評価に基づく問合回答を生成することにより、特定のAI用個別データベースに人為的なミス等で不正確なデータが設定されていたり、発生頻度の低い事象に対応する過学習のデータが多く設定されている場合にも、これらのデータに起因する問合回答に発生する的確性の劣化を抑制することができる。
 本発明の統合検索システムは、複数の前記個別AI検索装置の検索処理部のそれぞれがディープラーニング(深層学習)の人工知能を用いて前記AI用個別データベースを検索し、前記個別回答の確度として前記個別回答の予測精度を示す出力層の出力値を取得することを特徴とする。
 これによれば、下位層装置である個別AI検索装置がディープラーニング(深層学習)を用いた検索処理に基づく非常に確度、予測精度の高い個別回答を取得し、これに基づき上位層装置である統合処理装置が非常に確度、予測精度の高い問合回答を生成して回答することが可能となる。
 本発明の統合検索システムは、前記下位層に個別非AI検索装置を備え、前記統合処理装置の前記検索要求生成部が、前記問合せに対応して前記個別非AI検索装置に出力するプリミティブ形式の検索要求を生成し、前記統合処理装置の前記問合回答生成部が、前記個別回答及びその前記正規確度に対応し且つ非AI個別回答に対応する問合回答を生成すると共に、前記個別非AI検索装置が、非AI用個別データベースと、前記プリミティブ形式の検索要求の受け取りに応じて前記非AI用個別データベースを検索し、前記非AI用個別データベースから前記プリミティブ形式の検索要求に対応する非AI個別回答を取得する検索処理部と、取得した前記非AI個別回答を前記プリミティブ形式で前記統合処理装置に出力する個別回答出力部を有することを特徴とする。
 これによれば、複数のAI用個別データベースと非AI用個別データベースによる多様性のある評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となると共に、各個別AI検索装置の個別回答に加えて、非AI用個別データベースからの個別回答を統合し、より複雑な問い合わせに適合した複眼的な問合回答を生成して回答することが可能となる。
 本発明の統合検索システムは、前記統合処理装置の前記検索要求生成部が、前記問合せのデータから人工知能を用いて前記AI用個別データベースの種別、若しくは前記AI用個別データベースの種別と前記非AI用個別データベースの種別に対応する特徴点を抽出し、前記特徴点に対応する前記プリミティブ形式の検索要求を生成することを特徴とする。
 これによれば、問合せのコンテンツ等の問合せのデータに適合するより適切なプリミティブ形式の検索要求を生成し、このより適切なプリミティブ形式の検索要求に対応する個別回答に基づき問合回答を生成することができることから、問合回答の的確性をより一層高め、より一層的確な回答を行うことが可能となる。また、言わば人工知能の処理による特徴点抽出の回答を二次的な問合せの検索要求に利用し、検索利用者の想定を超える的確な検索要求を生成することが可能となり、二次的な問合せ自体の的確性を非常に高めることができる。
 本発明の統合検索システムは、所要の物理量を検知するセンサーからの入力データが前記問合せのデータに含まれていることを特徴とする。
 これによれば、例えば気候の状態、検索利用者の体調、検索対象に関連する物理量の状態等のセンサーの検知状況に対応した問合せに基づき、センサーの検知状況に適合する問合回答を生成して回答を行うことが可能となる。
 本発明の統合検索システムによれば、大量のデータで学習させた複数のAI検索装置を組み合わせて利用することを可能にし、上位層装置が大量データに基づく確度の高い回答を行うことができると共に、上位層装置が各AI検索装置の個別回答の確度を同一尺度で評価することができる。
本発明による実施形態の統合検索システムの全体構成を示すブロック図。 実施形態の統合検索システムにおける統合処理装置の構成を示すブロック図。 実施形態の統合検索システムにおける個別AI検索装置の構成を示すブロック図。 実施形態の統合検索システムにおける個別非AI検索装置の構成を示すブロック図。 実施形態の統合検索システムによる検索処理例の流れを示すフローチャート。 プリミティブ形式の検索要求の例を説明する説明図。 プリミティブ形式の個別回答の例を説明する説明図。 プリミティブ形式の非AI個別回答の例を説明する説明図。 (a)はプリミティブ形式の個別回答の別例、(b)はプリミティブ形式の非AI個別回答の別例を説明する説明図。 (a)はプリミティブ形式の統合回答の例、(b)はプリミティブ形式の統合回答の別例を説明する説明図。
 〔実施形態の統合検索システム〕
 本発明による実施形態の統合検索システム1は、図1に示すように、上位層の統合処理装置2と、下位層の複数の個別AI検索装置3と、下位層の個別非AI検索装置4を備え、上位層の統合処理装置2の要求に応じて、下位層の個別AI検索装置3、或いは下位層の個別AI検索装置3と個別非AI検索装置4がデータベースを用いて検索処理を実行し、上位層の統合処理装置2が下位層からの個別回答に基づき問合せに回答するようになっている。尚、下位層の個別非AI検索装置4は必要に応じて単数又は複数とすることが可能であり、又、下位層に複数の個別AI検索装置3だけを設け、下位層に個別非AI検索装置4を設けない統合検索システムとすることも可能である。
 上位層の統合処理装置2は、図2に示すように、MPU、CPU等の演算制御部21と、HDD、フラッシュメモリ、EEPROM、ROM、RAM等で構成される記憶部22と、マウス、キーボード、タッチパネル等の入力部23と、ディスプレイ等の出力部24と、通信インターフェイス25を備え、サーバー等のコンピュータ装置で実現される。
 記憶部22は、演算制御部21に所定処理を実行させる統合処理プログラム等の制御プログラムを記憶し、統合処理プログラムを記憶する統合処理プログラム記憶部221を有する。統合処理プログラムの内、問合せに対応して出力するプリミティブ形式の検索要求を生成する検索要求生成処理を演算制御部21に実行させる検索要求生成プログラムは人工知能プログラムであり、検索要求生成プログラムは記憶部22の学習済みモデル記憶部222に格納された学習済みモデルを用いて演算制御部21に検索要求生成処理を実行させる。検索要求生成プログラムの人工知能プログラムには、ディープラーニング(深層学習)の人工知能プログラムを用いると好適である。
 学習済みモデルには、各々の個別AI検索装置3のAI用個別データベース323の種別に対応するデータの種別と、個別非AI検索装置4の非AI用個別データベース422の種別に対応するデータの種別が設定され、学習済みモデル記憶部222に記憶される。尚、下位層に個別非AI検索装置4を設けない統合検索システムを構成する場合には、学習済みモデルには、各々の個別AI検索装置3のAI用個別データベースの種別に対応するデータの種別が設定され、学習済みモデル記憶部222に記憶される。
 記憶部22は、各々の個別AI検索装置3の個別回答の確度を規定する規定データに対応する、各個別AI検索装置3の確度を正規化するための正規化用データを格納する正規化用データ記憶部223を有する。
 記憶部23は、問合回答生成部214が及びその正規確度や個別非AI検索装置4からの非AI個別回答に対応する問合回答を生成するための結合条件を記憶する結合条件記憶部224を有する。結合条件としては、例えば、「個人IDの等価性」、「採録」、個別AI検索装置3からの個別回答に対応する「正規確度からの平均正規確度の取得」等が設定される。
 演算制御部21は、統合処理プログラムに従って所定の処理を実行し、統合処理プログラムと協働して問合認識部211、検索要求生成部212、正規化処理部213、問合回答生成部214としての所定の処理を実行する。
 問合認識部211は、統合処理装置2に入力された問合せ或いは問合せのデータを認識する。本実施形態では、統合処理装置2に、通信回線による通信ネットワーク11を介してクライアント端末12が接続され、クライアント端末12から送信される基礎問合せが統合処理装置2に入力されると共に、統合処理装置2に電気的に接続された一又は複数のセンサー5からデータが入力される。所要の物理量を検知するセンサー5からの入力データは補助問合せとして統合処理装置2に入力される。そして、例えば統合処理装置2或いは問合認識部211が、基礎問合せの入力に応じて、センサー5から検知データを補助問合せとして取得し、基礎問合せのデータと補助問合せのデータを組み合わせて問合せのデータを認識する。
 また、例えばクライアント端末12から送信される或いは統合処理装置2で入力されるセンサー検知データの不使用の入力に応じて、統合処理装置2或いは問合認識部211が、クライアント端末12から送信される基礎問合せを問合せ或いは問合せのデータとして認識する構成としても良好である。尚、センサー5自体を統合処理装置2に接続せずに、統合処理装置2或いは問合認識部211が、クライアント端末12から送信される基礎問合せを問合せ或いは問合せのデータとして認識する構成としてもよい。また、統合処理装置2に、クライアント端末12等から送信される或いは入力される問合せ自体にセンサーの検知データが含まれ、問合認識部211がこのセンサーの検知データを含む基礎問合せと補助問合せの組み合わせの問合せを認識する構成としても良好である。また、統合処理装置2の問合認識部211が、所要の物理量を検知するセンサー5からの入力データ自体を、補助問合せではなく、問合せ或いは問合せのデータとして認識する構成としても良好である。
 検索要求生成部212は、問合認識部211が認識した問合せに対応して、個別AI検索装置3のそれぞれに出力するプリミティブ形式の検索要求を生成すると共に、個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成する。尚、下位層に複数の個別AI検索装置3だけを設け、下位層に個別非AI検索装置4を設けない統合検索システムとする場合には、検索要求生成部212は、問合認識部211が認識した問合せに対応して、個別AI検索装置3のそれぞれに出力するプリミティブ形式の検索要求だけを生成する。
 本実施形態における検索要求生成部212は、問合せのデータから人工知能を用いて、換言すれば人工知能プログラムの検索要求生成プログラムと協働する演算制御部21の処理により、必要に応じて、各々の個別AI検索装置3のAI用個別データベースの種別に対応する特徴点と、個別非AI検索装置4の非AI用個別データベースの種別に対応する特徴点を抽出し、それぞれの特徴点に対応するプリミティブ形式の検索要求を生成する。尚、下位層に個別非AI検索装置4を設けない統合検索システムを構成する場合には、この検索要求生成部212は、必要に応じて、各々の個別AI検索装置3のAI用個別データベースの種別に対応する特徴点を抽出し、それぞれの特徴点に対応するプリミティブ形式の検索要求を生成する。
 ここでプリミティブ形式の検索要求のプリミティブ形式とは、統合処理装置2の演算制御部21が解釈実行する関数、後述する個別AI検索装置3の演算制御部31が解釈実行する関数、後述する個別非AI検索装置4の演算制御部41が解釈実行する関数の一種又は複数種で構成される関数を呼び出す関数呼び出し形式である。プリミティブ形式による複数の関数記述の連結により、複数の関数を連結した計算を実行することが可能になる。
 例えば統合処理装置2の検索要求生成部212が、プリミティブ形式である関数呼び出し形式の検索要求を後述する下位層の個別AI検索装置3、個別非AI検索装置4に発行し、個別AI検索装置3の検索処理部311、個別非AI検索装置4の検索処理部411が当該検索要求に対応する処理を実行し、個別AI検索装置3の個別回答出力部312、個別非AI検索装置4の個別回答出力部412が解釈実行結果の検索結果(個別回答とその確度を含むデータ、又は非AI個別回答を含むデータ)を共通データ形式のプリミティブ形式である関数呼び出し形式で出力し、統合処理装置2の演算制御部21が、検索結果である出力データを受け取り、出力データを結合条件で規定される後続の関数へ引数として引き渡す処理を実行する。
 正規化処理部213は、複数の個別AI検索装置3のそれぞれからプリミティブ形式の検索要求に対応する個別回答と個別回答の確度を受け取り、正規化用データ記憶部223の各々の個別AI検索装置3の個別回答の確度を規定する規定データに対応する正規化用データを用いて、それぞれの個別AI検索装置3の個別回答の確度を同一尺度に正規化した正規確度を取得する。
 ここで正規化用データ記憶部223に格納される、各々の個別AI検索装置3の個別回答の確度を規定する規定データに対応する正規化用データとは、例えばそれぞれの個別AI検索装置3が出力する個別回答としての確度が取り得る値の最大値と最小値であり、この場合には正規化用データはそれぞれの個別AI検索装置3毎の確度の最大値と、確度の最小値である。そして、正規化処理部213は、個別回答を受け取った個別AI検索装置3毎に、例えば(個別回答の確度-確度の最小値)/(確度の最大値-確度の最小値)の正規化処理を実行し、個別AI検索装置3毎の個別回答の確度を0.0~1.0の間に正規化する。
 問合回答生成部214は、記憶部22に格納された問合せに対応する結合条件を用い、個別AI検索装置3からの個別回答及びその正規確度に対応し且つ個別非AI検索装置4からの非AI個別回答に対応する問合回答を生成する。尚、下位層に個別非AI検索装置4を設けない統合検索システムを構成する場合には、問合回答生成部214は、記憶部22に格納された問合せに対応する結合条件を用い、個別AI検索装置3からの個別回答及びその正規確度に対応する問合回答を生成する。
 下位層の複数の個別AI検索装置3を構成するそれぞれの個別AI検索装置3は、図3に示すように、MPU、CPU等の演算制御部31と、HDD、フラッシュメモリ、EEPROM、ROM、RAM等で構成される記憶部32と、マウス、キーボード、タッチパネル等の入力部33と、ディスプレイ等の出力部34と、通信インターフェイス35を備え、サーバー又は通信接続のネットワークで接続された複数のコンピュータ端末の集合体等のコンピュータ装置で実現される。
 記憶部32は、演算制御部31に所定処理を実行させる個別AI検索処理プログラム等の制御プログラムを記憶し、個別AI検索処理プログラムを記憶する個別AI検索処理プログラム記憶部321を有する。個別AI検索処理プログラムは人工知能プログラムであり、個別AI検索処理プログラムは記憶部32の学習済みモデル記憶部322に格納された学習済みモデルを用いて演算制御部21に個別AI検索処理を実行させる。複数の個別AI検索装置3のうち所要の個別AI検索装置3の個別AI検索処理プログラムの人工知能プログラムには、ディープラーニング(深層学習)の人工知能プログラムを用いると好適であり、より好適には下位層の全ての個別AI検索装置3の個別AI検索処理プログラムをディープラーニング(深層学習)の人工知能プログラムとすると良い。また、記憶部32には、個別AI検索処理で検索されるデータを格納するAI用個別データベース323が設置されており、AI用個別データベース323は必要に応じて単数又は複数設置することが可能である。また、AI用個別データベース323は経時的に随時更新されるものとすることが好ましい。
 複数の個別AI検索装置3のAI用個別データベース323のうち、一の個別AI検索装置3が検索する一つのAI用個別データベース323と、他の個別AI検索装置3が検索する一つのAI用個別データベース323は異種とする、換言すれば異種のデータを検索する一の個別AI検索装置3と他の個別AI検索装置3を設けると良好である。また、複数の個別AI検索装置3のAI用個別データベース323のうち、一の個別AI検索装置3が検索する一つのAI用個別データベース323と、他の個別AI検索装置3が検索する一つのAI用個別データベース323は同種とする、換言すれば同種のデータを検索する一の個別AI検索装置3と他の個別AI検索装置3を設けても良好である。また、複数の個別AI検索装置3のAI用個別データベース323のうちに、異種のAI用個別データベース323と同種のAI用個別データベース323が混在する構成として、異種のデータを検索する複数の個別AI検索装置3を設け、同種のデータを検索する複数の個別AI検索装置3を設ける構成としても良好である。
 演算制御部31は、個別AI検索処理プログラムに従って所定の処理を実行し、個別AI検索処理プログラムと協働して検索処理部311、個別回答出力部312としての所定の処理を実行する。
 検索処理部311は、統合処理装置2からのプリミティブ形式の検索要求の受け取りに応じて、人工知能を用いて、換言すれば人工知能プログラムの個別AI検索処理プログラムと協働する演算制御部31の処理により、AI用個別データベース323を検索し、AI用個別データベース323からプリミティブ形式の検索要求に対応する個別回答を取得すると共に、取得した個別回答の確度を取得する。個別AI検索処理プログラムにディープラーニング(深層学習)の人工知能プログラムを用いる場合には、検索処理部311はディープラーニングの人工知能を用いてAI用個別データベース323を検索し、個別回答の確度として個別回答の予測精度を示す出力層の出力値を取得する。
 個別回答出力部312は、取得した個別回答と個別回答の確度をプリミティブ形式で統合処理装置2に出力する。
 下位層の個別非AI検索装置4は、図4に示すように、MPU、CPU等の演算制御部41と、HDD、フラッシュメモリ、EEPROM、ROM、RAM等で構成される記憶部42と、マウス、キーボード、タッチパネル等の入力部43と、ディスプレイ等の出力部44と、通信インターフェイス45を備え、サーバー又は通信接続のネットワークで接続された複数のコンピュータ端末の集合体等のコンピュータ装置で実現される。
 記憶部42は、演算制御部41に所定処理を実行させる個別非AI検索処理プログラム等の制御プログラムを記憶し、個別非AI検索処理プログラムを記憶する個別非AI検索処理プログラム記憶部421を有する。個別非AI検索処理プログラムは人工知能プログラムではない検索処理を実行させる個別検索処理プログラムであり、演算制御部21に人工知能を用いない個別検索処理を実行させる。また、記憶部42には、個別非AI検索処理で検索されるデータを格納する非AI用個別データベース422が設置されている。また、非AI用個別データベース422は経時的に随時更新されるものとすることが好ましい。
 演算制御部41は、個別非AI検索処理プログラムに従って所定の処理を実行し、個別非AI検索処理プログラムと協働して検索処理部411、個別回答出力部412としての所定の処理を実行する。
 検索処理部411は、統合処理装置2からのプリミティブ形式の検索要求の受け取りに応じて、非AI用個別データベース422を検索し、非AI用個別データベース422からプリミティブ形式の検索要求に対応する非AI個別回答を取得する。
 個別回答出力部412は、取得した非AI個別回答をプリミティブ形式で統合処理装置2に出力する。
 次に、統合検索システム1による検索処理例の流れについて説明する(図5参照)。下記検索処理例では、問合せ例「カメラに写る人物の顔画像とその人物の指紋からその個人を特定し、その人物の現在時刻の位置情報とその確度情報を獲得せよ」の処理例を例示する。
 先ず、上位層の統合処理装置2の問合認識部211が、クライアント端末12から送信される基礎問合せと、センサー5から入力される検知データの補助問合せを組み合わせて、問合せのデータを認識する(S1)。例えばクライアント端末12に予めスキャンされた指紋画像のデータベースがある状態で、利用者がクライアント端末12から蓋然性が高いと判断した指紋画像と、センサー5のカメラセンサーから取り込んだ顔画像と、顔画像の人物の個人特定要求と、当該人物の現在時刻の位置情報の検索要求を送信し、統合処理装置2の問合認識部211が、基礎問合せに相当する顔画像の人物の個人特定要求、当該人物の現在時刻の位置情報の検索要求、指紋画像と、補助問合せに相当する顔画像を問合せのデータとして認識する。
 そして、統合処理装置2の検索要求生成部212は、問合せに対応して、個別AI検索装置3のそれぞれに出力するプリミティブ形式の検索要求を生成すると共に、個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成する(S2)。この際、必要に応じて、所要の問合せのデータから特徴点を抽出し、抽出した特徴点を用いて、個別AI検索装置3のそれぞれに出力するプリミティブ形式の検索要求を生成すると共に、個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成する(S2)。ここで、それぞれの個別AI検索装置3、個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成し、出力するタイミングは、同時並行に限定されず、必要に応じて時系列的に異なる順番とすることが可能であり、任意の個別AI検索装置3の個別回答、任意の個別非AI検索装置4の非AI個別回答の結果又は結果の一部を、別の個別AI検索装置3或いは別の個別非AI検索装置4に出力するプリミティブ形式の検索要求のデータとして使用し、別の個別AI検索装置3或いは別の個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成し、出力する構成としても良好である。
 プリミティブ形式の検索要求を生成する際には、例えば顔認証を実行する第1の個別AI検索装置3に出力するプリミティブ形式の検索要求として顔画像確度抽出要求を生成し、第1の個別AI検索装置3と同種の顔認証を実行する第2の個別AI検索装置3に出力するプリミティブ形式の検索要求として顔画像確度抽出要求を生成し、第1、第2の個別AI検索装置3と異種である指紋認証を実行する第3の個別AI検索装置3に出力するプリミティブ形式の検索要求として指紋確度抽出要求を生成する。また、例えば第1、第2、第3の個別AI検索装置3の個別回答で後述する個人IDが特定された後に、登録された人物の現在時刻の位置情報の検索を実行する個別非AI検索装置4に出力するプリミティブ形式の検索要求として、特定された個人IDを含む個人位置空間情報抽出要求を生成する。図6にプリミティブ形式の検索要求の例を示す。
 ここで個別AI検索装置3の個別回答で特定される個人IDは、後述する正規確度が最大の個別回答に対応する個人ID、又は複数の個別回答で特定された個人ID、又は全ての個別回答で特定された個人IDとすることが可能であり、又、各個別回答で特定される個人IDが合致しない場合には、後の検索処理は中止する構成とすることも可能である。また、必要に応じて、クライアント端末12から取り込んだ顔画像が顔認証の実行に不十分な場合等には、この顔画像から特徴点として既存の部分画像抽出処理等を用いて顔部分を抽出する処理を実行し、顔部分画像を生成し、プリミティブ形式の検索要求を顔部分画像(特徴点)に対応するものとして生成する。
 統合処理装置2或いは検索要求生成部212は、生成したプリミティブ形式の検索要求をそれぞれ対応する個別AI検索装置3、個別非AI検索装置4に出力する(S3)。この際、プリミティブ形式の検索要求に合わせて、照合用の顔画像や照合用の指紋画像等の必要な補助データも出力する。尚、顔画像と指紋からその個人を特定し、その人物の現在時刻の位置情報を取得する本問合せ例では、個別AI検索装置3の個別回答の個人IDが得られた後に、個別非AI検索装置4に出力するプリミティブ形式の検索要求を生成して出力する。
 下位層のプリミティブ形式の検索要求を受け取った個別AI検索装置3の検索処理部311は、AI用個別データベース323を検索し(S4-1)、AI用個別データベース323からプリミティブ形式の検索要求に対応する個別回答を取得すると共に、取得した個別回答の確度を取得する(S4-2)。検索処理部311がディープラーニング(深層学習)で検索処理を実行する場合には、個別回答の確度として個別回答の予測精度を示す出力層の出力値を取得する。
 この処理では、例えば同種のデータを検索する第1の個別AI検索装置3と第2の個別AI検索装置3における顔認証を実行する第1の個別AI検索装置3の検索処理部311は、プリミティブ形式の検索要求:顔画像確度抽出要求の受け取りに応じて、顔画像特徴量でデータが蓄積されたAI用個別データベース323を検索し、AI用個別データベース323からプリミティブ形式の検索要求:顔画像確度抽出要求に対応する個別回答:人物名を含む個人IDを取得すると共に、出力層の出力値など個人IDに対応した個別回答の確度を取得する。他方で、顔認証を実行する第2の個別AI検索装置3の検索処理部311は、プリミティブ形式の検索要求:顔画像確度抽出要求の受け取りに応じて、顔画像特徴量でデータが蓄積されたAI用個別データベース323を検索し、AI用個別データベース323からプリミティブ形式の検索要求:顔画像確度抽出要求に対応する個別回答:人物名を含む個人IDを取得すると共に、出力層の出力値など個人IDに対応した個別回答の確度を取得する。
 更に、異種のデータを検索する第1の個別AI検索装置3と第3の個別AI検索装置3における指紋認証を実行する第3の個別AI検索装置3の検索処理部311は、プリミティブ形式の検索要求:指紋確度抽出要求の受け取りに応じて、指紋特徴量でデータが蓄積されたAI用個別データベース323を検索し、AI用個別データベース323からプリミティブ形式の検索要求:指紋確度抽出要求に対応する個別回答:人物名を含む個人IDを取得すると共に、出力層の出力値など個人IDに対応した個別回答の確度を取得する。
 個別AI検索装置3の個別回答出力部312は、取得した個別回答と個別回答の確度をプリミティブ形式で統合処理装置2に出力する(S4-3)。例えば顔認証を実行した第1の個別AI検索装置3の個別回答出力部312は、個別回答の個人IDと個人IDに対応した個別回答の確度をプリミティブ形式で統合処理装置2に出力し、第1の個別AI検索装置3と同種のデータ検索を行った顔認証を実行した第2の個別AI検索装置3の個別回答出力部312は、個別回答の個人IDと個人IDに対応した個別回答の確度をプリミティブ形式で統合処理装置2に出力する。また、第1の個別AI検索装置3と異種のデータ検索を行った指紋認証を実行した第3の個別AI検索装置3の個別回答出力部312は、個別回答の個人IDと個人IDに対応した個別回答の確度をプリミティブ形式で統合処理装置2に出力する。
 また、下位層のプリミティブ形式の検索要求を受け取った個別非AI検索装置4の検索処理部411は、非AI用個別データベース422を検索し(S5-1)、非AI用個別データベース422からプリミティブ形式の検索要求に対応する非AI個別回答を取得する(S5-2)。この処理では例えば検索処理部411は、プリミティブ形式の検索要求:第1、第2、第3の個別AI検索装置3の個別回答で特定された個人IDを含む個人位置空間情報抽出要求の受け取りに応じて、個人位置時間情報が蓄積された非AI用個別データベース422を検索し、GPSデータの位置情報が随時更新されるデータベース等の非AI用個別データベース422からプリミティブ形式の検索要求の個人IDに対応する非AI個別回答:個人位置時間情報(個人IDの人物の現在時刻の位置情報)を取得する。
 個別非AI検索装置4の個別回答出力部412は、取得した非AI個別回答をプリミティブ形式で統合処理装置2に出力する(S5-3)。上述の例では、個別非AI検索装置4の個別回答出力部412は、個人IDに対応した非AI個別回答:個人位置時間情報(個人IDの人物の現在時刻の位置情報)をプリミティブ形式で統合処理装置2に出力する。尚、図7にプリミティブ形式の個別回答の例、図8にプリミティブ形式の非AI個別回答の例を示す。
 上位層の統合処理装置2は、複数の個別AI検索装置3のそれぞれからプリミティブ形式の検索要求に対応する個別回答と個別回答の確度を受け取ると共に、個別非AI検索装置4からプリミティブ形式の検索要求に対応する非AI個別回答を受け取る(S6)。顔画像と指紋からその個人を特定し、その人物の現在時刻の位置情報を取得する本問合せ例では、個別AI検索装置3の個別回答及びその確度を統合処理装置2が受け取った後に、個別非AI検索装置4の非AI個別回答を統合処理装置2が受け取る。
 統合処理装置2の正規化処理部213は、複数の個別AI検索装置3のそれぞれから受け取ったプリミティブ形式の検索要求に対応する個別回答と個別回答の確度に対して、正規化用データ記憶部223の各々の個別AI検索装置3の個別回答の確度を規定する規定データに対応する正規化用データを用い、それぞれの個別AI検索装置3の個別回答の確度を同一尺度に正規化した正規確度を取得し、記憶部22の所定記憶領域に格納する(S7)。
 正規化用データを用いて、それぞれの個別AI検索装置3の個別回答の確度を同一尺度に正規化した正規確度を取得する処理では、例えば、いずれかの個別AI検索装置3において、(個別回答の確度)が0.92であり、(確度の最大値)が1.0、(確度の最小値)が0.0の場合、正規化用データ(確度の最大値)は1.0、正規化用データ(確度の最小値)は0.0であり、(個別回答の確度)の正規化処理は、(0.92―0.0)/(1.0-0.0)のように実行し、正規確度は0.92となる。あるいは、例えば、別の個別AI検索装置1において、(個別回答の確度)が0.92であり、(確度の最大値)が0.98、(確度の最小値)が0.28の場合、正規化用データ(確度の最大値)は0.98、正規化用データ(確度の最小値)は0.28であり、(個別回答の確度)の正規化処理は、(0.92―0.28)/(0.98-0.28)のように実行し、正規確度は0.914となる。
 その後、統合処理装置2の問合回答生成部214は、記憶部22に格納された結合条件を用い、個別AI検索装置3からの個別回答及びその正規確度に対応し且つ個別非AI検索装置4からの非AI個別回答に対応する問合回答を生成する(S8)。
 この問合回答生成処理では、例えば第1の個別AI検索装置3からの個別回答に対応する個人ID及びその正規確度、第2の個別AI検索装置3からの個別回答に対応する個人ID及びその正規確度、第3の個別AI検索装置3からの個別回答に対応する個人ID及びその正規確度、個別非AI検索装置4からの非AI個別回答:個人IDと個人位置時間情報(個人IDの人物の現在時刻(検索時点の時刻)における位置情報)を、結合条件:「個人IDの等価性」、「採録」、「平均正規確度の取得」に従って結合し、問合回答としての統合情報(個人IDに含まれる人物名及びその総合評価確度(平均正規確度)、その人物の現在時刻(検索時点の時刻)の位置情報)を生成する。
 問合回答の例として、人物の顔画像、指紋、個人位置時間情報について、顔認証を実行する第1の個別AI検索装置3からの個別回答:人物名を含む個人IDとその確度0.92に対応する、人物名を含む個人IDとその正規確度0.914、顔認証を実行する第2の個別AI検索装置3からの個別回答:人物名を含む個人IDとその確度0.84に対応する、人物名を含む個人IDとその正規確度0.933、指紋認証を実行する第3の個別AI検索装置3からの個別回答:人物名を含む個人IDとその確度0.97に対応する、人物名を含む個人IDとその正規確度0.957に基づき、結合条件の「平均正規確度の取得」に従って、個人IDの平均正規確度(総合評価確度):0.9347を取得し、更に、結合条件に従って、個別非AI検索装置4からの非AI個別回答:個人IDと個人位置時間情報(個人IDの人物の現在時刻(検索時点の時刻)における位置情報)を併せ、問合回答としての統合情報(個人IDに含まれる人物名及びその総合評価確度(平均正規確度):0.9347、その人物の現在時刻(検索時点の時刻)の位置情報)を生成する。
 そして、統合処理装置2或いはその演算制御部21の所定部は、生成した問合回答を通信ネットワーク11を介してクライアント端末12に送信して、問合回答を提示し、回答する(S9)。
 本実施形態の統合検索システム1によれば、大量のデータで学習させた複数の個別AI検索装置3を組み合わせて利用することを可能にし、上位層装置である統合処理装置2が大量データに基づく確度の高い問合回答を生成することができ、この確度の高い問合回答で回答することが可能となる。特に下位層の個別AI検索装置3が深層学習を用いた検索処理を実行する場合、非常に確度、予測精度の高い個別回答を取得することができ、これに基づき上位層である統合処理装置2が非常に確度、予測精度の高い問合回答を生成して回答することが可能となる。また、上位層装置である統合処理装置2が個別AI検索装置3の個別回答の確度を同一尺度に正規化した正規確度を取得することにより、上位層の統合処理装置2が各個別AI検索装置3の個別回答の確度を同一尺度で評価することができ、更に、正規確度に対応する問合回答を生成して回答することにより、より的確な回答を行うことが可能となる。
 また、異種の個別AI検索装置3或いは異種のAI用個別データベース323を用いて検索処理を行う場合には、複眼的な評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となる。また、より複雑な問合せに適合する問合回答を生成することができる。
 また、同種の個別AI検索装置3或いは同種のAI用個別データベース323を用いて検索処理を行う場合には、深度の深い評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となる。また、複数の同種のAI用個別データベース323を用いた評価に基づく問合回答を生成することにより、特定のAI用個別データベース323に人為的なミス等で不正確なデータが設定されていたり、発生頻度の低い事象に対応する過学習のデータが多く設定されている場合にも、これらのデータに起因する問合回答に発生する的確性の劣化を抑制することができる。
 また、下位層に個別非AI検索装置4を設ける場合には、複数のAI用個別データベース323と非AI用個別データベース422による多様性のある評価や観点に基づき問合回答を生成することができ、より的確な回答を行うことが可能となると共に、各個別AI検索装置3の個別回答に加えて、非AI用個別データベース422からの個別回答を統合し、より複雑な問い合わせに適合した複眼的な問合回答を生成して回答することが可能となる。
 また、統合処理装置2の検索要求生成部212が、問合せのデータから人工知能を用いてAI用個別データベース323の種別、若しくはAI用個別データベースの種別323と非AI用個別データベース422の種別に対応する特徴点を抽出し、抽出した特徴点に対応するプリミティブ形式の検索要求を生成する構成により、問合せのコンテンツ等の問合せのデータに適合するより適切なプリミティブ形式の検索要求を生成し、このより適切なプリミティブ形式の検索要求に対応する個別回答に基づき問合回答を生成することができる。従って、問合回答の的確性をより一層高め、より一層的確な回答を行うことが可能となる。また、言わば人工知能の処理による特徴点抽出の回答を二次的な問合せの検索要求に利用し、検索利用者の想定を超える的確な検索要求を生成することが可能となり、二次的な問合せ自体の的確性を非常に高めることができる。
 また、所要の物理量を検知するセンサー5からの入力データを問合せのデータに含ませる構成により、例えば気候の状態、検索利用者の体調、検索対象に関連する物理量の状態等のセンサー5の検知状況に対応した問合せに基づき、センサー5の検知状況に適合する問合回答を生成して回答を行うことが可能となる。
 〔本明細書開示発明の包含範囲〕
 本明細書開示の発明は、発明として列記した各発明、実施形態の他に、適用可能な範囲で、これらの部分的な内容を本明細書開示の他の内容に変更して特定したもの、或いはこれらの内容に本明細書開示の他の内容を付加して特定したもの、或いはこれらの部分的な内容を部分的な作用効果が得られる限度で削除して上位概念化して特定したものを包含する。そして、本明細書開示の発明には下記変形例や追記した内容も含まれる。
 例えば上記実施形態では、上位層の統合処理装置2と、下位層の複数の個別AI検索装置3と、下位層の個別非AI検索装置4を備える統合検索システム1について説明したが、本発明の統合検索システムには、上位層の統合処理装置と下位層の複数の個別AI検索装置を備える適宜の構成が含まれ、例えば下位層の個別非AI検索装置4を設けずに、上位層の統合処理装置2と、下位層の複数の個別AI検索装置3だけで構成される統合検索システムとしても良い。
 また、本発明における正規化処理部の正規化処理には、個別AI検索装置の個別回答の確度を同一尺度に正規化して正規確度を取得するできる適宜の構成を用いることが可能であり、上記実施形態における正規化処理部213の正規化処理に限定されない。
 また、本発明における個別AI検索装置の個別回答の確度は、上述の個別回答の予測精度を示す出力層の出力値以外にも適用可能な範囲で適宜の確度を用いることが可能であり、個別AI検索装置において個別回答の取得と併せて取得可能な個別回答の予測精度を示す適宜の指標を用いることが可能である。
 また、本発明における個別AI検索装置に対する検索要求の生成は、問合せに対応して、問合せデータから特徴点を抽出し、抽出した特徴点を用いて出力するプリミティブ形式の検索要求を生成する処理に限定されず、特徴点の抽出処理を行わずに、問合せに対応するプリミティブ形式の検索要求を生成して出力する構成とすることも可能である。
 また、本発明における個別AI検索装置が取得、出力する個別回答とその確度は単数の回答要素から構成されるもの以外に複数の回答要素から構成されるとしても好適である。例えば個別AI検索装置の記憶部に格納された確度の閾値以上のものを複数抽出し、或いは個別AI検索装置の記憶部に格納された設定個数に対応する複数を抽出する等により、図9(a)の例のように複数の個人IDと対応する複数の確度からなる複数の回答要素で構成されるリスト状等の個別回答を個別AI検索装置が取得、生成して出力するようにしてもよい。また、本発明における個別非AI検索装置が取得、出力する非AI個別回答も単数の回答要素から構成されるもの以外に複数の回答要素から構成されるとしても好適である。例えば図9(b)の例のように特定の個人IDに対応して可能性がある全ての回答要素等の複数の回答要素で構成されるリスト状等の非AI個別回答を個別非AI検索装置が取得、生成して出力するようにしてもよい。更に、本発明における統合処理装置は、個別回答が複数の回答要素で構成される場合や、非AI個別回答が複数の回答要素で構成される場合には、問合回答の例として、複数の回答要素の全ての組み合わせで構成される問合回答、或いは統合処理装置の記憶部に格納された正規確度の閾値以上のものを複数抽出した問合回答、或いは統合処理装置の記憶部に格納された設定個数に対応する複数を抽出した問合回答を生成、出力、提示するようにしても好適である。
 また、本発明における統合処理装置は、クライアント端末等に出力する問合回答として、又は統合処理装置とクライアント端末の間に介在するウェブサーバに出力する問合回答等として、図10(a)の例のようなプリミティブ形式の統合回答を生成して出力するようにしても良好である。この場合にも、図10(b)の例のように、複数の回答要素で構成されるリスト状等のプリミティブ形式の統合回答を生成して出力するようにしてもよい。
 本発明は、上位層装置が問合せに回答する際に、下位層装置のデータベースの検索結果を用いて上位層装置が問合せに回答するシステムとして利用することができる。
1…統合検索システム 2…統合処理装置 21…演算制御部 211…問合認識部 212…検索要求生成部 213…正規化処理部 214…問合回答生成部 22…記憶部 221…統合処理プログラム記憶部 222…学習済みモデル記憶部 223…正規化用データ記憶部 224…結合条件記憶部 23…入力部 24…出力部 25…通信インターフェイス 3…個別AI検索装置 31…演算制御部 311…検索処理部 312…個別回答出力部 32…記憶部 321…個別AI検索処理プログラム記憶部 322…学習済みモデル記憶部 323…AI用個別データベース 33…入力部 34…出力部 35…通信インターフェイス 4…個別非AI検索装置 41…演算制御部 411…検索処理部 412…個別回答出力部 42…記憶部 421…個別非AI検索処理プログラム記憶部 422…非AI用個別データベース 43…入力部 44…出力部 45…通信インターフェイス 5…センサー 11…通信ネットワーク 12…クライアント端末

Claims (7)

  1.  上位層の統合処理装置と下位層の複数の個別AI検索装置を備える統合検索システムであって、
     前記統合処理装置は、
     問合せを認識する問合認識部と、
     前記問合せに対応して前記個別AI検索装置のそれぞれに出力するプリミティブ形式の検索要求を生成する検索要求生成部と、
     前記プリミティブ形式の検索要求に対応する個別回答と前記個別回答の確度を複数の前記個別AI検索装置のそれぞれから受け取り、それぞれの前記個別AI検索装置の個別回答の確度を同一尺度に正規化した正規確度を取得する正規化処理部と、
     それぞれの前記個別回答及びその前記正規確度に対応する問合回答を生成する問合回答生成部を有し、
     前記個別AI検索装置は、
     AI用個別データベースと、
     前記プリミティブ形式の検索要求の受け取りに応じて人工知能を用いて前記AI用個別データベースを検索し、前記AI用個別データベースから前記プリミティブ形式の検索要求に対応する個別回答を取得すると共に前記個別回答の確度を取得する検索処理部と、
     取得した前記個別回答と前記個別回答の確度を前記プリミティブ形式で前記統合処理装置に出力する個別回答出力部を有する
     ことを特徴とする統合検索システム。
  2.  複数の前記個別AI検索装置のAI用個別データベースのうち、少なくとも一の個別AI検索装置が検索する一つの前記AI用個別データベースと他の個別AI検索装置が検索する一つの前記AI用個別データベースが異種であることを特徴とする請求項1記載の統合検索システム。
  3.  複数の前記個別AI検索装置のAI用個別データベースのうち、少なくとも一の個別AI検索装置が検索する一つの前記AI用個別データベースと他の個別AI検索装置が検索する一つの前記AI用個別データベースが同種であることを特徴とする請求項1記載の統合検索システム。
  4.  複数の前記個別AI検索装置の検索処理部のそれぞれがディープラーニングの人工知能を用いて前記AI用個別データベースを検索し、前記個別回答の確度として前記個別回答の予測精度を示す出力層の出力値を取得することを特徴とする請求項1~3の何れかに記載の統合検索システム。
  5.  前記下位層に個別非AI検索装置を備え、
     前記統合処理装置の前記検索要求生成部が、前記問合せに対応して前記個別非AI検索装置に出力するプリミティブ形式の検索要求を生成し、
     前記統合処理装置の前記問合回答生成部が、前記個別回答及びその前記正規確度に対応し且つ非AI個別回答に対応する問合回答を生成すると共に、
     前記個別非AI検索装置が、
     非AI用個別データベースと、
     前記プリミティブ形式の検索要求の受け取りに応じて前記非AI用個別データベースを検索し、前記非AI用個別データベースから前記プリミティブ形式の検索要求に対応する非AI個別回答を取得する検索処理部と、
     取得した前記非AI個別回答を前記プリミティブ形式で前記統合処理装置に出力する個別回答出力部を有する
     ことを特徴とする請求項1~4の何れかに記載の統合検索システム。
  6.  前記統合処理装置の前記検索要求生成部が、前記問合せのデータから人工知能を用いて前記AI用個別データベースの種別、若しくは前記AI用個別データベースの種別と前記非AI用個別データベースの種別に対応する特徴点を抽出し、前記特徴点に対応する前記プリミティブ形式の検索要求を生成することを特徴とする請求項1~5の何れかに記載の統合検索システム。
  7.  所要の物理量を検知するセンサーからの入力データが前記問合せのデータに含まれていることを特徴とする請求項1~6の何れかに記載の統合検索システム。
PCT/JP2021/000415 2020-01-22 2021-01-07 統合検索システム WO2021149505A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/794,170 US11907297B2 (en) 2020-01-22 2021-01-07 Integrated search system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020008579A JP7061812B2 (ja) 2020-01-22 2020-01-22 統合検索システム
JP2020-008579 2020-01-22

Publications (1)

Publication Number Publication Date
WO2021149505A1 true WO2021149505A1 (ja) 2021-07-29

Family

ID=76992585

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/000415 WO2021149505A1 (ja) 2020-01-22 2021-01-07 統合検索システム

Country Status (3)

Country Link
US (1) US11907297B2 (ja)
JP (1) JP7061812B2 (ja)
WO (1) WO2021149505A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1049409A (ja) * 1996-08-01 1998-02-20 Yasushi Seiki 異種データベース統合システム
JPH11306351A (ja) * 1998-04-20 1999-11-05 Ntt Data Corp データ統合方法及び装置、記録媒体
JP2014021602A (ja) * 2012-07-13 2014-02-03 Canon Inc 画像処理装置及び画像処理方法
JP2018033050A (ja) * 2016-08-25 2018-03-01 株式会社知能フレームワーク研究所 状態監視システム
JP2019185388A (ja) * 2018-04-10 2019-10-24 木村情報技術株式会社 人工知能を用いた質疑応答システム、及び、同システムで利用されるq&aデータベースの構築方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6727927B1 (en) * 2000-03-08 2004-04-27 Accenture Llp System, method and article of manufacture for a user interface for a knowledge management tool
US8131718B2 (en) * 2005-12-13 2012-03-06 Muse Green Investments LLC Intelligent data retrieval system
US9684741B2 (en) * 2009-06-05 2017-06-20 Microsoft Technology Licensing, Llc Presenting search results according to query domains
US20140358910A1 (en) * 2013-05-29 2014-12-04 Microsoft Corporation Integrated search results
JP2019056956A (ja) 2017-09-19 2019-04-11 株式会社ナビタイムジャパン 情報処理システム、情報処理プログラム、情報処理装置及び情報処理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1049409A (ja) * 1996-08-01 1998-02-20 Yasushi Seiki 異種データベース統合システム
JPH11306351A (ja) * 1998-04-20 1999-11-05 Ntt Data Corp データ統合方法及び装置、記録媒体
JP2014021602A (ja) * 2012-07-13 2014-02-03 Canon Inc 画像処理装置及び画像処理方法
JP2018033050A (ja) * 2016-08-25 2018-03-01 株式会社知能フレームワーク研究所 状態監視システム
JP2019185388A (ja) * 2018-04-10 2019-10-24 木村情報技術株式会社 人工知能を用いた質疑応答システム、及び、同システムで利用されるq&aデータベースの構築方法

Also Published As

Publication number Publication date
JP7061812B2 (ja) 2022-05-02
US11907297B2 (en) 2024-02-20
US20230052508A1 (en) 2023-02-16
JP2021117542A (ja) 2021-08-10

Similar Documents

Publication Publication Date Title
US9552511B2 (en) Identifying images using face recognition
Shen et al. Evaluation of automated biometrics-based identification and verification systems
US20110035094A1 (en) System and method for automatic fault detection of a machine
CN111259625A (zh) 意图识别方法、装置、设备及计算机可读存储介质
CN103019407B (zh) 输入法应用方法、自动问答处理方法及电子设备、服务器
CN111444341B (zh) 用户画像构建方法、装置、设备及可读存储介质
US20150104065A1 (en) Apparatus and method for recognizing object in image
CN116049454A (zh) 一种基于多源异构数据的智能搜索方法及系统
Abdulkader et al. Low cost correction of OCR errors using learning in a multi-engine environment
CN113936298A (zh) 一种特征识别方法及装置、计算机可读存储介质
JP5812505B2 (ja) マルチモーダル情報に基づく人口学的分析方法及びシステム
CN114741581A (zh) 一种图像分类方法、装置、计算机设备及介质
CN113254250B (zh) 数据库服务器异常成因检测方法、装置、设备和存储介质
WO2021149505A1 (ja) 統合検索システム
CN111382254A (zh) 电子名片推荐方法、装置、设备及计算机可读存储介质
CN116134447A (zh) 学习活用系统、活用装置、学习装置、程序和学习活用方法
CN115828156A (zh) 一种基于电网元数据监测的偷漏电识别方法及系统
CN111930919B (zh) 一种面向企业在线教育app语音交互的实现方法
CN115098655A (zh) 一种常见问题解答方法、系统、设备和介质
KR101720685B1 (ko) 웹 데이터 기반 방송 콘텐츠 객체 식별 검증 장치 및 방법
JP2019028744A (ja) データ処理システム、データ処理方法およびプログラム
CN113506639A (zh) 基于大数据的智慧医疗主题交互方法及系统
CN113689613A (zh) 门禁系统、门禁控制方法和存储介质
CN111614697A (zh) 用于身份识别的方法和系统
CN111261165A (zh) 车站名称识别方法、装置、设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21744602

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21744602

Country of ref document: EP

Kind code of ref document: A1