RU2598304C2 - Система сопоставления нормативно-справочной информации - Google Patents
Система сопоставления нормативно-справочной информации Download PDFInfo
- Publication number
- RU2598304C2 RU2598304C2 RU2014100388/08A RU2014100388A RU2598304C2 RU 2598304 C2 RU2598304 C2 RU 2598304C2 RU 2014100388/08 A RU2014100388/08 A RU 2014100388/08A RU 2014100388 A RU2014100388 A RU 2014100388A RU 2598304 C2 RU2598304 C2 RU 2598304C2
- Authority
- RU
- Russia
- Prior art keywords
- unit
- data
- information
- reference information
- comparison
- Prior art date
Links
Images
Landscapes
- Medical Treatment And Welfare Office Work (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Изобретение относится к системе сопоставления нормативно-справочной информации. Технический результат заключается в автоматизации сопоставления нормативно-справочной информации различных информационных систем. Система содержит блок ввода информации, блок индикации, блок контроля загружаемой информации, блок сопоставления данных нормативно-справочной информации, блок справочных данных, блок администрирования системы нормативно-справочной информации, блок внутреннего хранилища данных, блок взаимодействия с источниками данных, при этом блок сопоставления данных нормативно-справочной информации выполнен с возможностью автоматического определения соответствий между кодами справочников нормативно-справочной информации на основе лексико-синтаксического анализа. 1 ил.
Description
Система сопоставления нормативно-справочной информации
Система сопоставления нормативно-справочной информации предназначена для решения задач сопоставления справочников между программными комплексами, используемыми на предприятии.
Изобретение относится к области вычислительной техники, а именно к информационным системам интеграционных решений и сопоставления нормативно-справочной информации.
В большинстве систем сопоставления нормативно-справочной информации реализован лишь функционал по ручному сопоставлению данных с условием установки на компьютере пользователя дополнительного программного обеспечения. В рассматриваемой системе, помимо ручного сопоставления, реализован функционал по выводу рекомендаций по итогам автоматического сопоставления справочников внешних систем. Кроме этого для работы с данной системой не требуется установка дополнительного программного обеспечения, достаточно наличие стандартного браузера. Под выводом рекомендаций подразумевается автоматический подбор сопоставлений между справочниками, наиболее подходящих по значению.
В качестве прототипа выбрана «Система геоинформационной базы данных» (патент РФ на полезную модель №116663). Система, содержащая близкие по своему функциональному назначению блок ввода информации, блок индикации, блок контроля вводимой информации, блок сопоставления информации, блок справочных данных направлена на обеспечение оператора информационных систем возможностью контролировать вводимую информацию и сопоставлять ее с информацией, занесенной в базу данных ранее. Недостатком данной системы является отсутствие возможности получения и автоматического сопоставления нормативно-справочной информации из различных информационных ресурсов, представляемых базами данных и вебсервисами. Также существенным недостатком является отсутствие удаленного web-интерфейса пользователя, позволяющего работать с системой из любого места, имеющего доступ к сетям интранет или интернет, без необходимости установки дополнительного программного обеспечения.
Система сопоставления нормативно-справочной информации предназначена для решения распространенной при организации обмена данными проблемы преобразования различных кодов одних и тех же показателей, формируемых в различных информационных системах.
Технический результат изобретения - автоматизация сопоставления нормативно-справочной информации различных информационных систем пользователем без участия разработчика системы и дополнительных требований к программному обеспечению, установленному на компьютере пользователя, за исключением наличия браузера.
Задача предлагаемого изобретения состоит в том, что для решения проблемы преобразования нормативно-справочной информации (НСИ) в передаваемых данных была разработана система сопоставления НСИ, имеющая web-интерфейс и предоставляющая возможности загрузки и репликации справочных данных с различных источников информации, с наиболее распространенными интерфейсами взаимодействия. Система также направлена на определение соответствия между кодами справочников НСИ как в ручном, так и в автоматическом режиме на основе лексико-синтаксического анализа.
Поставленная задача достигается тем, что система сопоставления нормативно-справочной информации включающая блок ввода информации, блок индикации, блок контроля загружаемой информации, блок сопоставления данных нормативно-справочной информации, блок справочных данных, согласно изобретению дополнительно включает блок администрирования системы нормативно-справочной информации, блок внутреннего хранилища данных, блок взаимодействия с источниками данных, при этом блок ввода информации двусторонними связями соединен с блоком индикации, блоком сопоставления данных нормативно-справочной информации, блоком администрирования системы нормативно-справочной информации, блоком внутреннего хранилища данных, блоком взаимодействия с источниками данных, а блок справочных данных односторонней связью соединен с блоком взаимодействия с источниками данных, блок взаимодействия с источниками данных односторонней связью соединен с блоком контроля загружаемой информации, блок контроля загружаемой информации односторонней связью соединен с блоком внутреннего хранилища данных, блок внутреннего хранилища данных односторонней связью соединен с блоком администрирования системы нормативно-справочной информации, блок администрирования системы нормативно-справочной информации односторонней связью соединен с блоком сопоставления данных нормативно-справочной информации, причем блок сопоставления данных нормативно-справочной информации выполнен с возможностью автоматического определения соответствий между кодами справочников нормативно-справочной информации лексико-синтаксического анализа.
Система реализована с использованием трехзвенной архитектуры.
Хранение конфигурационных данных блоков программного комплекса реализовано на СУБД Oracle 1 lg (допустимо использование версий 9i, 10g или 12с).
В качестве сервера приложений используется IBM WebSphere Portal (допустима замена на Apache Tomcat, glassfish или любой сервер приложений, содержащий контейнер сервлетов).
Модуль визуализации реализован для выполнения в браузерах Google Chrome и Internet Explorer.
Описанная система представлена на фиг. 1 и состоит из следующих модулей:
1. Блок ввода информации,
2. Блок индикации,
3. Блок контроля загружаемой информации,
4. Блок сопоставления данных нормативно-справочной информации (НСИ),
5. Блок справочных данных,
6. Блок администрирования системы нормативно-справочной информации (С-НСИ),
7. Блок внутреннего хранилища данных,
8. Блок взаимодействия с источниками данных.
Блок ввода информации 1 системы представляет собой web-модуль, предоставляющий возможность пользователям через единый web-интерфейс производить операции по администрированию С-НСИ и проставлению соответствий через соответствующие блоки системы.
Блок индикации 2 является портальной web-платформой, на которой размещается блок ввода информации, и представляет из себя сервер приложений с функционалом авторизации и разграничения доступа к web-приложению
В Блоке контроля загружаемой информации 3 содержится бизнес-логика обработки данных, представляющей собой набор реализованных в программе алгоритмов обработки (анализа и подготовки) данных. Блок контроля загружаемой информации 3 предусматривает выгрузку данных в Блок внутреннего хранилища данных 7 следующих типов:
- с полной заменой справочников,
- с добавлением новых значений,
- с проверкой изменения справочных элементов.
При полной замене справочника данные, загруженные ранее, удаляются. При выгрузке с добавлением новых значений выполняется проверка наличия справочных элементов по идентификатору, уникальным образом определяющим справочный элемент в рамках одного справочника.
Проверка изменения справочных элементов подразумевает проверку изменения элемента по идентификатору и по наименованию справочного значения.
В Блоке сопоставления данных НСИ 4 реализовано два способа проставления соответствий:
- проставление соответствий пользователем системы нормативно-справочной информации,
- автоматическое проставление соответствий на основе лексико-синтаксического анализа.
При автоматическом проставлении соответствий пользователь задает коэффициент истинности соответствия, далее для каждого элемента одного справочника автоматически подбирается элемент другого справочника с максимальным коэффициентом соответствия, рассчитываемым на основе лексико-синтаксического анализа. Если коэффициент соответствия подобранного значения больше коэффициента истинности, то данное соответствие помечается для выгрузки в таблицу соответствий.
При сопоставлении значений справочников различных систем или программных комплексов возникают проблемы с неполным их соответствием. Это связано как с использованием сокращений, так и с профессиональными названиями. Значения словарей похожи, но не одинаковы. Пример, в системе «А» используется значение словаря «Акустико-химическое возд-е», а в системе «Б» - «Акустико-химическое возд. (АХВ)». Для разрешения этой проблемы в данной системе используется метод, учитывающий близость текстовых фрагментов, поэтому процесс поиска строк не ограничивается поиском точных слов, а наоборот, расширяется поиском похожих слов, синонимов, конкретных цифр.
В Блоке сопоставления данных НСИ 4 для автоматического сопоставления используется метод, основанный на статистике совпадения смежных пар символов в сравниваемых строках, хорошо реализуемый в реляционных СУБД. Данный метод позволил найти значения «Акустико-химическое возд-е» и «Акустико-химическое возд. (АХВ)» со степенью точности 0.93. Кроме этого включена поддержка транслитерации символов, учитывается обработка числовой информации и спецсимволов.
Блок справочных данных 5 представляет собой набор сущностей базы данных данной системы по хранению конфигурационной информации, а также набор автоматически создаваемых сущностей для загрузки и хранения нормативно-справочной информации из внешних систем.
Блок администрирования С-НСИ 6 содержит набор процедур и функций хранилища данных, позволяющих проводить подключение и настройку источников данных к системе нормативно-справочной информации, создание и настройку сопоставляемых справочников и таблиц перекодировок, необходимых для хранения соответствий справочных значений.
Блок внутреннего хранилища данных 7 представляет собой базу данных, содержащую набор репликационных таблиц, со справочными значениями из сопоставляемых систем и программных комплексов.
Блок взаимодействия с источниками данных 8 с Блоком справочных данных 5 подразумевает подключение к базам данных и web-сервисам, загрузку данных из источника и передачу в Блок контроля загружаемой информации 3.
Пользователь запускает Блок ввода информации 1. Система запрашивает из Блока администрирования системы нормативно-справочной информации 6 права доступа и, соответственно, открывает или закрывает доступ пользователю на определенные действия в системе. Права доступа запрашиваются Блоком администрирования системы нормативно-справочной информации 6 из Блока внутреннего хранилища данных 7. Далее описание работы модели зависит от доступа и действий пользователя: настройка, загрузка НСИ, сопоставление НСИ.
Настройка системы. Пользователь при наличии прав доступа подключает необходимые источники нормативно-справочной информации к данной системе, введя необходимые данные. Информация преобразуется через Блок индикации 2 и передается в Блок внутреннего хранилища данных 7.
Загрузка нормативно-справочной информации из внешних систем. Пользователь при наличии прав доступа запускает загрузку нормативно-справочной информации из Блока справочных данных 5 в систему сопоставления НСИ. При запуске система через Блок взаимодействия с источниками данных 8 получает данные, проверяет через Блок контроля загружаемой информации 3 и сохраняет в Блоке внутреннего хранилища данных 7.
Сопоставление справочников. Пользователь при наличии прав доступа через Блок сопоставления данных нормативно-справочной информации 4 производит ручное или автоматическое сопоставление. Блок сопоставления данных нормативно-справочной информации 4, в свою очередь, запрашивает исходные справочные данные из Блока внутреннего хранилища данных 7 на основе прав доступа из Блока администрирования системы нормативно-справочной информации 6. Блок администрирования позволяет разграничить доступ к операциям в системе на основе ролевой политики.
Конечным результатом работы системы является таблица перекодировок, содержащая информацию по соответствиям элементов НСИ программных комплексов и информационных систем предприятия. Проставленные сопоставления могут выгружаться как в одну физическую сущность базы данных, так и по каждой таблице перекодировок в отдельные. Соответствия проставляются исходя из обязательного условия «многие к одному» в рамках одной таблицы перекодировок. Данное условие позволяет однозначно задать и далее определить сопоставления между элементами справочников систем.
Архитектура системы сопоставления НСИ позволяет использовать данное решение не только для сопоставления справочников различных источников, но и произвольные выборки, включая возможность создания и добавления новых значений для сопоставления во внутреннем хранилище, что обеспечивает обособленную работу системы от других источников данных.
Claims (1)
- Система сопоставления нормативно-справочной информации, включающая блок ввода информации, блок индикации, блок контроля загружаемой информации, блок сопоставления данных нормативно-справочной информации, блок справочных данных, отличающаяся тем, что система дополнительно включает блок администрирования системы нормативно-справочной информации, блок внутреннего хранилища данных, блок взаимодействия с источниками данных, при этом блок ввода информации двусторонними связями соединен с блоком индикации, блоком сопоставления данных нормативно-справочной информации, блоком администрирования системы нормативно-справочной информации, блоком внутреннего хранилища данных, блоком взаимодействия с источниками данных, а блок справочных данных односторонней связью соединен с блоком взаимодействия с источниками данных, блок взаимодействия с источниками данных односторонней связью соединен с блоком контроля загружаемой информации, блок контроля загружаемой информации односторонней связью соединен с блоком внутреннего хранилища данных, блок внутреннего хранилища данных односторонней связью соединен с блоком администрирования системы нормативно-справочной информации, блок администрирования системы нормативно-справочной информации односторонней связью соединен с блоком сопоставления данных нормативно-справочной информации, причем блок сопоставления данных нормативно-справочной информации выполнен с возможностью автоматического определения соответствий между кодами справочников нормативно-справочной информации на основе лексико-синтаксического анализа.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2014100388/08A RU2598304C2 (ru) | 2014-01-09 | 2014-01-09 | Система сопоставления нормативно-справочной информации |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2014100388/08A RU2598304C2 (ru) | 2014-01-09 | 2014-01-09 | Система сопоставления нормативно-справочной информации |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2014100388A RU2014100388A (ru) | 2015-07-20 |
| RU2598304C2 true RU2598304C2 (ru) | 2016-09-20 |
Family
ID=53611320
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2014100388/08A RU2598304C2 (ru) | 2014-01-09 | 2014-01-09 | Система сопоставления нормативно-справочной информации |
Country Status (1)
| Country | Link |
|---|---|
| RU (1) | RU2598304C2 (ru) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU172742U1 (ru) * | 2017-04-28 | 2017-07-21 | Федеральный исследовательский центр "Информатика и управление" Российской академии наук | Автоматизированная система ведения нормативно-справочной информации |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004036455A2 (en) * | 2002-10-16 | 2004-04-29 | Sap Aktiengesellschaft | Master data access |
| RU116663U1 (ru) * | 2011-11-08 | 2012-05-27 | Открытое акционерное общество "Концерн "Океанприбор" | Система геоинформационной базы данных |
| US8195698B2 (en) * | 2008-10-06 | 2012-06-05 | Teradata Us, Inc. | Hierarchy manager for master data management |
| US8341131B2 (en) * | 2010-09-16 | 2012-12-25 | Sap Ag | Systems and methods for master data management using record and field based rules |
-
2014
- 2014-01-09 RU RU2014100388/08A patent/RU2598304C2/ru not_active IP Right Cessation
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004036455A2 (en) * | 2002-10-16 | 2004-04-29 | Sap Aktiengesellschaft | Master data access |
| US8195698B2 (en) * | 2008-10-06 | 2012-06-05 | Teradata Us, Inc. | Hierarchy manager for master data management |
| US8341131B2 (en) * | 2010-09-16 | 2012-12-25 | Sap Ag | Systems and methods for master data management using record and field based rules |
| RU116663U1 (ru) * | 2011-11-08 | 2012-05-27 | Открытое акционерное общество "Концерн "Океанприбор" | Система геоинформационной базы данных |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU172742U1 (ru) * | 2017-04-28 | 2017-07-21 | Федеральный исследовательский центр "Информатика и управление" Российской академии наук | Автоматизированная система ведения нормативно-справочной информации |
Also Published As
| Publication number | Publication date |
|---|---|
| RU2014100388A (ru) | 2015-07-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230315730A1 (en) | Self-service data platform | |
| Grainger et al. | Solr in action | |
| US7200619B2 (en) | Method and process to optimize correlation of replicated with extracted data from disparate data sources | |
| US11599535B2 (en) | Query translation for searching complex structures of objects | |
| US7051020B2 (en) | Intelligent query re-execution | |
| US7401085B2 (en) | System and method for controlling the release of updates to a database configuration | |
| US20200349468A1 (en) | Data management platform for machine learning models | |
| JP2014523013A5 (ru) | ||
| US20170068718A1 (en) | Techniques for uniting multiple databases and related systems and methods | |
| US20060282470A1 (en) | Determining compliance of a database architecture to an enterprise data standard | |
| CN111813798A (zh) | 基于r2rml标准的映射方法、装置、设备及存储介质 | |
| CN111143330A (zh) | 一种多模态数据库解析引擎的实现方法及装置 | |
| CN105518669A (zh) | 数据模型改变管理 | |
| US8538976B2 (en) | Abstract data model extension through managed physical statement structures | |
| RU2598304C2 (ru) | Система сопоставления нормативно-справочной информации | |
| US9280582B2 (en) | Optimization of join queries for related data | |
| CN107491454A (zh) | 数据查询方法及装置 | |
| US11093492B1 (en) | System and method of fetching data from an external program | |
| Oldakowski | D2RQ platform–treating non-RDF databases as virtual RDF graphs | |
| Danturthi | Comparative study of web application development with sql server and db4o | |
| Mankala | SAP HANA Cookbook | |
| Winand | SQL performance explained | |
| US11507586B2 (en) | Database table annotation processing | |
| Stöhr et al. | Verifying data integration configurations for semantical correctness and completeness | |
| WO2021051522A1 (zh) | Sql指纹还原方法、装置、计算机设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20170110 |