CZ307278B6 - Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění - Google Patents

Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění Download PDF

Info

Publication number
CZ307278B6
CZ307278B6 CZ2017-124A CZ2017124A CZ307278B6 CZ 307278 B6 CZ307278 B6 CZ 307278B6 CZ 2017124 A CZ2017124 A CZ 2017124A CZ 307278 B6 CZ307278 B6 CZ 307278B6
Authority
CZ
Czechia
Prior art keywords
data
computer system
block
migration object
target
Prior art date
Application number
CZ2017-124A
Other languages
English (en)
Other versions
CZ2017124A3 (cs
Inventor
Ivana Kriegová
Original Assignee
Krieg Jaroslav
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Krieg Jaroslav filed Critical Krieg Jaroslav
Priority to CZ2017-124A priority Critical patent/CZ307278B6/cs
Priority to EP18160580.9A priority patent/EP3373165A1/en
Publication of CZ2017124A3 publication Critical patent/CZ2017124A3/cs
Publication of CZ307278B6 publication Critical patent/CZ307278B6/cs

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G06F16/972Access to data in other repository systems, e.g. legacy data or dynamic Web page generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/214Database migration support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

Přenášení struktur a datových souborů se děje buď přímo, nebo přes aplikační server (3). Na straně zdrojového počítačového systému (1) respektive aplikačního serveru (3) se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému (5), vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. Přímo v daném cílovém počítačovém systému (5) se provede doplnění či změna migračního objektu změnou definice struktury migračního objektu. Nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce a v případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o toto pole doplní. Požadovaná struktura nového migračního objektu se převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém počítačovém systému (1) respektive v aplikačním serveru (3) podle mapovací tabulky tak, že struktura výstupního souboru odpovídá přesně struktuře souboru v cílovém počítačovém systému (5). Vytvořený textový soubor se převede do cílového počítačového systému (5) přes společné úložiště dat. Toto vše zabezpečuje aplikační část pro zpracování požadavku na určený migrační objekt a jeho vytvoření umístěná ve zdrojovém počítačovém systému (1) nebo na aplikačním serveru (3). Aplikační část tvoří blok (8) identifikace upravovaného migračního objektu, blok (9) vytvoření dotazu na strukturu definovaného migračního objektu, blok (10) inicializace cílového systému, blok (14) zápisu aktuální struktury migračního objektu, blok (15) aktualizace mapovacích údajů a blok (16) přípravy programu pro vlastní načtení a zpracování dat ze zdrojového počítačového systému a tvorbu výstupního souboru.

Description

Oblast techniky
Řešení se týká přenášení struktur a datových souborů mezi systémy, které je využíváno při přenosech dat ze zdrojového systému do cílového systému. Ze zdrojového systému je tedy třeba na základě požadavku uživatele některého z cílových systémů vydolovat data ve struktuře známé v cílovém souboru.
Dosavadní stav techniky
Často dochází k situaci, že je třeba opakovaně vydolovat velké množství dat z nějakého informačního systému a tato data přenést do jiného systému, tedy například tam, kde se starý informační systém nahrazuje novým informačním systémem třeba s novými širšími možnostmi, než jaké poskytoval systém starý.
V tomto případě je nutné maximum informací uložených ve starém systému, tak zvaném zdrojovém systému, vydolovat ve stanovené struktuře v podobě sekvenčního souboru respektive v podobě nějakého textového souboru nebo jakékoli datové struktury. V rámci přípravy dolování dat je nutno data dobře zanalyzovat, nastavit potřebná pravidla vyhovující novému cílovému systému. Jedná se o velmi náročný a zdlouhavý proces, kdy často lidskou chybou dochází k nutnosti jednotlivé kroky opakovat.
Na straně nového cílového systému bývají nastaveny standardní struktury vstupních souborů, tedy tak zvané struktury migračních objektů nebo datových struktur. Migračním objektem se rozumí množina 1 až N datových struktur, kdy v případě reprezentování jednou strukturou je možné též hovořit o datové struktuře. Celý proces se často nazývá migrací dat ze starého systému do nového, tedy ze zdrojového systému do systému cílového systému. Pro vytvoření datových souborů nebo naplnění datových struktur k nahrání do cílového systému je vždy nutné zadat celou řadu parametrů, jako jsou: struktura migračního objektu respektive změny ve struktuře, množství dat, kritéria výběru dat...
Při dosud známém přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem se postupuje následujícím způsobem. Na začátku migrace nebo obecného přenosu dat je nutné provést mapování neboli tak zvaný mapping dat mezi oběma systémy, tedy zdrojovým a cílovým, to znamená určit, která data si navzájem odpovídají, která data se musí transformovat případně konvertovat a jaké akce je nutno při výběru s daty provést, aby je bylo možno nahrát správně do cílového systému. Po dokončení tohoto mapování programátor jednotlivé informace zapracuje do programu. Pro každý migrační objekt nebo datovou strukturu je vytvořen program, jehož spuštěním se vytvoří požadovaný soubor dat nebo se naplní datová struktura. Obdobně na straně cílového systému existuje program, kterým se data nahrají do cílového systému.
Na obou stranách je nutno programy odladit a postupně v nich provádět dílčí změny. Tyto změny musí někdo na straně cílového systému definovat, musí doplnit mapování pro nové údaje neboje pozměnit u stávajících dat. Pro vytvoření dat ze zdrojového systému pro testy je třeba definovat, kolik dat má být ze zdrojového systému vydolováno, a stanovit pravidla výběru dat do požadovaného souboru/struktury nebo dodat seznam identifikátorů, podle kterých bude výběr proveden. Tento krok se provádí nejčastěji na schůzce technických nebo IT pracovníků, telefonicky nebo emailem. Provádění změn v obou systémech je třeba vždy koordinovat, bezpodmínečně totiž musí být všechny změny struktur do příštího testu provedeny v obou systémech, to musí někdo řídit a důsledně sledovat.
- 1 CZ 307278 B6
Po doladění programů se v rámci testů, jejichž počet obvykle bývá 3 až 5, opakovaně vytvářejí soubory dat, minimálně 3x se však přenáší všechna data ze zdrojového systému do cílového systému.
Jak z výše uvedeného vyplývá, nevýhodou dosud známého způsobuje, že se jedná o náročnou a poměrně složitou akci, kterou je třeba mít neustále pod kontrolou, aby byla minimalizovaná zbytečná práce zainteresovaných na obou stranách.
Jsou známé také následující dokumenty týkající se obecně dané oblasti.
US 9 201 606 B, TAYLOR NEAL [US]; NICKOLOV PETER [US]), 01.12.2015 řeší primárně systémy a metody migrace dat výhradně na úrovni databázových tabulek včetně transformací typu polí a konverzí jejich obsahu. Řešení vychází z principů a nástrojů pro realizaci migrací, přenosu a transformací dat výhradně na úrovni databázových tabulek. Nevýhodou tohoto řešení je, že je úzce specializované pro migraci, přenos a transformaci dat výhradně na úrovni databázových tabulek a databázových operačních systémů, například SQL. Z detailního popisu, a zejména pak obrázku F1G. 4, vyplývá, že není užíván princip dynamického řízení migračních struktur na úrovni aplikací, ale maximálně na úrovni databází. To znamená, že nejsou tedy při přesunu využity aplikační kontroly, které výrazně zvyšují kvalitu migrovaných dat.
Dalším dokumentem je US 2016/357438 A, HORVATIN KEVIN ANTHONY [US]; MOORE STEVEN ALLEN [US]; OBST JONATHAN CAMERON [US], 08.12.2016. Tento dokument řeší migraci cashe nickname mezi přístroji při migraci e-mailových dat, typicky produktů Outlook/Office společnosti Microsoft, respektive souborů ve formátech PST. Jedná se o úzce specializované řešení pro produkty společnosti Microsoft
Dokument US 8 990 527 B, LINSTEAD PAUL [US], 24.03.2015 řeší nástroj, respektive princip, řízení směrů mezi přístroji při přenosu dat, primárně přenos dat mezi zařízeními typu smart mobilní telefon, v přeneseném významu jakéhokoli přístroje. Nevýhodou tohoto řešení je, že je úzce specializované pro produkty typu chytrý mobilní telefon bez dynamického řízení migračních struktur, tedy veškeré struktury jsou řízeny, respektive zadávány, manuálně.
US 2015/019487 A, BUEHNE STEPHAN [DE]; SPIEGELBERGELMAR [DE], 15.01.2015 primárně řeší princip a řízení přenosu změn zdrojové databáze v průběhu přesunu dat na úrovni databáze v reálném čase. Jedná se opět o úzce specializované řešení pro přenos dat na úrovni databáze.
V dokumentu US 2017/046143 A. KOCHHAR HARMEET [IN]; KHANDELWAL PRASHANT [IN]; KUMAR PAWAN [US]; MITRA SAIK.AT [IN], 16.02.2017 je řešen systém a metoda migrace dat výhradně na úrovni databázových tabulek včetně transformací typu polí a konverzí jejich obsahu. Zároveň dokument řeší nástroj a princip monitorování procesu přenosu a transformace dat na úrovni databázových tabulek respektive databázových objektů. Jedná se o úzce specializované řešení pro migraci, přenos a transformaci dat výhradně na úrovni databázových tabulek a databázových objektů. Ani zde není užíván princip dynamického řízení migračních struktur na úrovni aplikací, ale maximálně na úrovni databází. Nejsou tedy při přesunu využity aplikační kontroly, které výrazně zvyšují kvalitu migrovaných dat.
Je také známé řešení podle US 2012/278512 A, ALATORRE GABRIEL [US]; RICHARDSON LAURA [US]; SINGH AAMEEK [US]; BECKER BARRY [US]; OLSON JAMES [US], 01.11.2012. Jedná se o popis nástrojů a principů pro plánování přesunu dat na úrovni databáze včetně v reálném čase řízení zátěže serverů realizujících přesun během běžícího procesu přesunu dat na úrovni databáze. Opět je popsáno úzce specializované řešení pro plánování technického procesu přesunu dat a řízení zátěže serverů v reálném čase pro/při přenosu dat na úrovni databáze.
-2CZ 307278 B6
Podstata vynálezu
Výše uvedené nevýhody odstraňuje způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění podle předkládaného řešení.
Při přenášení struktur a datových souborů mezi zdrojovým a cílovým počítačovým systémem provozovatel zdrojového systému obsluhuje minimálně jeden cílový počítačový systém a na základě požadavků uživatele cílového počítačového systému na změnu struktury či doplnění migračního objektu definovaného množinou logicky souvisejících dat včetně jejich struktury provádí změnu struktury těchto migračních objektů. Tento způsob zahrnuje krok namapování dat. Podstatou nového řešení je, že v kroku namapování dat se vytvoří mapovací tabula obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. Pole je přesně definovaná část věty textového souboru nebo datové struktury s definovanou délkou a typem znaků, které mohou v poli být obsaženy. Mapovací tabulka může mít různou formu, ať již je to tabulka v systému nebo tabulka v podobě Excelu či jen soupis pravidel v libovolné podobě. Uživatel provede přímo ve svém cílovém počítačovém systému doplnění či změnu migračního objektu změnou definice struktury migračního objektu. Tato nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce. V případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o tuto novou část, o toto pole doplní. Poté se požadovaná struktura nového migračního objektu převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém systému podle mapovací tabulky tak, že struktura výstupního souboru ze zdrojového systému odpovídá přesně struktuře souboru v cílovém počítačovém systému. Vytvořený textový soubor nebo věta struktury se do cílového počítačového systému převede přes společné úložiště dat nebo přímo online prostřednictvím přímého rozhraní.
V jedné možné variantě se všechny mapovací údaje zanesou přímo do zdrojového počítačového systému. Požadavek na doplnění či změnu migračního objektu nebo datové struktury se do tohoto zdrojového počítačového systému přenese pomocí vstupně/výstupního rozhraní z cílového počítačového systému. Veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
Ve druhé možné variantě jsou všechny mapovací údaje udržovány na aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní cílový systém/aplikační server a uloží se v tomto aplikačním serveru spolu s parametry pro dolování dat. Veškeré další kroky jsou realizovány na tomto aplikačním serveru. Dolování dat se provádí přes vstupně/výstupní rozhraní zdrojový systém/aplikační server.
K provádění uvedeného způsobuje vytvořen systém tvořený zdrojovým a cílovým počítačovým systémem, které jsou propojeny alespoň jedním vstupně-výstupním rozhraním. Systém dále obsahuje navzájem propojenou část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci, která je součástí cílového počítačového systému a aplikační částí pro zpracování požadavku na určený migrační objekt či datové struktury a jeho vytvoření. Část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci sestává z bloku zadání požadavku na vytvoření nového textového souboru nebo přímého předání dat pro vstup do migračního objektu nebo datové struktury a jejich parametrů, z bloku identifikace migračního objektu či datové struktury, z bloku načtení aktuální struktury migračního objektu nebo datové struktury a z bloku přenosu aktuální struktury požadovaného migračního objektu či datové struktury. Aplikační částí pro zpracování požadavku na určený migrační objekt nebo struktury a jeho vytvoření se sestává z bloku identifikace upravovaného migračního objektu či datové struktury, z bloku vytvoření dotazu na strukturu definovaného migračního nebo datové struktury, z bloku inicializace cílového systému, z bloku zápisu aktuální datové struktury migračního objektu nebo datové struktury, z bloku aktualizace mapovacích
-3 CZ 307278 B6 údajů a z bloku přípravy programu pro vlastní načtení a zpracování dat ze zdrojového systému a tvorbu výstupního souboru nebo přímého předání naplněné datové struktury. Blok zadání požadavku na požadovaný migrační objekt nebo datovou strukturu a jejich parametrů je přes vstupně/výstupní rozhraní propojen se vstupem bloku identifikace upravovaného migračního objektu či datové struktury, jehož výstup je přes blok vytvoření dotazu na strukturu migračního objektu online propojen se vstupem bloku inicializace cílového systému. Výstup bloku inicializace cílového systému je propojen zpět přes vstupně/výstupní rozhraní se vstupem bloku identifikace nového migračního objektu nebo datové struktury. Výstup bloku identifikace nového migračního objektu či datové struktury je přes blok načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku přenosu aktuální struktury nového migračního objektu nebo datové struktury, jehož výstup je přes vstupně/výstupní rozhraní propojen se vstupem bloku zápisu aktuální struktury migračního objektu nebo datové struktury. Výstup bloku zápisu aktuální struktury migračního objektu nebo datové struktury je přes blok aktualizace mapovacích údajů propojen se vstupem bloku přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru nebo přímého předání.
Jednou z možností je, že aplikace je součástí zdrojového počítačového systému a umožňuje přímé dotazy do databáze zdrojového počítačového systému. Zde je aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci, která je realizována v cílovém počítačovém systému, přes první vstupně/výstupní rozhraní. Vzhledem k velkému množství dat je tato varianta rychlejší.
Druhou možností pak je, že mezi cílový a zdrojový počítačový systém je vložen aplikační server. Aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je pak součástí tohoto aplikačního serveru. Propojení mezi aplikačním serverem a zdrojovým počítačovým systémem je realizováno druhým vstupně/výstupním rozhraním, přes které se programy uložené na aplikačním serveru dotazují do databáze zdrojového počítačového systému. Aplikační část je v tomto případě propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému přes třetí vstupně/výstupní rozhraní.
Výhodou nového způsobu přenášení struktur a datových souborů nebo přímého předání mezi zdrojovým a cílovým počítačovým systémem a systému k jeho provádění je, že část z tohoto procesu se zpracovává automatizovaně, čímž se vyloučí lidský element a minimalizuje se tak velké množství vznikajících chyb. Kromě toho se celý proces výrazně zrychlí.
Oproti dosud známým řešením umožňuje předkládané řešení dynamické přebírání struktur objektů z cílového počítačového systému do zdrojového počítačového systému. Toto nejen odstraňuje ruční práci s údržbou struktur, ale hlavně odstraňuje ruční hlídání shody mezi oběma systémy. Data jsou vždy vytvořena ve struktuře, kterou je na cílovém počítačovém systému možno zpracovat. Struktury se totiž řídí nastavením na cílovém počítačovém systému, tedy jen na jednom místě a tudíž nedochází k rozdílu struktur mezi oběma systémy. Je zde užíván princip dynamického řízení migračních struktur na úrovni aplikací.
Programy jsou zpracovány pouze jednou pro každý migrační objekt a jsou jen minimálně doplňovány. Struktura migračního souboru nebo datové struktury pro přímé předání se převezme přes vstupně/výstupní rozhraní vždy při tvorbě dat ze struktury v cílovém počítačovém systému. Odpadá tedy zdlouhavá komunikace mezi pracovníky na obou stranách. Data jsou vždy vytvořena tak, že přesně odpovídají v daném okamžiku struktuře v cílovém počítačovém systému.
Vlastní požadavek na zpracování je to jediné, co je nutno předávat v rámci jednání, telefonu nebo emailem mezi oběma stranami, neboť i parametry mohou být nastaveny na straně cílového počítačového systému a převzaty prostřednictvím rozhraní mezi systémy.
-4CZ 307278 B6
Data jsou v obou případech vytvářena v předem domluveném tvaru jako textový, tedy sekvenční, soubor nebo datová struktura pro přímé předání. Je možné je předávat na médiu, posílat emailem, ukládat na sdílený disk nebo přímým naplněním cílových struktur prostřednictvím online rozhraní. Na základě zkušeností a s ohledem na velikosti migračních souborů je nejlépe tato data předávat přes společné úložiště dat, které je přístupné z obou počítačových systémů, jak ze zdrojového, tak i z cílového.
Celý způsob je výrazným zjednodušením, zpřehledněním a urychlením požadované činnosti.
Objasnění výkresů
Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění budou dále blíže vysvětleny pomocí přiložených výkresů. Na obr. 1 je uvedeno schéma systému bez použití aplikačního serveru a na obr. 2 je schéma s jeho použitím. Předávání dat je též možno řešit přímo prostřednictvím online rozhraní.
Příklady uskutečnění vynálezu
U nového způsobu přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem, stejně tak jako u dosavadních způsobů, je nutno provést na začátku procesu mapování dat zdroj cíl. Mapování je vlastně proces, kdy se provádí párování polí zdrojový systém x cílový systém. Tento krok zahrnuje i pravidla a vazby mezi poli jak ve zdrojovém počítačovém systému, tak v cílovém počítačovém systému. Toto mapování se však neprovádí ve vazbě na požadovaná data, ale plošně, to znamená, že všechna data ze zdrojového počítačového systému jsou namapována na cílový počítačový systém. Tento tak zvaný mapping je uložen v mapovací tabulce aplikace, odkud je postupně čerpán.
Na začátku prací se vydefinují migrační objekty, respektive struktury migračních objektů v celé šíři bez ohledu na to zda budou všechna data využívána. Jinými slovy řečeno, udělá se ve zdrojovém systému soupis všech polí, definic pravidel a vazeb mezi jednotlivými poli, kde pole je přesně definovaná část věty textového souboru s definovanou délkou a typem znaků, které mohou v poli být obsaženy, a všechna se namapují na cílový počítačový systém. Tím se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. V případě zájmu uživatel zadá přímo ve svém cílovém počítačovém systému požadavek na doplnění či změnu migračního objektu, a to změnou definice struktury migračního objektu. Tato nová struktura migračního objektu se porovná se strukturami již zadanými v mapovací tabulce. Pokud nová struktura v mapovací tabulce není obsažená nebo je nedostatečně namapována, pak se mapovací tabulka o tuto novou strukturu doplní. V dalším kroku se požadovaná struktura nového migračního objektu převezme a následně se automaticky přegeneruje podle mapovací tabulky program na tvorbu dat, který je uložený ve zdrojovém počítačovém systému, tak, že výstupní soubor ze zdrojového systému odpovídá souboru zadanému uživatelem v cílovém počítačovém systému. Vytvořený textový soubor se do cílového počítačového systému převádí přes společné úložiště dat, nebo přímo do datových struktur cílového počítačového systému.
Vytvoření mapovací tabulky a vlastní přenášení struktur a datových souborů mezi zdrojovým a cílovým počítačovým systémem lze provést dvěma způsoby.
Prvním způsobem je, že mapovací tabulka je vytvořena ve zdrojovém počítačovém systému, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní. Veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
-5CZ 307278 B6
Je také možné uspořádání se třemi servery, a to se serverem se zdrojovým počítačovým systémem, se serverem s cílovým počítačovým systémem a s aplikačním serverem. V tomto případě je celý systém implementován na aplikačním serveru. Mapovací tabulka i struktura migračního objektu nebo datové struktury včetně dolovacích programů a všech parametrů jsou udržovány na aplikačním serveru. To tedy znamená, že mapovací tabulka je vytvořena v aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí prvního vstupně/výstupního rozhraní mezi cílovým počítačovým systémem a tímto aplikačním serverem. Mapovací tabulka se uloží v aplikačním serveru spolu s parametry pro dolování dat. Veškeré další kroky jsou realizovány na tomto aplikačním serveru. Dolování dat se pak provádí přes druhé vstupně/výstupní rozhraní mezi zdrojovým počítačovým systémem a aplikačním serverem.
Schéma systému, který zabezpečuje postup pro případ bez využití aplikačního serveru je uveden na obr. 1.
Systém je tvořen zdrojovým počítačovým systémem 1 a cílovým počítačovým systémem 5. Má dvě navzájem propojené části, a to část zadání požadavku na definovaný migrační objekt online a jejich identifikaci a aplikační část. Část zadání požadavku na definovaný migrační objekt nebo datovou strukturu a jejich identifikaci je součástí cílového počítačového systému 5. Sestává se z bloku 7 zadání požadavku na vytvoření nového textového souboru dat nebo přímé online ho předání dat pro vstup do migračního objektu nebo datové struktury a online parametrů, z bloku U identifikace migračního objektu nebo datové struktury, z bloku 12 načtení aktuální struktury migračního objektu nebo datové struktury a z bloku 13 přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury. Aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření se sestává z bloku 8 identifikace upravovaného migračního objektu nebo datové struktury, z bloku 9 vytvoření dotazu na strukturu definovaného online migračního objektu nebo datové struktury, z bloku 10 inicializace cílového systému, z bloku 14 zápisu aktuální struktury migračního objektu nebo datové struktury, z bloku 15 aktualizace mapovacích údajů a z bloku 16 přípravy programu pro vlastní načtení a zpracování dat ze zdrojového systému a tvorbu výstupního souboru. Blok 7 zadání požadavku na požadovaný migrační objekt nebo datové struktury a jeho parametrů je v této variantě přes první vstupně/výstupní rozhraní 2 propojen se vstupem bloku 8 identifikace upravovaného migračního objektu nebo datové struktury. Jeho výstup je přes blok 9 vytvoření dotazu na strukturu migračního objektu propojen se vstupem bloku 10 inicializace cílového systému. Výstup bloku 10 inicializace cílového systému je propojen zpět přes první vstupně/výstupní rozhraní 2 se vstupem bloku 11 identifikace nového migračního objektu nebo datové struktury, jehož výstup je přes blok 12 načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku 13 přenosu aktuální struktury nového migračního objektu nebo datové struktury. Výstup bloku 13 přenosu aktuální struktury nového migračního objektu online je přes první vstupně/výstupní rozhraní 2 propojen se vstupem bloku 14 zápisu aktuální struktury migračního objektu nebo datové struktury, jehož výstup je přes blok 15 aktualizace mapovacích údajů propojen se vstupem bloku 16 přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru.
V tomto provedení je tedy aplikační část součástí zdrojového počítačového systému 1_.
V provedení podle obr. 2 je mezi cílový počítačový systém 5 a zdrojový počítačový systém 1 vložen aplikační server 3. V tomto případě je aplikační část součástí aplikačního serveru 3. Propojení mezi aplikačním serverem 3 a zdrojovým počítačovým systémem 1 je realizováno druhým vstupně/výstupním rozhraním 4. Přes toto druhé vstupně/výstupní rozhraní 4 se z programů provádí dotazy přímo do databáze ve zdrojovém počítačovém systému. Aplikační část je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému 5 přes třetí vstupně/výstupní rozhraní 6. Jinak jsou všechny boky zapojeny analogicky jako v příkladu podle obr. 1.
-6CZ 307278 B6
Přenášení struktur a datových souborů mezi zdrojovým počítačovým systémem 1 a cílovým počítačovým systémem 5 probíhá přes vstupně/výstupní rozhraní mezi systémy. Aplikace určená k tomuto přenosu může být nainstalována přímo ve zdrojovém počítačovém systému 1, jak je tomu v obr. 1, a pak přenášení struktur a datových souborů je realizováno prvním vstupně/výstupním rozhraním 2. Jinou možností je, že aplikace určená k přenosu mezi zdrojovým počítačovým systémem 1 a cílovým počítačovým systémem 5 je realizována na vlastním aplikačním serveru 3, viz obr. 2. V tomto případě je propojen aplikační server 3 se zdrojovým počítačovým systémem 1 druhým vstupně/výstupním rozhraním 4 a s cílovým počítačovým systémem 5 přes třetí vstupně/výstupní rozhraní 6.
Proces je zahájen v bloku 7 zadání požadavku na vytvoření nového textového souboru dat pro vstup do migračního objektu a parametrů, kde je zadán požadavek na vlastní realizaci včetně parametrů pro zpracování. První vstupně/výstupní rozhraní 2 v příkladu dle obr. 1 nebo třetí vstupně/výstupní rozhraní 6 v případě zařazení aplikačního serveru dle obr. 2 je tedy inicializováno a provede vlastní přenos dat z cílového počítačového systému 5. Pro zpracování požadavku je zapotřebí uložit informace o vlastním požadavku, tedy identifikace migračního objektu, informace o požadovaném počtu záznamů ve výstupním souboru, výběrové kritérium pro vybrané záznamy nebo eventuálně seznam požadovaných identifikátorů. Tento krok se děje v bloku 8 identifikace upravovaného migračního objektu nebo datové struktury. Není důležité, zda jsou informace zadávány přímo do systému nebo zda komunikace a formulování požadavku probíhá ústně nebo mailem. Prostě požadavek musí na straně cílového systému 5 někdo zformulovat a buď zadat, nebo odkomunikovat se zástupcem zdrojového počítačového systému 1 respektive aplikačního systému v aplikačním serveru 3. V bloku 9 vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury jsou z požadavku přebrány a zpracovány parametry požadavku, tedy také identifikace migračního objektu. Blokem 9 vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury online je zahájena činnost k získání aktuální struktury požadovaného migračního objektu pro vytvoření dat blokem 10 inicializace cílového systému. V rámci bloku 11 identifikace migračního objektu nebo datové struktury dojde k identifikaci objektu a jeho struktury a tato struktura je načtena v bloku 12 načtení aktuální struktury migračního objektu nebo datové struktury. Pro přenos získaných informací se opět inicializuje vstupně/výstupní rozhraní, v prvním případě první vstupně/výstupní rozhraní 2, ve druhém případě třetí vstupně/výstupní rozhraní 6, aby mohl proběhnout vlastní přenos struktury v bloku 13 přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury. Zpracování pokračuje blokem 14 zápisu aktuální struktury migračního objektu, v jehož rámci dojde na základě dodaných informací k zápisu aktuální struktury migračního objektu nebo datové struktury v aplikačním serveru 3 respektive zdrojovém počítačovém systému
1. Aby bylo možné zpracování v rámci aplikace doplnit, je nutné v cílovém počítačovém systému 5 také získat informace potřebné pro doplnění mapovací tabulky, tedy doplnit název zdrojového pole, kritéria pro získání hodnoty a eventuálně nutnou úpravu pomocí přepočtu nebo konverze. Toto se realizuje v bloku 15 aktualizace mapovacích údajů. V posledním bloku, a to v bloku 16 přípravy programu pro vlastní načtení a zpracování dat ze zdrojového počítačového systému 1 a tvorbu výstupního souboru se znamená eventuální zásah programátora do programu, vlastní vygenerování programu pro načtení a zpracování dat. V tomto okamžiku je vše připraveno pro vlastní načtení dat a tvorbu požadovaného souboru.
Dále je uveden konkrétní příklad, kdy klient požaduje doplnění titulu u jmen.
Na zdrojovém počítačovém systému 1 jsou informace o zákazníkovi uloženy takto:
-7 CZ 307278 B6
Název pole Formát pole Popis pole
JMÉNO char20 - křestní jméno zákazníka
PŘÍJMENÍ char30 - příjmení zákazníka
TITUL char20, - titul zákazníka zapsaný textem
ULICE char30 - adresa zákazníka název ulice
POPIS num5 - adresa zákazníka - číslo popisné
ORIENT num5 - adresa zákazníka - číslo orientační
OBEC char30 - adresa zákazníka název obce
PSC char6 - adresa zákazníka PSČ ve formátu ,999 99‘.
Původní požadavek na přenos dat týkajících se zákazníka byl tento:
JMÉNO, PŘÍJMENÍ, ULICE, POPIS, ORIENT, OBEC a PSČ.
Nově bylo pro přenos identifikováno pole TITUL, o které je třeba soubor rozšířit.
V cílovém počítačovém systému 5 dojde k rozšíření struktury migračního objektu o pole TITUL P1, TITUL P2 TITUL ZA takto:
Název pole Formát pole
TITUL P1 char15
TITUL P2 charl 5
TITUL ZA char15.
Titul není v cílovém počítačovém systému 5 zapisován textově, ale podle zadaného číselníku:
Titul kód titulu
MUDr. 001
MVDr. 002
RNDr. 003
Bac. 004
Ing. 005
MUDr. Et Ing. 006
Při dosud známém procesu se uskuteční společné jednání osob odpovědných za zdrojový počítačový systém 1 a cílový počítačový systém 5, na kterém zástupce počítačového cílového systému 5 definuje požadavek na předání titulu zákazníka. Společně identifikují způsob evidence titulu ve zdrojovém počítačovém systému 1 a postup jak s hodnotou v poli TITUL zacházet, aby ji bylo možno upravit pro potřeby cílového počítačového systému takto:
Hodnotu v poli TITUL je nutno rozkódovat ve vazbě na číselník. Všechny programy pracující s polem TITUL na zdroji je nutno upravit ve světle těchto informací.
-8CZ 307278 B6
Oproti tomu při realizaci předkládaného způsobu se rozšíří mapovací tabulka o pole TITULP1, TITUL P2 a TITULZA a do mapovací tabulky se zanese algoritmus identifikace titulů a vyhledání odpovídajících hodnot z dodaného číselníku. Program pro vydolování dat ze zdrojového počítačového systému potom pracuje s hodnotami doplněné mapovací tabulky po prvním vygenerování.
Průmyslová využitelnost
Předkládané řešení může být využito všude tam, kde je třeba opakovaně vydolovat velké množství dat z nějakého informačního systému a tato data přenést do jiného systému, tedy například tam, kde se starý informační systém nahrazuje novým informačním systémem třeba s novými širšími možnostmi, než jaké poskytoval systém starý.

Claims (6)

  1. PATENTOVÉ NÁROKY
    1. Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem, kdy provozovatel zdrojového systému obsluhuje minimálně jeden cílový systém a na základě požadavků uživatele některého z cílových systémů o změnu či doplnění migračního objektu definovaného množinou logicky souvisejících dat včetně jejich struktury provádí změnu struktury těchto migračních objektů, kde tento způsob zahrnuje krok namapování dat, vyznačující se tím, že v kroku namapování dat se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích, kde pole je přesně definovaná část věty textového souboru nebo datové struktury s definovanou délkou a typem znaků, které mohou v poli být obsaženy, přímo v daném cílovém počítačovém systému se provede doplnění či změna migračního objektu změnou definice struktury migračního objektu, nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce a v případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o toto pole doplní, načež se požadovaná struktura nového migračního objektu převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém počítačovém systému podle mapovací tabulky tak, že struktura výstupního souboru ze zdrojového počítačového systému odpovídá přesně struktuře souboru nebo datové struktury v cílovém počítačovém systému, načež se takto vytvořený textový soubor či datová struktura převede do cílového počítačového systému přes společné úložiště dat nebo prostřednictvím online přímého rozhraní.
  2. 2. Způsob podle nároku 1, vyznačující se tím, že se všechny mapovací údaje zanesou přímo do zdrojového počítačového systému, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní z cílového počítačového systému a veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
  3. 3. Způsob podle nároku 1, vyznačující se tím, že všechny mapovací údaje jsou udržovány na aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní cílový systém/aplikační server a uloží se v tomto aplikačním serveru spolu s parametry pro dolování dat a veškeré další kroky jsou realizovány na tomto aplikačním serveru, přičemž dolování dat se provádí přes vstupně/výstupní rozhraní zdrojový systém/aplikační server.
    -9CZ 307278 B6
  4. 4. Systém k provádění způsobu podle nároku 1 tvořený zdrojovým systémem (1) a cílovým systémem (5), vyznačující se tím, že obsahuje zdrojový počítačový systém (1) a cílový počítačový systém (5), které jsou propojeny přes alespoň jedno vstupně-výstupní rozhraní, a dále obsahuje navzájem propojenou část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci, která je součástí cílového počítačového systému (5) a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření, kde část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci sestává z bloku (7) zadání požadavku na vytvoření nového textového souboru online dat pro vstup do migračního objektu nebo datové struktury a jejich parametrů, z bloku (11) identifikace migračního objektu online, z bloku (12) načtení aktuální struktury migračního objektu nebo datové struktury a z bloku (13) přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury, a kde aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření sestává z bloku (8) identifikace upravovaného migračního objektu nebo datové struktury, z bloku (9) vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury, z bloku (10) inicializace cílového systému, z bloku (14) zápisu aktuální struktury migračního objektu nebo datové struktury, z bloku (15) aktualizace mapovacích údajů a z bloku (16) přípravy programu pro vlastní načtení a zpracování dat ze zdrojového systému a tvorbu výstupního souboru nebo přímého předání naplněné datové struktury, přičemž blok (7) zadání požadavku na požadovaný migrační objekt nebo datové struktury a jejich parametrů je přes vstupně/výstupní rozhraní propojen se vstupem bloku (8) identifikace upravovaného migračního objektu nebo datové struktury, jehož výstup je přes blok (9) vytvoření dotazu na strukturu migračního objektu nebo datové struktury propojen se vstupem bloku (10) inicializace cílového systému, jehož výstup je propojen zpět přes vstupně/výstupní rozhraní se vstupem bloku (11) identifikace nového migračního objektu nebo datové struktury, jehož výstup je přes blok (12) načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku (13) přenosu aktuální struktury nového migračního objektu nebo datové struktury, jehož výstup je přes vstupně/výstupní rozhraní propojen se vstupem bloku (14) zápisu aktuální struktury migračního objektu nebo datové struktury, jehož výstup je přes blok (15) aktualizace mapovacích údajů propojen se vstupem bloku (16) přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru.
  5. 5. Systém podle nároku 4, vyznačující se tím, že aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je součástí zdrojového počítačového systému (1) a je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému (5) přes první vstupně/výstupní rozhraní (2).
  6. 6. Systém podle nároku 4, vyznačující se tím, že mezi cílový počítačový systém (5) a zdrojový počítačový systém (1) je vložen aplikační server (3) a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je součástí tohoto aplikačního serveru (3), přičemž propojení mezi aplikačním serverem (3) a zdrojovým počítačovým systémem (1) je realizováno druhým vstupně/výstupním rozhraním (4), přes které se programy z aplikačního serveru dotazují do databáze ve zdrojovém systému a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému (5) přes třetí vstupně/výstupní rozhraní (6).
CZ2017-124A 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění CZ307278B6 (cs)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CZ2017-124A CZ307278B6 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění
EP18160580.9A EP3373165A1 (en) 2017-03-07 2018-03-07 Method of transferring the structures and data sets between the source and target systems and the system to implement it

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CZ2017-124A CZ307278B6 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění

Publications (2)

Publication Number Publication Date
CZ2017124A3 CZ2017124A3 (cs) 2018-05-09
CZ307278B6 true CZ307278B6 (cs) 2018-05-09

Family

ID=62068382

Family Applications (1)

Application Number Title Priority Date Filing Date
CZ2017-124A CZ307278B6 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění

Country Status (2)

Country Link
EP (1) EP3373165A1 (cs)
CZ (1) CZ307278B6 (cs)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111966597B (zh) * 2020-08-18 2024-04-16 中国银行股份有限公司 测试数据生成方法及装置
CN116431566B (zh) * 2023-06-09 2023-09-22 北京随信云链科技有限公司 数据迁移方法、装置、电子设备及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120278512A1 (en) * 2011-04-29 2012-11-01 International Business Machines Corporation System, Method and Program Product to Schedule Transfer of Data
US20150019487A1 (en) * 2013-07-09 2015-01-15 Oracle International Corporation Online database migration
US8990527B1 (en) * 2007-06-29 2015-03-24 Emc Corporation Data migration with source device reuse
US9201606B1 (en) * 2013-05-20 2015-12-01 Ca, Inc. System and method for automating data migrations between heterogeneous architectures
US20160357438A1 (en) * 2015-06-04 2016-12-08 Dell Software Inc. Migrate nickname cache for email systems and devices
US20170046143A1 (en) * 2015-08-12 2017-02-16 Oracle International Corporation Peoplesoft cloud manager

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2418507A (en) * 2003-06-25 2006-03-29 Siemens Med Solutions Health Data migration and format transformation system
CN104657396B (zh) * 2013-11-25 2020-04-24 腾讯科技(深圳)有限公司 数据迁移方法及装置
CN105354314B (zh) * 2015-11-10 2020-03-03 中国建设银行股份有限公司 数据迁移方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8990527B1 (en) * 2007-06-29 2015-03-24 Emc Corporation Data migration with source device reuse
US20120278512A1 (en) * 2011-04-29 2012-11-01 International Business Machines Corporation System, Method and Program Product to Schedule Transfer of Data
US9201606B1 (en) * 2013-05-20 2015-12-01 Ca, Inc. System and method for automating data migrations between heterogeneous architectures
US20150019487A1 (en) * 2013-07-09 2015-01-15 Oracle International Corporation Online database migration
US20160357438A1 (en) * 2015-06-04 2016-12-08 Dell Software Inc. Migrate nickname cache for email systems and devices
US20170046143A1 (en) * 2015-08-12 2017-02-16 Oracle International Corporation Peoplesoft cloud manager

Also Published As

Publication number Publication date
CZ2017124A3 (cs) 2018-05-09
EP3373165A1 (en) 2018-09-12

Similar Documents

Publication Publication Date Title
CN104317843B (zh) 一种数据同步etl系统
US8918447B2 (en) Methods, apparatus, systems and computer readable mediums for use in sharing information between entities
CN104572122A (zh) 一种软件应用数据的生成装置及方法
WO2018178641A1 (en) Data replication system
CN107958010A (zh) 用于在线数据迁移的方法及系统
US7386793B2 (en) Apparatus, method and program for supporting a review
CN107368503A (zh) 基于Kettle的数据同步方法和系统
CN111782265A (zh) 基于字段级血缘关系的软件资源系统及其建立方法
US10747588B2 (en) Method for updating instance-based message maps using metadata
EP2800013A1 (en) Integration database framework
CN111858760B (zh) 一种异构数据库的数据处理方法及装置
CN102456051A (zh) 数据库数据导入/导出的方法和装置
KR20090089601A (ko) 문서 작성용 응용 프로그램을 이용하여 문서의 양식과 입력데이터를 결합하여 자동으로 문서를 작성하는 문서 작성자동화 시스템 및 문서 작성 자동화 방법
CN101174237A (zh) 一种自动化测试方法、系统及一种测试设备
CZ307278B6 (cs) Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění
CN113204571A (zh) 涉及写入操作的sql执行方法、装置及存储介质
CN104298761A (zh) 一种异构软件系统间主数据匹配的实现方法
CN112000649A (zh) 一种基于map reduce的增量数据同步的方法和装置
CN111159020B (zh) 一种应用于同步软件测试的方法和装置
CN111752927A (zh) 基于克隆的数据形态生成方法、装置、终端设备及介质
CN107636652A (zh) Rdb系统
CZ31642U1 (cs) Systém pro přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem
CN111222793A (zh) 一种数据交互方法和系统
Shafiq et al. Model server enabled management of collaborative changes in building information models
CN109634606A (zh) 一种定义功能菜单的方法及装置