CZ2017124A3 - Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění - Google Patents

Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění Download PDF

Info

Publication number
CZ2017124A3
CZ2017124A3 CZ2017-124A CZ2017124A CZ2017124A3 CZ 2017124 A3 CZ2017124 A3 CZ 2017124A3 CZ 2017124 A CZ2017124 A CZ 2017124A CZ 2017124 A3 CZ2017124 A3 CZ 2017124A3
Authority
CZ
Czechia
Prior art keywords
data
computer system
block
migration object
migration
Prior art date
Application number
CZ2017-124A
Other languages
English (en)
Other versions
CZ307278B6 (cs
Inventor
Ivana Kriegová
Original Assignee
Krieg Jaroslav
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Krieg Jaroslav filed Critical Krieg Jaroslav
Priority to CZ2017-124A priority Critical patent/CZ2017124A3/cs
Priority to EP18160580.9A priority patent/EP3373165A1/en
Publication of CZ307278B6 publication Critical patent/CZ307278B6/cs
Publication of CZ2017124A3 publication Critical patent/CZ2017124A3/cs

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G06F16/972Access to data in other repository systems, e.g. legacy data or dynamic Web page generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/214Database migration support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

Přenášení struktur a datových souborů se děje buď přímo, nebo přes aplikační server (3). Na straně zdrojového počítačového systému (1) respektive aplikačního serveru (3) se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému (5), vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. Přímo v daném cílovém počítačovém systému (5) se provede doplnění či změna migračního objektu změnou definice struktury migračního objektu. Nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce a v případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o toto pole doplní. Požadovaná struktura nového migračního objektu se převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém počítačovém systému (1) respektive v aplikačním serveru (3) podle mapovací tabulky tak, že struktura výstupního souboru odpovídá přesně struktuře souboru v cílovém počítačovém systému (5). Vytvořený textový soubor se převede do cílového počítačového systému (5) přes společné úložiště dat. Toto vše zabezpečuje aplikační část pro zpracování požadavku na určený migrační objekt a jeho vytvoření umístěná ve zdrojovém počítačovém systému (1) nebo na aplikačním serveru (3). Aplikační část tvoří blok (8) identifikace upravovaného migračního objektu, blok (9) vytvoření dotazu na strukturu definovaného migračního objektu, blok (10) inicializace cílového systému, blok (14) zápisu aktuální struktury migračního objektu, blok (15) aktualizace mapovacích údajů a blok (16) přípravy programu pro vlastní načtení a zpracování dat ze zdrojového počítačového systému a tvorbu výstupního souboru.

Description

Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění
Oblast techniky
Řešení se týká přenášení struktur a datových souborů mezi systémy, který je využíván při přenosech dat ze zdrojového systému do cílového systému. Ze zdrojového systému je tedy třeba na základě požadavku uživatele některého z cílových systémů vydolovat data ve struktuře známé v cílovém souboru.
Dosavadní stav techniky
Často dochází k situaci, že je třeba opakovaně vydolovat velké množství dat z nějakého informačního systému a tato data přenést do jiného systému, tedy například tam, kde se starý informační systém nahrazuje novým informačním systémem třeba s novými širšími možnostmi, než jaké poskytoval systém starý.
V tomto případě je nutné maximum informací uložených ve starém systému, tak zvaném zdrojovém systému, vydolovat ve stanovené struktuře v podobě sekvenčního souboru respektive v podobě nějakého textového souboru nebo jakékoli datové struktury. V rámci přípravy dolování dat je nutno data dobře zanalyzovat, nastavit potřebná pravidla vyhovující novému cílovému systému. Jedná se o velmi náročný a zdlouhavý proces, kdy často lidskou chybou dochází k nutnosti jednotlivé kroky opakovat.
Na straně nového cílového systému bývají nastaveny standardní struktury vstupních souborů, tedy tak zvané struktury migračních objektů nebo datových struktur. Migračním objektem se rozumí množina 1 až N datových struktur, kdy v případě reprezentování jednou strukturou je možné též hovořit o datové struktuře. Celý proces se často nazývá migrací dat ze starého systému do nového, tedy ze zdrojového systému do systému cílového systému. Pro vytvoření datových souborů nebo naplnění datových struktur k nahrání do cílového systému je vždy nutné zadat celou řadu parametrů, jako jsou: struktura migračního objektu respektive změny ve struktuře, množství dat, kritéria výběru dat...
Při dosud známém přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem se postupuje následujícím způsobem. Na začátku migrace nebo obecného • · · · · · « · · · • · · · · • · · · ··· ··· ·· přenosu dat je nutné provést mapování neboli tak zvaný mapping dat mezi oběma systémy, tedy zdrojovým a cílovým, to znamená určit, která data si navzájem odpovídají, která data se musí transformovat případně konvertovat a jaké akce je nutno při výběru s daty provést, aby je bylo možno nahrát správně do cílového systému. Po dokončení tohoto mapování programátor jednotlivé informace zapracuje do programu. Pro každý migrační objekt nebo datovou strukturu je vytvořen program, jehož spuštěním se vytvoří požadovaný soubor dat nebo se naplní datová struktura. Obdobně na straně cílového systému existuje program, kterým se data nahrají do cílového systému.
Na obou stranách je nutno programy odladit a postupně v nich provádět dílčí změny. Tyto změny musí někdo na straně cílového systému definovat, musí doplnit mapování pro nové údaje nebo je pozměnit u stávajících dat. Pro vytvoření dat ze zdrojového systému pro testy je třeba definovat, kolik dat má být ze zdrojového systému vydolováno, a stanovit pravidla výběru dat do požadovaného souboru/struktury nebo dodat seznam identifikátorů, podle kterých bude výběr proveden. Tento krok se provádí nejčastěji na schůzce technických nebo IT pracovníků, telefonicky nebo emailem. Provádění změn v obou systémech je třeba vždy koordinovat, bezpodmínečně totiž musí být všechny změny struktur do příštího testu provedeny v obou systémech, to musí někdo řídit a důsledně sledovat.
atr
Po doladění programů se v rámci testů, jejichž počet obvykle bývá 3*5, opakovaně vytvářejí soubory dat, minimálně 3x se však přenáší všechna data ze zdrojového systému do cílového systému.
Jak z výše uvedeného vyplývá, nevýhodou dosud známého způsobu je, že se jedná o náročnou a poměrně složitou akci, kterou je třeba mít neustále pod kontrolou, aby byla minimalizovaná zbytečná práce zainteresovaných na obou stranách.
Jsou známé také následující dokumenty týkající se obecné dané oblasti.
US ^01^06 B, TAYLOR NEAL [US]; NICKOLOV PETER [US]), 01.12.2015 řeší primárně systémy a metody migrace dat výhradně na úrovni databázových tabulek včetně transformací typu polí a konverzí jejich obsahu. Řešení vychází z principů a nástrojů pro realizaci migrací, přenosu a transformací dat výhradně na úrovni databázových tabulek. Nevýhodou tohoto řešení je, že je úzce specializované pro
migraci, přenos a transformaci dat výhradně na úrovni databázových tabulek a databázových operačních systémů, například SQL. Z detailního popisu, a zejména pak obrázku FIG. 4, vyplývá, že není užíván princip dynamického řízení migračních struktur na úrovni aplikací, ale maximálně na úrovni databází. To znamená, že nejsou tedy při přesunu využity aplikační kontroly, které výrazně zvyšují kvalitu migrovaných dat.
Dalším dokumentem je US 201 §057438 A, HORVATIN KEVIN ANTHONY [US]; MOORE STEVEN ALLEN [US]; OBST JONATHAN CAMERON [US], 08.12.2016. Tento dokument řeší migraci cashe nickname mezi přístroji při migraci e-mailových dat, typicky produktů Outlook/Office společnosti Microsoft, respektive souborů ve formátech PST. Jedná se o úzce specializované řešení pro produkty společnosti Microsoft
Dokument US ^9^527 B, LINSTEAD PAUL [US], 24.03.2015 řeší nástroj, respektive princip, řízení směrů mezi přístroji při přenosu dat, primárně přenos dat mezi zařízeními typu smart mobilní telefon, v přeneseném významu jakéhokoli přístroje.
Nevýhodou tohoto řešení je, že je úzce specializované pro produkty typu chytrý mobilní telefon bez dynamického řízení migračních struktur, tedy veškeré struktury jsou řízeny, respektive zadávány, manuálně.
US 201 §bl9487 A, BUEHNE STEPHAN [DE]; SPIEGELBERGELMAR [DE], 15.01.2015 primárně řeší princip a řízení přenosu změn zdrojové databáze v průběhu přesunu dat na úrovni databáze v reálném čase. Jedná se opět o úzce specializované řešení pro přenos dat na úrovni databáze.
V dokumentu US 201^046143 A. KOCHHAR HARMEET [IN]; KHANDELWAL PRASHANT [IN]; KUMAR PAWAN [US]; MITRA SAIKAT [IN], 16.02.2017 je řešen systém a metoda migrace dat výhradně na úrovni databázových tabulek včetně transformací typu polí a konverzí jejich obsahu. Zároveň dokument řeší nástroj a princip monitorování procesu přenosu a transformace dat na úrovni databázových tabulek respektive databázových objektů. Jedná se o úzce specializované řešení pro migraci, přenos a transformaci dat výhradně na úrovni databázových tabulek a databázových objektů. Ani zde není užíván princip dynamického řízení migračních struktur na úrovni aplikací, ale maximálně na úrovni databází. Nejsou tedy při přesunu využity aplikační kontroly, které výrazně zvyšují kvalitu migrovaných dat.
»9 · · • 9 » ·* · • · ·* • ·· · * • · ·· » 9 9 9···
Je také známé řešení podle US 201^278512 A, ALATORRE GABRIEL [US]; RICHARDSON LAURA [US]; SINGH AAMEEK [US]; BECKER BARRY [US]; OLSON JAMES [US], 01.11.2012. Jedná se o popis nástrojů a principů pro plánování přesunu dat na úrovni databáze včetně v reálném čase řízení zátěže serverů realizujících přesun během běžícího procesu přesunu dat na úrovni databáze. Opět je popsáno úzce specializované řešení pro plánování technického procesu přesunu dat a řízení zátěže serverů v reálném čase pro/při přenosu dat na úrovni databáze.
Podstata vynálezu
Výše uvedené nevýhody odstraňuje způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění podle předkládaného řešení.
Při přenášení struktur a datových souborů mezi zdrojovým a cílovým počítačovým systémem provozovatel zdrojového systému obsluhuje minimálně jeden cílový počítačový systém a na základě požadavků uživatele cílového počítačového systému na změnu struktury či doplnění migračního objektu definovaného množinou logicky souvisejících dat včetně jejich struktury provádí změnu struktury těchto migračních objektů. Tento způsob zahrnuje krok namapování dat. Podstatou nového řešení je, že v kroku namapování dat se vytvoří mapovací tabula obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. Pole je přesně definovaná část věty textového souboru nebo datové struktury s definovanou délkou a typem znaků, které mohou v poli být obsaženy. Mapovací tabulka může mít různou formu, ať již je to tabulka v systému nebo tabulka v podobě Excelu či jen soupis pravidel v libovolné podobě. Uživatel provede přímo ve svém cílovém počítačovém systému doplnění či změnu migračního objektu změnou definice struktury migračního objektu. Tato nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce. V případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o tuto novou část, o toto pole doplní. Poté se požadovaná struktura nového migračního objektu převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém systému podle mapovací tabulky tak, že struktura výstupního souboru ze zdrojového systému odpovídá přesně struktuře souboru v cílovém počítačovém •9 *
3· · ·· • ·· systému. Vytvořený textový soubor nebo věta struktury se do cílového počítačového systému převede přes společné úložiště dat nebo přímo online prostřednictvím přímého rozhraní.
V jedné možné variantě se všechny mapovací údaje zanesou přímo do zdrojového počítačového systému. Požadavek na doplnění či změnu migračního objektu nebo datové struktury se do tohoto zdrojového počítačového systému přenese pomocí vstupně/výstupního rozhraní z cílového počítačového systému. Veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
Ve druhé možné variantě jsou všechny mapovací údaje udržovány na aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní cílový systém/aplikační server a uloží se v tomto aplikačním serveru spolu s parametry pro dolování dat. Veškeré další kroky jsou realizovány na tomto aplikačním serveru. Dolování dat se provádí přes vstupně/výstupní rozhraní zdrojový systém/aplikační server.
K provádění uvedeného způsobu je vytvořen systém tvořený zdrojovým a cílovým počítačovým systémem, které jsou propojeny alespoň jedním vstupně-výstupním rozhraním. Systém dále obsahuje navzájem propojenou část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci, která je součástí cílového počítačového systému a aplikační částí pro zpracování požadavku na určený migrační objekt či datové struktury a jeho vytvoření. Část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci sestává z bloku zadání požadavku na vytvoření nového textového souboru nebo přímého předání dat pro vstup do migračního objektu nebo datové struktury a jejich parametrů, z bloku identifikace migračního objektu či datové struktury, z bloku načtení aktuální struktury migračního objektu nebo datové struktury a z bloku přenosu aktuální struktury požadovaného migračního objektu či datové struktury. Aplikační částí pro zpracování požadavku na určený migrační objekt nebo struktury a jeho vytvoření se sestává z bloku identifikace upravovaného migračního objektu či datové struktury, z bloku vytvoření dotazu na strukturu definovaného migračního nebo datové struktury, z bloku inicializace cílového systému, z bloku zápisu aktuální datové struktury migračního objektu nebo datové struktury, z bloku aktualizace mapovacích údajů a z bloku přípravy programu pro vlastní načtení a zpracování dat ze zdrojového systému a • · · ·· • · · ·· · · • · · ·· • · · · »··· ·· tvorbu výstupního souboru nebo přímého předání naplněné datové struktury. Blok zadání požadavku na požadovaný migrační objekt nebo datovou strukturu a jejich parametrů je přes vstupně/výstupní rozhraní propojen se vstupem bloku identifikace upravovaného migračního objektu či datové struktury, jehož výstup je přes blok vytvoření dotazu na strukturu migračního objektu online propojen se vstupem bloku inicializace cílového systému. Výstup bloku inicializace cílového systému je propojen zpět přes vstupně/výstupní rozhraní se vstupem bloku identifikace nového migračního objektu nebo datové struktury. Výstup bloku identifikace nového migračního objektu či datové struktury je přes blok načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku přenosu aktuální struktury nového migračního objektu nebo datové struktury, jehož výstup je přes vstupně/výstupní rozhraní propojen se vstupem bloku zápisu aktuální struktury migračního objektu nebo datové struktury. Výstup bloku zápisu aktuální struktury migračního objektu nebo datové struktury je přes blok aktualizace mapovacích údajů propojen se vstupem bloku přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru nebo přímého předání.
Jednou z možností je, že aplikace je součástí zdrojového počítačového systému a umožňuje přímé dotazy do databáze zdrojového počítačového systému. Zde je aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci, která je realizována v cílovém počítačovém systému, přes první vstupně/výstupní rozhraní. Vzhledem k velkému množství dat je tato varianta rychlejší.
Druhou možností pak je, že mezi cílový a zdrojový počítačový systém je vložen aplikační server. Aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je pak součástí tohoto aplikačního serveru. Propojení mezi aplikačním serverem a zdrojovým počítačovým systémem je realizováno druhým vstupně/výstupním rozhraním, přes které se programy uložené na aplikačním serveru dotazují do databáze zdrojového počítačového systému. Aplikační část je v tomto případě propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému přes třetí vstupně/výstupní rozhraní.
• « 4» »· « »4 4 · » ··· « 4 · · ·* • 44444·4 • 4 4 4 4· · « · ♦ ·» ···*··
Výhodou nového způsobu přenášení struktur a datových souborů nebo přímého předání mezi zdrojovým a cílovým počítačovým systémem a systému k jeho provádění je, že část z tohoto procesu se zpracovává automatizovaně, čímž se vyloučí lidský element a minimalizuje se tak velké množství vznikajících chyb. Kromě toho se celý proces výrazně zrychlí.
Oproti dosud známým řešením umožňuje předkládané řešení dynamické přebírání struktur objektů z cílového počítačového systému do zdrojového počítačového systému. Toto nejen odstraňuje ruční práci s údržbou struktur, ale hlavně odstraňuje ruční hlídání shody mezi oběma systémy. Data jsou vždy vytvořena ve struktuře, kterou je na cílovém počítačovém systému možno zpracovat. Struktury se totiž řídí nastavením na cílovém počítačovém systému, tedy jen na jednom místě a tudíž nedochází k rozdílu struktur mezi oběma systémy. Je zde užíván princip dynamického řízení migračních struktur na úrovni aplikací.
Programy jsou zpracovány pouze jednou pro každý migrační objekt a jsou jen minimálně doplňovány. Struktura migračního souboru nebo datové struktury pro přímé předání se převezme přes vstupně/výstupní rozhraní vždy při tvorbě dat ze struktury v cílovém počítačovém systému. Odpadá tedy zdlouhavá komunikace mezi pracovníky na obou stranách. Data jsou vždy vytvořena tak, že přesně odpovídají v daném okamžiku struktuře v cílovém počítačovém systému.
Vlastní požadavek na zpracování je to jediné, co je nutno předávat v rámci jednání, telefonu nebo emailem mezi oběma stranami, neboť i parametry mohou být nastaveny na straně cílového počítačového systému a převzaty prostřednictvím rozhraní mezi systémy.
Data jsou v obou případech vytvářena v předem domluveném tvaru jako textový, tedy sekvenční, soubor nebo datová struktura pro přímé předání. Je možné je předávat na mediu, posílat emailem, ukládat na sdílený disk nebo přímým naplněním cílových struktur prostřednictvím online rozhraní. Na základě zkušeností a s ohledem na velikosti migračních souborů je nejlépe tato data předávat přes společné úložiště dat, které je přístupné z obou počítačových systémů, jak ze zdrojového, tak i z cílového.
Celý způsob je výrazným zjednodušením, zpřehledněním a urychlením požadované činnosti.
Objasnění výkresů
Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění budou dále blíže vysvětleny pomocí přiložených výkresů. Na ®br. 1 je uvedeno schéma systému bez použití aplikačního serveru a na $br. 2 je schéma s jeho použitím. Předávání dat je též možno řešit přímo prostřednictvím online rozhraní.
Příklady uskutečnění vynálezu
U nového způsobu přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem, stejně tak jako u dosavadních způsobů, je nutno provést na začátku procesu mapování dat zdroj cíl. Mapování je vlastně proces, kdy se provádí párování polí zdrojový systém x cílový systém. Tento krok zahrnuje i pravidla a vazby mezi poli jak ve zdrojovém počítačovém systému, tak v cílovém počítačovém systému. Toto mapování se však neprovádí ve vazbě na požadovaná data, ale plošně, to znamená, že všechna data ze zdrojového počítačového systému jsou namapována na cílový počítačový systém. Tento tak zvaný mapping je uložen v mapovací tabulce aplikace, odkud je postupně čerpán.
Na začátku prací se vydefinují migrační objekty, respektive struktury migračních objektů v celé šíři bez ohledu na to zda budou všechna data využívána. Jinými slovy řečeno, udělá se ve zdrojovém systému soupis všech polí, definic pravidel a vazeb mezi jednotlivými poli, kde pole je přesně definovaná část věty textového souboru s definovanou délkou a typem znaků, které mohou v poli být obsaženy, a všechna se namapují na cílový počítačový systém. Tím se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích. V případě zájmu uživatel zadá přímo ve svém cílovém počítačovém systému požadavek na doplnění či změnu migračního objektu, a to změnou definice struktury migračního objektu. Tato nová struktura migračního objektu se porovná se strukturami již zadanými v mapovací tabulce. Pokud nová struktura v mapovací tabulce není obsažená nebo je nedostatečně namapována, pak se mapovací tabulka o tuto novou strukturu doplní. V dalším kroku se požadovaná struktura nového migračního objektu převezme a následně se automaticky přegeneruje podle mapovací tabulky program na tvorbu dat, který je uložený ve φ ·
zdrojovém počítačovém systému, tak, že výstupní soubor ze. zdrojového systému odpovídá souboru zadanému uživatelem v cílovém počítačovém systému. Vytvořený textový soubor se do cílového počítačového systému převádí přes společné úložiště dat, nebo přímo do datových struktur cílového počítačového systému.
Vytvoření mapovací tabulky a vlastní přenášení struktur a datových souborů mezi zdrojovým a cílovým počítačovým systémem lze provést dvěma způsoby.
Prvním způsobem je, že mapovací tabulka je vytvořena ve zdrojovém počítačovém systému, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní. Veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
Je také možné uspořádání se třemi servery, a to se serverem se zdrojovým počítačovým systémem, se serverem s cílovým počítačovým systémem a s aplikačním serverem. V tomto případě je celý systém implementován na aplikačním serveru. Mapovací tabulka i struktura migračního objektu nebo datové struktury včetně dolovacích programů a všech parametrů jsou udržovány na aplikačním serveru. To tedy znamená, že mapovací tabulka je vytvořena v aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí prvního vstupně/výstupního rozhraní mezi cílovým počítačovým systémem a tímto aplikačním serverem. Mapovací tabulka se uloží v aplikačním serveru spolu s parametry pro dolování dat. Veškeré další kroky jsou realizovány na tomto aplikačním serveru. Dolování dat se pak provádí přes druhé vstupně/výstupní rozhraní mezi zdrojovým počítačovým systémem a aplikačním serverem.
Schéma systému, který zabezpečuje postup pro případ bez využití aplikačního serveru ď je uveden na Í8br. 1.
Systém je tvořen zdrojovým počítačovým systémem 1 a cílovým počítačovým systémem 5. Má dvě navzájem propojené části, a to část zadání požadavku na definovaný migrační objekt online a jejich identifikaci a aplikační část. Část zadání požadavku na definovaný migrační objekt nebo datovou strukturu a jejich identifikaci je součástí cílového počítačového systému 5. Sestává se z bloku 7 zadání požadavku na vytvoření nového textového souboru dat nebo přímé online ho předání dat pro vstup do migračního objektu nebo datové struktury a online parametrů, z bloku 11 • . . · »· · · ·· · ♦ • · · ·· • · · ·· · ♦ • · · ·· • 4« it ♦··* · ♦ identifikace migračního objektu nebo datové struktury, z bloku 12 načtení aktuální struktury migračního objektu nebo datové struktury a z bloku 13 přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury. Aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření se sestává z bloku 8 identifikace upravovaného migračního objektu nebo datové struktury, z bloku 9 vytvoření dotazu na strukturu definovaného online migračního objektu nebo datové struktury, z bloku 10 inicializace cílového systému, z bloku 14 zápisu aktuální struktury migračního objektu nebo datové struktury, z bloku 15 aktualizace mapovacích údajů a z bloku 16 přípravy programu pro vlastní načtení a zpracování dat ze zdrojového systému a tvorbu výstupního souboru. Blok 7 zadání požadavku na požadovaný migrační objekt nebo datové struktury a jeho parametrů je v této variantě přes první vstupně/výstupní rozhraní 2 propojen se vstupem bloku 8 identifikace upravovaného migračního objektu nebo datové struktury. Jeho výstup je přes blok 9 vytvoření dotazu na strukturu migračního objektu propojen se vstupem bloku 10 inicializace cílového systému, Výstup bloku 10 inicializace cílového systému je propojen zpět přes první vstupně/výstupní rozhraní 2 se vstupem bloku 11 identifikace nového migračního objektu nebo datové struktury, jehož výstup je přes blok 12 načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku 13 přenosu aktuální struktury nového migračního objektu nebo datové struktury. Výstup bloku 13 přenosu aktuální struktury nového migračního objektu online je přes první vstupně/výstupní rozhraní 2 propojen se vstupem bloku 14 zápisu aktuální struktury migračního objektu nebo datové struktury, jehož výstup je přes blok 15 aktualizace mapovacích údajů propojen se vstupem bloku 16 přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru.
V tomto provedení je tedy aplikační část součástí zdrojového počítačového systému
1.
V provedení podle ŽJbr. 2 je mezi cílový počítačový systém 5 a zdrojový počítačový systém 1 vložen aplikační server 3. V tomto případě je aplikační část součástí aplikačního serveru 3. Propojení mezi aplikačním serverem 3 a zdrojovým počítačovým systémem 1 je realizováno druhým vstupně/výstupním rozhraním 4. Přes toto druhé vstupně/výstupní rozhraní 4 se z programů provádí dotazy přímo do databáze ve zdrojovém počítačovém systému. Aplikační část je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému 5 přes třetí vstupně/výstupní rozhraní 6. Jinak jsou všechny <S boky zapojeny analogicky jako v příkladu podle fi$br. 1.
Přenášení struktur a datových souborů mezi zdrojovým počítačovým systémem 1. a cílovým počítačovým systémem 5 probíhá přes vstupně/výstupní rozhraní mezi systémy. Aplikace určená k tomuto přenosu může být nainstalována přímo ve zdrojovém počítačovém systému 1, jak je tomu v®br. 1, a pak přenášení struktur a datových souborů je realizováno prvním vstupně/výstupním rozhraním 2. Jinou možností je, že aplikace určená k přenosu mezi zdrojovým počítačovým systémem 1 a cílovým počítačovým systémem 5 je realizována na vlastním aplikačním serveru 3, viz $br. 2. V tomto případě je propojen aplikační server 3 se zdrojovým počítačovým systémem 1 druhým vstupně/výstupním rozhraním 4 a s cílovým počítačovým systémem 5 přes třetí vstupně/výstupní rozhraní 6.
Proces je zahájen v bloku 7 zadání požadavku na vytvoření nového textového souboru dat pro vstup do migračního objektu a parametrů, kde je zadán požadavek na vlastní realizaci včetně parametrů pro zpracování. První vstupně/výstupní rozhraní 2 v příkladu dle ®br. 1 nebo třetí vstupně/výstupní rozhraní 6 v případě zařazení a aplikačního serveru dle ®br. 2 je tedy inicializováno a provede vlastní přenos dat z cílového počítačového systému 5. Pro zpracování požadavku je zapotřebí uložit informace o vlastním požadavku, tedy identifikace migračního objektu, informace o požadovaném počtu záznamů ve výstupním souboru, výběrové kritérium pro vybrané záznamy nebo eventuálně seznam požadovaných identifikátorů. Tento krok se děje v bloku 8 identifikace upravovaného migračního objektu nebo datové struktury. Není důležité, zda jsou informace zadávány přímo do systému nebo zda komunikace a formulování požadavku probíhá ústně nebo mailem. Prostě požadavek musí na straně cílového systému 5 někdo zformulovat a buď zadat^ebo odkomunikovat se zástupcem zdrojového počítačového systému 1 respektive aplikačního systému v aplikačním serveru 3. V bloku 9 vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury jsou z požadavku přebrány a zpracovány parametry požadavku, tedy také identifikace migračního objektu. Blokem 9 vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury online je zahájena činnost k získání aktuální struktury požadovaného migračního objektu pro vytvoření dat blokem 10 inicializace cílového systému. V rámci bloku 11 identifikace migračního objektu nebo datové struktury dojde k identifikaci objektu a jeho struktury a tato struktura je načtena v bloku 12 načtení aktuální struktury migračního objektu nebo datové struktury. Pro přenos získaných informací se opět inicializuje vstupně/výstupní rozhraní, v prvním případě první vstupně/výstupní rozhraní 2, ve druhém případě třetí vstupně/výstupní rozhraní 6, aby mohl proběhnout vlastní přenos struktury v bloku 13 přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury. Zpracování pokračuje blokem 14 zápisu aktuální struktury migračního objektu, v jehož rámci dojde na základě dodaných informací k zápisu aktuální struktury migračního objektu nebo datové struktury v aplikačním serveru 3 respektive zdrojovém počítačovém systému 1 Aby bylo možné zpracování v rámci aplikace doplnit, je nutné v cílovém počítačovém systému 5 také získat informace potřebné pro doplnění mapovací tabulky, tedy doplnit název zdrojového pole, kritéria pro získání hodnoty a eventuálně nutnou úpravu pomocí přepočtu nebo konverze. Toto se realizuje v bloku 15 aktualizace mapovacích údajů. V posledním bloku, a to v bloku 16 přípravy programu pro vlastní načtení a zpracování dat ze zdrojového počítačového systému 1 a tvorbu výstupního souboru se znamená eventuální zásah programátora do programu, vlastní vygenerování programu pro načtení a zpracování dat. V tomto okamžiku je vše připraveno pro vlastní načtení dat a tvorbu požadovaného souboru.
Dále je uveden konkrétní příklad, kdy klient požaduje doplnění titulu u jmen.
Na zdrojovém počítačovém systému 1 jsou informace o zákazníkovi uloženy takto:
Název pole Formát pole Popis pole
JMÉNO char20 - křestní jméno zákazníka
PŘÍJMENÍ char30 - příjmení zákazníka
TITUL char20, - titul zákazníka zapsaný textem
ULICE char30 - adresa zákazníka název ulice
POPIS num5 - adresa zákazníka - číslo popisné
ORIENT num5 - adresa zákazníka - číslo orientační
OBEC char30 - adresa zákazníka název obce
PSC char6 - adresa zákazníka PSČ ve formátu ,999 99‘.
Původní požadavek na přenos dat týkajících se zákazníka byl tento:
JMÉNO, PŘÍJMENÍ,ULICE, POPIS, ORIENT, OBEC a PSC.
Nově bylo pro přenos identifikováno pole TITUL, o které je třeba soubor rozšířit.
V cílovém počítačovém systému 5 dojde k rozšíření struktury migračního objektu o pole TITUL_P1, TITUL.P2 TITUL_ZA takto:
Název pole Formát pole
TITUL P1 char15
TITUL P2 char15
TITUL ZA char15.
Titul není v cílovém počítačovém systému 5 zapisován textově, ale podle zadaného číselníku:
Titul kód titulu
MUDr. 001
MVDr. 002
RNDr. 003
Bac. 004
Ing. 005
MUDr. Et Ing. 006
. . .
Při dosud známém procesu se uskuteční společné jednání osob odpovědných za zdrojový počítačový systém 1 a cílový počítačový systém 5, na kterém zástupce počítačového cílového systému 5 definuje požadavek na předání titulu zákazníka. Společně identifikují způsob evidence titulu ve zdrojovém počítačovém systému 1. a postup jak s hodnotou v poli TITUL zacházet, aby ji bylo možno upravit pro potřeby cílového počítačového systému takto:
Hodnotu v poli TITUL je nutno rozkódovat ve vazbě na číselník. Všechny programy pracující s polem TITUL na zdroji je nutno upravit ve světle těchto informací.
Oproti tomu při realizaci předkládaného způsobu se rozšíří mapovací tabulka o pole TITUL_P1, TITUL_P2 a TITUL_ZA a do mapovací tabulky se zanese algoritmus identifikace titulů a vyhledání odpovídajících hodnot z dodaného číselníku. Program pro vydolování dat ze zdrojového počítačového systému potom pracuje s hodnotami doplněné mapovací tabulky po prvním vygenerování.
Průmyslová využitelnost
Předkládané řešení může být využito všude tam, kde je třeba opakovaně vydolovat velké množství dat z nějakého informačního systému a tato data přenést do jiného systému, tedy například tam, kde se starý informační systém nahrazuje novým informačním systémem třeba s novými širšími možnostmi, než jaké poskytoval systém starý.

Claims (6)

1. Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem, kdy provozovatel zdrojového systému obsluhuje minimálně jeden cílový systém a na základě požadavků uživatele některého z cílových systémů o změnu či doplnění migračního objektu definovaného množinou logicky souvisejících dat včetně jejich struktury provádí změnu struktury těchto migračních objektů, kde tento způsob zahrnuje krok namapování dat, vyznačující se tím, že v kroku namapování dat se vytvoří mapovací tabulka obsahující definici pravidel pro přenášení hodnot polí do cílového počítačového systému, vazby mezi jednotlivými poli, pravidla výběru hodnot jednotlivých polí a případně konverze hodnot obsažených v dotčených polích, kde poleje přesně definovaná část věty textového souboru nebo datové struktury s definovanou délkou a typem znaků, které mohou v poli být obsaženy, přímo v daném cílovém počítačovém systému se provede doplnění či změna migračního objektu změnou definice struktury migračního objektu, nová struktura migračního objektu se porovná se strukturami již obsaženými v mapovací tabulce a v případě absence pole nebo nedostatečného namapování se struktura a mapovací tabulka o toto pole doplní, načež se požadovaná struktura nového migračního objektu převezme a následně se vždy přegeneruje program na tvorbu dat uložený ve zdrojovém počítačovém systému podle mapovací tabulky tak, že struktura výstupního souboru ze zdrojového počítačového systému odpovídá přesně struktuře souboru nebo datové struktury v cílovém počítačovém systému, načež se takto vytvořený textový soubor či datová struktura převede do cílového počítačového systému přes společné úložiště dat nebo prostřednictvím online přímého rozhraní.
2. Způsob podle nároku ^vyznačující se tím, že se všechny mapovací údaje zanesou přímo do zdrojového počítačového systému, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese > · pomocí vstupně/výstupního rozhraní z cílového počítačového systému a veškeré další kroky jsou realizovány v tomto zdrojovém počítačovém systému.
3. Způsob podle nároku ^vyznačující se tím, že všechny mapovací údaje jsou udržovány na aplikačním serveru, do kterého se požadavek na doplnění či změnu migračního objektu nebo datové struktury přenese pomocí vstupně/výstupního rozhraní cílový systém/aplikační server a uloží se v tomto aplikačním serveru spolu s parametry pro dolování dat a veškeré další kroky jsou realizovány na tomto aplikačním serveru, přičemž dolování dat se provádí přes vstupně/výstupní rozhraní zdrojový systém/aplikační server.
4. Systém k provádění způsobu podle nároku 1 tvořený zdrojovým systémem (1) a cílovým systémem (5)^vyznačující se tím, že obsahuje zdrojový počítačový systém (1) a cílový počítačový systém (5), které jsou propojeny přes alespoň jedno vstupně-výstupní rozhraní, a dále obsahuje navzájem propojenou část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci, která je součástí cílového počítačového systému (5) a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření, kde část zadání požadavku na definovaný migrační objekt nebo datové struktury a jeho identifikaci sestává z bloku (7) zadání požadavku na vytvoření nového textového souboru online dat pro vstup do migračního objektu nebo datové struktury a jejich parametrů, z bloku (11) identifikace migračního objektu online, z bloku (12) načtení aktuální struktury migračního objektu nebo datové struktury a z bloku (13) přenosu aktuální struktury požadovaného migračního objektu nebo datové struktury, a kde aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření sestává z bloku (8) identifikace upravovaného migračního objektu nebo datové struktury, z bloku (9) vytvoření dotazu na strukturu definovaného migračního objektu nebo datové struktury, z bloku (10) inicializace cílového systému, z bloku (14) zápisu aktuální struktury migračního objektu nebo datové struktury, z bloku (15) aktualizace mapovacích údajů a z bloku (16) přípravy programu pro vlastní načtení a zpracování dat ze
4 · J 4 4 * »> 4· · · » · » · *
4 · » · * · « 4 · · · · · ·* _ 44·»· ·»
17 ·«»»»“ ·· ··« »·* zdrojového systému a tvorbu výstupního souboru nebo přímého předání naplněné datové struktury, přičemž blok (7) zadání požadavku na požadovaný migrační objekt nebo datové struktury a jejich parametrů je přes vstupně/výstupní rozhraní propojen se vstupem bloku (8) identifikace upravovaného migračního objektu nebo datové struktury, jehož výstup je přes blok (9) vytvoření dotazu na strukturu migračního objektu nebo datové struktury propojen se vstupem bloku (10) inicializace cílového systému, jehož výstup je propojen zpět přes vstupně/výstupní rozhraní se vstupem bloku (11) identifikace nového migračního objektu nebo datové struktury, jehož výstup je přes blok (12) načtení struktury nového migračního objektu nebo datové struktury propojen se vstupem bloku (13) přenosu aktuální struktury nového migračního objektu nebo datové struktury, jehož výstup je přes vstupně/výstupní rozhraní propojen se vstupem bloku (14) zápisu aktuální struktury migračního objektu nebo datové struktury, jehož výstup je přes blok (15) aktualizace mapovacích údajů propojen se vstupem bloku (16) přípravy programu pro vlastní načtení a zpracování dat a tvorbu výstupního souboru.
5. Systém podle nároku 4, vyznačující se tím, že aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je součástí zdrojového počítačového systému (1) a je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému (5) přes první vstupně/výstupní rozhraní (2).
6. Systém podle nároku ^vyznačující se tím, že mezi cílový počítačový systém (5) a zdrojový počítačový systém (1) je vložen aplikační server (3) a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je součástí tohoto aplikačního serveru (3), přičemž propojení mezi aplikačním serverem (3) a zdrojovým počítačovým systémem (1) je realizováno druhým vstupně/výstupním rozhraním (4), přes které se programy z aplikačního serveru dotazují do databáze ve zdrojovém systému a aplikační část pro zpracování požadavku na určený migrační objekt nebo datové struktury a jejich vytvoření je propojena s částí zadání požadavku na nový migrační objekt a jeho identifikaci realizovanou v cílovém počítačovém systému (5) přes třetí vstupně/výstupní rozhraní (6).
CZ2017-124A 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění CZ2017124A3 (cs)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CZ2017-124A CZ2017124A3 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění
EP18160580.9A EP3373165A1 (en) 2017-03-07 2018-03-07 Method of transferring the structures and data sets between the source and target systems and the system to implement it

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CZ2017-124A CZ2017124A3 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění

Publications (2)

Publication Number Publication Date
CZ307278B6 CZ307278B6 (cs) 2018-05-09
CZ2017124A3 true CZ2017124A3 (cs) 2018-05-09

Family

ID=62068382

Family Applications (1)

Application Number Title Priority Date Filing Date
CZ2017-124A CZ2017124A3 (cs) 2017-03-07 2017-03-07 Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění

Country Status (2)

Country Link
EP (1) EP3373165A1 (cs)
CZ (1) CZ2017124A3 (cs)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111966597B (zh) * 2020-08-18 2024-04-16 中国银行股份有限公司 测试数据生成方法及装置
CN116431566B (zh) * 2023-06-09 2023-09-22 北京随信云链科技有限公司 数据迁移方法、装置、电子设备及介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2418507A (en) * 2003-06-25 2006-03-29 Siemens Med Solutions Health Data migration and format transformation system
US8990527B1 (en) * 2007-06-29 2015-03-24 Emc Corporation Data migration with source device reuse
US9285991B2 (en) * 2011-04-29 2016-03-15 International Business Machines Corporation System, method and program product to schedule transfer of data
US9201606B1 (en) * 2013-05-20 2015-12-01 Ca, Inc. System and method for automating data migrations between heterogeneous architectures
US9792321B2 (en) * 2013-07-09 2017-10-17 Oracle International Corporation Online database migration
CN104657396B (zh) * 2013-11-25 2020-04-24 腾讯科技(深圳)有限公司 数据迁移方法及装置
US10248314B2 (en) * 2015-06-04 2019-04-02 Quest Software Inc. Migrate nickname cache for email systems and devices
US9778923B2 (en) * 2015-08-12 2017-10-03 Oracle International Corporation Peoplesoft cloud manager
CN105354314B (zh) * 2015-11-10 2020-03-03 中国建设银行股份有限公司 数据迁移方法及装置

Also Published As

Publication number Publication date
CZ307278B6 (cs) 2018-05-09
EP3373165A1 (en) 2018-09-12

Similar Documents

Publication Publication Date Title
CN113297320B (zh) 分布式数据库系统及数据处理方法
US10545981B2 (en) Virtual repository management
WO2018178641A1 (en) Data replication system
US20100223297A1 (en) Data Merging in Distributed Computing
CN110413690A (zh) 数据库的数据同步方法、服务器、电子设备、存储介质
US10467192B2 (en) Method and apparatus for updating data table in keyvalue database
US20070288835A1 (en) Apparatus, computer readable medium, data signal, and method for document management
CN107391635A (zh) 数据同步系统及方法
CN104572122A (zh) 一种软件应用数据的生成装置及方法
US8380663B2 (en) Data integrity in a database environment through background synchronization
US8650224B2 (en) Batching content management operations to facilitate efficient database interactions
CN103678556A (zh) 列式数据库处理的方法和处理设备
CA2379930A1 (en) Multi-model access to data
CN103795811A (zh) 一种基于元数据保存存储信息及统计管理数据的方法
CN112000649B (zh) 一种基于map reduce的增量数据同步的方法和装置
CN111858760A (zh) 一种异构数据库的数据处理方法及装置
CN105608126A (zh) 一种建立海量数据库二级索引的方法和装置
CN111737227A (zh) 数据修改方法及系统
CN110717073B (zh) 云流程平台中结合业务数据实现流程查询处理的系统及其方法
CZ2017124A3 (cs) Způsob přenášení struktur a datových souborů mezi zdrojovým a cílovým systémem a systém k jeho provádění
KR102339897B1 (ko) 보고서 자동 생성 기반의 업무 프로세스 관리 시스템 제공 방법
CN111382142B (zh) 数据库的操作方法、服务器和计算机存储介质
CN111159020B (zh) 一种应用于同步软件测试的方法和装置
CN107577809A (zh) 离线小文件处理方法及装置
JP2021140430A (ja) データベースマイグレーション方法、データベースマイグレーションシステム、及びデータベースマイグレーションプログラム