OTI-4-Kernsysteme der Datenmigration

Die 4 Kernsysteme der Daten-Migration/-Konversion
AusgangsSysteme
(Quellensysteme)
Zentrale Systeme
konventionelle Daten
- VSAM
Relationale Daten
- DB2/Oracle
Hierarchische Daten
- IMS-DB
Mittlere Systeme
- AS400
Dezentrale Systeme
- PC/Server
- Unix
- Oracle-Daten
Daten-Vorkonversion:
Datenanalyse,
Datenveredelung und
Datenbereitstellung
Daten-Konversion:
Mapping und Migration
Zielsysteme
(Verwendung der MigrationsDB als spätere Info-DB des
ehemaligen Quellensystems)
Unload der Daten
Datenempfang
Datenempfang
PrüfkennzahlenErmittlung
Trennung Daten
- operativ
- Rechnungswesen
Daten laden
Daten laden in der
Migrations-Datenbank
Prüfzahlenermittlung
Referenzielle Integrität
Datenanalyse
Datenveredelung und
Fertigstellen der Datenbeschreibungen
Prüfzahlenvergleich
Analysieren u.Festlegen
Daten-Migrations-Regeln/
-Mappingregeln
Datenbereitstellung
in WSE-ISO 8895-1
Datenkonversion/
-Mapping
Datenübermittliung
Abnahme und Freigabe
- Test-/Schulungs-Systeme
- Produktionssysteme
Ausserbetriebnahme
(ehem.Quellensystem)
Bereitstellen Load-Daten
COMPORSYS Engineering AG
Postfach
CH-8954 Geroldswil
Jürg Mathys - Telefon: +41 79 437 85 23 - Fax: +41 79 437 85 23 - Mobile: +41 79 437 85 23
E-Mail: [email protected]
-
www.comporsys.ch/CEAG
Die 8 Kernfunktionen der Daten-Migration/-Konversion
1.
1.1
1.2
1.3
1.4
Entladen der Daten ab den Quellensystemen
Host-3090-DBs:
VSAM, IMS-DB, DB2, ORACLE etc.
Host-AS400-DBS
CLIENT- und PC-DBs
UNIX, VAX, PC, etc
Daten sicherstellen/bereithalten für Laden in Testsystem (Quellensysteme)
2.
Erstellen Prüfkennzahlen Quellensystem gemäss Revisionsanforderung oder bestehendem
Controlling
3.
3.1
3.2
3.3
Daten-Vorkonversion
Daten-Analyse und Synchronisation der Daten-Dokumentation
Daten-Veredelung gemäss festgelegten Regeln aus Datenanalyse
Daten-Aufbereitung Standard WSE-ISO-8895-1 für Transfer
(Satzstrukturen 1:1 aus Entladen der Daten, jedoch in fester Satzlänge aufbereitet)
Daten-Qualität überprüfen (ISO zu Unload mit Ausweis der Veredelungen)
Schnittstellen-Datensatz :
3.4
3.5
Standard-Vorlauf
-> 150 Stellen für
Identifikationen
Datensatz 1:1
in WSE-ISO-8895-1
nach der Veredelung der Daten
4.
4.1
4.2
Transfer der Daten für 1:1 Bereitstellung in Migrations-Datenbank
Senden der Daten zum Migrations-Datenbank-Team (ggf. an FTP-Server)
Empfangen der Daten durch Migrations-Datenbank-Team (ggf. vom FTP-Server)
5.
Laden der Daten in Migrations-Datenbank (kann nach der Daten-Migration auch für Abfragen
und Kontrollen des ehemaligen Quellensystem verwendet werden)
1:1 Übernahme der Transferdaten und Laden in Migrations-Datenbank
Kontrolle der Vollständigkeit und Freigabe
5.1
5.2
6.
Daten-Konversion/-Migration/-Mapping aus Migrations-Datenbank nach Zielsystem-Datenbank
6.1
Übernahme Daten aus Migrations-Datenbank
6.2
Analyse und Fertigstellung der Daten-Korversions-Regeln/-Mappingregeln
6.3
Realisieren/Ausführen Daten-Konversion/-Mapping ab der Migrations-Datenbank
6.4
Bereitstellen/Laden/Inserten in Ziel-Datenbank
6.4.1
Applikations-DB: Personen- und Fach-Daten incl. Historie
6.4.2
Rechnungswesen Datenbank: (SAP) Personen- und RW-Daten
6.4.3
Data-Ware-House Datenbank: Personen- Fach- und RW-Daten
6.5
Erstellen Prüfkennzahlen gemäss Revisionsanforderungen
7.
7.1
7.2
7.3
7.4
7.5
7.6
7.7
7.8
7.9
Abgleich Prüfkennzahlen
Analyse und Freigabe Prüfkennzahlen aus Quellensystem
Analyse und Freigabe Prüfkennzahlen aus Zielsystem
Abgleich Prüfkennzahlen Quellsystem mit Prüfkennzahlen Zielsystem
Freigabe Prüfkennzahlen
Freigabe Zielsystem-Datenbank für Abfrage-Tests
Freigabe Abfrage-Test und Start Mutations-Tests
Freigabe Mutationstests
Erstellen Prüfkennzahlen Zielsystem nach Mutationstests
Freigabe Zielsystem
8.
Ausserbetriebnahme des ehemaligen Quellensystems
Direkte Load-Daten-Migration: Ohne Migrations-Datenbank/-Tool
Ausgangslage: mehrere heterogene Quellensysteme mit eigenständiger Datenhaltung
(OS/390 VSAM/IMS/DB2/Oracle/Windows-DB, XLS, AS400-DB, Unix-DB etc.)
Daten des
Quellensystems 1
V
O
R
K
O
N
V
E
R
S
I
O
N
M
A
P
P
I
N
G
/
M
I
G
R
A
T
I
O
N
K
O
N
V
E
R
S
I
O
N
Daten des
Quellensystems 2
Daten des
Quellensystems n
Daten-Vorkonversion mit:
Daten-Dokumentation, -Bereitstellung, -Verifizierung, -Analyse, -Veredelung und -Umformatierung in feste
Satzlänge mit Zeichensatz WSE ISO 8895-1 pro Satzart(zB.VSAM), DB-Tabelle, IMS-Segment etc. sowie
Erstellung der Prüfkennzahlen im Quellensystem und Daten-Qualitätssicherung durch Abgleich und
Abweichungsprotokollierung der WSE ISO 8895-1-Daten mit bereitgestellten Quellendaten
(Einsatz von Microfokus Netexpress für Entwicklung auf PC und Ausführung auf Host möglich)
DB-SYSCAT(Zielsystem);
Domänen;
Org.-Einheiten;
etc.
Mapping-Regeln;
Betriebs-Konzept;
Security-Konzept;
Test-Konzept;
Abnahme-Konzept;
Projektplanung sep.
Daten-Konversion ohne Migrations-DB mit:
Dokumentation, Mappingregeln, lesen WSE ISO 8895-1-Quellendaten oder Integration
Konversionsmodule in Vorkonversion, ausführen Mappingregeln, bereitstellen Load-Dateien und JCL
für neues Datenhaltungssystem, Laden/Inserten Daten im Zielsystem pro Tabelle, Referenzintegrität
überprüfen, Abfragetests, Prüfkennzahlen erstellen und abgleichen mit Prüfkennzahlen aus
Quellensystem, Mutationstests und erneutes Abgleichen mit Prüfkennzahlen nach Mutation im
Quellensystem.
(Einsatz von Microfokus Netexpress für Entwicklung auf PC und Ausführung auf Host möglich)
ZIELSYSTEM
COMPORSYS Engineering AG
Postfach
CH-8954 Geroldswil
Jürg Mathys - Telefon: +41 79 437 85 23 - Fax: +41 79 437 85 23 - Mobile: +41 79 43
E-Mail: [email protected] - www.comporsys.ch/CEAG
Indirekte Load-Daten-Migration: Mit Migrations-Datenbank (ohne Migr.Tool)
Ausgangslage: mehrere heterogene Quellensysteme mit eigenständiger Datenhaltung
(OS/390 VSAM/IMS/DB2/Oracle/Windows-DB, XLS, AS400-DB, Unix-DB etc.)
Daten des
Quellensystems 1
V
O
R
K
O
N
V
E
R
S
I
O
N
M
A
P
P
I
N
G
/
M
I
G
R
A
T
I
O
N
K
O
N
V
E
R
S
I
O
N
Daten des
Quellensystems 2
Daten des
Quellensystems n
Daten-Vorkonversion mit:
Daten-Dokumentation, -Bereitstellung, -Verifizierung, -Analyse, -Veredelung und -Umformatierung in feste
Satzlänge mit Zeichensatz WSE ISO 8895-1 pro Satzart(zB.VSAM), DB-Tabelle, IMS-Segment etc. sowie
Erstellung der Prüfkennzahlen im Quellensystem und Daten-Qualitätssicherung durch Abgleich und
Abweichungsprotokollierung der WSE ISO 8895-1-Daten mit bereitgestellten Quellendaten
(Einsatz von Microfokus Netexpress für Entwicklung auf PC und Ausführung auf Host möglich)
DB-SYSCAT(Zielsystem);
Domänen;
Org.-Einheiten;
etc.
Laden Migrations-DB
Lesen Migrations-DB und
ausführen Mapping,
erstellen Load-Tabellen
Mapping-Regeln;
Betriebs-Konzept;
Security-Konzept;
Test-Konzept;
Abnahme-Konzept;
Projektplanung sep.
Daten-Konversion unter Verwendung einer Migrations-DB mit:
Dokumentation, Mappingregeln, lesen Migrations-DB pro Datensatz, ausführen Mappingregeln,
bereitstellen Load-Dateien und JCL für neues Datenhaltungssystem, Laden/Inserten Daten im
Zielsystem pro Tabelle, Referenzintegrität überprüfen, Abfragetests, Prüfkennzahlen erstellen und
abgleichen mit Prüfkennzahlen aus Quellensystem, Mutationstests und erneutes Abgleichen mit
Prüfkennzahlen nach Mutation im Quellensystem.
(Einsatz von Microfokus Netexpress für Entwicklung auf PC und Ausführung auf Host möglich)
ZIELSYSTEM
COMPORSYS Engineering AG
Postfach
CH-8954 Geroldswil
Jürg Mathys - Telefon: +41 79 437 85 23 - Fax: +41 79 437 85 23 - Mobile: +41 79 43
E-Mail: [email protected] - www.comporsys.ch/CEAG
Indirekte Batch-Tasking-Daten-Migration:
Mit Migrations-Datenbank und Batch-Tasking
Ausgangslage: mehrere heterogene Quellensysteme mit eigenständiger Datenhaltung
(OS/390 VSAM/IMS/DB2/Oracle/Windows-DB, XLS, AS400-DB, Unix-DB etc.)
Daten des
Quellensystems 1
V
O
R
K
O
N
V
E
R
S
I
O
N
M
A
P
P
I
N
G
/
M
I
G
R
A
T
I
O
N
K
O
N
V
E
R
S
I
O
N
Daten des
Quellensystems 2
Daten des
Quellensystems n
Daten-Vorkonversion mit:
Daten-Dokumentation, -Bereitstellung, -Verifizierung, -Analyse, -Veredelung und -Umformatierung in feste
Satzlänge mit Zeichensatz WSE ISO 8895-1 pro Satzart(zB.VSAM), DB-Tabelle, IMS-Segment etc. sowie
Erstellung der Prüfkennzahlen im Quellensystem und Daten-Qualitätssicherung durch Abgleich und
Abweichungsprotokollierung der WSE ISO 8895-1-Daten mit bereitgestellten Quellendaten
(Einsatz von Microfokus Netexpress für Entwicklung auf PC und Ausführung auf Host möglich)
DB-SYSCAT(Zielsystem);
Domänen;
Org.-Einheiten;
etc.
Laden Migrations-DB
Lesen Migrations-DB und
ausführen Mapping,
direkt INSERT ins
Zielsystem mittels BatchTasking
Mapping-Regeln;
Betriebs-Konzept;
Security-Konzept;
Test-Konzept;
Abnahme-Konzept;
Projektplanung sep.
Daten-Konversion unter Verwendung einer Migrations-DB mit:
Dokumentation, Mappingregeln, lesen Migrations-DB pro Datensatz, ausführen Mappingregeln,
Bereitstellung für direkten Insert im Zielsystem mittels Batch-Tasking und eingeschalteter
Referenzintegrietät. Prüfkennzahlen erstellen und abgleichen mit Prüfkennzahlen aus Quellensystem,
Mutationstests und erneutes Abgleichen mit Prüfkennzahlen nach Mutation im Quellensystem.
ZIELSYSTEM
COMPORSYS Engineering AG
Postfach
CH-8954 Geroldswil
Jürg Mathys - Telefon: +41 79 437 85 23 - Fax: +41 79 437 85 23 - Mobile: +41 79 43
E-Mail: [email protected]
-
www.comporsys.ch/CEAG
Indirekte Load-Daten-Migration: Mit Integration eines Migrations-Tools
Ausgangslage: mehrere heterogene Quellensysteme mit eigenständiger Datenhaltung
(OS/390 VSAM/IMS/DB2/Oracle/Windows-DB, XLS, AS400-DB, Unix-DB etc.)
Daten des
Quellensystems 1
V
O
R
K
O
N
V
E
R
S
I
O
N
M
A
P
P
I
N
G
/
M
I
G
R
A
T
I
O
N
K
O
N
V
E
R
S
I
O
N
Daten des
Quellensystems 2
Daten des
Quellensystems n
Daten-Vorkonversion mit:
Daten-Dokumentation, -Bereitstellung, -Verifizierung, -Analyse, -Veredelung und -Umformatierung
in feste Satzlänge mit Zeichensatz WSE ISO 8895-1 pro Satzart(zB.VSAM), DB-Tabelle, IMSSegment etc. sowie Erstellung der Prüfkennzahlen im Quellensystem und DatenQualitätssicherung durch Abgleich und Abweichungsprotokollierung der WSE ISO 8895-1-Daten
mit bereitgestellten Quellendaten
Datenbeschreibungen;
Domänen;
Org.-Einheiten;
etc.
Deckungsgrad des Tools
Laden Migrations-DB
und Konversion mit
Migrationstool
Projektplanung incl.;
Mapping-Regeln;
Daten-Migration;
Erstellen LoadTabellen und JCL
(zB. NAG-Migrate)
Deckungsgrad des Tools
Daten-Konversion mit Migrations-Tool und –Datenbank mit:
Dokumentation Mappingregeln, ausführen Mappingregeln, bereitstellen Load-Dateien und JCL für
neues Datenhaltungssystem, Laden/Inserten Daten im Zielsystem pro Tabelle, Referenzintegrität
überprüfen, Abfragetests, Prüfkennzahlen erstellen und abgleichen mit Prüfkennzahlen aus
Quellensystem, Mutationstests und erneutes Abgleichen mit Prüfkennzahlen nach Mutation im
Quellensystem.
ZIELSYSTEM
COMPORSYS Engineering AG
Postfach
CH-8954 Geroldswil
Jürg Mathys - Telefon: +41 79 437 85 23 - Fax: +41 79 437 85 23 - Mobile: +41 79 43
E-Mail: [email protected] - www.comporsys.ch/CEAG
Migration von Daten Konversion von Daten Datenmigration Daten-Migration Migration von Daten
Daten Mapping von Daten Daten-Mapping, Datenmapping Migrtationsformen Migrations-Formen
Formen der Migration Migrationsarten Migrations-Arten Arten der Migration Batch-Tasking Batchtasking
Tasking mittels Batch Load-Daten-Migration indirekte Datenmigration direkte Datenmigration
Migrations-Datenbank Migrationsdatenbank Micro Focus Netexpress MicroFokus MikroFokus
MicroFocus MikroFocus Micro Fokus Mikro Focus Mikro Kokus Quellensystem Zielsystem
Migrations-Tools Tools für Migration Tool für Daten-Migration NAG Migrate NAG-Migrate
Daten-Vorkonversion Datenvorkonversion Daten-Veredelung Datenveredelung Veredelung von Daten
Veredelungs-Regeln Veredelungsregeln
Daten-Analyse Datenanalyse Quellensystem Zielsystem Ausserbetriebnahme
Prüfkennzahlen Datenprüfung Prüfzahlen Ermittlung von Prüfzahlen
Jürg Mathys
www.comporsys.ch/ceag ceag [email protected] Comporsys Engineering AG Geroldswil