Massendaten anlegen: Unterschied zwischen den Versionen
K |
|||
| Zeile 30: | Zeile 30: | ||
Wir haben jetzt also eine Datenquelle vorbereitet und diese zusammen mit einer Erzeugungsvorlage im Reiter "Manage loading process" ausgewählt. | Wir haben jetzt also eine Datenquelle vorbereitet und diese zusammen mit einer Erzeugungsvorlage im Reiter "Manage loading process" ausgewählt. | ||
| + | |||
| + | ==== Mögliche Platzhalter ==== | ||
| + | Die Anwendung unterstützt mehrere Platzhalter, inklusive Varianten und Formatierungen. Die nachfolgende Liste stellt alle unterstützten Varianten vor und gibt ein Beispiel an. | ||
| + | |||
| + | {| class="wikitable" | ||
| + | ! Platzhalter | ||
| + | ! Beispiel | ||
| + | |- | ||
| + | !colspan=2| Zufällige Werte | ||
| + | |- | ||
| + | | [ID] | ||
| + | | "01234567-89ab-cdef-0123-4567890abcde" | ||
| + | |- | ||
| + | | [ID:B] | ||
| + | | "{01234567-89ab-cdef-0123-4567890abcde}" | ||
| + | |- | ||
| + | | [ID:Bu] | ||
| + | | "{01234567-89AB-CDEF-0123-4567890ABCDE}" | ||
| + | |- | ||
| + | | [ID:D] | ||
| + | | "01234567-89ab-cdef-0123-4567890abcde" | ||
| + | |- | ||
| + | | [ID:Du] | ||
| + | | "01234567-89AB-CDEF-0123-4567890ABCDE" | ||
| + | |- | ||
| + | | [ID:N] | ||
| + | | "0123456789abcdef01234567890abcde" | ||
| + | |- | ||
| + | | [ID:Nu] | ||
| + | | "0123456789ABCDEF01234567890ABCDE" | ||
| + | |- | ||
| + | | [ID:P] | ||
| + | | "(01234567-89ab-cdef-0123-4567890abcde)" | ||
| + | |- | ||
| + | | [ID:Pu] | ||
| + | | "(01234567-89AB-CDEF-0123-4567890ABCDE)" | ||
| + | |- | ||
| + | | [ID:X] | ||
| + | | "{0x01234567,0x89ab,0xcdef,{0x01,0x23,0x45,0x67,0x89,0x0a,0xbc,0xde}}" | ||
| + | |- | ||
| + | | [ID:Xu] | ||
| + | | "{0X01234567,0X89AB,0XCDEF,{0X01,0X23,0X45,0X67,0X89,0X0A,0XBC,0XDE}}" | ||
| + | |- | ||
| + | !colspan=2| Datum- und Zeitangaben | ||
| + | |- | ||
| + | | [Ticks] | ||
| + | | "636873868932608518" | ||
| + | |- | ||
| + | | [Today(+10),10:yyyyMMdd] | ||
| + | | " 20190315" Die zweite Zahl gibt an, ob das Datum links- oder rechtsbündig ausgerichtet werden soll | ||
| + | |- | ||
| + | | [Today(+10),-10:yyyyMMdd] | ||
| + | | "20190315 " | ||
| + | |- | ||
| + | | [Today(+10):yyyyMMdd] | ||
| + | | "20190315" | ||
| + | |- | ||
| + | | [Today(+10)] | ||
| + | | "15.03.2019 00:00:00" | ||
| + | |- | ||
| + | | [Today(-10),10:yyyyMMdd] | ||
| + | | " 20190223" | ||
| + | |- | ||
| + | | [Today(-10),-10:yyyyMMdd] | ||
| + | | "20190223 " | ||
| + | |- | ||
| + | | [Today(-10):yyyyMMdd] | ||
| + | | "20190223" | ||
| + | |- | ||
| + | | [Today(-10)] | ||
| + | | "23.02.2019 00:00:00" | ||
| + | |- | ||
| + | | [Now(+10),10:yyyyMMdd] | ||
| + | | " 20190315" | ||
| + | |- | ||
| + | | [Now(+10),-10:yyyyMMdd] | ||
| + | | "20190315 " | ||
| + | |- | ||
| + | | [Now(+10):yyyyMMdd] | ||
| + | | "20190315" | ||
| + | |- | ||
| + | | [Now(+10)] | ||
| + | | "15.03.2019 12:43:55" | ||
| + | |- | ||
| + | | [Now(-10),10:yyyyMMdd] | ||
| + | | " 20190223" | ||
| + | |- | ||
| + | | [Now(-10),-10:yyyyMMdd] | ||
| + | | "20190223 " | ||
| + | |- | ||
| + | | [Now(-10):yyyyMMdd] | ||
| + | | "20190223" | ||
| + | |- | ||
| + | | [Now(-10)] | ||
| + | | "23.02.2019 12:43:55" | ||
| + | |- | ||
| + | | [Now,10:yyyyMMdd] | ||
| + | | " 20190305" | ||
| + | |- | ||
| + | | [Now,-10:yyyyMMdd] | ||
| + | | "20190305 " | ||
| + | |- | ||
| + | | [Now:yyyyMMdd] | ||
| + | | "20190305" | ||
| + | |- | ||
| + | | [Now] | ||
| + | | "05.03.2019 12:43:55" | ||
| + | |- | ||
| + | | [Today,10:yyyyMMdd] | ||
| + | | " 20190305" | ||
| + | |- | ||
| + | | [Today,-10:yyyyMMdd] | ||
| + | | "20190305 " | ||
| + | |- | ||
| + | | [Today:yyyyMMdd] | ||
| + | | "20190305" | ||
| + | |- | ||
| + | | [Today] | ||
| + | | "05.03.2019 00:00:00" | ||
| + | |- | ||
| + | !colspan=2| Werte aus anderen Listen | ||
| + | |- | ||
| + | |colspan=2| [List:DateinameOhneEndung|Spaltenname|Aktion("random", "sequence" oder fixe Zeilenangabe beginnend bei Null)]" | ||
| + | |} | ||
=== Ladedatei(en) generieren === | === Ladedatei(en) generieren === | ||
Version vom 14. Mai 2019, 11:33 Uhr
Inhaltsverzeichnis
Das Problem
Mit succest kann man mühelos Testfälle schreiben, die zu Testdatenbereitstellung genutzt werden können. Das funktioniert wunderbar, wenn man mal einen braucht oder vielleicht auch mal ein Dutzend. Was, wenn Sie Mal eine Million brauchen? Oder über eine Milliarde Objekte in Ihrem Zielsystem? Das succest Testcase Repository (TCR) ist für solche Datenmengen nicht ausgelegt, es ist schließlich kein Tool zur Massendatenanlage. Die Loader der FMC hingegen, haben damit gar kein Problem. So haben wir im Rahmen eines Prototypen bei einer Bausparkasse 1,5 Milliarden Objekte im Zielsystem über den FMC Loader angelegt.
Die Lösung
Die Anwendung "FMC succest – mass data generator" ermöglicht es, fertige Ladedatei beliebiger Größe zu generieren, die auf dem Zielsystem zur Ausführung genutzt werden können. Hier zu bedient es sich an den üblichen Erzeugungsvorlagen und einer CSV-Datei als Datenquelle.
Die Nutzung
Datenquelle anlegen
Zuerst wählen Sie eine oder mehrere Erzeugungsvorlagen aus, für die Sie eine Datenquelle generieren möchten. Für jeden Platzhalter in den Records der Erzeugungsvorlagen wird eine Spalte in der Datenquelle hinzugefügt. Die in Abbildung 1 dargestellte Vorlage "DEMO Einfacher GP" verfügt über mehrere Platzhalter. Die erstellte CSV-Datei hat dann also folgenden Inhalt:
Vorname;Nachname;Geschlecht;EMail
Datenquelle vorbereiten
Um die Ladedatei(en) zu den/der gewählten Erzeugungsvorlage(n) zu generieren, bedarf es einer gefüllten Datenquelle. Der Einfachheit halber, wird ab sofort nur noch im Singular geschrieben. Bei Auswahl mehrerer Erzeugungsvorlagen, passiert das Ganze natürlich für alle.
Entweder Sie füllen die Datenquelle mit statischen Daten, zum Beispiel exportierte Daten aus einem anderen System oder Sie nutzen einen oder mehrere unserer Platzhalter oder Sie kombinieren einfach beides.
In diesem Beispiel soll die Ladedatei am Ende 500 Personendaten beinhalten. Vor- und Nachname werden zufällig aus einer anderen Liste geladen, das Geschlecht soll immer "weiblich" sein und die E-Mail-Adresse soll für jeden Nutzer eine andere sein, da sonst beim Laden der Daten die Duplikatsprüfung anspringen würde.
Vorname;Nachname;Geschlecht;EMail
[List:names|FirstName|Random];[List:names|LastName|Random];weiblich;mail@[ID:Nu].com
Im Unterordner "Datasource" brauchen wir also eine CSV mit Namen "names.csv", die mindestens die Spalten "FirstName" und "LastName" beinhaltet. Diese CSV-Dateien müssen die gleichen Anforderungen erfüllen, wie die Datenquellen im TCR.
Wir haben jetzt also eine Datenquelle vorbereitet und diese zusammen mit einer Erzeugungsvorlage im Reiter "Manage loading process" ausgewählt.
Mögliche Platzhalter
Die Anwendung unterstützt mehrere Platzhalter, inklusive Varianten und Formatierungen. Die nachfolgende Liste stellt alle unterstützten Varianten vor und gibt ein Beispiel an.
| Platzhalter | Beispiel |
|---|---|
| Zufällige Werte | |
| [ID] | "01234567-89ab-cdef-0123-4567890abcde" |
| [ID:B] | "{01234567-89ab-cdef-0123-4567890abcde}" |
| [ID:Bu] | "{01234567-89AB-CDEF-0123-4567890ABCDE}" |
| [ID:D] | "01234567-89ab-cdef-0123-4567890abcde" |
| [ID:Du] | "01234567-89AB-CDEF-0123-4567890ABCDE" |
| [ID:N] | "0123456789abcdef01234567890abcde" |
| [ID:Nu] | "0123456789ABCDEF01234567890ABCDE" |
| [ID:P] | "(01234567-89ab-cdef-0123-4567890abcde)" |
| [ID:Pu] | "(01234567-89AB-CDEF-0123-4567890ABCDE)" |
| [ID:X] | "{0x01234567,0x89ab,0xcdef,{0x01,0x23,0x45,0x67,0x89,0x0a,0xbc,0xde}}" |
| [ID:Xu] | "{0X01234567,0X89AB,0XCDEF,{0X01,0X23,0X45,0X67,0X89,0X0A,0XBC,0XDE}}" |
| Datum- und Zeitangaben | |
| [Ticks] | "636873868932608518" |
| [Today(+10),10:yyyyMMdd] | " 20190315" Die zweite Zahl gibt an, ob das Datum links- oder rechtsbündig ausgerichtet werden soll |
| [Today(+10),-10:yyyyMMdd] | "20190315 " |
| [Today(+10):yyyyMMdd] | "20190315" |
| [Today(+10)] | "15.03.2019 00:00:00" |
| [Today(-10),10:yyyyMMdd] | " 20190223" |
| [Today(-10),-10:yyyyMMdd] | "20190223 " |
| [Today(-10):yyyyMMdd] | "20190223" |
| [Today(-10)] | "23.02.2019 00:00:00" |
| [Now(+10),10:yyyyMMdd] | " 20190315" |
| [Now(+10),-10:yyyyMMdd] | "20190315 " |
| [Now(+10):yyyyMMdd] | "20190315" |
| [Now(+10)] | "15.03.2019 12:43:55" |
| [Now(-10),10:yyyyMMdd] | " 20190223" |
| [Now(-10),-10:yyyyMMdd] | "20190223 " |
| [Now(-10):yyyyMMdd] | "20190223" |
| [Now(-10)] | "23.02.2019 12:43:55" |
| [Now,10:yyyyMMdd] | " 20190305" |
| [Now,-10:yyyyMMdd] | "20190305 " |
| [Now:yyyyMMdd] | "20190305" |
| [Now] | "05.03.2019 12:43:55" |
| [Today,10:yyyyMMdd] | " 20190305" |
| [Today,-10:yyyyMMdd] | "20190305 " |
| [Today:yyyyMMdd] | "20190305" |
| [Today] | "05.03.2019 00:00:00" |
| Werte aus anderen Listen | |
| [List:DateinameOhneEndung|Spaltenname|Aktion("random", "sequence" oder fixe Zeilenangabe beginnend bei Null)]" | |
Ladedatei(en) generieren
Es gibt nur drei Varianten, wie mit der erstellten Ladedatei zu verfahren ist:
- Erstellen und im Zielsystem laden
- Erstellen und zum Zielsystem hochladen
- Nur erstellen
Soll die Daten im Zielsystem geladen werden, muss das richtige Ladeobjekt bei der Erzeugungsvorlage eingetragen werden (der Standard wird aus der Erzeugungsvorlage ausgelesen). Soll die Datei im Zielsystem (hochge-)laden werden, dann muss auch ein Zielsystem ausgewählt werden. Das Ergebnis des Ladeprozesses wird im Order "Result" dokumentiert.
Die Erstellung der Ladedatei geht die angegebene Datenquelle Zeile für Zeile durch und nimmt die Werte, um damit die Platzhalter in der Erzeugungsvorlage zu ersetzen. Das passiert so lange, bis die gewünschte Anzahl Zeilen aus der Datenquelle ausgelesen wurden. Bei Bedarf fängt der Prozess wieder am Anfang der Datei an.