Palo: Umgang mit in der Dimension unbekannten Elementen

[datacrawler]

Hallo,

folgende Situation: Ich baue mir mit Talend eine Produkt Dimension aus einer Datei mit einer Parent Child Relation auf. Die Datei aus der ich die Werte für das Laden in den Würfel extrahiere enthält nur die Elemente auf der untersten Ebene der Produkt Dimension (Produkt Nr.)

Die Produktdimension, enthält nahezu alle möglichen Produktelemente. Ab und zu kommt es aber beim Einlesen der Quelldaten dazu, dass ein unbekanntes Produktelement gelesen wird. Der Job bricht dann an der Stelle ab.

Daher Frage ich mich ob es eine Möglichkeit gibt automatisch die fehlenden Elemente abzufangen und entweder den Job ohne diese Einträge weiterzuführen oder aber automatisch erst die Produkt Dimension upzudaten (Mit einem Default Konsolidierungselement) und dann den Load in den Würfel zu starten?

[datacrawler]

Hallo,

konnte das Problem mit der Komponente tPaloCheckElements lösen. Die Komponente überprüft vor dem Laden der Daten in den Würfel, ob das entsprechende Element in der Dimension vorhanden ist.

Wichtig ist es zu wissen, das man den Typ der Spalte, die die Kennzahlen enthält auf "Measure" statt dem default "Element" setzt. Da ich diese Möglichkeit nicht kannte brachen meine Versuche zunächst an der Stelle ab.

Das Ganze ist auch in der Beschreibung der Komponenten ab Version 4.2 gut erklärt.

Grüße