Welcome on Henk's blog site about experiences in the field of datawarehousing. Feel free to comment on my articles.

Proces Metadata vs Powercenter metadata: een praktische invulling

December 19th, 2011 No comments

Soms kan het handig zijn om in je metadatamodel informatie van je applicatielaag op te nemen. We denken dan bijvoorbeeld aan: met welke techniek en welke versie heb ik deze data in m’n datawarehouse geladen? Of met welke versie heb ik een data conversie uitgevoerd. Natuurlijk is elke powercenter ontwikkelaar bekend met het welbekende $PMWorkflowRunId die als variabele in een mapping gebruikt kan worden.

Door een model te ontwikkelen waarin proces metadata wordt opgeslagen is het met het $PMWorkflowRunId mogelijk om een koppeling te vinden naar de applicatie laag. Dit kan door een $PMWorkflowRunId en op basis van $PMWorkflowName te koppelen aan een workflow id.

Read more…

Operational Data Storage (The ODS!)

March 8th, 2010 No comments

Introduction

in several projects i have seen the usage of an ODS. Although common in the field of datawarehousing it appears to have different aspects within different projects. Also the place in the architectures sometimes looks strange (for example i’ve seen the ODS inbetween a staging and datawarehouse layer instead of having it besides the staging or datawarehouse area)

Read more…

Goudmijn

December 30th, 2009 No comments

Een nieuwe mijnschacht
Data is als goud te vinden in de grond. Met goud kan men bv prachtige juwelen maken om te verkopen. Maar om het te ontginnen is een schacht nodig om bij het goud te komen. In de praktijk zijn er al vele projecten opgezet om dit goud te ontginnen. Maar met de bouw van de mijnschacht rammelt het vaak aan alle kanten. De schacht maakt bijvoorbeeld allerlei rare bochten omdat vooraf niet bekend was waar de goudader zich bevond. Of de structuur van de stutten wijken af naarmate men verder in de mijn komt. Afwijkingen die vaak veroorzaakt zijn omdat er meerdere mensen aan de stutten werken en ieder hun eigen ervaringen hebben hoe dit het beste te maken. Met als gevolg dat het gehele bouwwerk onoverzichtelijk is en structuur ver te zoeken.
Daarnaast zijn er nog omgevingsfactoren (bv aarde trillingen) die er voor zorgen dat een schacht gedeeltelijk instort. Met als gevolg dat men tijdelijk niet meer bij het goud kan. Een reddingsploeg moet er aan te pas komen om de schade (snel) te herstellen. Soms gaan mijnongelukken zelfs ten kostte van mensenlevens. In het uiterste geval wordt er zelfs besloten om een nieuwe schacht te gaan bouwen. Nu met de perceptie dat het wel gaat lukken omdat er geleerd is van de vorige. Read more…

English vs. Dutch

December 4th, 2009 No comments

As from now on i will quit writing my blogs in English. I’ve made this decision due to the added value for myself is low in relation to the effort it takes. If there are however questions or discussions about an article someone can always ask me to translate……