Blog Archives

Hadoop file format comparison

Use case and environment IoT datalake use case. 6000 devices (with unique ID), measuring 3 values 60 time per second (60 Herz). One day of data (24 hours) – 31.104.000.000 records in database. Row in a table – [ID:int, timestamp:long,

Veröffentlicht in Allgemein, BigData, DWH

OWB to ODI migration

Oracle has finaliy presented an oficial OWB to ODI migration utility and article describing typical migration path! Alternative tools and ways for OWB to ODI migration: OWB2ODI Converter Export Metadata from OWB by OMBScript and generation of ODI XML files.

Veröffentlicht in DWH, Oracle

ETL tool comparison

Loading Type OWB: ELT ODI: ELT Informatica: ETL, ELT with „Pushdown Optimization Option“ Pentaho: ETL DataStage: ETL Microsoft SSIS: ELT System Plfatform OWB: Windows, Unix ODI: Windows, Unix Informatica: Windows, Unix Pentaho: Windows, Unix, Other Platforms (JDK) DataStage: Windows, Unix,

Veröffentlicht in DWH

Oracle ODI Interface-Sprache

Oracle ODI erkennt (wie jede andere gute Java Anwendung) die Sprache von der Betriebsystem-Umgebung. Aus unterschiedlichen Gründen (multinationales Entwickler-Team, schlecte Übersetzung, englische Dokumentation oder Tutorials) möchte man jedoch eine andere IDE Sprache festlegen. Um die Sprache in der aktuellen ODI

Veröffentlicht in DWH, Oracle

Oracle Warehouse Builder 11 Erfahrungen

1) Beim Erstellen eines neuen Repositorium werden wie früher entsprechende Schemata angelegt, die enthalten aber keine Daten mehr, alle Tabellen und OWB Logik ist im „OWBSYS“ Schema gelandet. 2) Oracle hat ein Workspaces Konzept eingeführt. Um den Zugriff auf Daten

Veröffentlicht in Allgemein, DWH, Oracle

Scriptella

Seit einiger Zeit benutze ich zunehmend Scriptella um meine DB Aufgaben zu automatisieren. Das Motto von dem Programm ist „Einfachheit“, das erkennt man an folgendem Beispiel: <!DOCTYPE etl SYSTEM "http://scriptella.javaforge.com/dtd/etl.dtd"> <etl> <connection id="in" driver="oracle" url="jdbc:oracle:thin:@prod:1521:ORCL" classpath="ojdbc14.jar" user="ERP" password="password"/> <connection id="out"

Veröffentlicht in DWH

Data-Warehouse nach Inmon & Kimball

Zwei Sichten auf Data-Warehousing, nach Bill Inmon und Ralph Kimball. Bill Inmon (entwickelte das Konzept der Informationsfabrik (Corporate Information Factory, CIF): Top-Down Design (Anfangen mit Data-Warehouse, in 3 Normalform, erst danach builden die Data-Marts. Informationsfabrik besteht aus zwei getrennten Komponenten

Veröffentlicht in DWH

Datenbank fürData-Warehouse

Datenbanken Untersuchung von 4 Datenbankverwaltungssystemen auf Tauglichkeit zum Datawarehouse. Zwei Vertreter der Open Source Welt und zwei kommerzielle Datenbanken, jeweils die aktuellsten offizielle Versionen: Oracle 11G MS SQL Server 2008 PostgreSQL 8.3.3 MySQL 5.1 Vergleich Merkmal Oracle 11G Microsof SQL

Veröffentlicht in DWH