Datenzentrierte Tests in der Praxis: Komponenten- und Integrationstests für Talend-Jobs mit JUnit (Teil 1)

Individuelle Wünsche der Kunden stellen einen Entwickler immer wieder aufs Neue vor Herausforderungen bei der Konzipierung neuer Systemlösungen. Häufig müssen Technologien entsprechend modelliert und angepasst werden, um den Anforderungen des Kunden nachzukommen. Unsere Consultants und Engineers konzipieren im Projektgeschäft passgenaue IT-Lösungen entsprechend der Wünsche im Kundenauftrag. Hierbei setzen wir auf die Produkte unserer Technologiepartner: Als wertvolles Tool für das Datenmanagement haben sich die Softwarelösungen von Talend bewährt, die wir strategisch kombinieren und nach den Anforderungen des Kunden anpassen. Im Anschluss an die Ausarbeitung des Lösungskonzepts steht die Entwicklung des Prototypen im Vordergrund. Um eine möglichst überzeugende Lösung anbieten zu [...]

24. – 26.06.2019: Messeauftritte in Kooperation mit Talend und TIBCO auf der TDWI Konferenz in München

Gemeinsam stark auf der TDWI München. Zum ersten Mal präsentiert sich PRODATO in Kooperation mit unserem Technologiepartner Talend und mit unserem Technologiepartner TIBCO auf der jährlichen Messe für BI-Lösungen und Data Analytics. Vom 24. Juni bis zum 26. Juni 2019 treffen sich Experten aus der Branche und profitieren vom fachlichen Informationsaustausch und vielen Weiterbildungsmöglichkeiten. Das Konferenzprogramm 2019 ist ab sofort auf der offiziellen Website der TDWI einsehbar. Spannende Fachvorträge erwarten Sie auf dem Branchentreffen Drei Tage lang präsentieren Experten neuste Erkenntnisse, Strategien und Technologien aus verschiedenen Industriezweigen. Interessierte Besucher erhalten Einblicke in innovative BI-Lösungen in den Bereichen Handel, Automobile [...]

Von |28. Februar 2019|Kategorien: Talend|Tags: , , , |

Anbindung von OData Quellen in Talend über Java

Die Problemstellung: Einlesen von Daten aus einer OData-Quelle in Talend Bei der Zusammenführung unterschiedlicher Datenquellen zur weiteren Verarbeitung mittels Talend stößt man auch auf Daten, die man mithilfe eines Webservice abrufen kann. Hierzu gehören z.B. unter anderem OData-Schnittstellen. Bei OData handelt es sich um einen Standard für REST-Webschnittstellen. Zur Kommunikation mit REST-Webservices existiert in Talend z.B. die tREST Komponente. Um hier aber die Authentifizierung korrekt durchzuführen (stellen Sie sich z.B. vor, ihr Internetverkehr muss über einen Proxy laufen, der auf die Authentifizierung via NTLM Wert legt), die gewünschten Daten aus der XML-Antwort auszulesen oder Daten nur blockweise vom Webservice [...]

22.10.2018: Datafication – Methoden und Tools für die Datenwertschöpfung in Unternehmen

Veranstaltung im Rahmen des NÜRNBERG DIGITAL FESTIVALS Prozesse in und zwischen Organisationen finden immer schneller und verteilter statt. Das erhöht die Menge an Daten, die verarbeitet und vorgehalten werden muss. Als Datafication wird der Trend bezeichnet, dass in vielen Bereichen unserer Gesellschaft die Digitalisierung von Daten eine immer größere Rolle spielt und zunehmend neue Wertschöpfung mithilfe von Daten generiert werden kann. Erfahren Sie mehr über Methoden zur Datenintegration und erleben Sie Tools, wie Talend Data Integration, Couchbase u.a. DATUM: Montag, den 22.10.2018 WANN: 13:00 Uhr bis ca. 17:00 Uhr ORT: PRODATO Integration Technology, Herderstraße 5-9, 90427 Nürnberg (Hinweise zur Anfahrt) Anmeldung: nuernberg.digital/festival [...]

Enterprise Integration mit Talend ESB (Webinar)

In diesem Webinar zeigen wir Ihnen, wie mit dem Talend Enterprise Service Bus (ESB) die Integration von Daten, Anwendungen, Nachrichten, Ereignissen und Diensten im gesamten Unternehmen ermöglicht wird. Erfahren Sie in unserem Webinar mehr zu folgenden Aspekten: Enterprise Integration Patterns (EIP) Serviceorientierte Architektur (SOA) Messaging (Apache Camel) Message Broker (Apache ActiveMQ) Wir zeigen, wie mit dem Talend Studio diese Aspekte als Jobs, Routen und Services umgesetzt und danach im Talend Administration Center (TAC) verteilt und gestartet werden können. Jetzt anmelden! Unser Experte Mathias Kalb zeigt Ihnen in diesem Webinar, wie Sie Talend ESB auf- und einsetzen. THEMA: Webinar - [...]

06.12.2017: Roadshow Jaspersoft/Talend, Nürnberg

Integrierte und Unternehmensüberspannende BI Lösungen Wir veranstalten gemeinsam mit unseren Technologiepartnern TIBCO.Jaspersoft und Talend eine Roadshow in Süddeutschland: Am Mittwoch, den 6. Dezember 2017, findet die Veranstaltung in Nürnberg statt. Freuen Sie sich auf Vorträge, Demos und Diskussionen! Themen sind u.a.: Lösungsansätze für Anforderungen der abteilungsübergreifenden Datenintegration Unternehmensweite Bereitstellung von Informationen Automatisierung von Datenintegration - auch in Echtzeit Massenproduktion von Berichten Case Studies und Lessons Learned Neue Herausforderungen im Umfeld von Big Data, IoT, Machine Learning Umsetzung von gesetzlichen Anforderung in der IT-Strategie, z.B. GDPR Erfolgreiche BI-Architekturen: Data Vault, Data Lake etc. Technische Möglichkeiten: Hadoop, In-Memory, Cloud Neuerungen bei TIBCO.Jaspersoft [...]

Von |17. Oktober 2017|Kategorien: Aktuelles, Jaspersoft, Talend|

09.11.2017: Roadshow Jaspersoft/Talend, Frankfurt

Integrierte und Unternehmensüberspannende BI Lösungen Die PRODATO Integration Technology veranstaltet gemeinsam mit Ihren Technologiepartnern TIBCO.Jaspersoft und Talend eine Roadshow in Süddeutschland: Am Donnerstag, den 9. November 2017, findet die erste Veranstaltung in Frankfurt am Main statt, am Mittwoch, den 6. Dezember 2017, ist der zweite Termin in Nürnberg angesetzt. Freuen Sie sich auf Vorträge, Demos und Diskussionen! Treffen Sie uns am Donnerstag, den 9. November in Frankfurt! WANN: 9.30 Uhr bis 15.30 Uhr. WO: Steigenberger Airport Hotel Frankfurt, Unterschweinstiege 16, 60549 Frankfurt am Main Die Teilnehmerzahl ist begrenzt.

Von |9. Oktober 2017|Kategorien: Aktuelles, Jaspersoft, Talend|

PostgreSQL – “the world’s most advanced open source database”: Vortrag auf dem Swiss PGDay

Dr. Karsten Lenz von Condair und Dr. Michael Daum von PRODATO werden am 30.6.2017 auf den Schweizer PGDays einen Vortrag über ihre Erfahrungen mit den neuen parallelen Anfrageverarbeitung von PostgreSQL im Zusammenspiel mit einer BI Lösung halten. Als BI Lösung wurde JasperReports Server Professional 6.3 von TIBCO.Jaspersoft verwendet. Wir sind auch auf die anderen Vorträge sehr gespannt. Sowohl der Technical Track als auch der Business Track halten hier eine vielversprechende Agenda vor. Interessant sind viele Vorträge, da hier best practices im Einsatz von PostgreSQL vorgestellt werden. Das beinhaltet bewährtes Zusammenspiel verschiedener Komponenten (Architektur), geeignete Konfigurationen für die Verarbeitung von Massendaten etc. Weiter [...]

Von |25. Juni 2017|Kategorien: Talend|

Data Vault: Standardisierung und Effizienzsteigerung in der Integrationsschicht

Datenintegration ist ein komplexes und aufwändiges Thema in Data-Warehouse-Projekten. Für viele Kunden – vor allem in den Fachbereichen - sind gerade die frühen Phasen der Integration, also der Aufbau einer Staging- und Integrationsschicht, weit von ihren Anforderungen und Problemstellungen entfernt. Die Geschäftsregeln beim Aufbau von Data Marts sind hingegen nachvollziehbarer. Ebenso die Aufwände und Entwicklungszeiten hierfür. Mit dem Data-Vault-Ansatz hat sich eine Methode etabliert, die gerade in den frühen Phasen ein hohes Maß an Standardisierung und Automatisierung ermöglicht. Die Entwicklung kann agil erfolgen und Erweiterungen der Integrationsschicht beeinflussen bestehende Anwendungen kaum. Erreicht wird das durch eine Reihe von Konzepten: [...]

Von |21. März 2017|Kategorien: Aktuelles, Oracle, Talend|

XML Verarbeitung mit Talend

Die Verarbeitung von XML-Dateien mit Talend gestaltet sich sehr einfach. In diesem Beitrag nehme ich Sie für ein 5-minütiges Tutorial an die Hand und zeige Ihnen, dass ordentlich gepflegte Metadaten der Schlüssel zum Erfolg sind. Mit Talend lässt sich dies schnell per drag’n’drop umsetzen; Kenntnisse in XPath sind nicht von Nöten. In meinem Beispiel habe ich die Felder userName, firstName und lastName aus einer XML-Datei extrahiert und in eine Excel-Datei überführt. […]

Von |2. August 2016|Kategorien: Talend|Tags: , , , , |