Peak Spark ODS Adapter: Gewinnen Sie mehr Informationen aus ASAM ODS Messungen

Ein weit verbreiteter Standard für die persistente Speicherung von Testdaten ist ASAM ODS. Automobilhersteller und -zulieferer nutzen ihn vor allem, um übergreifende Testdatenmanagement-Lösungen für unterschiedliche Messsysteme und Datenformate aufzubauen. Auf diese Weise machen sie Testdaten unabhängig von den Tools einzelner Anbieter langfristig nutzbar. Um mehr Informationen aus den bestehenden Messungen zu gewinnen, hat Peak Solution den Peak Spark ODS Adapter entwickelt.

Der Peak Spark ODS Adapter ermöglicht Ihnen den Zugriff auf Instanz- und Massendaten von ASAM ODS mit Apache Spark SQL und DataFrames. Vergleichbar mit der Funktionalität des interaktiven Peak Test Data Workplace Webclients, können sie jetzt über eine Programmierschnittstelle beliebig komplexe Abfragen ausführen und die zurückgegebenen DataFrames für weitere Untersuchungen und statistische Analysen der Daten verwenden.

Apache Spark stellt mehrere High-Level-APIs wie Python und andere zur Verfügung, die z.B. in Apache Zeppelin oder Jupyter Notebooks für die interaktive Analyse der Messdaten perfekt genutzt werden können. Die große Stärke von Notebooks sind explorative Auswertungen und Data Mining. So können Sie sich zunächst einen Überblick über die Daten verschaffen, um dann schrittweise Ihre Analyseziele zu erreichen. Außerdem können Sie Ihre Ideen ganz einfach weitergeben, indem Sie Ihr Notebook per Email verschicken oder es in der Notebook-Entwicklungsumgebung Ihres Unternehmens bereitstellen, wo es dann von autorisierten Personen eingesehen und weiterverwendet werden kann.

Ein wichtiger Vorteil des Peak Spark ODS Adapters ist seine Skalierbarkeit. Die Implementierung des Peak Spark ODS Adapters ermöglicht es, komplexe Datenabfragen und Datenanalysen auf großen Datenmengen mit hoher Geschwindigkeit durchzuführen. Abhängig von der Anzahl der lizenzierten Exekutoren und Ihrem Apache Spark-Cluster können Sie von lokalen (Standalone) bis hin zu Hochleistungsclustern skalieren.

Darüber hinaus implementiert der Peak Spark ODS Adapter den ASAM ODS Big Data Connector - einen standardisierten Weg, um Inhalte Ihres Peak ODS Servers in Form von AVRO- oder Parquet-Dateien zu exportieren. Diese Exporte lassen sich in bestehende Big-Data-Ökosysteme wie Hadoop integrieren.

So können Unternehmen den Peak ODS Spark Adapter ohne große IT-Investitionen in ihre bestehende ODS-Infrastruktur einbinden und schrittweise zu einem leistungsfähigen Big-Data-Cluster für die Verwaltung und Analyse großer Mengen von Testdaten ausbauen.
 Ganz nach dem Motto: Klein anfangen, groß denken.