Integration von Apache Hadoop
Möglicher Einsatz von Apache Hadoop zur Langzeitspeicherung von iba-Daten
In der industriellen Produktion fällt eine große Menge unterschiedlicher technischer Betriebsdaten an. Zu dieser Gruppe gehören auch Prozessdaten, Messdaten und Metadaten. Die Prozessdaten einer Anlage werden in der Regel zyklisch erfasst, während Messdaten sowohl zu einem Prozess als auch zu einem Produkt oder einer Charge gehören können. Hinzu kommen Metadaten, wie zum Beispiel Produktnummern, Kundennummern oder andere zusätzliche Informationen. Mit dem iba-System können technische Betriebsdaten aufgezeichnet, gespeichert, analysiert und visualisiert werden. Im Allgemeinen ist eine detaillierte Datenaufzeichnung notwendig zur Qualitätsdokumentation. Sie ist zudem nützlich, um Potenzial bei der Prozess- und Qualitätsverbesserung zu erkennen.
Die generierte Datenmenge eines Unternehmens nimmt mit dessen Größe und dem Digitalisierungsgrad schnell zu. Der Aufwand und die Komplexität der Datenverwaltung steigen ebenfalls. Daher wird in diesem White Paper der Fragestellung nachgegangen, wie Anwender von iba-Software mit solchen Anforderungen umgehen können und welche Lösungen es gibt, sehr große Datenmengen zu verwalten. Hierzu wurden Untersuchungen im Rahmen des Forschungsprojekts NewTech4Steel bei iba durchgeführt. Dieses White Paper beinhaltet grundlegende Information zu Apache Hadoop, die Ergebnisse des Projekts sowie Empfehlungen für iba-Anwender, die ein enorm großes Datenaufkommen haben oder planen, Apache Hadoop zur Speicherung und Analyse der Messdaten zu verwenden. Es knüpft außerdem an das vorangegangene White Paper zum Thema ibaHD-Server Benchmark an. Die Ergebnisse des ibaHD-Server Benchmark haben gezeigt, dass ibaHD-Server aufgrund seines effizienten Speicheralgorithmus sehr gut für die hochfrequente Datenaufzeichnung geeignet ist. In diesem Dokument liegt der Fokus nun auf der Skalierbarkeit und Lösungen für große Datenmengen.
Download:
Das White Paper "Integration von Apache Hadoop" können Sie hier herunterladen.
|Allgemein Back