Was ist eine Edge Data Fabric?
Actian Germany GmbH
31. Januar 2022

Was ist eine Edge Data Fabric?
Eine Data Fabric besteht aus einer Datenarchitektur, Verwaltungspraktiken und Richtlinien zur Bereitstellung einer Reihe von Datendiensten, die alle diese Bereiche und Endpunkte umfassen. Data Fabrics bieten diesen Framework. Sie dienen im Wesentlichen als Übersetzer und Leitungen für Daten in all ihren Formen, unabhängig davon, wo sie sich befinden und wohin sie gehen müssen, unabhängig davon, ob der Datenkonsument ein Mensch oder eine Maschine ist.
Data Fabrics sind nicht brandneu, aber sie bekommen in der IT plötzlich viel Aufmerksamkeit, da Unternehmen sich auf Cloud und Edge umstellen. Das liegt daran, dass Unternehmen dringend ein Framework benötigen, um die Daten verwalten - um sie zu bewegen, zu sichern, vorzubereiten, zu verwalten und in IT-Systeme zu integrieren.
Data Fabrics wurden Mitte der 2000er Jahre eingeführt, als die Datenverarbeitung von den Rechenzentren in die Cloud verlagert wurde. Sie wurden beliebter, als Unternehmen hybride Clouds einführten, und heute tragen Data Fabrics dazu bei, die Komplexität von Datenströmen zu reduzieren, die sich zum und vom Netzwerkrand bewegen. Aber die Zielpfosten haben sich verschoben, der Netzwerkrand ist jetzt das IoT, das allgemein als "der Rand" bezeichnet wird.
Der Unterschied liegt darin, woher die Daten kommen und wie flüssig sie sein werden. Mit anderen Worten: Mobile und IoT - der Rand - werden die Datenerzeugung vorantreiben. Darüber hinaus wird die Verarbeitung und Analyse an verschiedenen Stellen stattfinden, auf dem Gerät, an den Gateways und in der Cloud. Vielleicht wäre ein besserer Begriff Fluid Distributed Data anstelle von Big Data?
Unabhängig davon bedeuten mehr Daten letztlich auch mehr realisierbare Geschäftsmöglichkeiten - vor allem, wenn man bedenkt, dass diese neuen Daten direkt am Ort des Geschehens von Menschen und Maschinen generiert werden. Um die wachsenden Datenmengen, die ihnen zur Verfügung stehen, in vollem Umfang nutzen zu können, benötigen Unternehmen eine Möglichkeit, diese Daten über verschiedene Plattformen hinweg effizienter verwalten - vom Edge bis zur Cloud und zurück. Sie müssen verschiedene Arten von Daten verarbeiten, speichern und optimieren, die aus unterschiedlichen Quellen mit unterschiedlichen Reinheits- und Gültigkeitsgraden stammen, damit sie diese mit internen Anwendungen verbinden und Geschäftsprozesslogik anwenden können, zunehmend unterstützt durch künstliche Intelligenz und Modelle für Maschinelles Lernen .
Das ist eine große Herausforderung. Eine Lösung, die Unternehmen derzeit verfolgen, ist die Einführung einer Datenstruktur. Und da die Datenmengen am Netzwerkrand weiter wachsen, wird sich diese Lösung weiter zu dem entwickeln, was man gemeinhin als Edge Data Fabric bezeichnet.
Wie Data Fabric auf den Edge angewendet wird
Edge-Computing stellt besondere Anforderungen an Daten, die außerhalb des Netzkerns erzeugt und verarbeitet werden. Die Geräte selbst, die am Rande des Netzes arbeiten, werden immer komplexer. Intelligente Geräte wie vernetzte SPS verwalten Magnetventile, die wiederum die Prozessabläufe in einer chemischen Anlage steuern, Drucksensoren, die das Gewicht bestimmen, und aktive RFID-Tags, die den Standort eines Frachtcontainers ermitteln. Früher fand der größte Teil der Verarbeitung im Rechenzentrum statt, aber das hat sich dahingehend verschoben, dass ein größerer Teil der Verarbeitung in der Cloud stattfindet. In beiden Fällen findet die Verarbeitung auf einer Seite eines Gateways statt. Das Rechenzentrum war fest, nicht virtuell, aber die Cloud ist fließend. Wenn man sich die Definition der Cloud vor Augen führt, wird klar, warum eine Data Fabric darin benötigt wird. Bei der Cloud geht es um Fluidität und die Aufhebung der Ortsgebundenheit, aber genau wie beim Rechenzentrum geht es um die Verarbeitung von Daten im Zusammenhang mit Anwendungen. Es mag uns egal sein, wo sich die Salesforce Cloud , die Oracle Cloud oder eine andere Cloud tatsächlich befindet, aber es ist uns nicht egal, dass meine Daten zwischen verschiedenen Clouds übertragen und in jeder von ihnen für die Verwendung in verschiedenen Vorgängen bestehen bleiben müssen.
Aufgrund all dieser Komplexität müssen Unternehmen festlegen, welche Teile der Verarbeitung auf welcher Ebene erfolgen. Für jede Anwendung gibt es eine Anwendung, und für jede Anwendung gibt es eine Manipulation. Und für jede Manipulation gibt es die Verarbeitung von Daten und die Speicherverwaltung.
Der Sinn einer Data Fabric besteht darin, die gesamte Komplexität zu bewältigen. Spark wäre zum Beispiel ein Schlüsselelement einer Data Fabric in der Cloud, da es schnell zum einfachsten Weg geworden ist, Streaming zwischen verschiedenen Cloud von unterschiedlichen Anbietern zu unterstützen. Das Edge wird schnell zu einer neuen Cloud, die dieselben Cloud und -Standards in Kombination mit neuen, Edge-spezifischen Netzwerken wie 5G und WLAN 6 nutzt. Und wie bei der Cloud gibt es reichhaltigere, intelligentere Anwendungen, die auf jedem Gerät, auf Gateways und in dem, was früher das Äquivalent eines Rechenzentrums war, in einer Garderobe in der Fabrikhalle, in einem Flugzeug, auf einem Frachtschiff und so weiter laufen. Es liegt auf der Hand, dass Sie eine analoge Edge-Datenstruktur benötigen, wie sie sich in der Cloud herausbildet.
Die gemeinsamen Elemente der Edge Data Fabric
Um die wachsende Zahl von Datenanforderungen zu bewältigen, die von Edge-Geräten ausgehen, muss eine Edge Data Fabric mehrere wichtige Funktionen erfüllen. Sie muss in der Lage sein:
- Zugang zu vielen verschiedenen Schnittstellen: http, mttp, Funknetze, Produktionsnetze.
- Läuft auf mehreren Betriebsumgebungen: Vor allem POSIX-konform.
- Arbeit mit wichtigen Protokollen und APIs: Einschließlich neuerer Protokolle mit REST-API.
- Bereitstellung von JDBC/ODBC-Datenbankkonnektivität: Für Legacy-Anwendungen und eine schnelle und einfache Verbindung zwischen Datenbanken.
- Verarbeitung von Streaming : Durch Standards wie Spark und Kafka.
Schlussfolgerung
Data Fabric ist kein einzelnes Produkt, keine Plattform und keine Reihe von Diensten, und Edge Data Fabric ist es auch nicht. Edge Data Fabric ist eine Erweiterung von Data Fabric, aber angesichts der Unterschiede bei den Ressourcen und Anforderungen am Edge ist eine ausreichende Änderung dessen, was zur verwalten Edge-Daten erforderlich ist, erforderlich. Im nächsten Blog werden wir erörtern, warum Edge Data Fabric wichtig ist und warum jetzt.
Abonnieren Sie den Actian Blog
Abonnieren Sie den Blog von Actian, um direkt Dateneinblicke zu erhalten.
- Bleiben Sie auf dem Laufenden: Holen Sie sich die neuesten Informationen zu Data Analytics direkt in Ihren Posteingang.
- Verpassen Sie keinen Beitrag: Sie erhalten automatische E-Mail-Updates, die Sie informieren, wenn neue Beiträge veröffentlicht werden.
- Ganz wie sie wollen: Ändern Sie Ihre Lieferpräferenzen nach Ihren Bedürfnissen.