Big Data - Edge Node

Einfache Definition von „Edge Node“ (Edge-Knoten) nach Techtarget: „Ein Edge Node ist ein Rechner, der als Endbenutzer-Portal für die Kommunikation mit anderen Knoten bei der Datenverarbeitung in Clustern fungiert. Edge-Knoten werden auch als Gateway-Knoten oder Edge-Kommunikationsknoten bezeichnet.“

Die Gründe für den Einsatz von Edge-Knoten sind unterschiedlich, je nachdem, welche Big Data-Technologie verwendet wird. In der Regel spielen jedoch Faktoren wie Netzwerkbandbreite und Sicherheitsaspekte eine Rolle.

Wie beim IPP-Edge-Knoten wird die Remote Engine in einem Edge-Knoten untergebracht, um Zugriff für die Ausführung von Batch- oder Streaming-Jobs (nur Talend Real-Time Big Data Platform) zu ermöglichen. Anstelle des Talend-Jobs, der die Verarbeitung durchführt, agiert die Remote Engine als „Runner“, der den Job im Big Data-Cluster instanziiert. Hohe Verfügbarkeit für die Ausführung dieser „Runner“ lässt sich durch den Einsatz von Remote Engine-Clustern erzielen.