Kürzlich habe ich darüber geschrieben, wie Hadooplex von SnapLogic eine elastische Skalierbarkeit erreicht, indem es als native YARN-Anwendung in einem Hadoop-Cluster läuft. Wie ich in dem Beitrag bemerkte:
"Wenn die Arbeitslast zunimmt, fordert der Anwendungsmaster den YARN ResourceManager auf, nach und nach weitere Hadooplex-Knoten hochzufahren, wie im folgenden Diagramm dargestellt. Diese Skalierung erfolgt dynamisch, bis entweder die Arbeitslast zu sinken beginnt oder die maximal zulässige Anzahl von Hadooplex-Knoten erreicht ist.
Wenn die Arbeitslast abnimmt, werden die Knoten heruntergefahren. Auf diese Weise erreicht SnapLogic mit dem YARN ResourceManager eine elastische Skalierung auf Basis des Arbeitsvolumens innerhalb eines Hadoop-Clusters. Dies ist nur möglich, wenn eine Anwendung eine native YARN-Anwendung ist."
Ich wollte dies weiter ausführen und zeigen, wie dies in einem SnapLogic Elastische Integrationsplattform Demonstration. In dieser Demo können Sie sehen, wie der Hadooplex, die Ausführungsmaschine zur Laufzeit, je nach Arbeitslast elastisch skaliert.
Lesen Sie mehr über die SnapLogic Big Data-Verarbeitungsplattformen in diesem Dokument und sehen Sie sich hier weitere SnapLogic-Demonstrationen an. Schauen Sie sich auch unser kommendes Webinar mit Mark Madsen an, das sich auf die neue Referenzarchitektur für den Enterprise Data Lake konzentriert.
