SnapReduce setzt Big Data für Unternehmen frei und nutzt die Leistungsfähigkeit von Hadoop
Neue Technologie von SnapLogic ermöglicht die einfache Verbindung und Integration großer Datensätze zwischen Unternehmensanwendungen, Cloud-Diensten und Hadoop
San Mateo, Kalifornien - 9. Mai 2011 - SnapLogic, das Unternehmen für Cloud-Verbindungen, hat heute seine neueste Integrationsinnovation, SnapReduce, vorgestellt. Diese Technologie - SnapReduce genannt - ist das Ergebnis der 2009 in den SnapLabs begonnenen Forschungs- und Entwicklungsarbeit und ermöglicht erstmals eine einfache Verbindung und zuverlässige Integration großer Datenmengen zwischen Geschäftsanwendungen, Cloud-Diensten, sozialen Medien und Hadoop.
Unternehmen werden heute mit massiven strukturierten und unstrukturierten Datenströmen und -beständen überschwemmt, doch die Komplexität des Hadoop-Rechenmodells MapReduce und die fehlende universelle Konnektivität haben es für die meisten Unternehmen zu einer Herausforderung gemacht, von diesen Big Data zu profitieren. SnapReduce kombiniert die Benutzerfreundlichkeit und Konnektivität von SnapLogic mit der Leistung und Zuverlässigkeit von Hadoop und bietet so eine einheitliche Plattform für die Integration und Verarbeitung von Big Data.
Nachrichten Highlights
- SnapReduce wandelt Snaplogic-Datenintegrationspipelines direkt in MapReduce-Aufgaben um, was die Hadoop-Verarbeitung wesentlich zugänglicher macht und zu einer optimalen Hadoop-Cluster-Auslastung führt. Im Gegensatz zu anderen Hadoop-Integrationslösungen, die sich auf höhere Sprachen wie Pig und Hive stützen, passt SnapReduce SnapLogic-Datenflusspipelines direkt an entsprechende MapReduce-Aufgaben an, was zu einer effizienteren Datenverarbeitung und Pipeline-Überwachung auf Hadoop führt.
- Darüber hinaus nutzt SnapReduce das neue Hadoop Distributed File System(HDFS) Snap von SnapLogic, um Big Data in und aus Hadoop zu holen. Der HDFS-Snap ermöglicht SnapLogic-Pipelines die Integration von Daten aus allen SnapLogic-Endpunkten und bietet Benutzern ein gemeinsames Framework, in dem sie sowohl die Datenabfrage als auch die Datenverarbeitung in Hadoop formulieren können.
- SnapReduce arbeitet auch Seite an Seite mit bestehenden Anwendungen und Tools, die Daten innerhalb von Hadoop verarbeiten, wie Pig, Hive und Flume. Dadurch kann SnapReduce mit bestehenden Hadoop-Workflows und -Rechnungen arbeiten.
- SnapReduce nutzt die Leistungsfähigkeit, Performance und Zuverlässigkeit von Hadoop mit der einfachen Anbindung durch die serviceorientierte(REST-basierte) Plattform von SnapLogic und sprachneutralen Datencontainern - Snaps genannt - um eine skalierbare, sehr große Datenintegration für Cloud- und On-Premise-Geschäftsanwendungen zu ermöglichen.
- Die erste Demo von SnapReduce, die auf der Greenplum-Distribution von Hadoop von EMC läuft, wird auf der EMC World 2011 vom 9. bis 12. Mai in Las Vegas angeboten. SnapReduce wird in der zweiten Jahreshälfte 2011 kommerziell verfügbar sein.
Unterstützende Zitate
"Unternehmen, die Big Data mit Hadoop auswerten wollen, stoßen auf eine Mauer, wenn es um die Konnektivität mit Geschäftsanwendungen geht. Aktuelle Lösungen für die Big-Data-Integration erfordern umfassende Kenntnisse in der parallelen Programmierung und sind daher komplex und zeitaufwändig in der Erstellung, wobei oft mehrere Technologien erforderlich sind, um Big Data mit Hadoop zu erhalten und zu nutzen. In dem Maße, in dem Unternehmen ihren Bestand an Unternehmensanwendungen um Cloud-Anwendungen erweitern, benötigen sie eine einfache Lösung für die Anbindung an Hadoop, die sowohl das Volumen als auch die Komplexität von Big Data zuverlässig bewältigen kann." - Gaurav Dhillon, CEO, SnapLogic.
"SnapLogics innovativer Ansatz für die Integration von Anwendungen und Daten, der auf Web-Prinzipien und nicht auf den starren Adapter-Ansätzen des letzten Jahrhunderts basiert, ermöglicht es uns, die Möglichkeiten von Big Data für Unternehmensanwendungen zu nutzen. SnapReduce ist ein anschauliches Beispiel für die Leistungsfähigkeit des SnapLogic-Ansatzes - es bietet einen einfachen Einstieg in große Datenanalyseprojekte, die in Hadoop durchgeführt werden." - Gaurav Dhillon, Vorsitzender und CEO, SnapLogic.
"MapReduce hat sich zur Assemblersprache für die Big-Data-Verarbeitung entwickelt, und SnapReduce nutzt ausgefeilte Techniken, um SnapLogic-Datenintegrationspipelines in diese neue Big-Data-Zielsprache zu kompilieren. Wir haben alles, was wir über die beiden Welten der Integration und Hadoop wissen, genutzt und unsere Technologie so entwickelt, dass sie direkt zu MapReduce passt, wodurch der Prozess der Konnektivität und der Datenintegration in großem Maßstab nahtlos und einfach wird." - Greg Benson, Direktor, SnapLabs.
" EMC ist stolz darauf, mit einem Ökosystem von Technologieführern zusammenzuarbeiten, die dazu beitragen, die Möglichkeiten von Hadoop auszuschöpfen, damit Kunden die Chancen von Big Data nutzen können. Das Engagement und der Beitrag von SnapLogic zu Hadoop sind entscheidend, um diese aufkeimende, aber leistungsstarke Technologie für Menschen und Unternehmen auf der ganzen Welt verfügbar zu machen und ihnen zu ermöglichen, den Wert ihrer riesigen Datenmengen zu realisieren." - Bill Cook, Senior Vice President und General Manager, Data Computing Division, EMC.
Online-Ressourcen
- Besuchen Sie https://www.snaplogic.com/solutions/big-data für weitere Informationen und um SnapReduce in Aktion zu sehen
- Lesen Sie den SnapLogic-Blog, um mehr über Hadoop und Cloud-Integration zu erfahren
- Laden Sie eine kostenlose Testversion von SnapLogic herunter
Über SnapLabs
SnapLabs ist die Forschungsorganisation von SnapLogic, die sich mit der Identifizierung und Lösung von Transformationsmöglichkeiten in der Anwendungs- und Datenintegration beschäftigt. Das Team ist ständig bestrebt, die Leistungsfähigkeit der SnapLogic-Plattform zu erweitern, und war der primäre Katalysator für zahlreiche Produktdurchbrüche, einschließlich Server-Clustering und Workflow-Optimierung für Unternehmensintegrationen, prädiktive Feldverknüpfungen und die Entwicklung unserer erstklassigen Designer-Schnittstelle.
Greg Benson leitet das SnapLabs-Team als Forschungsdirektor und ist außerdem Professor für Informatik an der Universität von San Francisco. Seine Forschung konzentriert sich auf parallele und verteilte Systeme. Er hat mehrere verteilte Sprachen und Laufzeitsysteme sowie optimierte Kommunikationsalgorithmen entwickelt. Greg erhielt seinen Doktortitel in Informatik von der University of California, Davis.
Über SnapLogic
SnapLogic verändert die Art und Weise, wie Unternehmen Geschäftsanwendungen verbinden, sowohl vor Ort als auch in der Cloud. Mit SnapLogic können Unternehmen jede beliebige Kombination von Anwendungen und Datenquellen miteinander verbinden und dabei eine radikale Verbesserung von Kosten und Leistung gegenüber herkömmlichen Integrationslösungen erzielen. SnapLogic Snaps - anwendungsspezifische Konnektoren - können sofort aus dem SnapStore, dem weltweit ersten Online-Integrationsstore, heruntergeladen werden. Das SnapStore-Modell ermöglicht es Entwicklern, Systemintegratoren und unabhängigen Softwareanbietern, zweckgebundene Snaps für weit verbreitete und neue Anwendungen zu erstellen und zu verkaufen.
Als unabhängiges Integrationsunternehmen reduziert SnapLogic das Risiko der Anbieterbindung, indem es offene, erweiterbare Lösungen für alle Software, Anwendungen und Infrastrukturen anbietet. SnapLogic wird von führenden Risikokapitalgebern finanziert, darunter Andreessen Horowitz. Die Kunden von SnapLogic sind führende Unternehmen, die mit den kostspieligen und unflexiblen Integrationsansätzen der Vergangenheit brechen, von milliardenschweren Konzernen bis hin zu innovativen Wachstumsunternehmen. Folgen Sie uns auf Twitter: @SnapLogic. Besuchen Sie unseren Blog.