Knowhow »
SAP IQ
Unternehmen müssen mit immer größeren Datenmengen umgehen können, um wichtige Erkenntnisse für ihre Entscheidungen zu erlangen. Mit IQ bietet SAP ein modernes Datenbank-Softwaresystem an, das auf den Umgang mit Big Data hin spezialisiert ist. Der Einsatz erfolgt im Zusammenhang mit dem Data Warehouse der Unternehmen, wo für Analysezwecke heterogene Quellen zusammengeführt werden. Die Bereitstellung erfolgt dabei wie bei SAP üblich über die Cloud.
Inhaltsverzeichnis
Was ist SAP IQ?
IQ ist eine spaltenbasierte relationale Datenbank-Software von SAP, die im Petabyte-Bereich arbeitet. Damit sind Analysen im Zusammenhang mit Big Data möglich. Der Einsatz erfolgt zum Beispiel im Business Intelligence, im Data Warehousing und für Data Marts. Die Software ist optimiert auf Geschwindigkeit, Sicherheit und den Umgang mit extremen Datenmengen großer Unternehmen. Im Data Warehouse finden sich verschiedenste Daten wie strukturierte, halbstrukturierte und völlig unstrukturierte Daten. Deren Analyse ist besonders herausfordernd, sobald die Datenbestände eine gewisse Größe erreichen. IQ von SAP soll es möglich machen, diese Daten effizient zu analysieren, unabhängig von der Datenmenge.
Features
IQ von SAP bietet die Voraussetzungen für den Umgang mit großen Datenmengen in einem Umfeld, wo eine hohe Anzahl an gleichzeitigen Datenbankanfrage zu erwarten ist und Ac-hoc-Auswertungen gewünscht sind. Zu den Produktmerkmalen gehören auch die geringen laufenden Kosten des Systems dank hoher Effizienz und geringem Speicherbedarf. Zudem kann der Multiplex genannte Server-Cluster auch mit Serverausfällen und Störungen im Netzwerk umgehen. Damit profitiert der Anwender von einer hohen Verfügbarkeit. Mit IQ lassen sich die Entscheidungsfindung in den Unternehmen unterstützen, die Geschäftsanalyse vornehmen, das Data Warehouse verwalten und Data-Mart-Implementierungen vornehmen. Data Marts sind subjektorientierte Datenbanken, die den Anforderungen bestimmter Nutzergruppen besser entsprechen.
Loading Engine
In Hinblick auf die Features von IQ gilt es auch die sogenannte Loading Engine zu betrachten. Die Loading Engine ist für das Laden der Daten verantwortlich und greift hierfür auf verschiedene Verfahren zurück. Zu den Vorteilen gehört es, dass ein inkrementelles Batching ebenso möglich ist wie viele gleichzeitige Anfragen oder Bulk-Anfragen. Das Laden der Daten erfolgt mit einer hohen Parallelität und das aus Datenbanken oder auch aus Dateien. Das erlaubt es, Mehrkern-Prozessoren der Server bestmöglich zu nutzen und die Bildung von Flaschenhälsen zu vermeiden. Es ist diese moderne Loading Engine, die maßgeblich für die hohe Leistungsfähigkeit der IQ-Datenbanken verantwortlich ist.
Multiplex
Ein weiteres wichtiges Feature von IQ ist Mutiplex. Unter einem Multiplex ist dabei ein größerer Cluster von IQ-Servern zu verstehen, die in einem Gitter angeordnet sind. SAP verwendet diese Struktur, um eine hohe Skalierbarkeit bei gleichzeitigen Datenbankanfragen zu erreichen. Eine hohe Skalierbarkeit ist auch dann gegeben, wenn die Anzahl der Anfragen nicht besonders groß, deren Komplexität jedoch erheblich ausfällt. Multiplex baut dabei auf dem oben beschriebenen Shared-Everything-Ansatz auf. Multiplex verfügt weiterhin über einen sogenannten Koordinator-Knotenpunkt, der für die Verwaltung des Datenbankkatalogs verantwortlich ist und eine Verteilung über alle Verarbeitungseinheiten im Rechnerverbund ermöglicht. Der Koordinator-Knoten hat dabei immer Lese- und Schreibrechte. Andere Knoten im Netzwerk können Berechtigungen zum Beispiel nur für das Lesen erhalten. Das ist nützlich, wenn nicht jeder Nutzer auch in die Datenbank schreiben können muss. Multiplex bietet in der Praxis viele Vorteile wie zum Beispiel eine effiziente Lastenverteilung. Diese wird durch eine Erhöhung oder Verringerung der Parallelität der Verarbeitung in Abhängigkeit von der Serveraktivität erzielt
SAP IQ Architektur
Die gesamte Architektur von IQ orientiert sich an den Datenbankspalten. Das hat in der Praxis eine Reihe von Vorteilen. Ein Zugriff ist nur auf solche Objekte erforderlich, die sich in der Spalte mit den für die Suchanfrage relevanten Daten befinden. Beim traditionellen Zeilen-basierten Ansatz muss hingegen immer die gesamte Tabelle geladen werden. IQ verwendet dabei einen n-Bitindex, um Zugriff auf die Daten zu erhalten. Über den Index erfolgt der Zugriff auf die Daten und Werte müssen nur einmal gespeichert werden, statt einzeln für jede Zeile. Der auf Spalten basierte Speicher ermöglicht zudem eine laufende Kompression der Daten. Diese Architektur bringt erhebliche Leistungsvorteile mit sich.
Variable Zellengröße
Weiterhin setzt sich jede Seite in der Datenbank aus Zellen variabler Größe zusammen. Diese Zellen sind dicht gepackt und erlauben das effiziente Speichern der Daten. Dieser Ansatz ist von Zellen fixer Größe zu unterscheiden, die gut geeignet sind für Daten, die alle den gleichen Typ aufweisen und eine vergleichbare Größe besitzen. IQ geht jedoch davon aus, dass die Daten unterschiedliche Typen aufweisen mit stark voneinander abweichenden Größen. Hier ist ein Ansatz mit variabler Zellengröße besser geeignet. Damit lassen sich Speicher mit höherer Effizienz erstellen und es wird weniger Speicherplatz vergeudet. Zudem lassen sich in einer einzelnen Spalte verschiedene Datentypen, die auch voneinander abweichen können speichern. Wie effizient die Datenbank tatsächlich arbeitet, hängt auch davon ab, wie hoch die Komprimierung ausfällt. IQ setzt hierfür zum Beispiel auf den modernen Lempel-Ziv-Welch-Algorithmus.
Parallelität
Weiterhin setzt SAP bei der Architektur von IQ stark auf Parallelität. Prozesse können also nebeneinander oder gleichzeitig statt hintereinander ausgeführt werden. Bei der Massenparallelberechnung (MPP) werden verteilte Prozesse in Bezug auf Suchanfragen unterstützt. Auch hier geht es wieder um eine möglichst hohe Effizienz bei der Bearbeitung der Datenbankanfragen. Dabei ist es wichtig, die Unterscheidung von Shared-Nothing- und Shared-Everything-Architekturen zu verstehen.
Bei einer Shared-Nothing-Architektur verfügen die einzelnen Knoten über eigene Ressourcen wie etwa Prozessorleistung oder Speicherplatz und Arbeitsspeicher und arbeiten autonom. Gerade bei der parallelen Verarbeitung von Daten bietet das Leistungsvorteile. Wegen der hohen Skalierbarkeit ist diese Architektur bei Webanwendungen oder parallelen Datenbanksystemen sehr beliebt. Tatsächlich basieren die meisten MPP-Frameworks auf einer Shared-Nothing-Architektur.
Shared-Everything-Architektur
IQ setzt jedoch hiervon abweichend auf eine Shared-Everything-Architektur. Bei dieser Architektur werden der Hauptspeicher und das Plattensubsystem gemeinsam von Prozessoren genutzt. Daher ist auch von einer Shared-Disk-Datenbank die Rede. Der Shared-Disk-Ansatz ist neueren Datums und erlaubt jedem Knotenpunkt den Zugriff auf alle Daten. Jede Maschine kann damit Daten lesen und schreiben wie sie es wünscht. Eine solche Architektur ist deutlich flexibler, gleichzeitig ist sie aber auch anspruchsvoller in der Umsetzung. Gerade bei der Verwendung von IQ in großen Unternehmen mit einer großen Anzahl an Nutzern ist eine Shared-Everything-Architektur vorteilhaft. Hier haben möglichst viele Nutzer gleichzeitig Zugriff auf die Daten. Arbeitsabläufe im Unternehmen, an denen eine Vielzahl an Mitarbeitern beteiligt ist, lassen sich damit erheblich beschleunigen.
Komponenten
Die Komponenten von IQ lassen sich in clientseitige und serverseitige Komponenten unterscheiden. Die Client-Komponenten sind für die Authentifizierung, für die Verbindung zur Datenbank und für das Parsing der SQL-Befehle zuständig. Die Kernfunktionen finden sich dann in den serverseitigen Komponenten. Dazu gehören zum Beispiel die spaltenweise Speicherung der Daten oder die Loading Engine sowie die Engine zur Entgegennahme der Anfragen oder die Funktionen für die Verschlüsselung der Datenbank. Auch die Funktionen für die Skalierung und Autorisation sind hier zu finden. Es gilt zu beachten, dass alle serverseitigen Komponenten in der Cloud untergebracht sind.
IQ Cockpit
Zu den wichtigsten Komponenten von IQ gehört auch das IQ Cockpit. Hierbei handelt es sich um eine grafische Benutzeroberfläche, mit der sich IQ verwalten und das Monitoring der Anwendung durchführen lässt. Das Cockpit lässt sich in hohem Maße personalisieren und damit an die Anforderungen des jeweiligen Anwenders anpassen. Das IQ Cockpit wird dabei gemeinsam mit dem IQ Server installiert. Das Cockpit nimmt Anfragen von den Web-Clients entgegen und leitet diese Anfragen dann an die IQ Server weiter. Mit dem Cockpit lässt sich die gesamte Datenbankverwaltung durchführen. Für den Einsatz in den Unternehmen ist es zudem immer relevant zu wissen, welche Mitarbeiter die Ressourcen in welchem Umfang nutzen. Das gilt natürlich auch in Bezug auf die Nutzung von IQ. Das Cockpit bietet die Tools, mit denen sich die Nutzung von IQ jederzeit überwachen lässt. Es ist sofort erkennbar, wer welche Ressourcen in welchem Ausmaß strapaziert.
Möglichkeiten
Die mit IQ von SAP verbundenen Möglichkeiten für den Einsatz in den Unternehmen sind besonders vielfältig. Dazu gehört, dass sich für alle Datentypen einheitliche Datenspeicher erstellen lassen. Damit ist lediglich ein einzelnes Analyse-Framework erforderlich, um strukturierte und unstrukturierte Daten gemeinsam untersuchen zu können. Der Anwender muss sich also keine Gedanken mehr darüber machen, in welcher Form die Daten vorliegen. Zudem bietet IQ vielfältige Möglichkeiten der Verschlüsselung und damit ein hohes Sicherheitsniveau. Es lassen sich zum Beispiel ganze Datenbanken oder einzelne Spalten verschlüsseln. Eine Authentifizierung erfolgt per LDAP oder Kerberos.
Dank IQ kann der Nutzer schnell Antworten auch auf komplexe Datenbankanfragen erhalten. Die Anfragen werden auch dann umfassend und schnell beantwortet, wenn sie sich auf Datensätze im Petabyte-Bereich beziehen. Weiterhin unterstützt IQ die spaltenweise Komprimierung von Daten über verschiedene Algorithmen. Allgemein lassen sich damit Kosten in der IT reduzieren und Strukturen vereinfachen. Für Daten mit variabler Größe lassen sich die Datenbankseiten-Formate optimieren, was ebenfalls einer schnelleren Bearbeitung der Datenbankanfragen zuträglich sein soll. Zudem sind Verbesserungen beim Lesen und Schreiben in der Datenbank möglich. Alles das trägt zu einer Verbesserung der Leistung und damit einer Reduzierung der langfristigen Kosten bei.
Vor- und Nachteile
Mit IQ erhält der Anwender eine kosteneffiziente Data-Warehouse-Lösung im Petabyte-Bereich. Zu den entscheidenden Vorteilen von IQ gehören die Geschwindigkeit, mit der Datenbankanfragen bearbeitet werden, der geringe Speicherbedarf der Daten im Datenbanksystem und die damit einhergehende hohe Wirtschaftlichkeit sowie die hohe Flexibilität des Systems. Die Analyse von unstrukturierten Daten gehört zu den weiteren entscheidenden Vorteilen von IQ. Die Text-Indexierung gehört hier ebenso dazu wie verschiedene Suchfunktionen. Zudem können die Anwender ihre eigenen Funktionen schreiben und diese in die SQL-Engine einbinden. Damit lassen sich die Suchanfragen weiter vereinfachen und effizienter gestalten. Zudem ist es mit IQ möglich, noch mehr Daten einem noch größeren Kreis von Nutzern im Unternehmen zugänglich zu machen. Skalierungs-Begrenzungen lassen sich mit IQ umgehen, der Umgang mit Big Data wird damit vereinfacht oder überhaupt erst möglich gemacht.
Als Nachteil ergibt sich bei dieser Lösung die geringe Eignung für kleinere bis mittlere Unternehmen. Kleine Unternehmen generieren häufig nicht die Datenmengen, die eine Analyse durch IQ erforderlich machen würden. Diese Unternehmen müssen dann auf andere Lösungen ausweichen. Bei mittelgroßen Unternehmen können zwar ebenfalls erhebliche Datenmengen anfallen. Hier stellt sich jedoch die Frage, ob die Kosten für IQ für ein Unternehmen mittlerer Größe angemessen sind.
Einsatz SAP IQ
IQ richtet sich als Datenbanksystem klar an große Unternehmen. Je größer die Datenmengen sind, die im täglichen Geschäft anfallen, desto interessanter ist der Einsatz von IQ. Für Unternehmenskunden ist hier die immense Skalierbarkeit das entscheidende Argument. Doch auch mittelständische Unternehmen können mit ihrem Data Warehouse schnell in einen Bereich gelangen, in dem IQ sinnvoll einsetzbar ist. SAP bietet IQ als Option in einem Paket für Big Data Intelligence an. Dazu gehören auch SAP HANA und der SAP Event Stream Processor sowie Apache Hadoop. Alle diese Technologien bilden gemeinsam eine integrierte Plattform, mit der sich alle geschäftskritischen Daten analysieren lassen. Dank IQ ist das dann auch im Petabyte-Bereich durchführbar.
Fazit
Mit IQ bietet SAP seinen Geschäftskunden eine in hohem Maße skalierbare Lösung für die Analyse von besonders großen Datenmengen an. Hier kommen eine Reihe moderner Technologien zum Einsatz, um riesige Datenbestände im Data Warehouse handhabbar zu machen. Wie immer bei SAP gilt, dass der Einsatz der Software im Verbund mit anderen Produkten des Softwareunternehmens erfolgt. Dazu gehört insbesondere SAP HANA als zugrundeliegendes relationales Datenbankmanagementsystem. Wer sich mit ständig wachsenden Datenbeständen in seinem Unternehmen konfrontiert sieht, wird in IQ von SAP viele Vorteile erkennen können.
Das könnte Sie auch interessieren:
