Sybase - Beschleunigung & Schutz
Optimierung von ETL & Reorgs, PII-Maskierung, Datenreplikation
Sybase Herausforderungen
Als SAP Sybase IQ oder ASE DBA können Sie mit einem oder mehreren dieser Performance- oder Schutzprobleme konfrontiert sein:
- Entladen und Laden von großen Sybase-Tabellen
- Langsame Hilfsoperationen (z.B. Reorgs) oder Abfragen
- Ungeschützte personenbezogene Daten (PII)
- Lästige Datenbankmigration oder -replikation
- Generierung von oder Zugriff auf Testdatensätze
Auch spezifische Leistungsdiagnosen und -abstimmungen brauchen Zeit und können andere Benutzer betreffen. Spezielle Tools zur Datenmaskierung und zum Testdatenmanagement sind teuer und zu schwer zu bedienen. Schließlich können gespeicherte SQL-Prozeduren auch ineffizient programmiert werden, müssen optimiert werden und dauern dann immer noch zu lange.
Lösungen
Verwenden Sie das Programm SortCL im Produkt IRI CoSort oder in der IRI Voracity-Plattform, um die Extrakte parallel zu filtern, zu sortieren, zu verbinden und zu aggregieren. Das Sybase SQL Server Referenzhandbuch empfiehlt eine externe Vorsortierung, um die Indexerstellung beim Laden der Datenbank zu beschleunigen. Mehrere Tabellen, die schnell in der Abfrage-Indexreihenfolge erstellt werden, sollten helfen, Abfragen zu beschleunigen.
Wie man Sybase-Ladungen beschleunigt: „CoSorting“ von Daten im Dateisystem vor dem Laden von Sybase kann:
- Geschwindigkeitslastleistung 2 und 10X
- Entfernen Sie den Sortieraspekt der Ladung
- Reduzierung des Datenbank- und Festplatten-Overheads
- Erhöhung der Verarbeitungsrate (Zeilen pro Stunde)
Die empfohlene Technik besagt, dass Flat-Files auf dem geclusterten Indexschlüssel vorsortiert werden sollten. CoSort wurde entwickelt, um große Dateien parallel zu sortieren, wobei die Leistung linear im Volumen skaliert wird. Sie sollten einen geclusterten Index erstellen. Aber zuerst sollten Sie die Indizes eliminieren, indem Sie Tabellen ohne Indizes oder Trigger erstellen oder sie aus der zu ladenden Tabelle entfernen. Dann können Sie:
- CoSort der Daten nach dem Primärschlüsselindex
- bcp lädt die sortierte Tabelle mit schnellem bcp-Pfad (da es keine Indizes auf der Tabelle gibt).
- Verwenden Sie den SQL-Befehl „CREATE INDEX“ unter Verwendung der Option „SORTED_DATA“, um den Cluster-Index zu erstellen.
Das SortCL-Programm von CoSort kann auch Daten für Datenbankmigrationen und benutzerdefinierte (Detail-, Zusammenfassungs- und Delta-) Berichte transformieren und neu formatieren und sensible Daten auf Feldebene mit einer Vielzahl von Verschlüsselungs-, Maskierungs- und anderen Funktionen schützen.