-
❌ Big Data ❌ Datenqualität und Datenintegrität zwangsläufig im Verantwortungsbereich der Unternehmen ❗
IRI Voracity Data Quality & Security adressiert Analytics- und Cloud-Herausforderungen! Zum achten Mal in Folge hat das Magazin Database Trends and Applications (DBTA) in seiner aktuellen Online-Ausgabe unseren Partner IRI The CoSort Company unter den "100 Companies That Matter Most in Data" aufgeführt. In der Liste werden Hardware-, Software- und IT-Unternehmen aufgeführt, die Kunden dabei helfen, die wichtigsten Herausforderungen des Daten- und Analysemanagements im Jahr 2023 zu meistern. Im Eröffnungsartikel schreibt DBTA-Chefredakteurin Stephanie Simone, dass diese Herausforderungen darin bestehen, die Datensicherheit mit neuen Dateninitiativen in Einklang zu bringen, einen geschäftlichen Mehrwert zu liefern und die Unternehmenskultur in Bezug auf Daten zu verändern." Sie stellt in ihrer Einleitung fest, dass "die…
-
❌ Snowflake ETL ❌ Performance steigern und Verarbeitungskosten senken und zusätzliche Sicherheitsfunktionen nutzen ❗
Die Lösung für zeitaufwendige Probleme mit Snowflake: Datensuche, -profilierung und/oder -klassifizierung Integration oder Daten-Wrangling für DW/BI-Ops Datenbewegung/Migration zu/von Tabellen Transformieren oder Laden großer Tabellen Datenerfassung oder -replikation ändern Clustering oder Abfrage der Performance Generierung intelligenter und sicherer Testdaten Maskierung sensibler Daten Auch spezifische Leistungsdiagnosen und -abstimmungen brauchen Zeit und können andere Benutzer betreffen. Schließlich können gespeicherte SQL-Prozeduren auch ineffizient programmiert werden und erfordern eine Optimierung und dauern dann immer noch zu lange! Schnelles, kostengünstiges Datenmapping und Datenverwaltung von und in Snowflake! Daten in Ordnung halten: IRI CoSort für die Vorsotierung von Flat-Files für Bulk-Ladungen und Inserts. Das entfernt den Overhead dieser Arbeit von Snowflake und verbessert die Leistung von Clustering…
-
❌ Datenschutz im Bild ❌ Sensible Daten erkennen, klassifizieren und via Datenmaskierung automatisch DSGVO-konform schützen❗
Vorverarbeitung von Bildern zur Verbesserung der OCR-Ergebnisse: OCR-Software (Optical Character Recognition) ist eine Technologie zur Erkennung von Text in einem digitalen Bild. OCR wird von der IRI DarkShield-Software verwendet, um Text in eigenständigen oder eingebetteten Bildern während der PII-Suche und -Maskierungsvorgänge zu erkennen. OCR hat jedoch ihre Grenzen: Um genaue Ergebnisse zu erzielen, muss das Bild vertikal ausgerichtet sein, die richtige Größe haben und so klar wie möglich sein. Nicht jedes Bild erfüllt diese Anforderungen! Wir müssen daher Methoden finden und anwenden, um diese Bilder durch Vorverarbeitung an unsere Bedürfnisse anzupassen. In diesem Artikel werden einige Vorverarbeitungsmethoden vorgestellt und erläutert, wie sie die Qualität der OCR-Ausgabe im Zusammenhang mit der…
-
❌ Database Subsetting ❌ Automatisches Erzeugen einer Teilmenge verwandter Daten von referenziell korrekten Testdaten für DB-Prototypen und DevOps ❗
Datenbase Subsetting: Wenn eine Datenbank eine bestimmte Größe überschreitet, entstehen hohe Kosten und es wird auch aus Sicherheitsgründen riskant, vollständige Kopien für Entwicklung, Tests und Schulungen bereitzustellen. In den meisten Fällen benötigen Teams kleinere Kopien der größeren Datenbank und der Schutz personenbezogener Daten in diesen Kopien ist von großer Bedeutung. Der Prozess des Datenbank-Subsettings beinhaltet die Erstellung einer kleineren, korrekten Kopie einer größeren Datenbank durch die Verwendung von echten Tabellenauszügen. Teilmengen werden genutzt, um die Kosten und Risiken, die mit vollständigen Datenmengen einhergehen, zu reduzieren, entweder in Kombination mit oder anstelle von Datenmaskierung oder der Generierung von Testdaten. Das manuelle Erstellen aussagekräftiger Teilmengen ist eine komplexe und zeitaufwändige Aufgabe, da…
-
❌ Excel für BI ❌ Umfassende Datenverarbeitung von einem/mehreren Excel-Arbeitsblättern zusammen mit Tabellen, Flat-Files und Streaming-Daten ❗
Umfassende und schnelle Verarbeitung von Tabellenkalkulationsdaten: Zusätzlich zu allen anderen strukturierten Datenquellen, die die IRI-Software bereits unterstützt, ist es jetzt möglich, Daten aus XLS- und XLSX-Dateien zu lesen und zu verarbeiten! IRI CoSort, für schnelles Sortieren, Umwandeln und Berichten IRI NextForm, für Mapping, Migration und Replikation IRI RowGen, für die zufällige Auswahl oder Generierung von realistischen Testdaten IRI FieldShield, für die Maskierung sensibler Daten IRI Voracity, für alle oben genannten Funktionen sowie für ETL, Datenbereinigung und -aufbereitung für Analysezwecke und zum Zurückschreiben der resultierenden Daten in diese oder andere Ziele, einschließlich eines oder mehrerer Blätter. Dieser Artikel gibt einen Überblick über die Operationen und die Syntax des SortCL-Programms, das mit…
-
❌ Oracle Datenbank Backup ❌ Datenbank via Commvault klonen und automatisch via Plug-In sensible Daten schützen ❗
Sicheres Datenbank-Klonen: Das Sicherheitsprodukt IRI FieldShield maskiert sensible Daten in der geklonten Datenbank, bevor dann die Daten für die Entwicklung und Qualitätssicherung zur Verfügung stehen! Nachdem Sie eine Oracle-Datenbank geklont haben, können Sie die Commvault-Software mit unserer Datenmaskierung via Plug-In ausführen lassen. Die Commvault-Software ist bei unserem IRI FieldShield integriert. Die Anleitung finden Sie direkt bei Commvault V11 Service Pack 17 unter: "Configuring Third-Party Data Masking for Oracle Database Clones" Was ist FieldShield? IRI FieldShield® ist eine leistungsstarke und kostengünstige Software zur Datenerkennung und –maskierung von PII in strukturierten und semistrukturierten Quellen, groß und klein. Die FieldShield-Dienstprogramme in Eclipse dienen zur Profilierung und De-Identifizierung von Daten im Ruhezustand (statische Datenmaskierung)…
-
❌ UniKix Mainframe CICS ❌ Transaktionsverarbeitung und Batch-Sortierung von VSAM- und sequentiellen Daten ❗
JCL Sorts in UniKix BPE und TPE migrieren: Wenn Sie vom Mainframe zu "offenen Systemen" wechseln, arbeiten Sie möglicherweise mit dem Mainframe Rehosting Solutions Team von NTT DATA (früher Dell, Clerity, Sun, Blue Phoenix und UniKix) zusammen. Eine der Komponenten Ihrer Migration wird das Sortierpaket sein. Sie benötigen eine Lösung für die Konvertierung von JCL-Sortierschritten, die Verarbeitung von VSAM-Dateien, die damit verbundene Datentransformation und Berichtsdienste unter Unix oder Windows. Möglicherweise suchen Sie auch nach einer Möglichkeit, eine Vielzahl anderer Datenmanagement- und Schutzvorgänge gleichzeitig zu modernisieren und möchten lieber mit einem einzigen, bewährten und erschwinglichen Anbieter zusammenarbeiten und gleichzeitig die Lernkurve und die Komplexität der Tools mehrerer Anbieter reduzieren. IRI CoSort…
-
❌ Data Lake ❌ Semi/un/strukturierte Rohdaten bündeln, für gezielte Datenbereinigung und Datenverarbeitung ❗
Data Lake: Ein Data Lake ist ein einziger Speicher für Unternehmensdaten, der sowohl Rohdaten (die eine exakte Kopie der Quelldaten darstellen) als auch umgewandelte Daten enthält, die für Berichte und Analysen verwendet werden. Einige wollen, dass das Data Lake das traditionelle Data Warehouse ersetzt, während andere ihn eher als Staging-Bereich für die Einspeisung von Daten in bestehende Data Warehouse-Architekturen sehen. Den See säubern: Ein Hauptproblem bei Datenseen ist, wie bei echten Seen, dass die Menschen nicht wissen, was sich in ihnen befindet oder wie sauber sie sind. In der Natur können unbekannte Dinge im Wasser das Ökosystem zerstören. Unbekannte Daten in einem Datensee können das Projekt zerstören. Dan Linstedt rät…
-
❌ TIBCO Spotfire ❌ Zeit und Kosten der Datenvisualisierung, Datenanalyse und Datenintegration deutlich verringern ❗
Datenvorbereitung für TIBCO Spotfire: TIBCO Spotfire® ist ein Datenvisualisierungstool für einfach zu erstellende Dashboards. Spotfire verfügt über eine speicherinterne Datenverarbeitung und eine ausgefeilte prädiktive Analyse. Wie die meisten Business Intelligence-Tools ist es jedoch nicht für die Integration großer Datenmengen und die Verarbeitung vor der Visualisierung konzipiert. IRI CoSort ist eine schnelle, einfache und kostengünstige Möglichkeit, größte Datenmengen für Spotfire effizient aufzubereiten – sowohl in Bezug auf das Jobdesign als auch auf die Laufzeitperformance. In diesem Abschnitt erfahren Sie alle technischen Details. Wenn CoSort Rohdatensätze in einem einzigen Job und I/O-Pass vor Spotfire sortiert, zusammenführt und aggregiert, ist eine solche Time-to-Visualisierung viel schneller! In einem Benchmark auf einem durchschnittlichen PC bereitete…
-
❌ Credential Stuffing ❌ Sensible PII in NoSQL, Elasticsearch und in AWS S3-Buckets finden und schützen ❗
Gezielte Datensicherheit von sensiblen Informationen: Ungesicherte Daten können den Ruf Ihres Unternehmens schädigen und Millionen von Bußgeldern verursachen. Die preisgekrönte datenzentrische ("Startpunkt") Sicherheitssoftware von IRI hat sich in einer Vielzahl von Umgebungen zur Aufhebung von Verstößen, Einhaltung des Datenschutzes und DevOps (Testdaten) wiederholt bewährt. Verwenden Sie zweckmäßige IRI-Datenschutzprodukte oder die umfassende IRI Voracity-Plattform, um sensible Daten zu finden und zu maskieren – egal in welcher Form und wo sie sich befinden – und um zu beweisen, dass Sie sie geschützt haben. IRI FieldShield: Finden, klassifizieren, maskieren und risikobehaftete PII über Legacy-Dateien, relationale und NoSQL-Datenbanken, Cloud-Anwendungen usw. mit AES-256 FPE, Hashing, Redaktion, Pseudonymisierung, Tokenisierung usw. Details hier. IRI CellShield: Finden, Berichten,…
