-
❌ Datenmigration ❌ Datenkonvertierung und Datenformatierung von legacy und modernen Daten ❗
Wechseln von Anwendungen, Hardwareplattformen und Datenbankanbietern: Datenreplikation, Datenföderation und Bericht! IRI NextForm ist das neueste Produkt im Bereich Datenmanagement, das von IRI in Eclipse unterstützt wird. Als Weiterentwicklung SortCL-Programm in IRI CoSort handelt es sich bei IRI NextForm um eine Software für Datenmigration und -formatierung. Sie ermöglicht die Konvertierung und Wiederverwendung von Daten, die in legacy- und modernen Datenbanken, Index- und sequenziellen Dateien, Hadoop- sowie Dark Data (unstrukturierte) Dokumenten gespeichert sind. Mit NextForm können Sie Ihre Daten auf neue Weise anwenden und anzeigen – sei es in neuen Dateien und Tabellen, benutzerdefinierten Berichten, BI-Tools, virtualisierten Ansichten und mehr. NextForm verarbeitet Daten in all diesen Bereichen: 1. Dateiformate: CSV Delimited Text…
-
❌ Datenschutzlösungen ❌ Datenschutz gemäß der nationalen DSGVO, internationalen GDPR und globalen Compliance ❗
Einhaltung von Datenschutzvorschriften zum Schutz personenbezogener Daten: Datenschutzkonformität, insbesondere im Kontext der EU-DSGVO, ist von großer Bedeutung, da Verstöße mit erheblichen Geldstrafen geahndet werden können. Der Schutz personenbezogener Daten ist weltweit ein relevantes Anliegen, wobei die DSGVO als Vorbild für ähnliche Gesetze dient. Datenschutzgesetze zielen darauf ab, den Menschen die Kontrolle über ihre persönlichen Informationen zurückzugeben, haben jedoch auch Auswirkungen auf die internationale Datenbewegung. Die Implementierung solcher Gesetze ist bilateral, erfordert also die Zustimmung von Ländern, die Daten austauschen. Die Durchsetzung von Datenschutzgesetzen erfordert nicht nur technische Maßnahmen, sondern auch eine effektive Datenschutzkultur in Unternehmen. Diese Informationen sind besonders relevant für Manager in Unternehmen, die Datenschutzgesetzen unterliegen, sowie für Mitarbeiter,…
-
❌ Echtzeit Dateiüberwachung ❌ POC um Jobs automatisch durch Änderungen in den Quelldateien auszulösen ❗
Automatisierung von Datenmanagement: Lösung zum Auslösen von Jobs bei Echtzeit-Änderungen von Daten in relationalen Datenbanktabellen! Das manuelle Auslösen von SortCL-kompatiblen Jobs in IRI Voracity ETL-, IRI CoSort Reporting-, IRI FieldShield Datenmaskierung- oder IRI NextForm-Migrationsszenarien ist in Umgebungen, in denen Daten in Quellen dynamisch hinzugefügt oder geändert werden, weder realistisch noch produktiv. Im Gegensatz dazu macht die Automatisierung von Aufträgen in Echtzeit manuelle Aufrufe überflüssig und stellt sicher, dass die richtigen Aufträge rechtzeitig ausgeführt werden. Datei-Überwachung Übersicht: Die Dateiüberwachung wird im Allgemeinen dazu verwendet, um festzustellen, ob eine Datei in einem Verzeichnis erstellt, geändert, umbenannt oder gelöscht wurde. Die beiden Hauptmethoden, die zur Ermittlung von Änderungen in einem Verzeichnis verwendet werden…
-
❌ Datenbankreorganisation ❌ Reorg von Datenbanken um Datenbankleistung zu verbessern und Speicherplatz zu sparen ❗
Datenbank-Reorganisationen: Datenbankreorganisationen werden durchgeführt, um Datenspeicherplatz zu sparen und die Effizienz sowie Leistung der Datenbank zu verbessern. Dieser Artikel erklärt warum. Der nächste Artikel zeigt, wie man mehrere Tabellen und Datenbanken in Eclipse reorganisiert. Daten in großen RDBMS-Tabellen werden mit der Zeit fragmentiert. Die Größe von Tabellen und Indizes nimmt zu, da Datensätze auf mehr Datenseiten verteilt werden. Mehr Seitenzugriffe und Zeilen in nicht sortierter Reihenfolge während der Abfrageausführung verlangsamen die Abfrageantworten. Um den verschwendeten Platz zurückzugewinnen, die Verfügbarkeit der Datenbank zu verbessern und den Zugriff auf Daten zu beschleunigen (Abfrageantworten), sollten Sie eine Strategie für die Reorganisation Ihrer Datenbankobjekte in Betracht ziehen. Datenbank-Reorganisationen bestehen aus zwei Typen für diese…
-
❌ Sensible Cloud-Daten schützen ❌ Automatische Datenmaskierung in NoSQL wie Google Bigtable, Azure Cosmos DB und Amazon DynamoDB ❗
Automatische Erkennung und Maskierung von PII in Cloud-NoSQL-Datenbanken: In diesem Beitrag wird die Anwendung der IRI DarkShield API zur automatischen Identifikation und De-Identifizierung von PII oder anderen sensiblen Daten in den drei führenden NoSQL-Datenbanken der Cloud-Anbieter behandelt: Google Bigtable, Microsoft Cosmos DB in Azure und Amazon DynamoDB. Frühere Artikel in diesem Blog beschäftigten sich bereits damit, wie DarkShield-Assistenten in der IRI Workbench Daten in anderen populären NoSQL-Datenbanken, darunter Cassandra, Elasticsearch und MongoDB, finden und maskieren können. Ein weiterer Artikel widmet sich den Datenbanken CouchDB, Redis und Solr. Obwohl es eine umfassende Liste von Sicherheitspraktiken für Endpunkte in NoSQL-Datenbanken gibt, können Angreifer dennoch Schwachstellen in diesen Verteidigungsmaßnahmen ausnutzen. Daher ist es…
-
❌ Datenbankreplikation ❌ In Echtzeit Änderungen (CDC) von Datenbank automatisch erkennen und verwalten ❗
Die Datenmanagement-Plattform IRI Voracity vereint Datenerfassung, -integration, -migration, -steuerung und -analyse mithilfe der Backend-Datenverarbeitungs-Engine IRI CoSort sowie der Front-End-IDE IRI Workbench, die auf Eclipse basiert. Im vergangenen Jahr wurde ein vielseitiges Modul eingeführt, das das Generieren, Profilieren, Migrieren zu und Prototypisieren von Data Vault 2.0-Modellen ermöglichte. Dieses Jahr wurde die wegweisende Funktion "IRI Ripcurrent" in Voracity eingeführt, um in Echtzeit Änderungen in der Struktur und dem Inhalt von Datenbankspalten zu verwalten. IRI Ripcurrent erkennt automatisch neue, aktualisierte oder gelöschte Zeilen sowie Änderungen an der Struktur einer Tabelle oder eines Schemas. Es reagiert darauf auf verschiedene Arten, darunter: Datenreplikation: Aktualisierung von Testzielen innerhalb derselben oder einer anderen Datenbank. Inkrementelle Datenmaskierung: Verwendung…
-
❌ Datenschutz in Elasticsearch ❌ Sensible Daten im NoSQL-Format wie CSV und JSON automatisch finden und schützen ❗
Sensible Daten in Elasticsearch schützen: Elasticsearch, eine auf Java basierende Suchmaschine mit HTTP-Schnittstelle, speichert Daten in JSON-Dokumenten ohne festes Schema. Leider sind Elasticsearch-Online-Datenbanken häufig Opfer kostspieliger Verletzungen personenbezogener Daten (PII). Durch die Maskierung sämtlicher PII und anderer sensibler Informationen in diesen Datenbanken könnten erfolgreiche Hacks und ungewollte Entwicklungskopien vermieden werden. Die preisgekrönte datenzentrische Sicherheitssoftware von IRI hat sich in verschiedenen Umgebungen bewährt und bietet Lösungen zur Verhinderung von Verstößen, Einhaltung des Datenschutzes und DevOps (Testdaten). Nutzen Sie die spezialisierten Datenschutzprodukte von IRI oder die umfassende IRI Voracity-Plattform, um sensible Daten in beliebiger Form und an jedem Ort zu identifizieren und zu maskieren. Damit können Sie nachweisen, dass Sie die Daten…
-
❌ Tuning von Datadog ❌ Schnellere Datenintegration und Datentransformation mit DSGVO-konformen Daten ❗
Die Lösung für Datadog: Datadog ist eine Online-Anwendung, die zur Überwachung von Datenfeeds, Analyse von Trends, Erstellung analytischer Dashboard-Anzeigen und Versendung von Warnmeldungen dient. Dieser Beitrag markiert den Beginn einer 4-teiligen Serie über die Integration der Datadog Cloud-Analyseplattform mit verschiedenen Arten von Daten aus IRI Voracity-Operationen. Insbesondere wenn es darum geht, eine beträchtliche Datenmenge offline vorzubereiten, bevor sie ausgegeben wird und diese Daten auf einer Infrastruktur außerhalb von Datadog verarbeitet werden kann, bietet Voracity eine leistungsstarke Big Data-Wrangling-Lösung: Der Schwerpunkt dieses Artikels liegt auf der Datenvorbereitung in Voracity und der Konfiguration von Datadog, um diese Daten zu empfangen. Dieser Artikel legt den Fokus auf die Visualisierung von in Voracity verarbeiteten…
-
❌ Sensible Informationen in Excel schützen ❌ DSGVO-konformer Datenschutz von sensiblen Daten in XLS- und XLSX-Dateien ❗
Gezielte Verschlüsselung sensibler Informationen in Excel-Dateien: Die IRI Data Protector Suite bietet drei separate Produkte, die gemeinsame Suchmethoden wie Muster- oder Wörterbuchabgleiche verwenden. Jedes Produkt verfügt über individuelle oder global anwendbare Funktionen zur Maskierung von Daten, darunter Verschlüsselung, Redigierung, Hashing und Pseudonymisierung. Die Produkte gewährleisten Determinismus und Datenintegrität, indem sie identische Chiffretexte erzeugen. Sie sind auch integrale Komponenten der IRI Voracity Datenmanagement-Plattform: IRI CellShield wurde speziell für die Suche und Maskierung von Daten in Tabellenkalkulationen entwickelt und ist das einzige "Shield"-Produkt von IRI, das ausschließlich in der Excel-Umgebung eingesetzt werden kann. IRI FieldShield klassifiziert, sucht und maskiert strukturierte Datenbank- und Flat-File-Daten. Es verwendet das CoSort SortCL-Programm für die Datendefinition und…
-
❌ Tuning von Talend ❌ Talend Data Fabric beschleunigen und DSGVO-konforme Datenverarbeitung sicherstellen❗
Talend Data Fabric steht vor Herausforderungen bei der Verarbeitung großer Datenmengen, wie dem komplexen Sortieren, Verbinden und Aggregieren. Die parallele Verarbeitung kann teuer und leistungsbeeinträchtigend sein. Talend bietet möglicherweise nicht ausreichende Sicherheitsfunktionen und erfordert separate Tools für effiziente Datenverarbeitung. Transformationsoptimierung: Beschleunigung von Sortierung, Aggregation und Zusammenführung in Talend durch tSystem-Aufrufe an CoSort SortCL. Dies ermöglicht mehrfache, zeitsparende Datentransformationen ohne Platzmangel und Beeinträchtigung anderer Jobs. Benchmarks und Tipps zur Leistungssteigerung sind verfügbar. PII-Datenschutz: Talend kann sensible Daten in Tabellen und Flat-Files nicht ausreichend sichern. IRI Voracity und IRI FieldShield bieten umfassenden Schutz in verschiedenen Datenquellen, basierend auf Geschäftsregeln. RowGen erstellt sichere Testdaten, und die automatische Konvertierung von Talend-Mappings zu kosteneffizienteren ETL-Operationen…
