DLI unterstützt nun Apache Hudi 0.15 für Spark-Workloads.

• Spark SQL General Hudi wurde auf Version 0.15 aktualisiert.
• Die unabhängige Image-Erstellung wird nun unterstützt.
• Die DLI-Hudi-Sperrmechanismen wurden an die Kompatibilität mit Hudi 0.15 angepasst.

• Zugriff auf die neuesten Verbesserungen und Erweiterungen von Hudi.
• Verbesserte Kompatibilität für moderne Data-Lake-Workloads.
• Flexiblere Bereitstellungs- und Image-Management-Prozesse.

Für kritische Änderungen an der Plattformkonfiguration wurde ein neuer Schutzmechanismus eingeführt.

• Bei der Änderung sensibler Parameter wie beispielsweise luxor.metaServer.upgradeMode.enable ist nun ein zweiter Bestätigungsprozess erforderlich (dieser Parameter wirkt sich auf alle Redis-Instanzen in der DLI-Verwaltungsebene aus).

• Reduziert das Risiko versehentlicher Konfigurationsänderungen.
• Verbessert die Betriebssicherheit und Governance.
• Trägt zum Schutz der Plattformstabilität während Wartungsarbeiten bei.

DLI unterstützt nun eine längere Aufbewahrungsdauer für Informationen zum Leerlaufstatus von SQL-Jobs.

• Die maximal konfigurierbare Aufbewahrungsdauer wurde auf sieben Tage erhöht.
• Die Backend-Unterstützung wurde erweitert, um verlängerte Aufbewahrungsdauern zu verwalten.

• Verbesserter Einblick in vergangene Job-Aktivitäten.
• Bessere Unterstützung bei der Fehlerbehebung und Betriebsanalyse.
• Erhöhte Flexibilität hinsichtlich Überwachungs- und Compliance-Anforderungen.

Weitere Informationen finden Sie im Bereich des Data Lake insight (DLI) Help Center.