Gespiegelter Dremio-Katalog

Ein gespiegelter Dremio-Katalog in Fabric integriert Ihre von Dremio verwalteten Daten mit den restlichen Daten in Fabric. Sie können Ihren Dremio-Katalog kontinuierlich direkt in Fabric OneLake replizieren.

Ein Lernprogramm zum Konfigurieren Ihrer Dremio-Umgebung für die Dremio-Katalogspiegelung in Fabric finden Sie unter Tutorial: Konfigurieren des gespiegelten Dremio-Katalogs.

Von Bedeutung

Dieses Feature befindet sich in der Vorschauphase.

Wenn Sie einen Dremio-Katalog spiegeln, gibt es keine Datenverschiebung oder Datenreplikation. Nur die Dremio-Katalogstruktur wird in Fabric abgebildet, und auf die zugrunde liegenden Katalogdaten greift man über Verknüpfungen zu. Änderungen an den zugrunde liegenden Daten werden möglicherweise nicht sofort in Fabric angezeigt. Die Verteilung kann von ein paar Sekunden bis zu mehreren Minuten dauern, wie in der SQL Analytics-Endpunktleistungsdokumentation beschrieben.

Welche Analyseerfahrungen integriert sind

Gespiegelte Kataloge sind Elemente in Fabric, die sich von anderen Elementen wie Lakehouses und SQL-Analyseendpunkten unterscheiden.

Wenn Sie einen Dremio-Katalog spiegeln, erstellt Fabric die folgenden Elemente:

Sie können auf ihre gespiegelten Dremio-Katalogdaten auf mehrere Arten zugreifen:

  • Verwenden Sie T-SQL-Befehle, um Datenobjekte vom schreibgeschützten SQL-Analyseendpunkt zu definieren und abzufragen. Jedes gespiegelte Dremio-Katalogelement verfügt über einen automatisch generierten SQL-Analyseendpunkt, der eine umfassende Analyseerfahrung bietet, die vom Spiegelungsprozess erstellt wurde.
  • Verwenden Sie Power BI mit dem Direct Lake-Modus, um Berichte für das gespiegelte Dremio-Katalogelement zu erstellen.
  • Verwenden Sie andere Fabric Workloads, um Tabellen im gespiegelten Dremio-Katalogelement abzufragen.

Gespiegelte Tabellen können innerhalb von Sekunden nach der Auswahl abgefragt werden, wobei die Verteilung von End-to-End-Metadaten in der Regel in Sekunden bis zu einigen Minuten abgeschlossen ist.

Verbinden und Authentifizieren

Die Spiegelung stellt eine Verbindung mit einem Dremio Iceberg REST Catalog-Endpunkt sicher. Die folgenden Authentifizierungsmethoden werden unterstützt:

  • Bereitstellung von Zugangsdaten – Dremio stellt kurzzeitig gültige Zugangsdaten für den Zugriff auf die zugrunde liegenden Iceberg-Tabellendaten bereit.
  • Personal Access Token (PAT) – Authentifizieren mit einem von Dremio ausgestellten persönlichen Zugriffstoken.

Ausführliche Schritte zum Konfigurieren der Verbindung und Authentifizierung finden Sie im Lernprogramm: Konfigurieren des gespiegelten Dremio-Katalogs.

Metadatensynchronisierung

Wenn Sie in Fabric einen neuen gespiegelten Dremio-Katalog erstellen, ist die Option Automatisch zukünftige Tabellen synchronisieren standardmäßig aktiviert. Die folgenden Metadatenänderungen werden von Ihrer Dremio-Umgebung in Fabric wiedergegeben, wenn die automatische Synchronisierung aktiviert ist:

  • Hinzufügen von Namespaces zum Katalog
  • Löschen von Namespaces aus dem Katalog
  • Hinzufügen von Tabellen zu einem Namespace
  • Löschen von Tabellen aus einem Namespace
  • Wenn Zukünftige Tabellen automatisch synchronisieren aktiviert ist, werden neu erstellte Iceberg-Tabellen in ausgewählten Namespaces automatisch in Fabric eingeschlossen, ohne dass eine manuelle Aktualisierung erforderlich ist.
  • Schema- und Datenänderungen an vorhandenen Tabellen folgen normalen Verteilungsintervallen.

Schema/Tabellenauswahl:

  • Der Benutzer kann auswählen, welche Namespaces als Schemas eingeschlossen werden sollen, und er kann bestimmte Tabellen ausschließen.
  • Das Abwählen eines Namespaces bewirkt, dass alle Tabellen innerhalb dieses Namespaces abgewählt werden.
  • Wenn der Benutzer zurückkehrt und den Namespace auswählt, werden alle Tabellen im Namespace erneut ausgewählt.

Verwandte Inhalte

  • Last updated on