Alation svela partnership rafforzate con Databricks, DBT

metamorworks - stock.adobe.com

Martedì Alation ha svelato partnership ampliate con Databricks e DBT Labs volte ad aiutare gli utenti ad acquisire una comprensione più profonda dei propri dati e una migliore visione dei cambiamenti e delle trasformazioni sottostanti.

Con sede a Redwood City, California, Alation è uno specialista di cataloghi di dati i cui strumenti consentono alle organizzazioni di organizzare e accedere alle proprie risorse di dati.

All’inizio di novembre 2022, il venditore ha raccolto 123 milioni di dollari in finanziamenti di serie E per portare il suo finanziamento totale a 315 milioni di dollari. Nel corso del mese, Alation ha lanciato uno strumento che consente agli utenti di fogli di calcolo di estrarre set di dati affidabili e regolamentati dal proprio catalogo dati in piattaforme di fogli di calcolo basate su cloud, tra cui Fogli Google e Microsoft Excel.

Ora, il fornitore sta aggiungendo nuove integrazioni sia con Databricks che con DBT Labs come parte delle sue partnership ampliate con i due.

Alation disponeva di un connettore preesistente a Databricks che consentiva ai clienti comuni di organizzare e accedere ai propri dati archiviati nelle case sul lago di Databricks per l'utilizzo in progetti di analisi e scienza dei dati.

La partnership rafforzata tra i fornitori aggiunge connettività a Unity Catalog di Databricks, un catalogo di dati interno al lago che consente alle organizzazioni di mettere in atto misure di data governance e data lineage. Il catalogo Unity è stato rilasciato per la prima volta in anteprima nel 2021 e reso generalmente disponibile a giugno 2022.

È l'aggiunta di risorse di dati e analisi archiviate in Lakehouse al catalogo dati di Alation - e la possibilità di accedere a tali risorse di dati e analisi con Alation - che rende significativa l'integrazione migliorata, secondo Stewart Bond, analista di IDC.

"L'integrazione... [fornisce] una migliore visibilità nell'ambiente Databricks per gli analisti di dati aziendali e fornisce una visione più completa di tutte le risorse di dati per l'incorporazione nei processi di derivazione dei dati e di governance", ha affermato.

Ha aggiunto che Unity Catalog di Databricks è creato per un pubblico target di esperti di dati tecnicamente esperti, mentre i cataloghi di dati tipici come quelli creati da Alation e Collibra sono spesso rivolti a utenti self-service che hanno bisogno di trovare e lavorare con dati affidabili senza avere per scrivere codice.

Il nuovo connettore risponde alle esigenze dei data engineer e dei data scientist che a volte non sono soddisfatti dal catalogo dati esistente di Alation.

"Il catalogo Unity in Databricks è molto tecnico e serve una persona diversa rispetto alla persona tipica che utilizza il catalogo Alation", ha affermato Bond.

Alation aveva anche un rapporto preesistente con DBT Labs che risale all'ottobre 2022, quando i due formarono la loro partnership iniziale. Ora, Alation sta aggiungendo un nuovo connettore che fornisce supporto per DBT Core e DBT Cloud in Alation.

DBT Core è uno strumento open source che consente agli ingegneri dei dati di trasformare i propri dati. DBT Cloud è la versione ospitata della piattaforma DBT, un servizio gestito che fornisce un'interfaccia utente basata sul Web per la trasformazione dei dati.

Il connettore consentirà agli utenti congiunti di estrarre descrizioni per dati curati e derivazione di dati per data warehouse come Snowflake e PostgreSQL fuori dall'ambiente di DBT. Possono quindi spostare le descrizioni e la derivazione in Alation per visualizzare e comprendere più facilmente le trasformazioni nei dati sottostanti.

"L'integrazione con DBT è significativa in quanto fornisce agli ingegneri dei dati descrizioni migliori di modelli, colonne e derivazione dei dati", ha affermato Bond. "Fornisce inoltre una funzionalità che gli utenti DBT possono sfruttare per gestire e controllare i gruppi di risorse DBT, offrendo l'opportunità di includere risorse DBT in processi di governance dei dati più ampi."

Nel complesso, il risultato dei nuovi connettori di Alation per Databricks e DBT Labs è una migliore comprensione complessiva dell'ecosistema dei dati di un'organizzazione, ha continuato.

"Le nuove funzionalità forniscono agli utenti di Databricks, DBT e Alation un contesto migliore, una connettività più profonda, una derivazione e una visibilità nel moderno ambiente di dati, fornendo a tutti un livello più profondo di intelligenza", ha affermato Bond.