Immagine AI

Databricks ha annunciato la disponibilità in beta pubblica di Genie ZeroOps, un agente autonomo progettato per monitorare le infrastrutture di elaborazione dei dati, identificare anomalie operative, ricostruire le cause dei malfunzionamenti e predisporre interventi correttivi sul codice delle pipeline. Presentato inizialmente nel giugno 2026, il sistema è stato sottoposto a una fase di sperimentazione privata che ha coinvolto centinaia di aziende e durante la quale sono state osservate oltre 80.000 problematiche operative. Secondo Databricks, più della metà delle anomalie individuate richiedeva conoscenze specifiche dell’organizzazione per essere correttamente interpretata e risolta. La nuova versione introduce pertanto strumenti per personalizzare il comportamento dell’agente, condividere le segnalazioni tra i componenti dei gruppi di lavoro e integrare le procedure di correzione con i sistemi di versionamento del software.

Genie ZeroOps opera in background, senza richiedere l’invio di istruzioni da parte dell’utente a ogni nuova anomalia, monitorando job, pipeline e tabelle all’interno del workspace Databricks. Le procedure di analisi comprendono sia gli errori espliciti di esecuzione sia le anomalie silenziose, come il mancato aggiornamento di una tabella, il ritardo nell’acquisizione dei dati o una riduzione anomala del numero di record elaborati. Attraverso l’integrazione con Unity Catalog, l’agente può ricostruire le relazioni di dipendenza tra le risorse, consultare i registri di esecuzione, analizzare il codice sorgente ed eseguire interrogazioni SQL. La ricostruzione della causa originaria tiene quindi conto anche delle modifiche intervenute nelle sorgenti dati e negli asset utilizzati dalle elaborazioni successive. Le correzioni proposte possono essere sottoposte a test unitari ed esecuzioni simulate all’interno di un ambiente isolato prima della loro applicazione.

La personalizzazione dell’agente avviene attraverso istruzioni che descrivono le convenzioni adottate dall’organizzazione, le sorgenti caratterizzate da malfunzionamenti ricorrenti, le modalità preferenziali di correzione e gli eventi che non richiedono segnalazioni. Le notifiche possono essere distribuite mediante Slack, Microsoft Teams, PagerDuty e webhook generici, mentre la configurazione dell’agente può essere condivisa con un massimo di 25 utenti individuali del workspace. La condivisione rende accessibili anche gli estratti di codice, i campioni di dati e le correzioni inclusi nelle segnalazioni, pur senza attribuire automaticamente ai destinatari l’accesso alle risorse originarie.

Per i job associati a repository Git, Genie ZeroOps può predisporre modifiche al codice e generare i contenuti necessari all’apertura di una pull request. L’invio delle modifiche al repository richiede un’istruzione esplicita e la conferma dell’utente, oltre alla disponibilità delle credenziali di scrittura. Il sistema aggiunge un nuovo commit senza riscrivere la cronologia del repository. Databricks segnala tuttavia la necessità di configurare adeguatamente le regole di protezione dei branch, poiché l’indicazione diretta del branch principale potrebbe consentire l’inserimento delle modifiche senza il consueto processo di revisione.

L’infrastruttura utilizza modelli linguistici di Anthropic e OpenAI attraverso endpoint ospitati da Databricks all’interno del proprio perimetro di sicurezza. Prima della trasmissione delle notifiche esterne, vengono effettuati controlli per individuare e mascherare eventuali informazioni sensibili. L’attivazione della beta richiede l’intervento di un amministratore del workspace e comporta una prima acquisizione delle anomalie rilevate nelle 24 ore precedenti. Attualmente il monitoraggio non comprende modelli di machine learning, applicazioni, regressioni delle prestazioni o incrementi dei costi. Il rilevamento delle anomalie qualitative delle tabelle richiede inoltre il servizio Data Quality Monitoring, soggetto a fatturazione separata, mentre la beta non risulta conforme ai requisiti HIPAA.

Questo articolo è stato redatto con il supporto di strumenti di intelligenza artificiale (AI)

Di Fantasy