Prophecy, una startup di ingegneria dei dati con sede in California, sta rivoluzionando la creazione delle pipeline di dati con la sua ultima innovazione. La società è rinomata per i suoi strumenti SQL a basso codice e oggi ha annunciato il lancio di Data Copilot, un assistente di intelligenza artificiale generativa in grado di creare pipeline di dati affidabili a partire da prompt in linguaggio naturale, migliorando così la qualità delle pipeline con una maggiore copertura dei test.
Questa nuova capacità ha il potenziale di semplificare notevolmente lo sviluppo delle pipeline e permettere ai data engineer di risparmiare tempo prezioso per altre attività urgenti. In precedenza, abbiamo visto l’IA generativa utilizzata in altri aspetti dei flussi di lavoro dei dati, come l’interrogazione dei dati e la catalogazione.
Prophecy ha anche presentato una nuova piattaforma che aiuta le aziende a creare applicazioni di intelligenza artificiale generativa basate sui loro dati privati.
Storicamente, la creazione di una pipeline di dati richiedeva la scrittura di complessi codici SQL. I data engineer dovevano dedicare molto tempo ed energia solo per realizzare le pipeline richieste dagli utenti aziendali. Prophecy e altre aziende simili sono intervenute offrendo soluzioni a basso codice, come una tela visiva drag-and-drop, per semplificare il processo.
Ora, come passo successivo in questa evoluzione, Prophecy ha introdotto Data Copilot, che richiede semplicemente di esprimere in linguaggio naturale ciò che si desidera. Basta dare un comando e la piattaforma suggerirà una pipeline che unisce tutti i dati necessari per ottenere il report desiderato. L’utente può quindi visualizzare un’anteprima della pipeline e decidere se accettarla o cercarne un’altra.
Per raggiungere questo obiettivo, Raj Bains, CEO e cofondatore di Prophecy, ha spiegato che l’azienda crea un grafico di conoscenza completo dei modelli di dati di un’azienda, che include metadati tecnici associati a tabelle e schemi, metadati aziendali da cataloghi di dati e query storiche e codice eseguito su SQL, Spark o Airflow. Questo grafico viene quindi inserito in un modello di linguaggio di grandi dimensioni all’avanguardia, che traduce la query dell’utente in linguaggio naturale in una pipeline di dati performante. Il sistema impara e si migliora anche grazie al feedback dell’utente.
Oltre a Data Copilot, Prophecy sta introducendo una piattaforma per creare soluzioni di intelligenza artificiale generativa, come chatbot, utilizzando i dati aziendali privati.
Queste nuove offerte sono disponibili per l’uso a partire da oggi.