Data lake
Un archivio centrale che conserva i dati grezzi nel formato originale a basso costo, così da poterli elaborare in modi diversi in seguito senza averli prima modellati.
Un data lake è di solito costruito su un’archiviazione a oggetti e conserva come file i payload dei dispositivi, i log, le immagini e le esportazioni, spesso partizionati per data e origine. Poiché nulla viene trasformato all’ingresso, può assorbire qualsiasi cosa produca una flotta e funge da archivio da cui attingono i job di elaborazione batch, i data scientist e le pipeline di addestramento dei modelli.
Il punto debole è noto: senza governance dei dati, un lake si riempie di file non documentati che nessuno sa interpretare, e lo storico grezzo diventa un peso anziché una risorsa. Catalogare gli schemi, registrare unità di misura e versioni del firmware come metadati e applicare una politica di conservazione dei dati sono ciò che lo mantiene utile. La pipeline di dati IoT mostra dove si colloca il lake rispetto all’archiviazione “a caldo”.
Parte del Glossario IoT. Hai trovato un errore o manca un termine? Scrivici.