Ultimamente mi trovo a dover gestire una mole di dati veramente grande nel mio progetto personale, e sto cercando di capire come organizzare il tutto senza che diventi un caos ingestibile. Ho letto in giro dell'approccio data mesh, che sembra promettere proprio una maggiore autonomia per i team che lavorano su domini diversi, ma non ho ben chiaro come si traduca nella pratica per una persona sola o per un piccolo gruppo. Qualcuno di voi ha mai provato a strutturare qualcosa di simile in piccolo, magari per un side project? Mi chiedo se non sia eccessivo per le mie esigenze o se invece i principi possano essere adattati.
|
Come si applica il data mesh in un piccolo progetto di dati?
|
|
Mi viene naturale pensare al data mesh ma provo anche una certa ansia. L idea di dare autonomia ai domini mi entusiasma ma temo di complicarmi con la governance e con le interfacce
Per una persona o un piccolo team si potrebbe tradurre in domini chiari e una piccola pipeline di pubblicazione dati e contratti tra produzione e consumo. data mesh qui diventa responsabilità di dominio e una governance leggera
Forse sto fraintendendo ma immagino di gestire tutto come piccoli servizi di dati e di chiamarli domini nel data mesh ma di fatto diventa solo un modo per organizzare file e notebook
Non sono convinto che sia utile per un side project. data mesh sembra una bandiera per grandi aziende e qui potrei non averne bisogno
La domanda migliore potrebbe essere quali problemi vuoi risolvere esattamente e quanto vuoi investire in manutenzione. data mesh non è una guida unica ma una cornice per pensare a responsabilita e integrazione
Mi piace l idea di responsabilita ma la mia paura e che si finisca con troppe policy e poca utilita pratica nel contesto di un progetto personale data mesh
|
|
« Precedente | Successivo »
|

