Come inviare online file di dati di grandi dimensioni
I file di dati di grandi dimensioni vengono scambiati regolarmente tra i gruppi di lavoro tecnici e superano di diversi ordini di grandezza i limiti della posta elettronica. La strada praticabile è un servizio di trasferimento file specializzato: il dataset viene caricato una sola volta e consegnato tramite un link per il download, senza allegati e senza account per chi riceve.
Chi invia file di dati di grandi dimensioni
I file di dati di grandi dimensioni circolano soprattutto tra ricercatori, ingegneri e analisti. Sono il prodotto di campagne di misurazione, simulazioni numeriche, rilievi sul campo o esportazioni da sistemi in produzione, e vengono consegnati a colleghi, committenti o istituzioni partner.
Lo scambio attraversa quasi sempre i confini di una singola organizzazione: un laboratorio che consegna i dati grezzi a un'università partner, uno studio tecnico che trasmette i modelli al committente, un reparto di analisi che passa un'esportazione al fornitore esterno che la elaborerà.
Proprio perché il destinatario non fa parte della stessa infrastruttura interna, le cartelle di rete condivise e i sistemi aziendali non sono utilizzabili. Serve un canale che funzioni dall'esterno, senza configurazioni e senza l'intervento dei reparti IT delle due organizzazioni.
Perché si usano servizi specializzati
La ragione principale è la dimensione. Un allegato di posta elettronica si ferma intorno ai 25 MB, mentre un dataset parte in genere da qualche gigabyte e arriva senza difficoltà alle centinaia. Tra i due valori ci sono diversi ordini di grandezza, quindi non si tratta di ottimizzare un invio, ma di cambiarne il metodo.
La seconda ragione è la durata del trasferimento. Il caricamento di un dataset non si esaurisce in pochi secondi: può richiedere ore, e in quel tempo la connessione deve reggere. I servizi di trasferimento file sono progettati per questo scenario e mantengono lo stato del caricamento, mentre un canale pensato per i messaggi non lo fa.
La terza ragione è organizzativa. Il dataset non viene quasi mai consegnato una sola volta a una sola persona: viene ripreso, richiesto di nuovo, condiviso con un secondo gruppo di lavoro. Un servizio che unisce trasferimento e spazio di archiviazione copre entrambe le esigenze senza duplicare i dati in strumenti diversi.
Infine conta la semplicità per chi riceve. Tutto avviene nel browser, non c'è nulla da installare e il destinatario non ha bisogno di un account: apre il link e scarica. Nei rapporti tra istituzioni diverse questo elimina la parte più lenta della consegna, cioè la creazione di accessi.
Consegne di dati tipiche
Le dimensioni cambiano molto a seconda del settore, ma alcuni ordini di grandezza si ripetono con regolarità.
| Ambito | Materiale tipico | Dimensione |
|---|---|---|
| Ricerca | Serie di misurazioni, output di simulazioni | da 10 GB a diversi TB |
| Ingegneria | CAD, BIM, log di sensori | da 5 a 50 GB |
| Analisi dei dati | Dump di database, log di eventi | da 1 a 100 GB |
| Media | Raccolte di immagini e video | 50 GB e oltre |
| Scienze della vita | Dati di sequenziamento e imaging | 100 GB e oltre |
Come inviare un dataset
- Raggruppare i file di piccole dimensioni in un unico archivio, per evitare il sovraccarico dovuto alla gestione di ogni singolo elemento.
- Aggiungere una descrizione in formato testo con la struttura del dataset, i formati impiegati e le unità di misura.
- Caricare il materiale da una connessione via cavo, possibilmente al di fuori delle ore di punta.
- Impostare una scadenza che copra il tempo di elaborazione del destinatario, non soltanto il momento del download.
- Condividere il link per il download oppure mantenere il dataset nello spazio di archiviazione, se più gruppi di lavoro dovranno accedervi.
Con MyAirBridge un primo invio si può effettuare gratuitamente fino a 20 GB per trasferimento, senza registrazione né per chi invia né per chi riceve e con un numero illimitato di download. I trasferimenti gratuiti scadono automaticamente dopo tre giorni.
Per volumi superiori il limite per trasferimento sale a 50 GB con il piano Basic, a 250 GB con il piano Pro e diventa illimitato con Enterprise. I piani a pagamento offrono inoltre una velocità di caricamento e di download superiore, che su un dataset di decine di gigabyte incide in modo concreto sui tempi di consegna.
Che cosa conta davvero nello scambio di dati
- integrità: il file consegnato deve essere identico byte per byte all'originale
- documentazione: un dataset senza descrizione è difficile da riutilizzare
- disponibilità: l'elaborazione comincia spesso settimane dopo la consegna
- giurisdizione: i dati di ricerca e i dati sanitari devono spesso restare nell'Unione Europea
- ripetibilità: lo stesso dataset viene richiesto di nuovo a distanza di tempo
MyAirBridge consente trasferimenti fino a 250 GB con il piano Pro e senza limite con Enterprise, e conserva i dati in un data center a Praga, nella Repubblica Ceca, quindi all'interno dell'Unione Europea e sotto il GDPR.
Sul fronte della disponibilità, dal piano Basic in su la scadenza è configurabile, compresa l'opzione di non farla scadere affatto: il link resta valido per tutta la durata del progetto. In alternativa il dataset può restare nello spazio di archiviazione, che parte da 200 GB con Basic, arriva a 2 TB con Pro ed è illimitato con Enterprise, con la possibilità di aggiungere capacità a blocchi di 1 TB su Pro ed Enterprise.
Quando più persone lavorano sullo stesso materiale, le cartelle condivise con permessi di sola lettura oppure di lettura e scrittura evitano di rispedire i file a ogni revisione: chi contribuisce carica direttamente nella cartella e il resto del team vede subito la versione aggiornata.
Domande frequenti
Perché i dataset di grandi dimensioni non si inviano per email?
Perché superano di diversi ordini di grandezza il limite degli allegati, che si ferma intorno ai 25 MB. Molti sistemi di posta, inoltre, bloccano determinati tipi di allegato.
Chi trasferisce abitualmente dataset di grandi dimensioni?
Ricercatori, ingegneri, analisti e gruppi di lavoro delle scienze della vita, spesso tra istituzioni con sede in Paesi diversi.
Quanto può essere grande un dataset da trasferire?
Fino a 250 GB per trasferimento con il piano Pro e senza limite con il piano Enterprise. Gratuitamente si arriva a 20 GB per trasferimento.
Riepilogo
Un dataset richiede una consegna che ne preservi l'integrità, porti con sé la documentazione e resti disponibile abbastanza a lungo perché l'elaborazione possa cominciare. Raggruppare i file piccoli in un archivio, trasferire da una connessione stabile e conservare i dati in uno spazio di archiviazione nell'Unione Europea copre i requisiti pratici dello scambio tra ricerca e ingegneria. MyAirBridge arriva a 20 GB gratuiti, a 250 GB con Pro e a trasferimenti illimitati con Enterprise, con archiviazione a Praga.