Grote leveringen plannen: doorlooptijd, bandbreedte en geautomatiseerd uploaden

Een levering is pas bruikbaar als alle bestanden daadwerkelijk zijn aangekomen. Bij puntenwolken en panoramaleveringen loopt dat al snel in de terabytes, en dan bepaalt de internetverbinding de doorlooptijd. Dit artikel helpt je die doorlooptijd vooraf in te schatten en het uploaden zo in te richten dat het zonder toezicht doorloopt.

Reken eerst de doorlooptijd uit

Kijk naar de uploadsnelheid van de locatie waar de data staat, niet naar de downloadsnelheid. Veel aansluitingen zijn asymmetrisch: 1 Gbit binnenkomend en een fractie daarvan uitgaand. De praktijkwaarden hieronder gaan uit van ongeveer zeventig procent van de theoretische snelheid, wat realistisch is bij een bekabelde verbinding die verder niet zwaar wordt belast.

Een levering van 20 TB over een lijn van 500 Mbit/s kost dus ongeveer een week aaneengesloten uploaden. Weet je dat vooraf, dan plan je de levering daarop in plaats van dat je er halverwege achterkomt.

Upload buiten kantooruren

Een upload die overdag draait, gebruikt de bandbreedte die collega's nodig hebben. In de praktijk is dat de belangrijkste reden dat een IT-afdeling een levering stillegt. Plan het uploaden daarom in de avond, de nacht en het weekend. Daarmee benut je de uren die anders ongebruikt blijven, en je hebt zelden een probleem met capaciteit.

Dat vraagt wel dat het uploaden doorloopt zonder dat er iemand bij zit:

• Zet de slaapstand van de computer uit en zorg dat de schijf met de data bereikbaar blijft.
• Gebruik een bekabelde verbinding. Wifi en een VPN-tunnel zijn beide trager en vallen vaker weg.
• Laat de browser openstaan als je via Manage files uploadt; sluit je het tabblad, dan stopt de overdracht.

Geautomatiseerd en hervatbaar uploaden

Voor grote of terugkerende leveringen is een S3-client beter dan de browser. Zo'n client hervat een afgebroken overdracht, verwerkt hele mappenbomen en is in te plannen.

Begin met een proeflevering

Stuur bij een nieuw inwinsysteem of een nieuw ingest template eerst een kleine, complete set: één rit of één vlucht, met alle bestandstypen, metadata en de volledige mappenstructuur. Die valideer je in minuten. Pas als de validatie slaagt, start je de volledige levering. Een afgekeurde levering van 20 TB kost een week, een afgekeurde proeflevering kost een kwartier.

De meeste afgekeurde leveringen komen door een afwijkende mappenstructuur of bestandsnaam, zie Veelgemaakte fouten bij aanleveren en lagen.

Als het niet past

Komt de doorlooptijd op basis van de tabel hierboven uit op meerdere weken, of is de verbinding op de inwinlocatie te beperkt, meld dat dan vooraf via Stel een vraag of geef feedback. Er zijn dan alternatieven mogelijk, afhankelijk van de omvang en de plek waar de data staat.