Data-tieroplossing

Het klimaatteam van TaiESM heeft in de nabije toekomst meer dan 10 petabyte (PB) opslagcapaciteit voor gegevens nodig om de grotere vraag naar gegevens voor modellering aan te kunnen. De beschikbaarheidspercentages van bestaande opslag en de beperkte serverruimte voldoen niet langer aan hun vereisten voor toepassingen en werkbelasting. De toenemende frequentie van gegevensuitwisseling en verbeterde gegevensverzameling betekent dat het team altijd behoefte heeft aan permanente beschikbaarheid, snelheid en verbeterde gegevensbescherming.

Om de tweede fase van TaiESM te realiseren, heeft het Environmental Change Research Center meer gegevensopslagcapaciteit nodig, om krachtigere gegevensanalyses en hogere visuele resoluties mogelijk te maken en tegelijk een gestructureerde gegevenstoename te beheren die wordt bemoeilijkt door gegevensgroei en wildgroei van gegevens.

De bestaande opslagruimte, prestaties en beschikbaarheidsgraad van de opslagapparatuur voldeden niet langer aan de toepassings- en werkbelastingsvereisten van het team. Om hun opslag toekomstbestendig te maken en op te schalen, zodat deze meer onderzoeksgegevens en analyserapporten aankan, moet de opslagapparatuur onmiddellijk worden uitgebreid.

De gegevensgroei van het Research Center is de capaciteit van een gewoon onderzoeksinstituut ver te boven gegaan. De huidige capaciteit voor onderzoeksgegevens bij het Environmental Change Research Center is ongeveer 3 PB. Het centrum voorspelde dat de hoeveelheid klimaatgegevens de komende vier jaar met minstens nog eens 10 PB zal toenemen. Het klimaatteam simuleert ten minste 2 tot 4 terabyte (TB) aan gegevens per dag, en voor hun vereisten is een naadloze uitwisseling van klimaatgegevens nodig in plaats van gegevens in silo's.

Tegelijkertijd moet ook de resolutie van modellering dringend worden verbeterd. De huidige versie van TaiESM bood resoluties die niet ideaal waren voor onderzoek. Om landformaties en weersomstandigheden zoals tyfoons nauwkeurig te simuleren, wil het team zijn horizontale resolutie verhogen met een factor van minstens 4. Deze viervoudige toename van de resolutie zou in ieder geval leiden tot een zestienvoudige toename van de hoeveelheid gegevens.

Als het gaat om het realistisch en praktisch nabootsen van weersomstandigheden in het klimaatonderzoekslaboratorium, worden de behoeften van het team alleen maar lastiger. Een belangrijk obstakel is het simuleren van het langetermijngemiddelde van de weersomstandigheden, aangezien de temperatuur van land tot oceaan verandert. Technologie heeft de opslagcapaciteit en rekennauwkeurigheid verbeterd, waardoor meer rasters of aardsectoren mogelijk zijn en modelvoorspellingen verbeteren. Hoewel het verwerken van meer onbewerkte gegevens leidt tot meer mogelijkheden voor middelen, creëert het verwerken ook nog meer gegevens.

Om een ​​visuele resolutie tot wel 25 km na te streven, genereert het team 32 TB tot 64 TB aan gegevens per dag. Het klimaatteam van Academia Sinica moet voortdurend module-instellingen aanpassen en kalibreren, en gegevens vergelijken die door elke afzonderlijke module-instelling worden geproduceerd, wat op zich ook ook weer gegevens genereert. Effectieve en betrouwbare gegevensopslag is dan ook cruciaal voor het team. Hardeschijfstoringen waren een belangrijk pijnpunt, waarbij vaak vier tot tien defecte eenheden per maand moesten worden vervangen.