Grid Datafarm arkitektur är utformad för global petascale dataintensiv databehandling. Det ger en global parallell filsystem med online petascale lagring, skalbar I/O bandbredd, och skalbar parallell bearbetning, och det kan utnyttja lokala I/O i ett rutnät av kluster med tiotusentals noder. En av funktionerna är att den hanterar filkopior i filsystemmetadata för feltolerans och lastbalansering. Detta dokument diskuterar och utvärderar flera tekniker för att stödja fjärrsnabb filreplikation. Grid Datafarm hanterar en rangordnad grupp av filer som en Gfarm fil, varje fil, kallas en Gfarm filfragment, lagras på en filsystem nod, eller replikeras på flera filsystem noder. Varje Gfarm filfragment replikeras självständigt och parallellt med hjälp av hastighetsstyrda HighSpeed TCP med nätverksband. På en USA-Japan testbädd med 10 000 km avstånd, uppnår vi 419 Mbps med 2 noder på vardera sidan, och 741 Mbps med 4 noder av 893 Mbps med två transpacific nätverk.
För filreplikation över Stilla havet har 741 Mbps överföringshastighet uppnåtts av 893 Mbps länk REF.
Worldwide Fast File Replication on Grid Datafarm
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}