Webbarkiv bevarar webbplatsernas historia och har ett högt långsiktigt värde för media och affärsanalytiker. Sådana arkiv underhålls av periodiskt återkommande hela webbplatser av intresse. Ur arkivariens synvinkel skulle det idealiska fallet för att säkerställa högsta möjliga datakvalitet i arkivet vara att "frysa" hela innehållet på en webbplats under den tid det tar att krypa och fånga platsen. Detta är naturligtvis praktiskt taget ogenomförbart. För att uppfylla specifikationen för artighet på en webbplats måste kryparen pausa mellan efterföljande http-förfrågningar för att undvika onödigt hög belastning på webbplatsens http-server. Som en följd av detta, fånga en stor webbplats kan spänna timmar eller till och med dagar, vilket ökar risken för att innehåll som hittills samlats in är inkonsekventa med de delar som fortfarande är kvar att krypa. I detta dokument införs en modell för att identifiera sammanhängande delar av ett arkiv och därmed mäta datakvaliteten i webbarkivering. Dessutom presenterar vi en krypande strategi som syftar till att säkerställa arkivkonsistens genom att minimera spridningen av webbplats fångar. Preliminära experiment visar hur användbar modellen är och hur effektiv strategin är.
I REF föreslår författarna en krypande strategi för att förbättra samstämmigheten mellan krypande platser.
Data quality in web archiving
{'venue': 'In WICOW', 'journal': None, 'mag_field_of_study': ['Computer Science']}