Storskaliga webbsökmotorer består av flera datacenter som är geografiskt avlägsna till varandra. Vanligtvis behandlas en användarfråga i ett datacenter som ligger geografiskt nära ursprunget till frågan, över en kopia av hela webbindexet. Jämfört med en centraliserad, encenter sökmotor, denna arkitektur erbjuder lägre svarstider frågor som nätverket latenser mellan användare och datacenter minskas. Det skalas dock inte väl med ökande indexstorlekar och frågetrafik volymer eftersom frågor utvärderas på hela webben index, som måste replikeras och underhållas i alla datacenter. Som ett botemedel mot detta skalbarhetsproblem föreslår vi en ram för dokumentreplikation där dokument selektivt kopieras på datacentra baserade på regionala användarintressen. Inom denna ram föreslår vi tre olika strategier för dokumentreplikation, var och en optimerar ett annat mål: att minska den potentiella förlusten av sökkvalitet, den genomsnittliga svarstiden för frågor, eller den totala frågebördan i söksystemet. För alla tre strategierna överväger vi två alternativa typer av kapacitetsbegränsningar på indexstorlekar av datacenter. Dessutom undersöker vi prestanda effekten av förfrågan vidarebefordra och resultat caching. Vi utvärderar våra strategier via detaljerade simuleringar med hjälp av en stor frågelogg och en dokumentsamling från Yahoo! Webbsökmotor.
Ref har föreslagit en ram för dokumentreplikation för att hantera skalbarhetsfrågorna.
Document replication strategies for geographically distributed web search engines
{'venue': 'Inf. Process. Manag.', 'journal': 'Inf. Process. Manag.', 'mag_field_of_study': ['Computer Science']}