Den snabba tillväxten av World Wide Web (WWW) innebär aldrig tidigare skådade skalningsutmaningar för vanliga krypare. Crawlers är programvara som kan korsa internet och hämta webbsidor genom hyperlänkar. Den fokuserade crawler av en special-purpose sökmotor syftar till att selektivt söka ut sidor som är relevanta för en fördefinierad uppsättning av ämnen, snarare än att utnyttja alla regioner på webben. Focused crawler är utvecklad för att samla relevanta webbsidor med intresserade ämnen från Internet. Att upprätthålla valuta för sökmotorindex genom uttömmande krypning blir snabbt omöjligt på grund av den ökande storleken på webben. Focused crawlers syftar till att söka endast delmängd av webben relaterad till ett specifikt ämne, och erbjuda en potentiell lösning på problemet. I vårt föreslagna tillvägagångssätt, beräknar vi länken poäng baserat på genomsnittliga resiliens poäng för föräldrasidor (eftersom vi vet att föräldrasidan alltid är relaterad till barn sida vilket innebär att för detaljerad information någon författare föredrar barn sidan) och division poäng (betyder hur många ämne sökord hör till division där särskild länk hör). Efter att ha tagit reda på länkpoäng jämför vi länkpoängen med ett visst tröskelvärde. Om länkpoängen är större än eller lika med tröskelvärdet, då är det relevant länk. Annars kastas den. Focused crawler hämtar först den länk som har större värde jämfört med alla länkpoäng och tröskel.
D. Hati och A. Kumar REF föreslog ett tillvägagångssätt där crawler först hämtar de webbadresser som har hög länkpoäng jämfört med alla andra länkpoäng.
An Approach for Identifying URLs Based on Division Score and Link Score in Focused Crawler
{'venue': None, 'journal': 'International Journal of Computer Applications', 'mag_field_of_study': ['Computer Science']}