Vertikala sökmotorer använder fokuserad crawler som sin nyckelkomponent och utveckla några specifika algoritmer för att välja webbsidor som är relevanta för vissa fördefinierade uppsättning av ämnen. Crawlers är programvara som kan korsa internet och hämta webbsidor genom hyperlänkar. Den fokuserade crawler av en special-purpose sökmotor syftar till att selektivt söka ut sidor som är relevanta för en fördefinierad uppsättning av ämnen, snarare än att utnyttja alla regioner på webben. Att upprätthålla valuta för sökmotorindex genom uttömmande krypning blir snabbt omöjligt på grund av den ökande storleken på webben. Focused crawler syftar till att söka endast delmängd av webben relaterad till ett specifikt ämne, och erbjuda en potentiell lösning på problemet. En fokuserad krypare är en agent som riktar sig till ett visst ämne och besöker och samlar bara ett relevant, smalt webbsegment samtidigt som man försöker att inte slösa resurser på irrelevant material. Eftersom kryparen bara är ett datorprogram, kan den inte avgöra hur relevant en webbsida är. Det största problemet är hur man hämtar maximal uppsättning av relevanta och kvalitet sida. I vårt föreslagna tillvägagångssätt, klassificerar vi obesökt URL baserat på besökta webbadresser attribut poäng, dvs. obesökta webbadresser är relevanta för ämnen eller inte, och sedan besluta baserat på sådd sida attribut poäng. Baserat på poäng, vi sätter "Ja" eller "Nej" värden i tabellen. URL:s attribut är: det"s Anchor text relevans, dess beskrivning i Google sökmotor och beräknar likheten poäng i beskrivning med ämne sökord, sammanhållen text likhet med ämne sökord och Relevans poäng på sina moderbolag sidor. Relevanspoäng beräknas baserat på vektorrymdmodellen. Klassificeringen görs enligt Naïve Bayesian klassificeringsmetoder.
Den maximala uppsättningen relevanta och kvalitet sida ska hämtas REF.
Unvisited URL Relevancy Calculation in Focused Crawling Based on Naïve Bayesian Classification
{'venue': None, 'journal': 'International Journal of Computer Applications', 'mag_field_of_study': ['Computer Science']}