Sökmotorer har blivit ett oumbärligt verktyg för att surfa information på Internet. Användaren är dock ofta irriterad över överflödiga resultat från irrelevanta webbsidor. En anledning är att sökmotorer också titta på icke-information block av webbsidor som reklam, navigationslänkar, etc. I detta dokument föreslår vi en snabb algoritm som heter FastContentExtractor för att automatiskt upptäcka huvudsakliga innehållsblock på en webbsida genom att förbättra ContentExtractor algoritmen. Genom att automatiskt identifiera och lagra mallar som representerar strukturen av innehållsblock på en webbplats, kan innehållsblock på en ny webbsida från webbplatsen extraheras snabbt. Den hierarkiska ordningen för utgångsblocken upprätthålls också vilket garanterar att de extraherade innehållsblocken är i samma ordning som de ursprungliga blocken.
Nguyen m.fl. REF föreslog ett tillvägagångssätt för att automatiskt extrahera primärt textinnehåll på webbsidor genom att identifiera och lagra mallar som representerar Xpath-strukturen för textinnehållsblock på webbplatser.
A Fast Template-based Approach to Automatically Identify Primary Text Content of a Web Page
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}