대도시 지역의 극한 홍수로 인한 복합영향 메커니즘 분석
웹 크롤러는 웹상의 URL을 추출하여 텍스트, 그림, 소리, 영상 등 수많은 정보를 수집하고 저장하여 이를 자동으로 데이터베이스(DB)화하는 프로그램이며, 봇(Bot), 웜(Worms), 웹 스파이더(web spider), 웹 로봇(web robot) 등 다양한 이름으로 불린다. 웹 크롤러의 목적은 짧은 시간 동안 최대한 많은 양의 정보를 수집하는 것으로(Stanford_IR, 2010), 제한된 자원 내에서 이용자가 원하는 정보를 보다 효율적으로 수집하는 기능을 한다. 웹 크롤러의 예로는 구글(Googlebot), 빙(Bingbot), MSN(msnbot), 네이버(NaverBot), 다음(Daumoa), 줌인터넷(Zumbot) 등이 있으며, 현재 구글(Google), 야후(Yahoo), 네이버(Naver) 등의 대형 검색 포털 엔진은 자체적인 웹 크롤러를 개발·활용하여 수집한 정보를 정리하여 이용자에게 보다 빠르고 정확한 검색 결과를 제공하고 있다. 이러한 검색 포털 엔진들은 사용자가 특정 검색어를 입력하면, 서버에 저장되어 있는 정보를 불러와 사용자의 요청에 맞는 정보를 제공하고 있다. 
웹 로봇 및 웜 등 다양한 이름으로 불리고 한정된 자원 내에서 이용자가 원하는 정보를 효율적으로 수집하는 기능을 하는 것은 뭐니