대도시 지역의 극한 홍수로 인한 복합영향 메커니즘 분석
극한 홍수로 인한 피해와 사회·경제적 영향을 분석하기 위해 빅데이터(big data) 분석 기법을 개발하고 적용하는 시도를 하였다. 이 연구에서는 텍스트 마이닝(text mining) 기법을 활용하여 극한 홍수로 인한 사회·경제적 영향과 관련된 핵심 단어를 도출하고 분석하였다. 텍스트 마이닝이란, 비정형적 구조를 지닌 자료를 정형화된 자료로 변환하여 핵심 단어를 도출하고 핵심 단어 간의 관계를 파악할 수 있는 빅데이터 분석 기법 중 하나이다. 텍스트 마이닝을 적용하기 위해서 이 연구에서는 웹 크롤러(Web crawler)를 활용하여 빅데이터(뉴스기사)를 수집하고 원시자료 전처리(pre-processing)를 수행하였다. 이후 KoNLPy를 활용하여 명사를 분리하고, Mallet을 이용하여 키워드 매트릭스와 토픽을 모델링한 후, Gephi를 활용하여 키워드 간 연결망을 분석하는 순서로 분석을 수행하였다.
비정형적 구조를 지닌 자료를 변환하여 핵심 단어를 도출하고 핵심 단어 간의 관계를 파악할 수 있는 빅데이터 분석 기법은 뭐야