暴雨的多源数据来源
为全面了解暴雨的基本情况、发展规律、衍生灾害、相关舆情等信息,本书从微博、政府网站、各大机构等渠道获取了暴雨的定义、划分标准、降雨量、次生灾害等数据。通过中国气象局官网可以得知关于暴雨的分类标准,即每小时降雨量16毫米以上,或连续12小时降雨量30毫米以上,或24小时降雨量为50毫米及以上的降雨才能称为暴雨。根据降雨量的多少,暴雨又可划分为暴雨、大暴雨和特大暴雨。此外,本书借助温室数据共享平台等开放权威网站进行数据爬取,使用python requests、pandas库,得到全国除香港、澳门、台湾地区外31个省(市、自治区)自2010—2019年的降雨量数据,经过对站点的严谨筛选,除去站点数过少的省(市、自治区),得到最终具有较高可信度的暴雨降雨量数据共12969条,由此得到暴雨10年间的时空分布,并单独筛选数据,得到一小时降雨量高于200毫米的大暴雨和特大暴雨在我国的分布情况。针对新浪微博客户端,本书使用python scrapy框架爬取微博官方报道底下的评论数据,使用jieba进行分词,使用正则表达式处理评论文本信息,得到具体包括《人民日报》、新华社、澎湃新闻在内的大约120家主流媒体近5年间有关暴雨的历史报道,共有效报道12969条,并进一步爬取报道相关的网民评论,对于报道和评论进行词云分析,得到暴雨期间媒体和民众的关注领域。(https://www.daowen.com)
除了从中国气象局、温室数据共享平台、微博等渠道获得对暴雨的描述数据外,本书还进一步从爬取的12969条微博有效报道中提取有关暴雨次生灾害的报道共2875条,探究暴雨与有关次生灾害的关系,总结出更全面的暴雨发展规律。中国气象爱好者的微博数据为本文暴雨的定义、成因提供了大量资料支持,也为有关暴雨基本情况的介绍提供了专业视角。