全文总字数：1901字

1. 研究目的与意义及国内外研究现状

本课题的目的是：

设计一个爬虫系统，从公共网站自动抓取有关气象灾害报道与评论，统计分析舆情状态，为改进气象服务提供有价值的资料。

2. 研究的基本内容

采集近些年我国发生的气象灾害数据，分析公众对灾情及相关救援工作的看法。

1.根据网站的主体特征构造url，作为爬虫的入口。解析下载的web页面内容，抽取有用的数据。如果页面经过ajax动态加载，可能无法获得完整的页面信息。

3. 实施方案、进度安排及预期效果

实行方案：

阅读文献，了解我国气象灾害的分布特点，以及对公众生产生活的影响。

4. 参考文献

[1]ajax crawler,international conference on data engineering,2012:27-30.

[2]丁杰、朱立鹏、胡斌、韩海韵、孙大燕，面向多级调度管理的融合型搜索引擎 ,电力系统自动化 ,2014 , 38 (3) :150-154