2。2 可行性分析 4

2。3 用例图分析 4

2。4 用例描述 5

3系统总体设计 7

3。1 系统功能模块设计 7

3。2 数据库设计 7

3。2。1 数据库的功能分析 7

3。2。2 E-R图数据库概念设计 8

3。2。3 数据库逻辑设计 8

3。2。4 数据库定义 8

4 系统详细设计 11

4。1 任务管理模块 11

4。1。1 功能概述 11

4。1。2 流程设计 11

4。1。3 算法设计 12

4。2 信息采集模块 16

4。2。1 功能概述 16

4。2。2 流程设计 16

4。2。3 算法设计 18

4。3 内容分析模块 21

4。3。1 功能概述 21

4。3。2 流程设计 22

4。3。3 算法设计 23

4。4 用户管理模块 28

4。4。1 功能概述 28

4。4。2 流程设计 28

4。4。3 算法设计 29

5 系统测试 33

5。1 软件测试基础 33

5。2 单元测试 33

6   毕业设计总结 40

6。1 系统完成情况 40

6。2 系统的进一步研究 40

6。3 心得和体会 40

致 谢 41

参考文献 42

1绪论

1。1课题的研究背景

搜索引擎作为互联网最大的数据共享中心，已经成为各种数据应用的主要信息来源，即数据应用首先到搜索引擎上采集数据，然后经过分析加工后向用户提供服务。不同的搜索引擎各有自己的特色，所提供的数据也不完全相同。例如百度搜索对国内网站的覆盖率较好，而Google搜索对国外网站的覆盖率更高。因此，同时从多个搜索引擎上采集数据，并进行分析，则能够获取更加全面的信息，为用户提供更加优质的服务。为了实现该目标，本课题设计并实现了一个多搜索引擎信息采集分析系统。