互联网信息采集程序的开发(2)
3.2.9 统计界面 13
4 各个模块内的主要功能函数及流程图 14
4.1 数据库模块 14
4.2 用户设置模块 16
4.3 信息采集模块 16
4.4 信息管理模块 17
4.5 信息统计模块 17
4.6 信息显示模块 18
4.7 更新模块 18
5 程序流程图 19
6 主要代码 20
6.1 核心代码 20
6.1.1 网页源码截取 20
6.1.2 数据入库 21
6.1.3 数据统计 21
6.2 辅助函数 23
6.2.1 字符串截取 23
6.2.2 字符串去标点 23
6.2.3 程序延时 24
7 代码调试报告 25
7.1 Flash插件的使用 25
7.2 idhttp控件的使用 25
7.2.1 idhttp与数据库访问 25
7.2.2 idhttp的转码 25
7.2.3 idhttp的独占性 26
7.3 数据入库 26
8 程序成果 27
8.1 过场动画及背景 27
8.2 选择界面 27
8.3 帮助界面 28
8.4 其他界面 28
8.5 选择界面2 29
8.6 气象界面 29
8.7 统计界面 30
8.8 管理界面 30
结 论 32
致 谢 33
参考文献34
1 引言
1.1 开发背景
在当今世界，伴随着计算机技术的飞速发展和网络技术的普及，全球早已步入了信息时代。随着手机网络技术的不断升级，网络的覆盖率变得更为广泛。网络编程技术的不断普及，新兴网站的数量快速增长。信息借助于网络，更是成几何性的，进行着爆炸式的生长。功能强大，形式丰富的网络应用，为互联网吸引了大量的用户。用户利用网络信息来服务于自身的生活、娱乐、商务等各类活动。网络用户在面对海量的信息，数以万计的各类网站时，如何才能够获取自己需要的信息，如何才能提高获取信息的效率和准确度，这就是网络信息采集要解决的问题。
1.2 课题目标
信息采集的目的在于，使得人们更有效率地从海量的互联网信息中提取出自己想要的信息，并且能够利用这些信息的潜在价值。首先，互联网是一个信息的宝库，每个人都能从中找到对自己有价值的信息。但是，需要解决的问题是，如何提高搜索目的信息的效率。信息具有时效性，超过了这一期限，信息的价值也就大打折扣了。所以快速准确获取信息的采集技术能够为人们节省大量的时间，并且有效保证了信息的时效性。
近年来，大数据的处理和针对海量信息的信息挖掘技术正越来越受到重视和青睐。因为互联网本身就是一个大数据集，一个海量信息的储藏室。合理有效提取的信息中，往往蕴含了许多宝贵的财富，比如企业亟需的客户反馈、市场动向，政府关注的舆情动向，股民们关心的政策走向和经济形势等等。市场对信息采集技术的需求，也使得对信息采集技术的研究和探索显得富有价值和意义。
1.3 研究背景
当前，互联网正处于信息爆炸的时代，信息采集技术有助于高效筛选目的信息，减少人工消耗。在搜索引擎普及应用之前，可以想象，在互联网上寻找信息，就如同在图书馆中寻找一个课题资料一样费劲。搜索引擎正是通过信息采集技术，简化了人们获取信息的过程，节约了大量的成本。
下一篇：大数据环境下电商的发展与创新