组成结构编辑

信息采集系统：信息采集系统以网络信息挖掘引擎为基础构建而成,它可以在最短的时间内,帮您把最新的信息从不同的Internet站点上采集下来,并在进行分类和统一格式后,第一时间之内把信息及时发布到自己的站点上去。从而提高信息及时性和节省或减少工作量。

网络信息采集员：主要从事网络信息采集工作，工作职责：

1）到网上采集一些有价值的信息。

2）及时更新网站内容。维护网站论坛。维护网站内容更新。

网络信息采集软件：适用于网站定向数据采集、分析、发布的实用软件。它可以对指定网站中的任意网页进行目标分析，归纳采集方案，提取数据并保存在文件和数据库中。 　这样的软件特别适用于网站信息的分类查询，用户可以针对不同的分类设置不同的查询条件，而不是一次性的将网站中所有信息都采集到本地，这无疑将提高信息的使用效率，避免无意义的资源消耗。

技术原理编辑

信息采集技术是指利用计算机软件技术，针对定制的目标数据源，实时进行信息采集、抽取、挖掘、处理，将非结构化的信息从大量的网页中抽取出来保存到结构化的数据库中，从而为各种信息服务系统提供数据输入的整个过程。

Web信息采集技术是通过分析网页的HTML代码, 获取网内的超级链接信息, 使用广度优先搜索算法和增量存储算法, 实现自动地连续分析链接、抓取文件、处理和保存数据的过程. 系统在再次运行中通过应用属性对比技术, 在一定程度上避免了对网页的重复分析和采集, 提高了信息的更新速度和全部搜索率。由于网站内的资源常常分布在网内不同的机器上, 信息采集系统从某个给定的网址出发, 根据网页中提供的超链接信息, 连续地抓取网页(既可以是静态的, 也可以是动态的) 和网络中的文件, 将网内的信息进行全部提取。