|
|||||
|
|
| 基于移动代理(Agent)的智能爬虫系统的设计和实现 | |
| 引用本文： | 王星,刘李敦.基于移动代理(Agent)的智能爬虫系统的设计和实现[J].科技资讯,2007(28):4-6. |
| 作者姓名： | 王星 刘李敦 |
| 作者单位： | 三峡大学华海职校建行三峡分行,湖北宜昌,443000 |
| 摘 要： | 提出了一种基于移动代理的的爬虫系统,系统中爬虫代理运行在远程Web服务器上,它将集中在服务器端的任务如特征提取、建立索引等分散到远程的Web服务器上并行运行,而且代理个数是可控的,最后将少量的数据回传到服务器端,这不仅提高了效率而且减小了网络传输量. |
| 关 键 词： | 网络爬虫 移动代理 并行化搜索 |
| 文章编号： | 1672-3791(2007)10(a)-0004-03 |
| 本文献已被 维普 万方数据 等数据库收录！ | |