-
红叶文章采集器
3.6 绿色版
- 软件大小:5.0MB
- 更新日期:2017-01-20
- 下载次数:0次
- 软件语言:简体中文
- 软件授权:免费软件
- 软件评级:
- 安全检测:无插件无病毒
- 软件类型:国产软件
- 软件分类:制作辅助
- 软件系统:WinAll
红叶文章采集器简介
超级强大的网站文章采集器,本软件全名为红叶文章采集器,英文名称Fast_Spider,属于蜘蛛爬虫类程序,用于从指定网站采集海量精华文章,将直接丢弃其中的垃圾网页信息,仅保存具备阅读价值和浏览价值的精华文章,自动执行HTM-TXT转换。本软件为绿色软件解压即可使用!
软件特色
(1)本软件采用北大天网MD5指纹排重算法,对于相似相同的网页信息,不再重复保存。
(2)采集信息含义:[[HT]]表示网页标题,[[HA]]表示文章标题,[[HC]]表示10个权重关键字,[[UR]]表示网页中的图片链接,[[TXT]]之后为正文。
(3)蜘蛛性能:本软件开启300个线程来保证采集效率。通过采集100万精华文章来执行压力测试,以普通网民的联网计算机为参考标准,单台计算机可以在一天内遍历200万网页、采集20万精华文章,100万精华文章仅需5天就可采集完毕。
(4) 正式版与免费版的区别在于:正式版允许将采集的精华文章数据自动保存为ACCESS数据库。购买正式版请联系QQ(970093569)。
操作方法
(1)使用前,必须确保你的计算机可以连通网络,且防火墙不要拦截本软件。
(2)运行SETUP.EXE和setup2.exe,以安装操作系统system32支持库。
(3)运行spider.exe,输入网址入口,先点"人工添加"按钮,再点"启动"按钮,将开始执行采集。
注意事项
(1)抓取深度:填写0表示不限制抓取深度;填写3表示抓到第3层。
(2)通用蜘蛛模式与分类蜘蛛模式的区别:假定网址入口为“http://youxi.baidu.com/”,若选择通用蜘蛛模式,将遍历“baidu.com”里面的每一个网页;若选择分类蜘蛛模式,则只遍历“youxi.baidu.com”里面的每一个网页。
(3) 按钮“从MDB导入”:网址入口从TASK.MDB中批量导入。
(4)本软件采集的原则是不越站,例如给的入口是“http://youxi.baidu.com/”,就只在百度站点内部抓取。
(5)本软件采集过程中,偶尔会弹出一个或数个“错误对话框”,请不予理会,倘若关闭“错误对话框”,采集软件就会挂掉。
(6)使用者如何选择采集题材:例如你若想采集 “股票类”文章,只需把那些“股票类”站点作为网址入口即可。
相关专题
换一换人气软件
-
迅游网游加速器7.0官方版
222.78MB|2024-04-15
-
泡泡加速器23.11.23.1官方版
2.92 MB|2024-04-07
-
360软件管家v18.1.6.0官方版
85.2MB|2024-03-13
-
虎牙直播5.65.0.0
93.01 MB|2024-03-08
-
苹果恢复大师3.6.18.246最新版
1.3MB|2024-02-20
-
雷神加速器10.0.6.1官方版
88.3MB|2024-01-10
- 51热搜
- 热门分类
- 热门专题
友情链接
热搜推荐
-
乐播投屏5.5.6.0最新版
|64.4 MB
-
360安全卫士v14.0.1.1006官方最新版
|91.9 MB
-
租号玩v5.18.230212.1 最新版
|91.5MB
-
QQ游戏大厅5.54官方版
|57.9MB
-
Steam2.10.91.91最新版
|35.3MB
装机必备软件
小编推荐
-
1
迅游网游加速器7.0官方版
网络加速|
-
2
泡泡加速器23.11.23.1官方版
网络加速|
-
3
360软件管家v18.1.6.0官方版
系统安全|
-
4
虎牙直播5.65.0.0
视频播放|
-
5
苹果恢复大师3.6.18.246最新版
数据恢复|
-
6
雷神加速器10.0.6.1官方版
网络加速|
-
7
手机模拟大师7.3.3592.2470
PC模拟器|
-
8
万能数据恢复大师7.0.1.1官方版
数据恢复|
-
9
得力OCR文字识别软件3.1.0.5 官方版
办公软件|
最新软件
-
postman
5.0MB/2017-01-20
-
大白菜超级u盘启动盘
5.0MB/2017-01-20
-
ONVIF测试工具(ONVIF Device Test Tool)
5.0MB/2017-01-20
-
sniffer pro
5.0MB/2017-01-20
-
色鬼(Getcolor)
5.0MB/2017-01-20
-
sniffer pro
5.0MB/2017-01-20