找软件用软件，到51下载！
搜索
爱奇艺 360安全卫士官方版 2345浏览器 百度网盘
您现在的位置：51下载>下载分类>网络软件>制作辅助>红叶文章采集器
红叶文章采集器

红叶文章采集器

3.6 绿色版
  • 软件大小：5.0MB
  • 更新日期：2024-12-26
  • 下载次数：1次
  • 软件语言：简体中文
  • 软件授权：免费软件
  • 软件评级：5星
  • 安全检测：无插件无病毒
  • 软件类型：国产软件
  • 软件分类：制作辅助
  • 软件系统：WinAll
精品软件
其它用户还下载了

红叶文章采集器简介

51推荐

超级强大的网站文章采集器，本软件全名为红叶文章采集器，英文名称Fast_Spider，属于蜘蛛爬虫类程序，用于从指定网站采集海量精华文章，将直接丢弃其中的垃圾网页信息，仅保存具备阅读价值和浏览价值的精华文章，自动执行HTM-TXT转换。本软件为绿色软件解压即可使用！

 

软件特色

(1)本软件采用北大天网MD5指纹排重算法，对于相似相同的网页信息，不再重复保存。

(2)采集信息含义：[[HT]]表示网页标题，[[HA]]表示文章标题，[[HC]]表示10个权重关键字，[[UR]]表示网页中的图片链接，[[TXT]]之后为正文。

(3)蜘蛛性能：本软件开启300个线程来保证采集效率。通过采集100万精华文章来执行压力测试，以普通网民的联网计算机为参考标准，单台计算机可以在一天内遍历200万网页、采集20万精华文章，100万精华文章仅需5天就可采集完毕。

(4) 正式版与免费版的区别在于：正式版允许将采集的精华文章数据自动保存为ACCESS数据库。购买正式版请联系QQ(970093569)。

操作方法

(1)使用前，必须确保你的计算机可以连通网络，且防火墙不要拦截本软件。

(2)运行SETUP.EXE和setup2.exe，以安装操作系统system32支持库。

(3)运行spider.exe，输入网址入口，先点"人工添加"按钮，再点"启动"按钮，将开始执行采集。

注意事项

(1)抓取深度：填写0表示不限制抓取深度;填写3表示抓到第3层。

(2)通用蜘蛛模式与分类蜘蛛模式的区别：假定网址入口为“http://youxi.baidu.com/”，若选择通用蜘蛛模式，将遍历“baidu.com”里面的每一个网页;若选择分类蜘蛛模式，则只遍历“youxi.baidu.com”里面的每一个网页。

(3) 按钮“从MDB导入”：网址入口从TASK.MDB中批量导入。

(4)本软件采集的原则是不越站，例如给的入口是“http://youxi.baidu.com/”，就只在百度站点内部抓取。

(5)本软件采集过程中，偶尔会弹出一个或数个“错误对话框”，请不予理会，倘若关闭“错误对话框”，采集软件就会挂掉。

(6)使用者如何选择采集题材：例如你若想采集 “股票类”文章，只需把那些“股票类”站点作为网址入口即可。


相关专题

换一换
  • 51热搜
  • 热门分类
  • 热门专题

51精品热推

重启：铁三角下地宫九死一生
二十不惑：红楼四子肆意青春
河神2：津门天团遇危机
更多精彩，点一下
爱奇艺下载

热搜推荐

装机必备软件

办公软件
Microsoft Office Outlook 2020 360软件管家
安全软件
2345安全卫士 360文件恢复
影音软件
爱奇艺PPS影音 优酷
休闲娱乐
心灵战争 JJ斗地主

小编推荐

最新软件

红叶文章采集器 红叶文章采集器3.6 绿色版
安全下载 使用Win工具箱下载
关闭

广西云奥网络科技有限公司

Copyright © 2012-2026 51下载 All Rights Reserved. 桂ICP备2022004003号桂公网安备45050202000707号 联系电话：400-8886994