找软件用软件，到51下载！
搜索
爱奇艺 360安全卫士官方版 2345浏览器 百度网盘
您现在的位置：51下载>下载分类>网络软件>网络辅助>金速探索
金速探索

金速探索

2.0
  • 软件大小：27.9MB
  • 更新日期：2015-06-01
  • 下载次数：0次
  • 软件语言：简体中文
  • 软件授权：免费软件
  • 软件评级：4星
  • 安全检测：无插件无病毒
  • 软件类型：国产软件
  • 软件分类：网络辅助
  • 软件系统：Winxp/vista/win7/win8/2000/2003
精品软件
其它用户还下载了

金速探索简介

51推荐

　　金蜘蛛（金速探索） 是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成。传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列，直到满足系统的一定停止条件。聚焦爬虫的工作流程较为复杂，需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的URL队列。然后，它将根据一定的搜索策略从队列中选择下一步要抓取的网页URL，并重复上述过程，直到达到系统的某一条件时停止。另外，所有被爬虫抓取的网页将会被系统存贮，进行一定的分析、过滤，并建立索引，以便之后的查询和检索；对于聚焦爬虫来说，这一过程所得到的分析结果还可能对以后的抓取过程给出反馈和指导。

　　1）该软件操作方便、简单容易上手，无复杂的逻辑操作，是您的收集助手

　　2）新建任务：名称、入口URL地址、保存路径必须填写出现乱码请选择编码

　　3）如果360或防火墙提示为木马或病毒软件、请加入信任

　　4）运行任务数量越多cpu资源占用比例越多，不推荐全部运行所有程序，每个任务线程数量根据系统资源调整

　　5）任务每隔3分钟存储一次，保存在下载文件夹中，压缩类型如exe,zip等只提取地址不下载，其余文件类型全部下载保存

　　6）压缩类型文件提取后的地址可用下载工具批量下载

　　7）优先级设置关于最先采集什么样MIME类型，等级1-5（由低到高）过滤器则跳过不需要采集的MIME文件类型

　　（图片、文档、MP3只 全部拿下）


相关专题

换一换
  • 51热搜
  • 热门分类
  • 热门专题

51精品热推

拦捆绑反欺诈 十年卫生活
360安全卫士下载

热搜推荐

装机必备软件

办公软件
Microsoft Office Outlook 2020 360软件管家
安全软件
2345安全卫士 360文件恢复
影音软件
爱奇艺PPS影音 优酷
休闲娱乐
心灵战争 JJ斗地主

小编推荐

最新软件

金速探索 金速探索2.0
本地下载
安全下载 通过360安全卫士下载
关闭

广西云奥网络科技有限公司

Copyright © 2012-2026 51下载 All Rights Reserved. 桂ICP备2022004003号桂公网安备45050202000707号 联系电话：400-8886994