CrawlWorm Picture下载-CrawlWorm Picture(图片爬取工具)v1.0 免费版

CrawlWorm Picture是一款网站图片爬取工具,能够帮助用户下载网页中的全部图像内容,只需要输入链接即可,下载速度快,适合各种自媒体搬运用户,有需要的用户不要错过了,赶快来下载吧!

CrawlWorm Picture下载-CrawlWorm Picture(图片爬取工具)v1.0 免费版

基本简介

本软件属于网络类应用软件,在Windows平台使用的网络图片爬取工具,主要功能为根据提供的网站地址,分析网页源码获取网站的图片资源,能够实现简单分类并存储到数据库和硬盘中。

功能介绍

(1)本技术需配合SQL Server数据库使用

(2)获取图片

在获取图片时,需要用户自己输入要抓取的根网址,这里的根网址需要保证其真实存在,如果不存在则会提示网页源代码获取失败,从而导致任务启动失败。

(3)搜索参数设置

在搜索参数设置的时候,需要慎重考虑其各个参数之间的制约关系,有以下几种情况需要说明。

如果搜索深度设置过大,那么就需要将抓取数据容量设置的大一些,否则任务会因为抓取容量不足而被迫停止抓取工作。

如果能够保证自己的网络连接正常,则选择不使用代理服务器。因为使用代理服务器,在任务执行过程中,如果代理服务器失效或者停止活动,则需要重新选择代理服务器,这中间会耗费大量时间来更换代理服务器。

在选择开始执行时间时,不易将执行时间设置的过长,因为设置的过长会使任务长期处于等待状态,建议只有在任务较少的情况下这样设置。

(4)关键字管理

在关键字管理中,需要注意的是在添加主关键字的时候,要同时添加一个与主关键字名字相同的子关键字,因为在图片进行分类的时候,首先比对的是子关键字,只有子关键字匹配之后才能确定其分类归属。

另外需要注意的是,删除主关键字时会将与其相关的所有子关键字一同删除。

(5)多任务

鉴于对任务耗费资源的考虑,同时执行的任务个数设定为5个,超过5个的任务只能处于等待状态,只有5个被执行任务中有结束的,处于等待的任务才能被执行。

更新说明

1.优化了用户使用界面

2.修复了某些已知bug

下载权限
查看
  • 免费下载
    评论并刷新后下载
    登录后下载
  • {{attr.name}}:
您当前的等级为
登录后免费下载登录 小黑屋反思中,不准下载! 评论后刷新页面下载评论 支付以后下载 请先登录 您今天的下载次数(次)用完了,请明天再来 支付积分以后下载立即支付 支付以后下载立即支付 您当前的用户组不允许下载升级会员
您已获得下载权限 您可以每天下载资源次,今日剩余
声明:本站所有文章,如无特殊说明或标注,均转摘自网络。如若本站内容侵犯了原著者的合法权益,请邮件联系66553826(@)qq.com进行处理。
电脑软件

大漠采集器下载-大漠采集器(今日文章采集)v1.0.0.0 免费版

2024-11-14 1:28:40

电脑软件

netflix视频下载器2024-FlexiCam(Netflix视频下载工具)v1.3.0 免费版

2024-11-14 1:41:24

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
搜索