本帖最后由 zizdog 于 2019-6-24 14:38 编辑
今天遇到了一个问题:
采集器开启图片本地化,下载图片是在采集入库之前完成的。
我在写入数据库之前需要做判断,有些不满足条件内容是不需要采集的。但这时所有图片都被下载下来了,占用了大量空间。
希望实现:让图片本地化在判断之后呢,如果需要采集就下载,如果不需要就不本地化。
实测,昨天采集内容500篇,服务器下载了2000张图片,而且无法对照删除。十分浪费资源啊。
判断用数据处理》条件判断 就不会下载图片
您好大佬,这个条件判断我真的不会用啊,您能具体说一下吗。
我的理解是,在 字段列表-》缩略图字段-》数据处理-〉条件判断-》满足条件采集(还是,不满足不采集)
然后具体的逻辑怎么写呢,因为这里看不到调用其他字段,我是无药判断:存在“下载链接”字段 则 下载采集缩略图。
只能过滤整条数据,满足条件就采,不满足就跳过,你这种只是判断下载图片只能用自定义插件实现(自定义插件可以手动操作下载图片)
好明白了,原来这个条件判断是如此的好用,实用。太棒了!!!
- 1火车头采集器文章内容如何导入数据库
- 2json采集功能点说明
- 3蓝天采集器建议增加关键字TAG提取
- 4蓝天采集器discuz发帖分类怎么加,是添加什么代码
- 5蓝天采集器2.0版本不能自动采集的问题
- 6蓝天采集器采集到的磁力链接前面有固定网址怎么去除?!
- 7如何获取当前页面cookie填写在蓝天采集器里面
- 8163K网站系统X10_V1升级教程_自动升级系统使用说明
- 9RGCMS在线安装操作教程
- 10盘企建站CMS火车头发布模块V1.1
- 11PbootCMS列表内容ajax无刷新加载数据
- 12proc_open函数如何开启操作教程
- 13个别主机下PbootCMS后台点击状态按钮后自动跳转到首页
- 14蓝天采集器蓝天采集器2.2更新文档
- 15蓝天采集器起始网址无法通过POST方式批量获取列表页
- 16pbootcms常见标签调用学习
- 17蓝天采集器求问如何分割采集的字段进数据库
- 18蓝天采集器登录时候的验证码关闭操作教程
- 19蓝天采集器请问一下 多级网址获取 应该怎么使用
- 20蓝天采集器请问 这个json数组如何入库呢?
-
蓝天采集器discuz插件显示乱码
直接在官网下载 或者使用一键安装包 http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1
-
蓝天采集器付费求购:需要图片类素材采···
付费求购:需要图片类(效果图)素材采集,规则或采集插件 CMS为metinfo 5.3.19 可以在 http://bbs.skycaiji.com/forum.php?mod=forumdisplay&fid=45 版块发布详细···
-
宝塔控制面板如何开启php_file···
我们平时在安装网站的时候会遇到各种各样的环境需求,每个程序都是不一样的,今天我们就来给大家说下如何在宝塔控制面板快速的安装php扩展_fileinfo参数。首先打开我们的宝塔控制面板,软件商店-----搜索:php---这里会看到我们安装的···
-
蓝天采集器如何采集百度搜索结果教程
相信许多的站长朋友们有时候会需要采集百度搜索出来的信息,直接采集是获取不到任何的链接信息的。下面就跟着蜀戎网络一起来学习一下,本教程只作为蓝天采集器分析测试。首页在www.baidu.com搜索我们想要采集的信息,比如:蓝天采集器教程;我们···
-
PbootCMS附件上传失败报错UN···
PbootCMS附件上传时报错:上传失败:UNKNOW: Code: 8192; Desc: stripos(): Non-string needles will be interpreted as strings in the futur···