例:一、网址 www.ABC.COM
二、获取到列表网址
- 1.ABC.COM/info.html
- 2.ABC.COM/info.html
- 3.ABC.COM/info.html
三、但是有一部分内容要从列表源代码中拼接得到网址获取的
- 1.ABC.COM/idkey=xxxxxxxxxx
- 2.ABC.COM/idkey=xxxxxxxxxx
- 3.ABC.COM/idkey=xxxxxxxxxx
1.ABC.COM/info.html和 1.ABC.COM/idkey=xxxxxxxxxx
现在遇到问题是:
如果第二步和第三步用多级网址的方式,在采集字段的时候不能获取到1.ABC.COM/info.html
如果用关联网址方式,则不能得到拼接网址
编辑字段可以指定数据源,起始页、多级、关联都可以抓取数据
admin 发表于 2018-8-6 23:25
编辑字段可以指定数据源,起始页、多级、关联都可以抓取数据
指定数据源之后,测试采集就不显示这个字段 测试采集因为直接输入内容页网址,所以抓取不到多级和起始页
测试发布可以显示
admin 发表于 2018-8-7 22:20
测试采集因为直接输入内容页网址,所以抓取不到多级和起始页
测试发布可以显示 ...
相关知识点: 网址 字段 测试
- 1蓝天采集器采集器取消了自动补全网址,还是会自动补全
- 2蓝天采集器这是什么问题
- 3蓝天采集器采集内容时出现:bool(false)无响应状态解决办法
- 4蓝天采集器采集小说示例教程
- 5蓝天采集器采集腾讯企鹅号自媒体内容教程(附采集规则)
- 6蓝天采集器各位大佬,怎样把采集的内容发布到discuz门户文章
- 7蓝天采集器怎么发布规则到云平台
- 8163K网站系统二维码跳转进入小程序--待完善
- 9蓝天采集器保存到本地文档excel后面后缀会变成几位随机字母
- 10蓝天采集器无法检测到本地CMS
- 11影视站建设教程-零基础搭建影视站
- 12自带采集PHP小说网站源码:功能强大KYXSCMS狂雨小说cms网站源码
- 13蓝天采集器内容页网址获取的时候,出错
- 14蓝天采集器请问怎么采集新浪的这段网址
- 15蓝天采集器内容页网址保存后自动被替换,然后导致无法采集
- 16蓝天采集器在测试爬取字段的时候,一直在转圈
- 17网站SEO优化100条解答经验分享31-55
- 18蓝天采集器发布到mysql出错
- 19蓝天采集器安装问题求助!安装后index.php丢失index问题,附解决方法
- 20迅睿CMS文章火车头采集器使用教程说明
-
火车头采集器文章内容如何导入数据库
我们在使用火车采集器采集文章时,有时会将数据在线发布到网站栏目,有时则是导入自己的数据库或是保存为本地文件,这里以火车采集器V9的数据导入为例讲解数据库发布配置如何制作。文章采集器火车采集器V9支持MySql、SqlServer、Oracl···
-
蓝天采集器正在校验更新文件
正在校验更新文件得多久啊,半天了还没完 取决你服务器,一般1、2分钟 admin 发表于 2018-7-18 20:52 取决你服务器,一般1、2分钟 现在一直在校验状态,怎么重新开始? 刷新界面就行 admin 发表于 2018-···
-
阿里云windows服务器买了单独的···
相信我们许多站长朋友们都会遇到一个问题就是就是在参加一些活动的时候,会购买一些活动服务器。活动服务器呢配置上面还可以,价格相对来说就是非常的优惠,但是这类服务器都是有一个弊端那就是云盘只有一个,有的是20G有的是40G,今天蜀戎网络就给大家···
-
蓝天采集器请问有时候自动采集会停止时···
请问有时候自动采集会停止时我配置参数不对吗[图片] 参考http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1
-
PbootCMS后台登录验证码看不清···
有时PbootCMS网站传到线上的主机上的时候出现登录后台的验证码看不清,如下图:原因分析:由于PHP版本不支持导致解决方法:修改PHP版本,这边推荐PHP7.3、7.2、5.6,这三个经过广大网友使用测试都正常,首选7.3性能最佳。 ···