采集一会就停了,自动采集从没运行过,错误日志里也没提示,请问怎么解决?
参考 http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1
或者用访问触发模式
admin 发表于 2019-6-29 12:24
参考 http://bbs.skycaiji.com/forum.php?mod=viewthread&tid=649&extra=page%3D1
或者用访问触发模式 ...
fastcgi_connect_timeout 已经改成1200没用,访问触发,我可以再尝试下,现在关键是,我每次采集都是五条就不动了。nginx日志有大量499错误 可能和规则有关系,字段是不是自动获取内容的?所有规则都是只能采5条?
admin 发表于 2019-6-29 12:34
可能和规则有关系,字段是不是自动获取内容的?所有规则都是只能采5条?
能正常获取内容,是总的任务只能采5条,比如我三个任务,总采集数量设了12条,每个任务设3条,运行完第一个任务,在第二个任务第二条就不动了,每次都这样. 卡住的任务有没有自动获取的字段,改用规则匹配
admin 发表于 2019-6-29 12:40
卡住的任务有没有自动获取的字段,改用规则匹配
把所有自动获取都改成规则获取了还是一样,我给你后台能帮我看一下吗
husir 发表于 2019-6-29 13:27
把所有自动获取都改成规则获取了还是一样,我给你后台能帮我看一下吗
日志里有这些错误是什么意思
[ 2019-06-29T12:49:17+08:00 ] 120.33.1.139 GET 域名/index.php?s=/admin/Task/collectBatch&ids=4%2C3%2C2
[ error ] [2]session_start(): Cannot start session when headers already sent
---------------------------------------------------------------
[ 2019-06-29T12:51:21+08:00 ] 120.33.1.139 GET 域名/index.php?s=/admin/Task/collectBatch&ids=4%2C3%2C2
[ error ] [2]session_start(): Cannot start session when headers already sent
---------------------------------------------------------------
[ 2019-06-29T13:36:52+08:00 ] 120.33.1.139 POST 域名/index.php?s=/admin/Task/edit
[ error ] [2]preg_match(): Unknown modifier 'w'
admin 发表于 2019-6-29 12:40
卡住的任务有没有自动获取的字段,改用规则匹配
可以了,把页面抓取间隔时间和最大执行时间调到很低就行了 日志错误问题不大不影响使用,估计和并发有关系http://www.west.cn/docs/49309.html 相关知识点: 规则 任务 字段
- 1蓝天采集器重复采集
- 2蓝天采集器请问发布方式的自定义插件是使用方法
- 3蓝天采集器请问一下 多级网址获取 应该怎么使用
- 4SEO学习向导流程适合SEO零基础入门站长
- 5蓝天采集器后台提示:您的网站开启了目录访问限制(open_basedir),受保护的站点目录处理方法
- 6蓝天采集器发布问题
- 7蓝天采集器数据库问题
- 8迅睿CMS火车头采集免登录入库接口和蓝天采集器入库使用教程
- 9蓝天采集器写规则点测试就连接重置
- 10蓝天采集器请问一下,正则问题
- 11pbootcms常见的导航高亮下拉标签设置教程
- 12蓝天采集器采集网址问题
- 13PbootCMS安装蓝天采集器教程
- 14蓝天采集器邮箱发出去的文字都是乱码
- 15蓝天采集器建议官方参照简数补充一些功能
- 16蓝天采集器内容匹配换行问题
- 17盘企建站CMS火车头发布模块V1.1
- 18163k地方门户系统安装操作教程
- 19蓝天采集器管理员账号密码限制有些短
- 20pbootcms栏目内容-详情页设置输出html
-
163K网站系统腾讯云验证码配置说明
S版系统的登录验证集成了人机验证api,开启后能极大增强系统安全性和可靠性,并避免垃圾注册1获得腾讯云密钥进入腾讯云控制台-访问管理-API 密钥页面,选择左侧导航栏的 API 密钥管理,单击新建密钥。如果您已经具有腾讯云密钥可以跳过这一步···
-
蓝天采集器请问有时候自动采集会停止时···
请问有时候自动采集会停止时我配置参数不对吗[图片] 参考http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1
-
PbootCMS文章通过keywor···
有时客户想根据keywords关键字来做匹配在文章详情页里显示相关内容,同样带有一样的关键字的。解决办法通过翻看手册发现有个通过tags来做匹配的方法,然而此次网站不用tags,那么直接二开下程序代码关键位置即可实现。打开ppshomec···
-
PbootCMS详情页里的“没有了”···
问:做英文站,碰到详情下的中文不知道在哪里修改答:翻pbootcms在线手册,去内容详情选项里找{content:nexttitle notext='no more'} 设置“没有了”文本,设置参数时如果带空格,需要用单引号 ···
-
蓝天采集器发布数据库
请问怎么才能支持远程mssql呢? 我想发布到远程服务器的数据库中,数据库是微软的sql sever 其实这个采集器功能真的越来越好用了,我记得以前用米拓的时候,那时候购买的采集插件的也很方便,希望这个采集器能越来越强大。 mssql还···