请问Huginn 卡任务是什么情况？麻烦大佬帮忙指导下

JtrD · 发表于 2020-11-30 08:09:43

docker安装Huginn，其中更换过MySQL、MariaDB、PostgreSQL三种数据库，但是都几天后就出现卡任务的情况，麻烦大佬指导下，谢谢。

JtrD · 发表于 2020-11-30 12:48:14

等大佬。

sqliuchang · 发表于 2020-11-30 12:59:02

Huginn默认是单线程，某一个任务卡住会阻塞后面的，但是一般情况下不会卡很久，而且一般是网络原因。

sqliuchang · 发表于 2020-11-30 13:02:14

比如网站有反爬措施，或者被强干扰。还有就是你的抓取频率定的太高了，一直有卡的任务要执行，就变成999排队了。

JtrD · 发表于 2020-11-30 13:04:01

sqliuchang 发表于 2020-11-30 12:59
Huginn默认是单线程，某一个任务卡住会阻塞后面的，但是一般情况下不会卡很久，而且一般是网络原因。 ...

感谢大佬回复，目前我就14个任务这样，那我搜索下多线程看看，网络原因的确可能，因为国外机都是抓国内网站，单独跑2GB运存应该够用了吧？

sqliuchang · 发表于 2020-11-30 13:06:25

JtrD 发表于 2020-11-30 13:04
感谢大佬回复，目前我就14个任务这样，那我搜索下多线程看看，网络原因的确可能，因为国外机都是抓 ...

够，任务不多512都能跑。
我是放在家里路由器上跑的。
你可以找到卡的那个把他暂停再观察观察，实在不行就docker跑多个huginn

JtrD · 发表于 2020-11-30 13:08:42

sqliuchang 发表于 2020-11-30 13:06
够，任务不多512都能跑。
我是放在家里路由器上跑的。
你可以找到卡的那个把他暂停再观察观察，实在不行 ...

好的，我再测试下，谢谢。

		自动登录	找回密码
密码			注册

[Windows VPS] 请问Huginn 卡任务是什么情况？麻烦大佬帮忙指导下