最近自己瞎折腾了一个种子站供自己使用,通过一段时间的抓取,数据已经达到了400多万条,但是在某一天数据不在增加了。通过各种查找问题,最后怀疑是卡在了入库这个阶段上。
在域名后缀上增加/metrics 即可看到当前状态
其中有一条信息为 retry 9 ,等了差不多2天了吧,还是这个问题而且数量不增不减。
解决办法其实挺简单的,在Win或者Linux上安装个pgadmin即可。
pgadmin软件连接到docker容器映射出来的数据库端口上,运行脚本
delete from public.queue_jobs where status = 'retry'
图示,删除了9条信息,在返回/metrics界面查看相关信息。
到目前为止已经正常入库了,数量也在不断的增加中。
有一点很奇怪的问题,但是又无法判定。
在bitmagnet自带的gui界面上,数量是不增加的。但是在bitmagnet next web上面是不断在增加的。为了以防万一还是解决这个问题吧,避免后期出现其他错误。
Comments NOTHING