全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1760|回复: 13

[Windows VPS] ZSKY怎么快速爬磁力链接,400W数据就瓶颈了,有卖数据库的没

[复制链接]
发表于 2021-1-28 09:34:49 | 显示全部楼层 |阅读模式
用zsky搭建了个磁力站,数据到400W后每天就只能增加几百个链接了, 我看别人的站都是4000W的数据,这猴年马月才能追赶上!

有卖数据库的吗,可以pm数据和价格 ,
发表于 2021-1-28 09:49:27 来自手机 | 显示全部楼层
互联网上面活跃的种子就这么多,你配置再高,线程数开再大,爬到一定程度就只能慢慢积累了。

我已经积累的3000w了。
发表于 2021-1-28 09:35:49 | 显示全部楼层
推荐自建云数据库,他不香吗?  哈哈
发表于 2021-1-28 09:36:55 来自手机 | 显示全部楼层
上一千,数据库就不行了,大佬怎么解决?
 楼主| 发表于 2021-1-28 09:39:46 | 显示全部楼层
sky21022 发表于 2021-1-28 09:36
上一千,数据库就不行了,大佬怎么解决?

我更惨 400W就不行了,
发表于 2021-1-28 09:43:27 | 显示全部楼层
用的什么机器
发表于 2021-1-28 09:45:54 | 显示全部楼层
磁力搜索引擎ZSKY一键安装包_有关计算机的感悟-CSDN博客
https://blog.csdn.net/magrco/article/details/83752451
 楼主| 发表于 2021-1-28 09:47:23 | 显示全部楼层

e3 8H16G 杜甫 CPU和内存都跑不满  CPU占用一直18%
我改了simdht_worker.py里的max_node_qsize= 没啥用啊
 楼主| 发表于 2021-1-28 09:49:52 | 显示全部楼层
hdwan.net 发表于 2021-1-28 09:45
磁力搜索引擎ZSKY一键安装包_有关计算机的感悟-CSDN博客
https://blog.csdn.net/magrco/article/details/83 ...

这个没什么特别的啊,就是一个README.md
 楼主| 发表于 2021-1-28 09:51:40 | 显示全部楼层
loliwin 发表于 2021-1-28 09:49
互联网上面活跃的种子就这么多,你配置再高,线程数开再大,爬到一定程度就只能慢慢积累了。

我已经积累的 ...

厉害了,你这挂了多久才到3000W的啊,是zsky吗,数据库能分享下嘛,可付费。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-11-25 13:15 , Processed in 0.062797 second(s), 9 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表