261 条评论

zmx 2023-12-24 17:03:16
真的是服了，python不是有gil锁嘛，2核CPU开8线程，就直接给我干冒烟了，加延时我又嫌效率低，不知道怎么办才好了...
按照这个效率，21年才能跑完，到时候这个数据就不值钱了。现在的代理存活数是32个左右,1天 =252,000数据量，难不成我再提高一下线程试试？说干就干。
归纳一下结果：
8线程：21年
16线程：10年
再多了估计就要429了
目前先这么跑吧，等有新思路了再说。

 1 发自Windows 10

zmx 2023-12-25 17:45:07
task转到副机器上跑了，建立个互相访问的安全通道，这样主机就应该不会CPU爆炸了。嗯。
 0 发自Windows 10

zmx 2023-12-22 18:07:11
🔈 通知 防火墙规则已重置
 2 发自Windows 10

zmx 2023-11-14 16:07:27
🔈 通知 SSL 证书重新签发
 3 发自Windows 10

zmx 2023-11-8 09:11:33
🔈 通知 高精度威胁情报展示页API,页面,IP库已更新
 2 发自Windows 10

zmx 2023-11-2 16:44:42
😔 难过 最近发表博客不是很频繁了，或许是江郎才尽了吧，想不到什么好点子了，也肯能是最近压力比较大，没时间来写，谁又知道呢？
 1 发自Windows 10