Hetzner 独立服务器 tumblr采集.. 开足马力，冲啊!

openos · 发表于 2018-3-14 16:33:31

cw723 发表于 2018-3-14 16:29
什么爬虫？

求推荐。

https://github.com/dixudx/tumblr-crawler

cw723 · 发表于 2018-3-14 16:43:39

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

缓存10G 图片。
G口跑满。

你的网站流量很大哦。

还都是境外流量

atcaoyufei · 发表于 2018-3-14 16:44:28

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

你网站表示帝都电信打不开了，要扶墙

cw723 · 发表于 2018-3-14 16:44:45

openos 发表于 2018-3-14 16:33
https://github.com/dixudx/tumblr-crawler

也是像是随便爬的爬虫呀。

openos · 发表于 2018-3-14 16:47:20

cw723 发表于 2018-3-14 16:43
缓存10G 图片。
G口跑满。

搜索路过图床

openos · 发表于 2018-3-14 16:48:37

atcaoyufei 发表于 2018-3-14 16:44
你网站表示帝都电信打不开了，要扶墙

有些地方把阿里云的443端口屏蔽了，不想动了，反正没几个人看，想看的人自己想办法

左手写爱 · 发表于 2018-3-14 17:32:21

我去已经下载100G了

硬盘不够用了

openos · 发表于 2018-3-14 17:39:32

速度下来了，可能正在采集图片....

sm1314 · 发表于 2018-3-14 17:56:26

楼主Hetzner装的什么系统呀

yjlml · 发表于 2018-3-14 17:57:38

sm1314 发表于 2018-3-14 17:56
楼主Hetzner装的什么系统呀

BT面板

		自动登录	找回密码
密码			注册