论坛 › Web技术 › 91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？

cw723 发表于 2018-7-20 10:26:59

91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？

本帖最后由 cw723 于 2018-7-20 19:33 编辑

91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？


目前抓了1天 抓了900多GB

全球资源提供商 发表于 2018-7-20 13:09:54

本帖最后由 全球资源提供商 于 2018-7-20 22:39 编辑

91 非VIP 全站视频 截止这个发帖时间

数量97054个
硬盘2076 GB

https://i.loli.net/2018/07/20/5b516c9556dec.png

本来打算分享的
不过我这个格式分享没什么用
一个原因你没数据对应, 就 无法还原为标题模式
二个原因N台服务器带宽满负载了

kingshui 发表于 2018-7-20 12:19:17

91那个网站真心垃圾，却能引来那么多原创。。。说明背后关系甚远，技术不行。。。

是时候组建一个如抖音一样的91了

shen2214 发表于 2018-7-20 15:00:09

他们说的91并不是91助手而是91**,是国内狼友的原创基地

洛克 发表于 2018-7-20 10:27:30

:lol

贱人就是矫情 发表于 2018-7-20 10:30:18

你们总说 91 91 到底是啥？

notetaker 发表于 2018-7-20 10:31:42

可以的，

wenguonideshou 发表于 2018-7-20 10:32:29

贱人就是矫情 发表于 2018-7-20 10:30
你们总说 91 91 到底是啥？

91手机助手

ImetSu 发表于 2018-7-20 11:00:22

我很好奇大佬都是自己写脚本爬么

yzg9540 发表于 2018-7-20 11:02:02

有大佬说不到3t

有兴趣爬高清啊

laoY 发表于 2018-7-20 11:09:49

求个svip

gameforloc 发表于 2018-7-20 11:11:11

目测不够,前一段不是流传的精华合集都需要快1T了,

debian8.0 发表于 2018-7-20 11:27:18

一个人是看不完的:lol:lol

查看完整版本: 91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？