| 浏览器收藏 | 打印

1032082.png

afweasdfaww

GF  2019-05-19 20:03
全看 |
屏蔽
屏蔽此人 屏蔽头像
| 小 中 大

[技术帖]我用爬虫爬了猫片所有的资源


用的是python+mysql    
爬出来一共2k+数据
而且我会实时更新的。    
毕竟我是猫片的终身会员。    
我就想知道放出来会不会被小黑屋啊？    
需要账户和密码。
顶端

1091768.jpg

sourindeed

B1F  2019-05-31 17:25
（撒谎也没有用啊）
全看 |
屏蔽
屏蔽此人 屏蔽头像
| 小 中 大
所有非正常的状态码都要过滤一下（包括4xx，5xx，3xx重定向的）
爬取时间需要以指数去访问，不容易看出来是爬虫
顶端