The Seven Year Itch.

MENU

有没有什么好看的网址,想爬点东西做个可视化

October 24, 2017 • Read: 688 • Python

两个月前写的爬取妹子图网站图片的爬虫。大致功能如下:
1、将所以连接遍历出来,存到mongodb中,加上状态码

2、保存标题,图片地址到mongodb中
3、将图片下载到本地
ps:已经过去两个月了。我不知道代码还能不能成功爬取完所有妹子图网站的图片。后期还会对这个项目进行优化。但是要先忙完手头上所有事情的前提下。。。

运行图:

运行图

运行后图:

(下载好的数据是直接给了朋友的,他解压的然后截图给我的。我这么纯洁的人是不会看的!哼=-=)

运行后图

github地址

如果你有想要爬取的网站,请告诉我 我有时间就帮你哟!--- 下方留言告诉我!!!!么么哒!!!!!

**有没有一些好看的网址,比如动漫的都是妹子的图片,不能是暴力,不能是血腥,不能是黄色。当然啦你也得告诉我!

想整理一些资源爬下来,然后分享出去哟!!!**

有好的网址也一定要留言告诉我呀,别吝啬手头的资源哟!3Q啦

Tags: None
Archives QR Code
QR Code for this page
Tipping QR Code
Leave a Comment

已有 2 条评论
  1. www.mm131.com 希望可以把套图爬出来下载下来 并且分类一套一套归档