python 爬虫基础

python crawler demo

爬取豆瓣电影 TOP250

1.DoubanMovieTOP250，简单的用正则表达式爬取豆瓣电影top250。

爬取猫眼电影TOP100

2.CatEyeMovieDome,简单的用正则表达式爬取了猫眼电影的top100，并且上传到自己的数据库。

爬取3DM游戏排行榜迅雷下载地址

3.3dmGame，使用BeautifulSoup以及requests，相比较正则更为简单。有能力的同学可以自己加上线程加快爬取速度。
也可进入3dmGameDown点击game.txt直接食用。

爬取无圣光写真网站

4.shengguang.py，专用于爬取写真网站。