#爬取电影天堂的磁力链接
百度百科对网络爬虫的定义：网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。
而我本人对爬虫也是初学，入世未深。本次爬取目标是简单的电影天堂的磁力链接。
目标网站：
下图才是我们这次爬取的真正的目标–磁力链接。
首先把我们目标网站网址复制下来：/html/gndy/dyzz/1213/57918.html
打开检查→查看我们需要爬取的目标元素。
打开查看源码可以看到每部影片都是下面这样的信息开头，然后接上影片的简单介绍，介绍我们不关心，只关心下面这段含有影片详情页面的链接，主要获取这个页面所有这样列出的影片的详情页面的链接。
有了以上信息我们初步了解了目标，但做人不能太急，我们爬取的时候先尝试了爬取一条再爬取一页的，最后再爬取整个网站的磁力链接。
因为考虑到网站会有反爬虫，我们每次爬取的时候都会改变一下题头，防止被识别出来。
python默认http请求的user-agent为python-requests/2.10.0 此user-agent会被某些网站拦截，所以需要更改user-agent
此外我们还运用正则表达式来进行搜索电影链接。
设置一秒钟发送一次请求，并且改变user-agent，防止被识别出来是爬虫。
最后将爬取的磁力链接放入txt文本中。
这是部分爬取的磁力链接，将磁力链接复制粘贴到迅雷就可以下载了。
这也是我们第一次用爬虫爬取了一些电影资源，也是第一次写博客，写的不足的地方，欢迎批评指正。
如果觉得《#爬取电影天堂的磁力链接#》对你有帮助，请点赞、收藏，并留下你的观点哦！
