博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
如何去高大上的下载电影天堂的内容
阅读量:6963 次
发布时间:2019-06-27

本文共 538 字,大约阅读时间需要 1 分钟。

简介

找过电影资源的人肯定都知道电影天堂这个网站,只要复制上面的链接就可以下载对应的电影。但是一个一个链接点,太麻烦了,如何去批量做,这个时候就要用到爬虫了

操作

首先下载爬虫

git clone https://github.com/FWC1994/Python-Crawler.git
cd Python-Crawler

如果你要长时间把爬虫放在后台运行,你可以使用screen这个命令

sudo apt install screen
之后执行
screen -S spider
就可以打开一个会话
之后执行
python Crawl.py
爬虫启动成功,然后按CTRL+A+D退出这个终端,如果要重新进入这个会话可以输入
screen -r进入
详细的你可以看screen这个命令到底是怎么使用的

爬虫爬取到的链接会以文本文件的形式存储在当前目录下,打开你会发现每个文件夹下有很多文件,每个文件几乎就只有一个链接,你要下载一部电影还是要打开一个一个文件复制里面的链接然后再下载,这样的话还是很麻烦。

没事linux是万能的,你可以输入

cat ./*.txt | tee /home/bboysoul/a.txt
这样,当前文件夹中的所有链接都保存在了a.txt文件中。

转载地址:http://rbzsl.baihongyu.com/

你可能感兴趣的文章
android112 c代码打印日志,c反编译调用java
查看>>
C# 正则表达式学习
查看>>
py excel 文本化
查看>>
cctype,string,vector
查看>>
JAVA设计模式之【原型模式】
查看>>
14.5. Change Management(变更管理)
查看>>
使用泛型实现单例提供者(原创翻译)
查看>>
[LeetCode] Predict the Winner 预测赢家
查看>>
【转】gtk+多线程的程序实例
查看>>
何恺明大神的「Focal Loss」,如何更好地理解?
查看>>
人工智能是好?是坏?还是高深莫测?
查看>>
[CORS:跨域资源共享] 同源策略与JSONP
查看>>
11月9日云栖精选夜读:阿里90后工程师,如何用AI程序写出双11打call歌?
查看>>
Google X 的热气球终于派上用场了,为波多黎各提供 LTE 网络
查看>>
快讯 | 旷视科技Face++宣布完成C轮4.6亿美元融资,刷新AI领域融资纪录
查看>>
摘自《代码阅读方法与实践》
查看>>
新华网与阿里合资创立云计算公司
查看>>
浅谈互联网医疗面临的挑战
查看>>
Squirrel 连接Hive
查看>>
【天池直播】天池线上赛自定义函数实践
查看>>