首页 > 编程知识 正文

python爬虫在手机上运行(python 爬虫实例)

时间:2023-05-03 22:05:21 阅读:105313 作者:2474

00-1010可以在软件市场下载安装。这个软件可以让你把手机当Linux电脑用,除了屏幕小一点。为了方便输入命令,建议安装输入法: CodeBoard,几乎所有的功能键都是指安卓手机上运行python程序的软件:Termux注: py是因为别名py='python ' '

00-1010私信边肖01可以获得大量Python学习资料。

1. 安装Termux

pkg更新

pkg升级

apt更新

apt升级

apt安装python

pip安装bs4请求

2. 安装环境

apt安装金属撞击声

apt安装libxml 2 libxml 2-dev libxslt libxslt-dev

pip安装lxml

如果遇到python.hnotfound错误,请执行apt install python-dev。

2.1 安装Python

安装git

git克隆https://github.com/Kuangcp/PythonLearn.git

CD PitOnLearn/learning/Spider/scrpy _ learn/55156

在你自己的远程服务器或本地配置一个redis数据库来存储URL。通过执行redis-server,您可以启动该服务。在运行这两个脚本之前,请确保redis和下载目录配置正确。只需要配置这两个。

然后可以直接py simple.py或者py simple.py -h首先看参数描述,系统会提示你开始爬取网址。例如,http://www.55156.com/gaoqingtaotu/xiuren/204409_22.html开始抓取网址。在同一个目录下打开download.py,配置下载目录和py download.py,或者直接pydownload.py`pwd `。

只需在脚本旁边的目录中下载图片。为了方便起见,建议配置别名。

vi ~/。bashrc

别名py='python '

别名img='py simple_path' #替换为简单绝对路径。

别名down='py download_path' #替换为down的绝对路径。

或者

转到脚本所在的目录,然后转到:

echo ' alias img=' python ` pwd `/simple . py ' ' ~/。bashrc

echo ' alias down=' python ` pwd `/download . py ` pwd ` ' ' ~/。bashrc

以后只要启动termuximg下载图片urldown下载图片文件,又发现了一个问题,因为这个软件的数据在/data/data/目录中,目录访问是root,所以上诉脚本生成别名后,可以手动更改到安卓可访问的目录。

我的手机是//storge/simulate/0/0/这是存储的根目录。

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。