Scrapy-Splash 的安装

网友投稿 855 2022-05-30

scrapy-Splash 是一个 Scrapy 中支持 javaScript 渲染的工具,本节来介绍一下它的安装方式。

Scrapy-Splash 的安装分为两部分,一个是是 Splash 服务的安装,安装方式是通过 Docker,安装之后会启动一个 Splash 服务,我们可以通过它的接口来实现 JavaScript 页面的加载。另外一个是 ScrapySplash 的 Python 库的安装,安装之后即可在 Scrapy 中使用 Splash 服务。

相关链接

GitHub:https://github.com/scrapy-plugins/scrapy-splash

PyPi:https://pypi.python.org/pypi/scrapy-splash

使用说明:https://github.com/scrapy-plugins/scrapy-splash#configuration

Splash 官方文档:http://splash.readthedocs.io

安装 Splash

Scrapy-Splash 会使用 Splash 的 HTTP API 进行页面渲染,所以我们需要安装 Splash 来提供渲染服务,安装教程参考:https://setup.scrape.center/splash。

Scrapy-Splash 的安装

成功安装了 Splash 之后,我们接下来再来安装一下其 Python 库,安装命令如下:

1

pip3 install scrapy-splash

命令运行完毕后就会成功安装好此库。

完毕!

Scrapy-Splash 的安装

Scrapy 渲染

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:搭建一个vue3项目
下一篇:uni-app基础---1.1.1-环境配置
相关文章