首页
随笔记录

分类

当前位置: 云海天教程网 > 技术新闻 > 随笔记录 >正文

scrapy:日志和post请求

更新时间:2023-05-26  作者:佚名   来源: 网络转载

1. scrapy的日志信息设置

scrapy:日志和post请求

配置文件settings.py设置:
默认的级别为DEBUG,会显示上面所有的信息
LOG_FILE : 将屏幕显示的信息全部记录到文件中,屏幕不再显示,注意文件后缀一定是.log
LOG_LEVEL : 设置日志显示的等级,就是显示哪些,不显示哪些

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

并没有正常打印,并且提示被百度反爬了,需要设置一下(settings.py)

可以看到正常情况下日志比较多,顺便设置一下

scrapy:日志和post请求

scrapy:日志和post请求

2. scrapy的post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

scrapy:日志和post请求

3. scrapy的代理

scrapy:日志和post请求

上一篇:Java第四日 - kb23 下一篇:gitee使用宝塔webhook自动部署
小编推荐
快速导航更多>>
JavaScript 教程 HTML5 教程 CSS3 教程 jQuery 教程 Vue.js 教程 Node.js 教程 SQL 教程 C 教程 PHP 教程 Linux 教程 Docker 教程 Nginx 教程 Python 教程 Java 教程

云海天教程网 版权所有

 陕公网安备 61050202000585号

陕ICP备14013131号-3