在Windows平台下,如果想运行爬虫的话,就需要在cmd中输入:
scrapy crawl spider_name
这时,爬虫就能启动,并在控制台(cmd)中打印一些信息,如下图所示:
但是,cmd中默认只能显示几屏的信息,其他的信息就无法看到。
如果我们想查看爬虫在运行过程中的调试信息或错误信息的话,会很不方便。
此时,我们就可以将控制台的信息写入的一个文本文件中去,方便我们查看。
命令如下:
D:>scrapy crawl spder_name -s LOG_FILE=scrapy.log
Golang ProtoBuf的基本语法详解
Python识别MySQL中的冗余索引解析
Python+Pygame绘制小球代码展示
Python中的数据精度问题介绍
Python随机值生成的常用方法介绍
python3解压缩.gz文件分析
一剑斩仙
超级雷电战机
烈火一刀
天使纪元
完美修真
高清画质体验,华丽场景视觉盛宴
永恒领主
3D魔幻MMO
九州八荒录
九州八荒,一剑入魂。
航海王燃烧意志
热血激战动作冒险游戏
君临传奇
经典RPG战斗手游