运行Scrapy crawl出错

使用的是Python3.7，安装完scrapy和一些依赖的库后运行scrapy crawl spidertieba。出现报错，报错信息是：

File "c:\users\administrator.user-20160420ae\appdata\local\programs\python\pyt
hon37-32\lib\site-packages\twisted\conch\manhole.py", line 154
def write(self, data, async=False):
^
SyntaxError: invalid syntax

解决方案:

打开目录的源码文件(错误提示里有)
将变量名async换一个名字，例如换成shark，(全部都替换掉)就可以编译过了
def write(self, data, shark=False):

运行Scrapy crawl出错相关推荐

python3.7运行报错_Python 3.7 环境下运行 scrapy crawl 报错 def write(self, data, async=False)？...
Python 3.7 环境下运行 scrapy crawl 报错 def write(self, data, async=False),详细报错信息如下: 2018-08-10 15:10:29 [s ...
KeyError: ‘Spider not found: itcast‘ 运行scrapy crawl时报错原因总结
1. 由于运行scrapy genspider所在目录不在生成的爬虫项目文件夹下错误重现 # 1. 创建爬虫项目 C:\scrapy>scrapy startproject myFirstSp ...
Scrapy crawl 爬虫运行出错解决方法
第一次运行scrapy 项目出错: File "c:\python37\lib\site-packages\twisted\conch\manhole.py", line 154 ...
阿里云后台运行python程序（后台运行scrapy爬虫）的方法
1. 问题引入通过Xshell工具连接远程阿里云服务器后,如何运行python程序呢?这个大家都知道,python命令啦. 举个栗子:通过Xshell在某个目录下输入命令:python test.p ...
Python3.7 Scrapy crawl 运行出错解决方法
Python3.7 Scrapy crawl 运行出错解决方法参考文章: (1)Python3.7 Scrapy crawl 运行出错解决方法 (2)https://www.cnblogs.com/ ...
python scrapy爬虫遇见301_在Pycharm中运行Scrapy爬虫项目的基本操作
目标在Win7上建立一个Scrapy爬虫项目,以及对其进行基本操作.运行环境:电脑上已经安装了python(环境变量path已经设置好), 以及scrapy模块,IDE为Pycharm .操作如下: ...
linux 运行scrapy,python 文件运行 scrapy
写了一个scrapy,程序可以跑,没有任何问题. 爬下30个网站的body存入json文件,并且保存为test.json 如果test.json存在就保存到一个新建的test1.json 新建了一个p ...
python scrapy框架基如何实现多线程_Python实现在线程里运行scrapy的方法
本文实例讲述了Python实现在线程里运行scrapy的方法.分享给大家供大家参考.具体如下: 如果你希望在一个写好的程序里调用scrapy,就可以通过下面的代码,让scrapy运行在一个线程里. & ...
python使用scrapy_Python实现从脚本里运行scrapy的方法
本文实例讲述了Python实现从脚本里运行scrapy的方法.分享给大家供大家参考.具体如下: 复制代码代码如下: #!/usr/bin/python import os os.environ.se ...

运行Scrapy crawl出错

运行Scrapy crawl出错相关推荐

最新文章

热门文章