Scrapy爬虫-win7下创建运行项目

开始的时候，我只安装了python3.5，安装不了scrapy库，网上搜了一下说是scrapy不支持python3.x

然后，我就又安装了python2.7

为了，默认使用2.7，我在环境变量path中添加下面2项：

D:\Program Files\Python27;D:\Program Files\Python27\Scripts;

接着，我在E:\PycharmProjects目录下按住Shift键右击，选择“在此处打开命令窗口”，输入以下命令：

scrapy startproject tutorial

得到：

然后，在pycharm中open项目

scrapy.cfg：项目的配置文件
tutorial/：项目的Python模块，将会从这里引用代码
tutorial/items.py：项目的items文件
tutorial/pipelines.py：项目的pipelines文件
tutorial/settings.py：项目的设置文件
tutorial/spiders/：存储爬虫的目录

运行爬虫显示报错

ImportError: No module named win32api

需要导入

pip install pypiwin32

转载于:https://www.cnblogs.com/zhouwp/p/8308772.html

Scrapy爬虫-win7下创建运行项目相关推荐

Scrapy定向爬虫教程(一)——创建运行项目和基本介绍
前言目前网上的Scrapy中文教程比较少,而且大多教程使用的Scrapy版本较老,比如说这个Scrapy 0.25 文档,如其名,上古时期的翻译文档:再比如极客学院的视频教程使用的是1.0.x版本, ...
win7下程序运行权限问题解决方案
今天遇见一个win7下程序运行权限问题(需要对目录下文件有读写权限):网上google下得到解决方案有,现记录下: 一: windows 7和vista提高的系统的安全性,同时需要明确指定" ...
pycharm下创建djangp项目报错Performing system checks… Watching for file changes with StatReloader问题解决
pycharm下创建djangp项目时候pycharm报错如下: 注:利用pycharm创建第一个django项目参考此文: https://blog.csdn.net/tang_jin2015/ar ...
idea如何创建c语言项目,IDEA下创建Spring项目
1.新建项目如果手动引入lib,需要引入spring的4个核心包: spring-core.RELEASE.jar spring-context.RELEASE.jar spring-beans.R ...
win7下PHP运行环境搭建（apache2+mysql+php）
win7下PHP运行环境搭建(apache2+mysql+php) 首先需要下载PHP代码包和Apache与Mysql的安装软件包,并且检测你的iis是否打开了,如果开着就关掉,否则就会起冲突 PHP ...
手把手教你如何新建scrapy爬虫框架的第一个项目（下）
前几天小编带大家学会了如何在Scrapy框架下创建属于自己的第一个爬虫项目(上),今天我们进一步深入的了解Scrapy爬虫项目创建,这里以伯乐在线网站的所有文章页为例进行说明. 在我们创建好Scrap ...
python3 + Scrapy爬虫学习之创建项目
最近准备做一个关于scrapy框架的实战,爬取腾讯社招信息并存储,这篇博客记录一下创建项目的步骤 pycharm是无法创建一个scrapy项目的因此,我们需要用命令行的方法新建一个scrapy项目 ...
Python爬虫基础：安装Scrapy爬虫框架和创建Scrapy爬虫项目
首先为了避免国外镜像不稳定,我们使用了清华大学的python库镜像:https://pypi.tuna.tsinghua.edu.cn/simple 1.安装scrapy 1.1.安装pywin32( ...
python+scrapy爬虫 + mongoodb + hadoop+hive综合项目：招聘网站数据
一.项目简介注意(本项目完全是用python编写) 1.本项目为实训项目,并无实际参考意义,望周知. 2.本次项目使用51job和中华英才网的相关数据 3.由于两个网站的数据爬取部分相似便只给出一个 ...

Scrapy爬虫-win7下创建运行项目

Scrapy爬虫-win7下创建运行项目相关推荐

最新文章

热门文章