转载来源:https://my.oschina.net/xtfjt1988/blog/364577

抓取网站的代码实现很多,如果考虑到抓取下载大量内容scrapy框架无疑是一个很好的工具。Scrapy = Search+Pyton。下面简单列出安装过程。PS:一定要按照Python的版本下载,要不然安装的时候会提醒找不到Python。建议大家安装32位是因为有些版本的必备软件64位不好找。(我的是xp系统)

1.安装Python

安装完了记得配置环境,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。在cmd中输入python如果出现版本信息说明配置完毕(如下面截图)。python下载地址。

2.安装lxml

lxml是一种使用 Python 编写的库,可以迅速、灵活地处理 XML。点击  这里选择对应的Python版本安装。验证是否安装成功,如下图。 
       
    
    3.安装setuptools

用来安装egg文件,点击  这里下载python2.7的对应版本的setuptools。 
     
    4.安装zope.interface

可以使用第三步下载的setuptools来安装egg文件,现在也有exe版本,点击这里下载。

5.安装Twisted

Twisted是用Python实现的基于事件驱动的网络引擎框架,点击这里下载。

6.安装pyOpenSSL

pyOpenSSL是Python的OpenSSL接口,点击  这里下载。 
     
    7.安装win32py 
     
    提供win32api,点击  这里下载

8.安装Scrapy

终于轮到安装scrapy了,直接在cmd中输入easy_install scrapy回车即可。安装后在cmd命令行进行成功与否的验证如图所示。

安装完成,开始使用吧!

python安装scapy流程相关推荐

  1. python安装流程-Python安装与卸载流程

    Python安装流程: 一.下载 在网上(输入网址https://www.python.org/downloads/)下载Windows最新的python程序(我电脑为64位) 二.安装 根据自己的电 ...

  2. python安装步骤图解-Python安装与卸载流程详细步骤(图解)

    Python安装流程: 一.下载 在网上(输入网址https://www.python.org/downloads/)下载Windows最新的python程序(我电脑为64位) 二.安装 根据自己的电 ...

  3. python安装流程-python安装流程和注意事项

    Python安装流程 点击下载选项进入下载界面,选择你需要下载的python版本,一般我们选择win系统的下载: 选择你对应的机器位数的版本,如果不知道电脑是多少位的,可以点击我的电脑右键--> ...

  4. Python【第一篇】python安装、pip基本用法、变量、输入输出、流程控制、循环

    了解python底层(需要C基础) :python源码剖析 一.python安装 Ubuntu下 系统版本已经同时安装了python2和python3 如果没有python3,可以参考这个貌似是印度阿 ...

  5. Python安装与卸载流程

    1. 相关资源 (python@3.8.2 exe) 链接:https://pan.baidu.com/s/1Kb9ZqGV-nVfZDsP9oW039Q 提取码:s51o (python@2.7.1 ...

  6. python安装多少位_python安装流程

    如何安装??? 在python的官网下载python版本,需要下载对应版本(在计算机-属性中查看自己是32位操作系统还是64位操作系统),我是64位的(Windows10系统),就下载64位对应的安装 ...

  7. python 使用scapy创建arping脚本

    以下程序均来自<Python.UNIX和Linux系统管理指南> 据说scapy是一个很厉害的东西 使用的scapy版本为2.1.0,注意导入包的方式与原书略有差别 scapy_arpin ...

  8. 安装完python怎么打开安装步骤-Python安装与运行测试详细教程,带你攻克第一个学习难关...

    人生苦短,我选python. 无论有没有编程基础,无论什么专业,越来越多的大学生选择从python入手学习数据分析.难得有学习的激情,书都买好了,结果却败在了第一步--软件安装上-- 今天小编特意出了 ...

  9. anaconda的python使用教程-Python安装教程之Anaconda入门使用总结

    原标题:Python安装教程之Anaconda入门使用总结 如今参加Python培训学习Python开发的小伙伴对Python安装教程比较感兴趣,本篇文章小编就和读者们分享一下Python安装教程之A ...

最新文章

  1. 前端面试题整理(css)
  2. C++指针初始化总结
  3. 在reader中勾选pdf复选框_Adobe Acrobat和Reader PDF文件处理缓冲区溢出漏洞
  4. 做机器人,必过的一道坎!
  5. js中的Array数组清空
  6. 深度学习要多深_才能读懂人话?
  7. Mac教程——怎么升级系统版本
  8. springboot实现pdf里面插入图片
  9. JVM基本原理,简明扼要,通俗易懂
  10. 乐行学院Redis5学习教程 第一章redis5的安装
  11. word如何关闭批注模式【教程】
  12. nested exception is java.lang.NoClassDefFoundError:org/sprin
  13. 万豪国际集团推行更高标准的清洁消毒措施;养乐多将在无锡新建第二工厂 | 美通企业日报...
  14. java程序设计第四版张弛答案,2020学堂云Java编程概论——第一部分单元测试答案...
  15. 【python图像处理】单张图像裁剪与批量图片裁剪
  16. uniapp 小程序点击事件如何获取event对象
  17. 数据库学生,课程实体联系(E-R)图
  18. 2019湖湘杯 misc3 之miscmisc
  19. 教程:在vjudge里如何提交topcoder
  20. mysql日常基本语句

热门文章

  1. android 遇到Error:Execution failed for task ':app:processDebugManifest'. 解决
  2. 深入HBASE原理详解
  3. 缺氧游戏计算机用水,缺氧用水裂解套路一览 缺氧游戏用水怎么玩法
  4. 微软校时服务器,Microsoft School丨中国南部唯一一所微软学校在哪里?
  5. html表格美化css
  6. android开发之ExpandableListView的使用,实现类似QQ好友列表
  7. 脑数据有多重要?脑机接口有哪些商业应用?
  8. BUUCTF:从娃娃抓起
  9. 如何在Excel中更改工作表选项卡的颜色
  10. CSDN每日一练技巧