看了下回复，这位 @镇岳剑丨韦世东 的回复确实非常专业，不过我个人觉得，这条回复还存在一些问题，权当为作者做个参考意见，为题主做个额外提示：

“老王时新800”，例子比较脱离实际，这样算日薪大概是800×8=6400，月薪6400×20=128000，其实有理由相信拿到这个薪资的人，应该不会有兴趣接这样的活儿，因为对小活来说，沟通成本占项目总额的比重要比大项目大得多，那对于日新800来说，沟通成本必须要算，这样一来雇主达成认可的可能性非常低了。不过这是个例子，如果能更符合实际一些一定会更接地气；

额外补充给题主的部分：

你报低价，雇主并不一定领情，雇主可能永远都想少花钱，所以报价没必要一味退让，良心报价一般来说是按市场价格走，而不是你的个人价值，还要注意“1. 一个5年经验的人和1年经验的人，如果都能实现这个功能，那么5年经验的耗时并不一定比1年经验的短，可以认为耗时相同。那么市场价很可能就是按照1年经验的人的薪资来定位的。2. 市场价格与满足技术要求的人直接相关，技术要求跟爬虫的难度直接相关，所以估价时评估爬虫的难度级别也很关键。”

我了解的爬虫的一些坎(用于评估爬虫难度)：请求时要求提供“文字验证码”，这类验证码一般来说也分很多子级别，从验证码内容上包括“数字、字母、中文、不同类型字符混合”，从验证码显示上包括“排列参差不齐、字符大小不一、字符粘连、字符扭曲与旋转、背景干扰线、背景干扰字符”，可能还会有这里没提到的。

请求时要求提供“行为验证码”，这种常见的就是“拖拽滑块补上图片缺口、用鼠标描出图中的曲线、点选指定物品或图形”

请求时要求提供“提问验证码”，比如木虫上“1加5等于？”，点选验证码一般也有提问的特点

请求时要求提供“随机认证参数”，并对生成该参数的代码进行混淆，这部分我接触较浅，目前所知的JScrambler混淆效果较好的，还不确定AST方法是否可以还原。当然对于“混淆”这种技术来说最佳的手段是绕过而不是硬来，一般说来，用绕过的手法，应该只能实现依赖于浏览器形式的爬虫了，这种爬虫包括但不限于“selenium-python 爬虫”，另外，我最近发现“基于chrome的console脚本爬虫”这种基于浏览器的形式比“selenium-python”更好用，只是控制力弱些。

上述反爬的解决方案：

上述这些坎，其实可以归为两大类，验证码反爬和代码混淆反爬。

验证码反爬常规方案是选择打码平台(会有些额外成本)，然后把打码平台返回的结果构造成验证码监听事件的参数调用进去就解决了(偷懒的话就用selenium，应该可以直接模拟控制鼠标的移动和点击，连构造验证码参数都省了)。

代码混淆反爬尽量还是选择“依赖于浏览器的爬虫”这种形式，绕过吧。

基本可以解决一切门槛。

补充线——————————————————————

还有反爬是服务端反爬，值得提的是 IP地址限制，这种用代理来解决。

python爬虫小项目价格_爬虫项目怎么收费？相关推荐

  1. python网页版百度_python,_爬虫 页面不存在_百度搜索，python - phpStudy

    爬虫 页面不存在_百度搜索 1.学写爬虫,遇到一个问题,加了values={"wd":"test","ie":"utf-8&quo ...

  2. python批量下载静态页面_爬虫实战之，爬取壁纸，批量下载

    一.前言 在开始写爬虫之前,我们先了解一下爬虫 首先,我们需要知道爬虫是什么,这里直接引用百度百科的定义 网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按 ...

  3. python爬虫实时更新数据_爬虫的增量式抓取和数据更新

    一些想法 页面爬的多了,量上去了之后,就会遇到其他的问题,其实不管做什么技术量大了都会有问题.一般情况下,我认为解决"大量"问题的思路有两个:一种是着力于优化系统的能力,让原本只能 ...

  4. 爬虫爬评书吧_爬虫 + 小程序 自定义开发一个听书程序

    最近工作之余会听听评书,但主流门户收费加广告着实让人烦躁.作为IT人,怎能如此顺应别人家的产品规则. 下面以 python + taro 为例,写一个爬虫 + 小程序的播放应用: 最终实现的效果如下: ...

  5. 爬虫python和c语言区别_爬虫概述 - Python教程 - C语言网

    网络爬虫(又称为网页蜘蛛,网络机器人,更经常的称为网页追逐者),它按照一定的规则自动地抓取网络信息. 1. 产生背景 随着时代的进步,互联网上拥有大量的信息,但是我们该如何高效的获取这些信息成为了一个 ...

  6. 爬虫 页面元素变化_爬虫 基本知识 萌新

    爬虫 定义 网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本.另外一些不常使用的名字还有蚂蚁.自动索引.模拟 ...

  7. 零基础轻松学python pdf 小码哥_零基础轻松学Python

    零基础轻松学Python电子书 Python之父Guido van Rossum力荐的Python门书.本书以通俗易懂的语言.好玩有趣的案例让读者轻轻松松.循序渐地从零始掌握Python 3 编程.本 ...

  8. 反爬虫兵法演绎04 _ 爬虫的首轮攻势：如何低调地拿到自己想要的数据？

    本资源由 Java学习者论坛 收集整理 04 | 爬虫的首轮攻势:如何低调地拿到自己想要的数据? 你好啊,我是DS Hunter.又见面了. 前面我和你聊了聊爬虫和反爬虫的历史,感觉这是一个内卷的死结 ...

  9. 如何用python画小黄人_怎么用python画小黄人

    怎么用python画小黄人?TB1免费资源网 前言:TB1免费资源网 还记得小黄人哪只蠢萌蠢萌的单眼小黄人?就是喜欢做什么事都喜欢逞能的那只,下面用Python来实现一下,正在逃跑的小黄人.TB1免费 ...

  10. python分布式框架celery项目开发_本项目在 Celery 分布式爬虫的基础上构建监控方案 Demo...

    CrawlerMonitor UPDATE: 2020.4.14 Introduction 本项目在 Celery 分布式爬虫的基础上构建监控方案 Demo,在编写 Statsd + InfluxDB ...

最新文章

  1. python中字符串中文乱码_Python字符串开头的bquot;、uquot;、rquot;与中文乱码
  2. quant companies
  3. 云场景实践研究第52期：畅游
  4. 我的世界服务器怎么弄无限急迫,我的世界有什么指令设置无限急迫
  5. php 加载库文件_php 如何调用dll文件内接口，求大神帮忙谢谢。
  6. 常用sql语句及案例（oracle）
  7. 百年GE濒临破产，传奇霸业何以衰亡？
  8. 开源，阿里千万实例可观测采集器 iLogtail
  9. RealVIZ Stitcher Unlimited v5.5.1 1CD
  10. oracle查询语句大全 oracle 基本命令大全
  11. Linux基础命令：awk
  12. 关于listview的全选、反选、取消、删除等操作
  13. C#-调试记Log文件
  14. 使用HTML5 SVG绘制的多层饼形图（纯javascript）
  15. 设计模式学习系列6 原型模式（prototype）
  16. 读书笔记005：《伤寒论》- 足阳明胃经
  17. ​《Python知识手册》更新到V4.1版
  18. linux flex安装包,安装flex包
  19. 自动化测试不求人-每日1例 selenium自动化测试对元素截图实例
  20. Android 代码混淆 包名被混淆 主工程二次混淆 一站解决你的混淆

热门文章

  1. 使用网上软件激活win10后，默认谷歌浏览器被锁定hao123 解决思路
  2. vue移动端小说阅读器vue全家桶项目，已部署到服务器可访问预览
  3. python文字转语音哪个库好用
  4. 苹果电脑怎么安装计算机一级,苹果系统安装教程,详细教您苹果电脑怎么重装系统...
  5. linux 模板 制作工具,OpenTBS 1.8.0 发布，生成 Office 的模板工具
  6. 【Unity步步升】导航网格、寻路算法及AI行为树等应用与实践...
  7. 解决可视化界面的时候灰屏【已解决】
  8. 使用GPS经纬度定位附近地点(某一点范围内查询)
  9. 通俗易懂的USB协议详解（转）
  10. 如何撰写专利说明书摘要？