用python简单实现百度查关键词排名工具并生成截图--精准无比

欢迎关注原创视频教程

Python微信订餐小程序课程视频

https://edu.csdn.net/course/detail/36074

Python实战量化交易理财系统

https://edu.csdn.net/course/detail/35475

实现效果

百度关键词查排名工具实现结果如下： 1. 关键词 2. 域名 3. 最大查询页数效果如下：

实现原理

其实原理很简单就是使用机器代替人工进行一个一个的查找。为什么说该功能查百度关键词排名精准无比呢？因为百度搜索结果在渲染的时候会为每一个非广告条目生成排名，如果直接通过curl获取百度查询结果是没有百度提供的排名参数的，只有在网页渲染后才有。

用到的类库

python
pyQt5
selenium
geckodriver（火狐浏览器）
pyinstaller

实现代码

rank_baidu.py

    import requests
import re
import string
import time
import os
import time
import shutilfrom selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By
from selenium.webdriver.support.wait import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.common.exceptions import StaleElementReferenceException
from PIL import Imageheaders={'Host': 'www.baidu.com','User-Agent': 'Mozilla/5.0 (X11; Linux x86_64; rv:71.0) Gecko/20100101 Firefox/71.0','Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8','Accept-Language': 'en-US,en;q=0.5','Accept-Encoding': 'gzip, deflate, br','Connection': 'keep-alive','Upgrade-Insecure-Requests': '1','Pragma': 'no-cache','Cache-Control': 'no-cache'
}class SearchEngine():"""搜索引擎"""def __init__(self,keyword='',domain='',page_max=10,headers=None,headless=True):'''初始化'''if headers is None:headers={'Host': 'www.baidu.com','User-Agent': 'Mozilla/5.0 (X11; Linux x86_64; rv:71.0) Gecko/20100101 Firefox/71.0','Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8','Accept-Language': 'en-US,en;q=0.5','Accept-Encoding': 'gzip, deflate, br','Connection': 'keep-alive','Upgrade-Insecure-Requests': '1','Pragma': 'no-cache','Cache-Control': 'no-cache'}options = Noneif headless:options = webdriver.FirefoxOptions()options.add_argument('--headless')options.add_argument('--dns-prefetch-disable')options.add_argument('--no-referrers')options.add_argument('--disable-gpu')options.add_argument('--disable-audio')options.add_argument('--no-sandbox')options.add_argument('--ignore-certificate-errors')options.add_argument('--allow-insecure-localhost')self._driver = webdriver.Firefox(options=options)self.keyword = keywordself.domain = domainself.page_max = page_maxself.page = 1self.page_rank = 0self.rank = 0self.screenshots = Nonedef _search_keyword(self):flag = Falsetry:wait = WebDriverWait(self._driver, 10)driver = wait.until(EC.element_to_be_clickable((By.CLASS_NAME,'result')))# line_list = self._driver.find_element_by_xpath("//div[@id='content_left'][1]").find_elements_by_xpath("//div[@class='result c-container ']")line_list = self._driver.find_elements_by_xpath("//div[@id='content_left']//div[@class='result c-container ']")# print('内存:',line_list)i = 0for line in line_list:i = i + 1# print(type(line))id = line.get_attribute('id')#print('id = ',id)self.rank = iddomin_href = ''try:domin_href = line.find_element(By.CLASS_NAME,'c-showurl')except:continue#if domin_href.text.startswith(self.domain) > 0:if self.domain in domin_href.text:#print(i,domin_href.text,self.domain)# self.rank = (self.page -1) * 10 + iself.page_rank = iflag = True#标红self._driver.execute_script('''(function(){var result = document.getElementById(%s)result.setAttribute('style','border:5px solid red;padding:10px;margin-left:-15px')})()''' % id)self._screenshots()breakexcept StaleElementReferenceException as e:time.sleep(0.5)return self._search_keyword()return flagdef _page_down(self):"""下一页，成功返回True，否则返回False"""# wait = WebDriverWait(self._driver, 10)# wait.until(EC.presence_of_all_elements_located((By.CLASS_NAME, 'n')))# self._driver.implicitly_wait(10)# WebDriverWait(self._driver,5).until(lambda driver: driver.execute_script("console.log('ok')"))if self.page > self.page_max:return Falsewait = WebDriverWait(self._driver,10)driver = wait.until(EC.element_to_be_clickable((By.CLASS_NAME,'n')))for i in self._driver.find_elements_by_class_name("n"):
#             print(i.text)if '下一页' in i.text:current_window = self._driver.current_window_handle i.click()# for window in  self._driver.window_handles:#     if window != current_window:#         self._driver.switch_to.window(window)self.page = self.page + 1time.sleep(0.5)return Truereturn Falsedef do_rank(self):'''获取排名'''self._driver.get('https://www.baidu.com')self._driver.find_element_by_id('kw').send_keys(self.keyword)self._driver.implicitly_wait(10)self._driver.find_element_by_id("su").send_keys(Keys.ENTER) #开始搜索if self._search_keyword() :self._quit()returnwhile self._page_down():if self._search_keyword():self._quit()returnself._quit()def _screenshots(self):'''截图'''time_local_now = time.localtime(time.time())time_now_rub = time.strftime('%Y%m%d%H%M%S',time_local_now)width = self._driver.execute_script("return Math.max(document.body.scrollWidth, document.body.offsetWidth, document.documentElement.clientWidth, document.documentElement.scrollWidth, document.documentElement.offsetWidth);")height = self._driver.execute_script("return Math.max(document.body.scrollHeight, document.body.offsetHeight, document.documentElement.clientHeight, document.documentElement.scrollHeight, document.documentElement.offsetHeight);")self._driver.set_window_size(width + 100, height + 100)# 保存为截图，同时命名为根据搜索的结果带上时间搓便于识别out_img_name = './img/baidu_' + time_now_rub + ".png"self._driver.save_screenshot(out_img_name)self.screenshots = out_img_namedef _quit(self):self._driver.quit()def baidu_rank(wd,domain,pn = 1, rn = 10):print('https://www.baidu.com/s','wd=',wd,'pn=',(pn-1)*rn,'rn=',rn)url = 'https://www.baidu.com/s?wd={}&pn={}&rn={}'.format(wd,(pn-1)*rn,rn)print(url)with requests.get('https://www.baidu.com/s', params={'wd': wd, 'pn': (pn-1)*rn, 'rn': rn}, timeout=7,headers=headers) as r:print(r.url)html = r.textwith open('/tmp/ret.html','w',encoding='utf-8') as f:f.write(r.text)#关闭文件f.close()if(html.find(domain)> -1) :print('当前第{}页包含({})'.format(pn,domain))else:print('没有找到')

使用pyqt5实现简单界面，我这里使用的是pyqt的designer拖拽工具，随意的放上了必要的几个控件（虽然很丑，但不影响功能）。

main.ui 布局内容如下：

<?xml version="1.0" encoding="UTF-8"?>
<ui version="4.0"><class>SEO</class><widget class="QMainWindow" name="SEO"><property name="geometry"><rect><x>0</x><y>0</y><width>800</width><height>600</height></rect></property><property name="windowTitle"><string>MainWindow</string></property><widget class="QWidget" name="centralwidget"><widget class="QLabel" name="label"><property name="geometry"><rect><x>190</x><y>50</y><width>53</width><height>16</height></rect></property><property name="text"><string>关键词:</string></property></widget><widget class="QLineEdit" name="keyworldText"><property name="geometry"><rect><x>270</x><y>30</y><width>251</width><height>41</height></rect></property></widget><widget class="QLabel" name="label_2"><property name="geometry"><rect><x>190</x><y>120</y><width>45</width><height>16</height></rect></property><property name="text"><string>域名：</string></property></widget><widget class="QLineEdit" name="domainText"><property name="geometry"><rect><x>270</x><y>93</y><width>251</width><height>51</height></rect></property></widget><widget class="QLineEdit" name="pageMaxText"><property name="geometry"><rect><x>650</x><y>60</y><width>113</width><height>31</height></rect></property><property name="text"><string>5</string></property></widget><widget class="QLabel" name="label_3"><property name="geometry"><rect><x>550</x><y>70</y><width>101</width><height>16</height></rect></property><property name="text"><string>最大查询页数：</string></property></widget><widget class="QPushButton" name="rankBtn"><property name="geometry"><rect><x>350</x><y>180</y><width>93</width><height>28</height></rect></property><property name="text"><string>查询</string></property></widget><widget class="QLabel" name="resultLabel"><property name="geometry"><rect><x>250</x><y>280</y><width>281</width><height>81</height></rect></property><property name="text"><string>结果显示在这里</string></property></widget></widget><widget class="QMenuBar" name="menubar"><property name="geometry"><rect><x>0</x><y>0</y><width>800</width><height>26</height></rect></property></widget><widget class="QStatusBar" name="statusbar"/></widget><resources/><connections/>
</ui>

有了main.ui文件，我们可以通过如下命令生成python代码

pyuic5 -o main.py main.ui

main.py代码如下：

# -*- coding: utf-8 -*-# Form implementation generated from reading ui file 'main.ui'
#
# Created by: PyQt5 UI code generator 5.13.2
#
# WARNING! All changes made in this file will be lost!from PyQt5 import QtCore, QtGui, QtWidgetsclass Ui_SEO(object):def setupUi(self, SEO):SEO.setObjectName("SEO")SEO.resize(800, 600)self.centralwidget = QtWidgets.QWidget(SEO)self.centralwidget.setObjectName("centralwidget")self.label = QtWidgets.QLabel(self.centralwidget)self.label.setGeometry(QtCore.QRect(190, 50, 53, 16))self.label.setObjectName("label")self.keyworldText = QtWidgets.QLineEdit(self.centralwidget)self.keyworldText.setGeometry(QtCore.QRect(270, 30, 251, 41))self.keyworldText.setObjectName("keyworldText")self.label_2 = QtWidgets.QLabel(self.centralwidget)self.label_2.setGeometry(QtCore.QRect(190, 120, 45, 16))self.label_2.setObjectName("label_2")self.domainText = QtWidgets.QLineEdit(self.centralwidget)self.domainText.setGeometry(QtCore.QRect(270, 93, 251, 51))self.domainText.setObjectName("domainText")self.pageMaxText = QtWidgets.QLineEdit(self.centralwidget)self.pageMaxText.setGeometry(QtCore.QRect(650, 60, 113, 31))self.pageMaxText.setObjectName("pageMaxText")self.label_3 = QtWidgets.QLabel(self.centralwidget)self.label_3.setGeometry(QtCore.QRect(550, 70, 101, 16))self.label_3.setObjectName("label_3")self.rankBtn = QtWidgets.QPushButton(self.centralwidget)self.rankBtn.setGeometry(QtCore.QRect(350, 180, 93, 28))self.rankBtn.setObjectName("rankBtn")self.resultLabel = QtWidgets.QLabel(self.centralwidget)self.resultLabel.setGeometry(QtCore.QRect(250, 280, 281, 81))self.resultLabel.setObjectName("resultLabel")SEO.setCentralWidget(self.centralwidget)self.menubar = QtWidgets.QMenuBar(SEO)self.menubar.setGeometry(QtCore.QRect(0, 0, 800, 26))self.menubar.setObjectName("menubar")SEO.setMenuBar(self.menubar)self.statusbar = QtWidgets.QStatusBar(SEO)self.statusbar.setObjectName("statusbar")SEO.setStatusBar(self.statusbar)self.retranslateUi(SEO)QtCore.QMetaObject.connectSlotsByName(SEO)def retranslateUi(self, SEO):_translate = QtCore.QCoreApplication.translateSEO.setWindowTitle(_translate("SEO", "MainWindow"))self.label.setText(_translate("SEO", "关键词:"))self.label_2.setText(_translate("SEO", "域名："))self.pageMaxText.setText(_translate("SEO", "5"))self.label_3.setText(_translate("SEO", "最大查询页数："))self.rankBtn.setText(_translate("SEO", "查询"))self.resultLabel.setText(_translate("SEO", "结果显示在这里"))

run.py 将界面与业务逻辑整合在一起

import sys
from PyQt5.QtWidgets import QMainWindow, QApplication
from main import Ui_SEO
from rank_baidu import SearchEngineclass MainUI(Ui_SEO, QMainWindow):def __init__(self, parent=None):super(MainUI,self).__init__()self.setupUi(self)self.registerEvent()def registerEvent(self):self.rankBtn.clicked.connect(self.doRank)def doRank(self):keyword = self.keyworldText.text()domain = self.domainText.text()page_max_text = self.pageMaxText.text()page_max = int(page_max_text)se = SearchEngine(keyword=keyword,domain=domain,page_max=page_max)se.do_rank()ret = "关键词排名第{}位\n在百度搜索第{}页".format(se.rank,se.page)self.resultLabel.setText(ret)if __name__ == "__main__":app = QApplication(sys.argv)main = MainUI()main.show()sys.exit(app.exec_())

使用pyinstall将pyqt5打包成可执行程序

pyinstaller -F --clean -w run.py

到此结束，直接运行dist目录下面的run.exe文件即可

用python简单实现百度查关键词排名工具并生成截图--精准无比相关推荐

百度关键词排名查询源码_百度推广优化技巧，百度搜索关键词排名优化
一个网站应该怎么做百度关键词排名优化工作_关键词排名_天启速推 1:网址构造的提升是头等大事.百度爬虫也是浏览量,出色的文件目录排序使他很轻轻松松的找到你的內容,排行当然就高,假如网站导航构造乱七八糟 ...
python关键词_python与seo，Python批量挖掘百度凤巢关键词
利用python来完成关键词挖掘,获取关键词数据是seo中比较基础的部分,渠道很多,开水以前也有专门的讲解文章搜索需求挖掘,推广词库收集整理.这次我们就其中关键词搜集的一种方式来展开,来采集凤巢的关键 ...
百度PC关键词排名查询API接口-（api_submit- 百度PC关键词排名查询API接口）
百度PC关键词排名查询API接口-(api_submit-百度PC关键词排名查询API接口),此API接口对接可以获取到百度PC关键词的排名,误差率极低,非常适合SEO计费系统使用,希望可以帮助到有需 ...
震惊！同是亚马逊运营，他居然不查关键词排名
小骑士最近收到几个求助 -- ■ 卖家A:「运营工作那么多,哪里还有精力去看那么多关键词排名?」 ■ 卖家B:「我发觉我每天用在这块(记录关键词排名)的时间太多了,一个早上的时间都是在前台用关键词查 ...
百度移动关键词排名查询API接口-（api_submit- 百度移动关键词排名查询API接口）
百度移动关键词排名查询API接口-(query_17s-百度移动关键词排名查询API接口),此API接口对接可以获取到百度移动关键词的排名,误差率极低,非常适合SEO计费系统.爬虫使用,希望可以帮助到 ...
网站关键词SEO排名，SEO长尾关键词排名工具
网站关键词如何优化上首页,SEO关键词优化是我们搜索引擎优化中比较重要的一个环节,不管是我们的核心关键词优化还是长尾关键词打造.正确的优化方式可以增加我们网站与搜索引擎的相关性,有助于我们的网站在排名 ...
seo关键词排名工具
seo关键词排名工具,什么是SEO关键词排名工具.SEO关键词排名工具有什么用呢?SEO关键词排名工具是辅助关键词排名的工具.今天给大家分享一款全能SEO关键词排名工具,汇集站内优化所有功能!!自动内 ...
百度谷歌关键词排名的小技巧，SEO小技巧
对于SEO,关键词第一页相信对很多从事网站优化的站长来说是比较简单的,但是要保持该关键词第一位一年的时间,相信是比较难的,因为现在的搜索引擎是智能化的,特别是百度的算法不断的"升级" ...
白杨SEO：如何利用B站权重在百度搜索关键词排名进行精准引流？
B站是什么?有什么价值? B站是什么,并不是每个人都知道吧.它类似和知乎.豆瓣等一个小众产品. PC网址:https://www.bilibili.com/ 百科介绍是:哔哩哔哩(英文名称:bilib ...