python使用selenium爬取股票相关信息

目标：每周/月通过东方财富股吧上面的收盘后的股票信息

尝试1：使用request包来爬取，因为可以不用打开浏览器。

问题：使用request只能抓取到股票名字，其他信息抓取不到。查询后得知所需要的信息是在一个动态添加的div标签里面，打开网页后再审查元素里面可以查到，但是网页源代码里面查不到。

尝试2：使用selenium包来爬取，尝试后可以。将抓取到的信息保存在txt文件里。

问题：必须使用浏览器，还必须打开浏览器才行。没有股票代码，只能使用大概的范围。txt保存后需手动导入到excel中

# 获取股票信息
import time
import random
from selenium import webdriverdef get_info(stock_number):global browsertry:browser = webdriver.Chrome(r'G:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe')browser.get(f"https://guba.eastmoney.com/list,{stock_number}.html")stock_name = str(browser.find_element_by_id('stockname').text)stock_price = str(browser.find_element_by_id('hqprice').text)stock_price_variation = str(browser.find_element_by_id('hqzd').text)stock

python使用selenium爬取股票相关信息相关推荐

python中完整爬取股票财务信息和公司基本信息含xpath
完整代码: 完整代码花了差不多半个月时间写完,数据爬取横跨雪球网.东方财富网.同花顺,提取利润表.资产负债表.主要指标.分红.股东变化信息等,同时获取企业员工.管理人信息及主营业务.企业简介等: 过程 ...
python中完整爬取股票财务信息和公司基本信息
完整代码: import xlwings as xw import requests from bs4 import BeautifulSoup from datetime import dateti ...
layui获取input信息_python爬虫—用selenium爬取京东商品信息
python爬虫--用selenium爬取京东商品信息 1.先附上效果图(我偷懒只爬了4页) 2.京东的网址https://www.jd.com/ 3.我这里是不加载图片,加快爬取速度,也可以用Hea ...
[python爬虫] selenium爬取局部动态刷新网站（URL始终固定）
在爬取网站过程中,通常会遇到局部动态刷新情况,当你点击"下一页"或某一页时,它的数据就进行刷新,但其顶部的URL始终不变.这种局部动态刷新的网站,怎么爬取数据呢?某网站数据显示如下 ...
python爬虫实现爬取网页主页信息（html代码）
python爬虫实现爬取网页主页信息(html代码) 1.爬取网站源码 urllib整体介绍: urllib是一个包,收集几个模块来处理网址 urllib.request打开和浏览url中内容 url ...
Python POST 爬虫爬取掘金用户信息
Python POST 爬虫爬取掘金用户信息 1. 概述 Python第三方库requests提供了两种访问http网页的函数,基于GET方式的get()函数和基于POST方式的post()函数. g ...
python 使用 selenium 爬取中国福利彩票双色球历史中奖号码
python 使用 selenium 爬取中国福利彩票双色球历史中奖号码前期准备版本:python3 模块:selenium.time.pprint 一开始使用的是 tree 的方式获取数据,但发 ...
python使用selenium爬取联想官网驱动（一）：获取遍历各驱动的下载网址
python使用selenium爬取联想官网驱动(一):获取遍历各驱动的下载网址然后wget命令试验下载由于初期学习,所以先拿一个型号的产品驱动试验. (1)以下为在联想某型号产品获取相关驱动下载的 ...
用 Python selenium爬取股票新闻并存入mysql数据库中带翻页功能demo可下载
用 Python selenium爬取实时股票新闻并存入mysql数据库中 1.分析需求 2.创建表 3.分析需要爬取的网页内容 4.python里面selenium进行爬虫操作 1.添加包 2.连接 ...
Python爬虫+selenium——爬取淘宝商品信息和数据分析
浏览器驱动点击下载chromedrive .将下载的浏览器驱动文件chromedriver丢到Chrome浏览器目录中的Application文件夹下,配置Chrome浏览器位置到PATH环境. 需 ...

python使用selenium爬取股票相关信息

python使用selenium爬取股票相关信息相关推荐

最新文章

热门文章