当前位置:首页 » 股票涨停 » python爬取股票软件数据

python爬取股票软件数据

发布时间: 2023-01-12 23:52:03

❶ 如何用python 爬虫抓取金融数据

获取数据是数据分析中必不可少的一部分,而网络爬虫是是获取数据的一个重要渠道之一。鉴于此,我拾起了Python这把利器,开启了网络爬虫之路。

本篇使用的版本为python3.5,意在抓取证券之星上当天所有A股数据。程序主要分为三个部分:网页源码的获取、所需内容的提取、所得结果的整理。

一、网页源码的获取

很多人喜欢用python爬虫的原因之一就是它容易上手。只需以下几行代码既可抓取大部分网页的源码。

为了减少干扰,我先用正则表达式从整个页面源码中匹配出以上的主体部分,然后从主体部分中匹配出每只股票的信息。代码如下。

pattern=re.compile('<tbody[sS]*</tbody>')
body=re.findall(pattern,str(content)) #匹配<tbody和</tbody>之间的所有代码pattern=re.compile('>(.*?)<')
stock_page=re.findall(pattern,body[0]) #匹配>和<之间的所有信息

其中compile方法为编译匹配模式,findall方法用此匹配模式去匹配出所需信息,并以列表的方式返回。正则表达式的语法还挺多的,下面我只罗列所用到符号的含义。

语法 说明

. 匹配任意除换行符“ ”外的字符

* 匹配前一个字符0次或无限次

? 匹配前一个字符0次或一次

s 空白字符:[<空格> fv]

S 非空白字符:[^s]

[...] 字符集,对应的位置可以是字符集中任意字符

(...) 被括起来的表达式将作为分组,里面一般为我们所需提取的内容

正则表达式的语法挺多的,也许有大牛只要一句正则表达式就可提取我想提取的内容。在提取股票主体部分代码时发现有人用xpath表达式提取显得更简洁一些,看来页面解析也有很长的一段路要走。

三、所得结果的整理

通过非贪婪模式(.*?)匹配>和<之间的所有数据,会匹配出一些空白字符出来,所以我们采用如下代码把空白字符移除。

stock_last=stock_total[:] #stock_total:匹配出的股票数据for data in stock_total: #stock_last:整理后的股票数据
if data=='':
stock_last.remove('')

最后,我们可以打印几列数据看下效果,代码如下

print('代码',' ','简称',' ',' ','最新价',' ','涨跌幅',' ','涨跌额',' ','5分钟涨幅')for i in range(0,len(stock_last),13): #网页总共有13列数据
print(stock_last[i],' ',stock_last[i+1],' ',' ',stock_last[i+2],' ',' ',stock_last[i+3],' ',' ',stock_last[i+4],' ',' ',stock_last[i+5])

❷ 如何使用Python获取股票分时成交数据

可以使用爬虫来爬取数据,在写个处理逻辑进行数据的整理。你可以详细说明下你的需求,要爬取的网站等等。
希望我的回答对你有帮助

❸ 怎么学python爬取财经信息

本程序使用Python 2.7.6编写,扩展了Python自带的HTMLParser,自动根据预设的股票代码列表,从Yahoo Finance抓取列表中的数据日期、股票名称、实时报价、当日变化率、当日最低价、当日最高价。

由于Yahoo Finance的股票页面中的数值都有相应id。

例如纳斯达克100指数ETF(QQQ)
其中实时报价的HTML标记为

[html]view plain

  • <spanid="yfs_l84_qqq">87.49</span>

  • 而标普500指数ETF(SPY)

    其中实时报价的HTML标记为

    [html]view plain

  • <spanid="yfs_l84_spy">187.25</span>

  • 因此本数据抓取程序根据相应的id字符串来查找数据。具体来说就是先继承HTMLParser,然后在自定义的子类中重载handle_data(self, data)方法,查找包含相应id字符串(例如实时报价的id字符串为"yfs_l84_"+股票代码)的HTML标记,并输出这个HTML标记中的数据(例如qqq的<span id="yfs_l84_qqq">87.49</span>,其中的数据87.49就是实时报价。)

    样本输出:

    数据依次是

    数据日期 股票代码 股票名称 实时报价 日变化率 日最低价 日最高价

    [python]view plain

  • 05/05/(IBB)233.281.85%225.34233.28

  • 05/05/(SOCL)17.480.17%17.1217.53

  • 05/05/(PNQI)62.610.35%61.4662.74

  • 05/05/2014xsdSPDRS&PSemiconctorETF(XSD)67.150.12%66.2067.41

  • 05/05/2014itaiSharesUSAerospace&Defense(ITA)110.341.15%108.62110.56

  • 05/05/2014iaiiSharesUSBroker-Dealers(IAI)37.42-0.21%36.8637.42

  • 05/05/(VBK)119.97-0.03%118.37120.09

  • 05/05/2014qqqPowerSharesQQQ(QQQ)87.950.53%86.7687.97

  • 05/05/2014ewiiSharesMSCIItalyCapped(EWI)17.86-0.56%17.6517.89

  • 05/05/(DFE)62.33-0.11%61.9462.39

  • 05/05/(PBD)13.030.00%12.9713.05

  • 05/05/(EIRL)38.52-0.16%38.3938.60

❹ 如何用Python炒股

python可以用于爬虫,爬取指定股票的数据,更准确,更便捷,利于数据分析和买卖的把控

❺ python用什么方法或者库可以拿到全部股票代码

首先你需要知道哪个网站上有所有股票代码,然后分析这个网站股票代码的存放方式,再利用python写一个爬虫去爬取所有的股票代码

❻ 如何使用python抓取炒股软件中资金数据

这个说来有点复杂,用fiddle监控软件跟服务器间的通讯,找到数据源地址,然后用excel或python抓这个源地址数据,可能还要加上反扒代码,构造时间戳等等,你网上找python网抓视频教程看看就知道了。

❼ 如何用Python爬取数据

方法/步骤

  • 在做爬取数据之前,你需要下载安装两个东西,一个是urllib,另外一个是python-docx。

  • 7

    这个爬下来的是源代码,如果还需要筛选的话需要自己去添加各种正则表达式。

热点内容
如何选基金好还是自选好 发布:2025-10-20 08:28:25 浏览:418
股票股利会影响股票价格吗 发布:2025-10-20 08:17:34 浏览:477
期货镍的一个点是多少 发布:2025-10-20 08:11:46 浏览:386
理财通定期收益怎么算 发布:2025-10-20 08:04:13 浏览:782
如何解决股市身份被冒用的问题 发布:2025-10-20 08:00:25 浏览:412
股市最高的一年多少钱 发布:2025-10-20 08:00:23 浏览:767
多少基金公司持有宁德时代 发布:2025-10-20 07:44:38 浏览:744
如何理解货币的两个基本职能科普 发布:2025-10-20 07:36:49 浏览:443
哪些基金没有c类 发布:2025-10-20 07:31:13 浏览:159
银行如何判定钱流入股市 发布:2025-10-20 06:51:50 浏览:436