基于Python爬取股票數(shù)據(jù)過程詳解
基本環(huán)境配置
python 3.6 pycharm requests csv time相關(guān)模塊pip安裝即可
目標(biāo)網(wǎng)頁
分析網(wǎng)頁
一切的一切都在圖里
找到數(shù)據(jù)了,直接請(qǐng)求網(wǎng)頁,解析數(shù)據(jù),保存數(shù)據(jù)
請(qǐng)求網(wǎng)頁
import requestsurl = ’https://xueqiu.com/service/v5/stock/screener/quote/list’response = requests.get(url=url, params=params, headers=headers, cookies=cookies)html_data = response.json()
解析數(shù)據(jù)
data_list = html_data[’data’][’list’]for i in data_list: dit = {} dit[’股票代碼’] = i[’symbol’] dit[’股票名字’] = i[’name’] dit[’當(dāng)前價(jià)’] = i[’current’] dit[’漲跌額’] = i[’chg’] dit[’漲跌幅/%’] = i[’percent’] dit[’年初至今/%’] = i[’current_year_percent’] dit[’成交量’] = i[’volume’] dit[’成交額’] = i[’amount’] dit[’換手率/%’] = i[’turnover_rate’] dit[’市盈率TTM’] = i[’pe_ttm’] dit[’股息率/%’] = i[’dividend_yield’] dit[’市值’] = i[’market_capital’] print(dit)
保存數(shù)據(jù)
import csvf = open(’股票數(shù)據(jù).csv’, mode=’a’, encoding=’utf-8-sig’, newline=’’)csv_writer = csv.DictWriter(f, fieldnames=[’股票代碼’, ’股票名字’, ’當(dāng)前價(jià)’, ’漲跌額’, ’漲跌幅/%’, ’年初至今/%’, ’成交量’, ’成交額’, ’換手率/%’, ’市盈率TTM’, ’股息率/%’, ’市值’])csv_writer.writeheader()csv_writer.writerow(dit)f.close()
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. ASP中if語句、select 、while循環(huán)的使用方法2. django創(chuàng)建css文件夾的具體方法3. css代碼優(yōu)化的12個(gè)技巧4. .NET SkiaSharp 生成二維碼驗(yàn)證碼及指定區(qū)域截取方法實(shí)現(xiàn)5. MyBatis JdbcType 與Oracle、MySql數(shù)據(jù)類型對(duì)應(yīng)關(guān)系說明6. IntelliJ IDEA設(shè)置背景圖片的方法步驟7. ASP 信息提示函數(shù)并作返回或者轉(zhuǎn)向8. idea自定義快捷鍵的方法步驟9. jsp網(wǎng)頁實(shí)現(xiàn)貪吃蛇小游戲10. CentOS郵件服務(wù)器搭建系列—— POP / IMAP 服務(wù)器的構(gòu)建( Dovecot )
