文章詳情頁

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

瀏覽：46日期：2022-09-13 09:16:56

問題描述

1.抓取到一個錯誤的URl python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

2.我的比蠢笨的辦法：

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

問題解答

回答1：

curl里面有個可以設置返回header的，如果取到的數據非200狀態，直接跳過處理就好了。

Python 編程

上一條：python - 用開源軟件快速搭建數據分析平臺，請指教下一條：網頁爬蟲 - Python+Selenium+PhantomJs爬蟲,如何取得新打開頁面的源碼？

排行榜

					
					node.js - node 客戶端socket一直報錯Error: read ECONNRESET，用php的socket沒問題哈。。
node.js - gulp文件監聽的問題
javascript - vue-router怎么不能實現跳轉呢
如何解決docker宿主機無法訪問容器中的服務？
docker 17.03 怎么配置 registry mirror ?
mySql排序，序號
npm鏡像站全新上線
python - 模擬滑動驗證碼，有源碼，求解
tp6表單令牌
angular.js - 如何通俗易懂的解釋“依賴注入”？
css3 - 請問一下在移動端CSS布局布局中通常需要用到哪些元素，屬性？
				

熱門標簽

亚洲精品久久久中文字幕-亚洲精品久久片久久-亚洲精品久久青草-亚洲精品久久婷婷爱久久婷婷-亚洲精品久久午夜香蕉

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？