文章詳情頁
python - 抓取天貓?jiān)斍轫摾锩娴脑落N量,反爬非常厲害
瀏覽:111日期:2022-08-17 13:11:56
問題描述
現(xiàn)在需要抓取天貓?jiān)斍轫摾锩娴脑落N量如https://detail.tmall.com/item...已分析得到是異步j(luò)s返回的數(shù)據(jù),接口如下https://mdskip.taobao.com/cor...
這個(gè)地址訪問幾次就需要登錄,登錄之后多訪問幾次就需要輸入驗(yàn)證碼用代理換IP也一樣各位大神有啥好辦法
問題解答
回答1:不登陸,直接換代理
切換代理不要保持會(huì)話
回答2:獲取入口可以選擇移動(dòng)端入口,例如:入口
數(shù)據(jù)直接就在頁面上,獲取數(shù)據(jù)就很容易了,關(guān)鍵字'sellCount'。
回答3:瀏覽器訪問多少次都不會(huì)要求登錄,用代碼調(diào)瀏覽器插件訪問htmlunit
用postman刷了50次也不會(huì)讓我登錄或者出現(xiàn)驗(yàn)證碼,自己下個(gè)post試試,淘寶的反爬還是一般般。https://www.endclothing.com用的反爬才真的見鬼
回答4:有沒有大神有過經(jīng)驗(yàn)?
排行榜

熱門標(biāo)簽