- 帖子
- 55
- 主題
- 1
- 精華
- 0
- 積分
- 81
- 點名
- 0
- 作業系統
- win
- 軟體版本
- 10
- 閱讀權限
- 20
- 註冊時間
- 2016-5-15
- 最後登錄
- 2018-11-1
|
156#
發表於 2016-9-21 10:00
| 只看該作者
本帖最後由 koshi0413 於 2016-9-21 10:09 編輯
回復 koshi0413
不錯的文章,謝謝分享。
大量爬取的時候加進一些sleep很好,避免短時間大量request造成 ...
zyzzyva 發表於 2016-9-21 09:34 
動態ajax網頁 目前是用 selenium+chrome解決
只是單純想用 requests,BeautifulSoup 交互響應 的方式來解
目前解不掉@@
相關知識還不夠,少一個headers參數 都是變化式亂碼,還在思考中
ps:有查了一下,好像要用 cookie 然後在抓取 另外二參數的亂數碼(目前抓到一個,另還一還找不到規律)
不過小弟自己也不確定啦
requests.session() 好多次還是沒反應,哈哈 |
|