鍍金池/ 問答/Python  網絡安全/ python3用urllib爬網頁,為什么得到的html只有上半部分?

python3用urllib爬網頁,為什么得到的html只有上半部分?

python版本3.7.0
在使用urllib爬蟲獲取網頁html代碼時,編碼時報錯,忽略掉錯誤。

html = data.decode(charset,errors='ignore')

得到的html只有上半部分。

clipboard.png

而網頁本應該已</html>結尾的。

clipboard.png

就是說丟失了一部分。
請問各位大神這是什么情況?
網上都搜不到結果。難道就我一個人遇到嗎?
話說python寫爬蟲確實快,但我剛開始都踩了好幾個坑了。

回答
編輯回答
朽鹿

是不是爬的內容太大了。vscode默認只顯示一定大小內的

2017年3月6日 20:51
編輯回答
網妓

問題解決啦,是vs code的問題,換了調試環(huán)境就好了??磥韛s code還是不能做開發(fā)環(huán)境用。

2018年4月17日 06:21