python---get/post請求下載指定URL返回的網頁內容，出現gzip亂碼處理。設定Accept-Encoding為gzip,deflate，返回的網頁是亂碼
阿新 • • 發佈：2019-01-07
python—get/post請求下載指定URL返回的網頁內容，出現gzip亂碼處理。設定Accept-Encoding為gzip,deflate，返回的網頁是亂碼
1、指令碼
# --*-- coding:utf-8 --*--
#coding:utf-8
import string
import urllib
import urllib2
import ssl
def getpicyanzhengma():#實時請求伺服器最新的驗證碼，並儲存pic.png圖片格式，與伺服器互動
urlget = "https://xianzhi.aliyun.com/forum/topic/1805/"
#ctl = {"ctl":"code"} 2、執行指令碼發現亂碼
python使用get方式請求頁面時，返回頁面內容是亂碼
��<鵶壑�?�3�? �4挧OQW$礩'鄶蚽移澗懍�(�%+mf鐲謒蓫,_�!踨':\'柆��%@顓�� 奛獫dv9嘟飣魺 x踅脀櫖憮N翎F鏀窿R"�餑�賤r揉!薸:2�##胿�z螑 榗妍+邇嫣N_�;釞琾9��.hR迱T%�猙 鄖鐍�7C氹撴鬲5U礀6瑭菮糰 嶄U蛨�3翦�慏#�/[email protected],鵴JR$C鈊V8�'ⅠS98�+浼G閣uG :胰O巼#婈�.K��!�?" 槩瑔2龖XF� 箻np�$釀橷�茻Qx�0苃P梤� 姖g蒐洸譟杫1�1*#漚Yz個FZ匴UC74.偄偖G(^T!肶崇\ L$J囉Esb噘縭⒒@Sx擣�7b� ��%醜pa觵@€溼��肏摴褟餚�楚i斀*尲\�4OFy鮸燔_ H�:�=b|e�?�)3Ja礌挘ガ嗶吉枰0jΠ甎麵�0瞾橑辝��<�{�&尞 龖琣鋥c1AQ�&VPs6輑"欻DSd眘€p_孨u颫Hヌ�搒謡w�<�⒊淕瓜q�=鴫>�;�'Ｍ�籵淚D� �憅ZU�$撮L靠h溳 絬窶^)6錮I聖]�)註釋欄位：
#reqget.add_header("Accept-Encoding","gzip, deflate, sdch, br")執行情況
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="utf-8">
<title>先知社群</title>
<meta name="description" content="先知社群，先知安全技術社群">
<meta name="viewport"
content="width=device-width,initial-scale=1.0,minimum-scale=1.0,maximum-scale=1.0,user-scalable=no">
<link rel="icon" href="/forum/static/icon/favicon.ico" type="image/x-icon">
<!-- Le styles -->
....................
.....................
.....................
......................4、解決html回包的亂碼方式：
想要獲得正確網頁內容，而非亂碼的話，就有兩種方式了：
1.不要設定Accept-Encoding的Header
//req.Headers.Add("Accept-Encoding", "gzip,deflate");
2.設定Accept-Encoding的Header,同時設定對應的自動解壓縮的模式
req.Headers["Accept-Encoding"] = "gzip,deflate";
req.AutomaticDecompression = DecompressionMethods.GZip;
具體採用哪種方法，自己根據需要選擇。