import urllib2
import sysimport chardetreq = urllib2.Request("http://www.163.com/")##这里可以换成http://www.baidu.com,http://www.sohu.comcontent = urllib2.urlopen(req).read()typeEncode = sys.getfilesystemencoding()##系统默认编码infoencode = chardet.detect(content).get('encoding','utf-8')##通过第3方模块来自动提取网页的编码html = content.decode(infoencode,'ignore').encode(typeEncode)##先转换成unicode编码,然后转换系统编码输出print html