本文實例講述了Python讀取網頁內容的方法。分享給大家供大家參考。具體如下:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
|
import urllib2 #encoding = utf-8 class Crawler: def main( self ): #req = urllib2.Request('http://www.baidu.com/') #req.add_header('User-Agent', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:5.0)') #urllib2.socket.setdefaulttimeout(10) # 超時10秒 #page = urllib2.urlopen(req) page = urllib2.urlopen( 'http://www.google.com' , timeout = 10 ) data = page.read() print data print len (data) #計算字節長度 if __name__ = = '__main__' : me = Crawler() me.main() |
希望本文所述對大家的Python程序設計有所幫助。