urllib2模块初体验———豆瓣读书页面下载小爬虫

我也是根据：http://blog.csdn.net/pleasecallmewhy/article/details/8927832 ，来写出豆瓣读书的爬虫，废话不说直接上代码：

 #!/usr/bin/env python
 #-*-coding=utf-8-*-

 import urllib2

 #获取豆瓣读书的分页的页面
 def doubanbook(url,begin,end):
     for i in range(begin,end+1):
         filename = str(i) + '.html'
         print 'Downloading ' + str(i) + '....... Filename is ' + filename
         #打开文件对象
         f = open('/home/dzhwen/python文件/Homework/urllib/douban/doubanbook'+filename,'w+')
         m = urllib2.urlopen(url + str((i-1)*20)).read()
         f.write(m)
         f.close()

 if __name__ == '__main__':
     url = 'http://book.douban.com/tag/编程?start='
     begin = input('请输入你抓取的页数开始为:')
     end = input('请输入你抓取的页数结束为:')
     doubanbook(url,begin,end)

我在页面上显示20的原因是由于豆瓣的页面上的url消息有一定的规律。关键还要看具体情况进行调整。该程序还可以用作抓取百度贴吧等等。