python基于BeautifulSoup实现抓取网页指定内容的方法

本文实例讲述了python基于BeautifulSoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下：

# _*_ coding:utf-8 _*_
#xiaohei.python.seo.call.me:)
#win+python2.7.x
import urllib2
from bs4 import BeautifulSoup
def jd(url):
  page = urllib2.urlopen(url)
  html_doc = page.read()
  soup = BeautifulSoup(html_doc.decode('gb2312','ignore'))
  for i in soup.find_all('div', id="sortlist"):
    one = i.find_all('a')
    two = i.find_all('li')
    print ("%s %s" % (one,two))
jd("http://channel.jd.com/computer.html")

希望本文所述对大家的Python程序设计有所帮助。

您可能感兴趣的文章:

• python 自动提交和抓取网页
• python抓取网页图片示例(python爬虫)
• 深度剖析使用python抓取网页正文的源码
• Python实现抓取网页并且解析的实例
• python多线程threading.Lock锁用法实例
• 零基础写python爬虫之使用urllib2组件抓取网页内容
• 浅析Python中的多进程与多线程的使用
• python使用自定义user-agent抓取网页的方法
• Python实现周期性抓取网页内容的方法
• python抓取网页中图片并保存到本地
• Python使用正则表达式抓取网页图片的方法示例
• Python实现多线程抓取网页功能实例详解