python爬虫搜特定内容的论文_python基于BeautifulSoup实现抓取网页指定内容的方法...

python基于BeautifulSoup实现抓取网页指定内容的方法

更新时间：07月09日 10:12:50 作者：光索与诺

这篇文章主要介绍了python基于BeautifulSoup实现抓取网页指定内容的方法,涉及Python使用BeautifulSoup模块解析html网页的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下

本文实例讲述了python基于BeautifulSoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下：

# _*_ coding:utf-8 _*_

#xiaohei.python.seo.call.me:)

#win+python2.7.x

import urllib2

from bs4 import BeautifulSoup

def jd(url):

page = urllib2.urlopen(url)

html_doc = page.read()

soup = BeautifulSoup(html_doc.decode('gb2312','ignore'))

for i in soup.find_all('div', id="sortlist"):

one = i.find_all('a')

two = i.find_all('li')

print ("%s %s" % (one,two))

jd("/computer.html")

希望本文所述对大家的Python程序设计有所帮助。

相关文章

今天小编就为大家分享一篇python 实现dict转json并保存文件，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧-12-12

今天小编就为大家分享一篇python保存log日志,实现用log日志来画图，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧-12-12

这篇文章主要介绍了Bottle框架中的装饰器类和描述符应用详解，具有一定参考价值，需要的朋友可以了解下。-10-10

这篇文章主要介绍了解决tensorflow 释放图,删除变量问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧-06-06

本文主要是针对Python的字典dict遍历的4种方法进行了性能测试，以便分析得出效率最高的一种方法-06-06

这篇文章主要介绍了Python中的分支和循环结构，本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值,需要的朋友可以参考下-02-02

这篇文章主要介绍了Python使用PyCrypto实现AES加密功能,结合具体实例形式分析了PyCrypto实现AES加密的操作步骤与相关实现技巧,需要的朋友可以参考下-05-05

这篇文章主要介绍了Python线程池模块ThreadPoolExecutor用法,结合实例形式分析了Python线程池模块ThreadPoolExecutor的导入与基本使用方法,需要的朋友可以参考下-12-12

这篇文章主要介绍了在Python的Flask框架下收发电子邮件的教程,主要用到了Flask中的Flask-mail工具,需要的朋友可以参考下-04-04

下面小编就为大家带来一篇浅谈编码,解码,乱码的问题。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧-12-12

最新评论