700字范文,内容丰富有趣,生活中的好帮手!
700字范文 > python网络爬虫入门小程序_Python 实现网络爬虫小程序

python网络爬虫入门小程序_Python 实现网络爬虫小程序

时间:2021-09-12 23:47:49

相关推荐

python网络爬虫入门小程序_Python 实现网络爬虫小程序

转载请注明作者和出处: /c406495762 运行平台: Windows Python版本: Python3.x IDE: Sublime text3 前言 问题分析 预备知识 1 Selenium 11 简介 12 安装 13 基础知识 131 小试牛刀 132 模拟提交 133 元素选取 134 界面交互 135 添加U

Python很简洁,也很强大,作为兴趣,值得一学!

下面这个程序实现的是从一个网站上下载图片,根据自己需要可以进行修改使用Python语言,编写简单的爬虫程序,在百度百科页面上爬取跟词条“Python”有关的1000个页面(页面数目可以自己任意设定)。 这个简易的爬虫项目可以分为5个模块: 首先,需要有一个程序入口spider_main,同时作为爬虫的总控程序(调度程序), 改程序需要

import re

import urllib

def gethtml(url):

page = urllib.urlopen(url)

html = page.read()

return html

def getimg(html):

reg = r'src="(.*?\.jpg)"'

imgre = pile(reg)

imglist = re.findall(imgre, html)

x = 1

for imgurl in imglist:

urllib.urlretrieve(imgurl, '%s.jpg' % x)

x+=1

target = raw_input("Input one url:")

html = gethtml(target)

print "please wating, pictrues are downloading....."

getimg(html)

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。