爬虫教程入门(第一章)

释放双眼,带上耳机,听听看~!

运行平台:Windows 
Python版本:Python3.x 

IDLE (Python 3.4 GUI – 32 bit)

网络爬虫,也叫网络蜘蛛(Web Spider),如果把互联网比喻成一个蜘蛛网,Spider就是一只在网上爬来爬去的蜘蛛。网络爬虫就是根据网页的地址来寻找网页的,也就是URL。

URL的构成如下

 protocol :// hostname[:port] / path / [;parameters][?query]#fragment

简单的爬虫实例

首先要安装一下,request库连接如下

https://github.com/requests/requests

安装教程

打开cmd进入pip目录,输个命令就直接下载了

输入命令直接下载

pip install requests

写个例子

# -*- coding:UTF-8 -*-import requestsif __name__ == "__main__": target = "http://www.baidu.com" reqs = requests.get(url = target) print(reqs.text)

运行后

发起一个get请求

requests官方中文教程地址:http://docs.pythonrequests.org/zh_CN/latest/user/quickstart.html

诚殷web安全基础培训将是公开课形式,也就是任何人都可以直接观看,明晚9.30在斗鱼直播平台,www.douyu.com/cywl

本文源自微信公众号:渗透云笔记

人已赞赏
安全工具

CTF培训第二天

2019-10-16 17:18:37

安全工具

模块(十九章)

2019-10-16 17:18:42

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索