python网络爬虫入门范例

python网络爬虫入门范例

框架

HTTP请求和返回内容

Windows用户建议安装anaconda,因为有些套件难以安装。
安装使用pip install *
request

使用剖析器

找出所有含有特定标签的HTML元素
这里写图片描述

找出含有特定CSS属性的元素

这里写图片描述

取得所有a标签内的链接
这里写图片描述


Chrome插件InfoLite可以检查元素的标签


获取内文页面
内文页面
抓取标题

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

[:-1]表示到最后一个,最后一个不取

lstrip()方法用于截掉字符左边的空格或指定字符

rstrip()方法用于截掉字符右边的空格或指定字符

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

原文地址:https://www.cnblogs.com/Mayny/p/9374167.html