快捷指令写爬虫程序

花了一个下午,利用ios的快捷指令做出了爬取妹子图图片的爬虫程序,一共30个操作

https://www.icloud.com/shortcuts/b65a433365f94cc98adff2d450806176

首先利用网络模块对网站首页进行访问,网站是有反爬机制的,

 利用这个修改头部可以绕过。

快捷指令没有类似于xpath的库,只有最基本的正则表达式,也是可以实现对网页内容的正则的

利用两个正则,将首页中套图的网址找到,对其进行访问。

 有一堆网站的时候可以按行拆分

 这里是对第二张图片进行访问的代码,由于网址的构造是   ip/套图号/图片号    的形式,图片号就是12345.。。所以我直接找到最大图片数,然后利用重复模块访问

 对图片的网址进行访问,就能得图片了,

剩下的查看图片或者保存图片就很简单了

原文地址:https://www.cnblogs.com/p201821440039/p/12397873.html