Requestium

反爬虫技术越来越厉害,常见的请求 + 解析爬虫随着频率变大的前端开发的复杂化变得并不是那么奏效。Requestium的优点:结合了Chome59以后的headless无头特性(代替了phantomjs).虽然效率稍微低一点,但是 稳,前端渲染的页面也可爬取解析。是 Requests,Swlenium 和 Parsel 的结合体。

GitHub:https://github.com/tryolabs/requestium

原文地址:https://www.cnblogs.com/zhaochangbo/p/7891130.html