带宽

1、一个中小型网站的带宽在5M以内，大一点的网站带宽可能10-30M，超大型的另算:参考：https://www.yuanrenxue.com/crawler/high-performance-crawler.html

2、有的网站为了SEO流量，而把referer来自百度的访问控制放宽了一样。
有的产品为了微信的流量(分享到微信里的页面可以直接打开，点击其他页面时再提示要注册登录)，而对来自微信点击访问控制放宽了