爬虫代码框架

这是一个代码大框架,可以在此基础上添加内容。

 1 import requests
 2 
 3 def getHTMLText(url):
 4     try:
 5         r = requests.get(url,timeout=30)
 6         r.raise_for_status()
 7         r.encoding=r.apparent_encoding
 8         return r.text
 9     except:
10         return '产生异常'
11 if __name__=="__main__":
12     url = 'http://www.baidu.com'
13     print(getHTMLText(url))

说明信息:

原文地址:https://www.cnblogs.com/bcyczhhb/p/11792424.html