Web服务基础
用户访问网站的基本流程 :
1. 当使用浏览器输入www.baidu.com网址后, 系统首先会查找本地的DNS缓存以及hosts文件信息, 确定是否存在www.baidu.com域名对应的ip解析记录, 如果有就直接获取ip进行访问服务器, 第一次请求时, dns缓存是没有解析记录的, hosts文件多数是开发临时测试使用.
2. 如果本地dns缓存和hosts文件都没有域名解析记录, 系统就会把访问的网址解析请求发送给客户端设置的DNS服务器去解析, 也叫做Local DNS, 如果LDNS服务器的本地缓存有对应的解析记录就会直接返回给客户端IP地址, 如果没有LDNS就会继续请求其他的DNS服务器.
3. LDNS继续从DNS系统的"."(根)开始请求www.baidu.com域名的解析, 并且根据每个层级的DNS服务器系统进行系列的查找, 最终在DNS网络上找到www.baidu.com域名对应的授权DNS服务器. 这个授权DNS服务器就是企业(个人)购买域名时用于管理域名解析的服务器, 服务器上有对应的域名(IP)解析.
4. 此时授权的DNS服务器就会把www.baidu.com对应的IP解析记录
5. 此时DNS会把解析记录发个浏览器, 并且缓存域名和IP的解析记录, 便于下一次更快的返回请求.
6. 浏览器获得IP, 请求对应的服务器, 网站服务器接收到客户端的请求开始响应处理, 将内容返回给浏览器.
HTTP协议 :
HTTP协议, 全称是HyperText Tansfer Protocol, 中文叫超文本传输协议, 是互联网最常见的协议. Http最重要的是www(World Wide Web)服务, 也叫web服务器, 中文叫"万维网".
web服务端口默认是80, 另外一个加密的www服务应用https服务端口443, 主要用于支付, 网银相关业务.
版本 :
http协议诞生以来有若干个版本, 主要是http/1.0 http/1.1
http/1.0规定浏览器和服务器只能保持短暂的连接, 浏览器的每次请求都需要和服务器建立一个TCP连接, 服务器完成请求后即断开TCP连接, 服务器不跟踪每个链接, 也不记录请求.
http/1.1是对HTTP的缺陷进行重点修复, 从可扩展性, 缓存, 带宽优化, 持久连接, host头, 错误通知等访问改进.
http/1.1支持长链接, 增加了更多的请求头和响应信息, 例如: 配置请求头的Connection的值为keep-alive, 表示请求结果返回后保持链接.
Http请求方法 :
在HTTP通信中, 每个请求报文都包含一个方法, 以告诉web服务器端需要执行哪些操作, 这些动作被称为HTTP的请求方法.
GET : 请求指定的页面信息, 并返回实体主体 HEAD : 类似于get请求, 只不过返回的响应中没有具体的内容, 用于获取报头 POST : 向指定资源提交数据进行处理请求(例如表单或上传文件). 数据被包含在请求体中. POST请求可能会导致新的资源的建立和/或已有资源的修改 PUT : 从客户端向服务器传送的数据取代指定的文档的内容 DELETE : 请求服务器删除指定的页面 CONNECT : HTTP/1.1协议中预留给能够将连接改为管道方式的代理服务器 OPTIONS : 允许客户端查看服务器的性能 TRACE : 回显服务器收到的请求, 主要用于测试或者诊断.
HTTP状态码 :
HTTP状态码表示web服务器响应http请求状态的数字代码
1** : 信息, 服务器收到请求, 需要请求者继续执行操作 2** : 成功, 操作被成功的接收并处理 3** : 重定向, 需要进一步的操作以完成请求 4** : 客户端错误, 请求包含语法错误或者无法完成请求 5** : 服务器错误, 服务器在处理请求的过程中发生了而错误
HTTP响应报文 :
HTTP响应与HTTP请求相似, HTTP响应也由3个部分构成, 分别是 :
状态行
响应头
响应正文(响应体)
状态行由协议版本, 数字形式的状态代码, 及相应的状态描述, 各元素之间以空格分隔.
状态行, 用来说明服务器响应客户端的状况, 一般分为协议版本号, 数字状态码, 状态情况.
响应头部
# 常见响应头部信息 Connection : Keep-Alive Centent-Encoding : gzip Content-Type : text/html; charset=utf-8 Date : Mon, 13 Aug 2018 06:06:54 GMT Expires : Mon, 13 Aug 2018 06:06:54 GMT
空白行 : 通知客户端以下没有头部信息了
响应报文主体 : 主要包含了返回给客户端的数据, 可以是文本, 二进制(图片, 视频)
URl介绍 :
url中文叫"统一资源标识符", 是一个而用于标识某一互联网名称的字符串, 在世界范围内标识定位某一个唯一信息资源的.
url主要用在各种www客户端和服务器程序上, url可以用一种统一的格式来描述各种信息资源, 包括文件, 服务器地址和目录.
url组成 :
1. 协议
2. 主机ip或者域名
3. 主机资源具体地址
第一部分使用"://"隔离, 第二部分使用"/"隔离
静态网页资源 :
在网页设计中 ,纯HTML格式的网页(包含图片, 视频, JS, CSS等样式) 通常被称作"静态网页".
静态网页是相对于动态网页而言, 是指没有后台数据库, 不包含程序, 不可交互的网页.
# 静态网页的特点 开发人员写了什么, 就显示什么, 一旦编写完成, 就不会改变. 静态网页一般适用于更新觉少的展示型网页
静态网页资源对应文件扩展名为 :
1. 纯文本文件 : html; htm; xml; js; css
2. 图片或者数据文档 : jpg; gif; bmp; txt; ppt
3. 视频类文件 : mp4; avi; flv等
静态网页重要特性 :
每个页面有一个固定的url地址, url地址不含有问号"?"或者"&"等符号.
网页一经发布到服务器, 网页内容是保存在服务器文件系统上的, 每个网页都是独立的一个文件.
网页内容固定不变, 容易被搜索引擎收录(优点).
网页没有数据库支撑, 在网站制作和维护上工作量很大(缺点).
网页的交互性很差, 缺少程序的功能实现(缺点).
客户端解析网址时, 由于不需要读取数据库, 因此服务器可以接受更高的并发访问. 请求到来时, 直接从磁盘上返回数据(优点).
有关高并发架构思想 :
在高并发, 高访问量的场景下做架构优化时, 比较关键的就是把动态网页转化为静态网页, 而不是直接请求数据库和动态服务器, 并且可以把静态内容推到缓存中, 这样就提升了用户体验, 节约服务器压力成本.
动态网页资源 :
动态网页是和静态网页相对而言的, 动态网页的url后缀一般是 .asp; .aspx; .php; .js;
并且动态网页都有标志性的符号"? &", 后端都有数据库的支持.
动态网页资源特点 :
1. 网页以数据库技术为支撑, 大大降低网站维护的工作量
2. 动态网页技术的网站可以实现更多的功能, 如用户注册, 用户登录, 投票, 用户管理等
3. 动态网页不是独立存在服务器上的网页文件, 用户请求动态程序时, 服务器解析程序并且可能读取数据库返回一个完整的网页内容.
4. 搜索引擎(爬虫)一般不会抓取网址中的"?"后面的内容, 因此企业都会做伪静态技术页面.
网站流量术语
网站统计一把以数值较大的IP, PV统计
IP :
IP即Internet Protocol, 这里是指独立ip数, 不同的ip地址的计算机访问网站时被计算的总次数. 独立ip数是网站流量的一个重要指标. 一般相同的ip地址的客户端访问网站页面一天内只会被计算一次.
这里的ip指的是固定的公网ip
PV :
PV(Page View)即是页面浏览量, 不管客户端是不是相同, 也不管ip是否相同, 用户只要访问网站页面就会被计算pv, 一次计算一个pv.
PV的度量方法就是客户端从浏览器发出一个web请求(request), 服务器接收请求返回一个页面给客户端, 这样就产生一个pv.
pv是衡量网站被访问的一个标准, 但并不准确有多少人访问了网站
UV :
UV即 unique visitor, 同一个客户端(pc或者移动端)访问网站被计算为一个访客.
一天内相同的客户端访问同一个网站只计一次uv, uv是以cookie等技术为统计依据, 实际统计存在误差.
一台计算机可能有多人使用, 因此uv也不是最准确的
并发数 :
并发数指系统同时能处理的请求数量, 也反映了系统的负载能力
响应时间 :
响应时间是指执行一个请求从开始到最后收到响应数据所花费的总体时间
QPS :
Query Per Second
每秒查询数
服务器在一秒内处理了多少个请求, 显然数字越大代表服务器的负载越高, 处理能力越强
Web服务软件 :
互联网主流web服务器软件 :
1. Apache
2. IIS
3. Nginx
4. Tengine
5. Tomcat
6. Lighthttpd
主流web服务软件说明 :
Apache : 中小型web服务器的老大哥
Nginx : 大型网址web服务, 其分支Tengine也在飞速发展
Lighthttpd : nginx流行前的一款web软件
提供动态服务的软件 :
php : 大中小的公司都会使用, 动态网页语言php程序的解析容器, 常配合apache解析动态程序
tomcat : 中小企业动态web服务, 互联网java容器主流
IIS : 微软下的web服务软件