Web服务基础

用户访问网站的基本流程

  1. 我们每天都会用web客户端上网，浏览器就是一个web客户端，例如谷歌浏览器，以及火狐浏览器等。
  2. 当我们输入www.oldboyedu.com/时候，很快就能看到老男孩教育的官网了，这一切看起来很平淡无奇，背后又是什么道理呢？
    普通人可以不知道，但是咱们作为it开发人员，必须得掌握清楚背后的技术。

下面超哥为你揭晓用户访问网站的基本流程

  1. 老男孩教育某python总监，讲了一天课感觉很累，下了班躺床上打开他的macbook pro，双击浏览器，输入www.pornhub.com网址后，系统首先会查找本地的DNS缓存以及hosts文件信息，确定是否存在www.pornhub.com域名对应的ip解析记录，如果有就直接获取ip进行访问服务器，第一次请求时，dns缓存是没有解析记录的，hosts文件多数是开发临时测试用
  2. 如果本地dns缓存和hosts文件都没有域名解析记录，系统就会把某python总监访问的网址解析请求发送给客户端设置的DNS服务器去解析，也叫做Local DNS，如果LDNS服务器的本地缓存有对应的解析记录就会直接返回给客户端IP地址，如果没有LDNS就会继续请求其他的DNS服务器
  3. LDNS继续从DNS系统的"."(根)开始请求www.pornhub.com域名的解析，并且根据每个层级的DNS服务器系统进行系列的查找，最终在DNS网络上找到www.pornhub.com域名对应的授权DNS服务器。这个授权DNS服务器就是企业（个人）购买域名时用于管理域名解析的服务器，服务器上有对应的域名（IP）解析。
  4. 此时授权的DNS服务器就会把www.pornhub.com对应的IP解析记录，例如（1.1.1.1）发送给LDNS
  5. 此时LDNS会把解析记录发给浏览器，并且缓存域名和IP的解析记录，便于下一次更快的返回请求
  6. 浏览器获得ip，请求对应的服务器，网站服务器接收到客户端的请求开始响应处理，将内容返回给浏览器，然后某python总监拿出了一盒清风牌抽纸。。。。

图解dns解析

HTTP协议

  1. Http协议，全称是HyperText Tansfer Protocol,中文叫超文本传输协议，是互联网最常见的协议。Http最重要的是www(World Wide Web)服务，也叫web服务器，中文叫“万维网”。
  2. web服务端口默认是80，另外一个加密的www服务应用https默认端口是443，主要用于支付，网银相关业务

版本

  1. http协议诞生以来有若干个版本，主要是http/1.0 http/1.1
  2.  
  3. http/1.0规定浏览器和服务器只能保持短暂的连接，浏览器的每次请求都需要和服务器建立一个TCP连接，服务器完成请求后即断开TCP连接，服务器不跟踪每个链接，也不记录请求
  4.  
  5. http/1.1是对HTTP的缺陷进行重点修复，从可扩展性，缓存，带宽优化，持久连接，host头，错误通知等访问改进。
  6. http/1.1支持长连接，增加了更多的请求头和响应头信息，例如配置请求头的Connection的值为keep-alive，表示请求结果返回后保持连接

Http请求方法

  1. 在HTTP通信中，每个请求报文都包含一个方法，以告诉web服务器端需要执行哪些操作，这些动作被称为HTTP的请求方法
  1. 1    GET    请求指定的页面信息，并返回实体主体。
  2. 2    HEAD    类似于get请求，只不过返回的响应中没有具体的内容，用于获取报头
  3. 3    POST    向指定资源提交数据进行处理请求（例如提交表单或者上传文件）。数据被包含在请求体中。POST请求可能会导致新的资源的建立和/或已有资源的修改。
  4. 4    PUT    从客户端向服务器传送的数据取代指定的文档的内容。
  5. 5    DELETE    请求服务器删除指定的页面。
  6. 6    CONNECT    HTTP/1.1协议中预留给能够将连接改为管道方式的代理服务器。
  7. 7    OPTIONS    允许客户端查看服务器的性能。
  8. 8    TRACE    回显服务器收到的请求，主要用于测试或诊断。

HTTP状态码

  1. HTTp状态码表示web服务器响应http请求状态的数字代码
  2. 常见状态码以及作用是
  3. 1**    信息，服务器收到请求，需要请求者继续执行操作
  4. 2**    成功，操作被成功接收并处理
  5. 3**    重定向，需要进一步的操作以完成请求
  6. 4**    客户端错误，请求包含语法错误或无法完成请求
  7. 5**    服务器错误，服务器在处理请求的过程中发生了错误

HTTP状态码的命令查看

  1. curl -I www.oldboyedu.com
  2. Server: OES
  3. Date: Sun,  Aug  :: GMT
  4. Content-Type: text/html
  5. Content-Length:
  6. Connection: keep-alive
  7. Location: https://www.oldboyedu.com/

Http报文

什么是HTTP请求报文

  1. HTTP请求由请求行，请求头部，空行，请求报文主体几个部分组成

HTTP报文：它是HTTP应用程序之间发送的数据块。这些数据块以一些文本形式的元信息开头，这些信息描述了报文的内容及含义，后面跟着可选的数据部分。这些报文都是在客户端、服务器和代理之间流动。

  1. 请求报文的格式：
  2. 起始行： <method> <request-URL> <version>
  3.  
  4. 头部：   <headers>
  5.  
  6. 主体：   <entity-body>

GET请求报文示例：

  1. GET /books/?sex=man&name=Professional HTTP/1.1
  2.  
  3.  Host: www.example.com　　主机名
  4.  User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.)Gecko/ Firefox/1.0.1　　客户端类型
     Accept-Encoding:gzip,deflate　　　　支持压缩
     Accept-Language:zh-cn　　支持语言类型
     Connection: Keep-Alive　　长链接

请求行

  1. 请求报文第一行，表示客户端想要什么
  2. 由请求方法 url    协议版本 　　组成

请求头部

  1. 请求头由
  2. 关键字    :    值    组成
  3. 通过客户端把请求相关信息告诉服务器

空行

  1. 请求头信息之后是一个空行，发送回车和换行符，通知web服务器以下没有请求头信息了

请求报文主体

  1.  POST / HTTP/1.1
  2.  Host: www.example.com
  3.  User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.)
  4.  Gecko/ Firefox/1.0.
  5.  Content-Type: application/x-www-form-urlencoded
  6.  Content-Length:
  7.  Connection: Keep-Alive
  8.  
  9.  sex=man&name=Professional  
  1. 请求体中包含了要发送给web服务器的数据信息，请问报文主体不用于get方法，而是用于post方法。
  2. post方法适用于客户端填写表单的场合。

HTTP响应报文

HTTP 响应与 HTTP 请求相似，HTTP响应也由3个部分构成，分别是：

  • 状态行
  • 响应头(Response Header)
  • 响应正文

状态行由协议版本、数字形式的状态代码、及相应的状态描述，各元素之间以空格分隔。

  1. 状态行，用来说明服务器响应客户端的状况，一般分为协议版本号，数字状态码，状态情况
  1. 响应头部
  2. 常见响应头信息
  3. Connection: Keep-Alive
  4. Content-Encoding: gzip
  5. Content-Type: text/html;charset=utf-
  6. Date: Mon,  Aug  :: GMT
  7. Expires: Mon,  Aug  :: GMT
  1. 空白行
  2. 通知客户端空行以下没有头部信息了
  1. 响应报文主体
  2. 主要包含了返回给客户端的数据，可以是文本，二进制（图片，视频）

HTTP响应例子

  1. HTTP/1.1  OK
  2.  
  3. Server:Apache Tomcat/5.0.
  4. Date:Mon,6Oct2003 :: GMT
  5. Content-Length:
  6.  
  7. <html>...

URl介绍

url中文叫“统一资源标识符”，是一个用于标识某一互联网资源名称的字符串，在世界范围内标识定位某一个唯一信息资源。

例如

  1. #访问一张郭达的照片
  2. http://www.pythonav.cn/man.jpg

url主要用在各种www客户端和服务器程序上，url可以用一种统一的格式来描述各种信息资源，包括文件，服务器地址和目录等

url组成

  1. 协议
  2. 主机ip或域名
  3. 主机资源具体地址

第一部分用"://"隔开，第二部分用"/"符号隔开

静态网页资源

在网页设计中，纯HTMl格式的网页（包含图片，视频，JS，CSS等样式）通常被称作“静态网页”。

静态网页是相对于动态网页而言的，是指没有后台数据库，不包含程序，不可交互的网页。

  1. 静态网页的特点
  2. 开发人员写了什么，显示就是什么，一旦编写完成，就不会有任何改变。静态网页一般适用于更新较少的展示型网页，例如（酒水，家具，水果等宣传页），是很多中小网站的展示方式。

静态网页资源对应文件扩展名为

  • 纯文本文件，如.htm .html .xml  .js   .css
  • 图片或数据文档，如 .jpg  .gif  .bmp  .txt  .ppt
  • 视频类文件  .mp4  .avi  .flv  等

静态网页重要特性

  • 每个页面有一个固定的url地址，url地址不含有问号"?"或"&"等符号
  • 网页一经发布到服务器，网页内容是保存在服务器文件系统上的，每个网页都是独立的一个文件
  • 网页内容固定不变，容易被搜索引擎收录（优点）
  • 网页没有数据库支撑，在网站制作和维护上工作量很大（缺点）
  • 网页的交互性很差，缺少程序的功能实现（缺点）
  • 客户端解析网址时，由于不需要读取数据库，因此服务器端可以接受更高的并发访问。请求到来时，直接从磁盘上返回数据。（优点）

举例（吃火锅，现成的蔬菜）

有关高并发架构思想

  1. 在高并发，高访问量的场景下做架构优化时，比较关键的就是把动态网页转化成静态网页，而不是直接请求数据库和动态服务器，并且可以吧静态内容推到缓存中，这样就提升用户体验，节约服务器压力成本。

动态网页资源

  1. 动态网页是和静态网页相对而言的，动态网页的url后缀一般是.asp  .aspx  .php .js .cgi 
    并且动态网页都有标志性的符号"? &"，后端都有数据库的支持。

动态网页地址

  1. 添加新随笔
    https://i.cnblogs.com/EditPosts.aspx?opt=1

动态网页资源特点

  1. 网页以数据库技术为支撑，大大降低网站维护的工作量
  2. 动态网页技术的网站可以实现更多的功能，如用户注册，用户登录，投票，用户管理，博客管理等
  3. 动态网页不是独立存在服务器上的网页文件，用户请求动态程序时，服务器解析程序并且可能读取数据库返回一个完整的网页内容
  4. 搜索引擎（爬虫）一般不会抓取网址中的“？”后面的内容，因此企业都会做伪静态技术页面

举例（饭店炒菜，现做）

网站流量术语

网站统计一般以数值较大的IP,PV统计，比较好看

IP

  1. IP即Internet Protocol，这里是指独立ip数，不同的ip地址的计算机访问网站时被计算的总次数。独立ip数是网站流量的一个重要指标。一般相同ip地址的客户端访问网站页面一天内只会被计算一次。
    这里的ip指的是是固定的公网ip

PV

  1. pv（Page View）即是页面浏览量，不管客户端是不是相同，也不管ip是否相同，用户只要访问网站页面就会被计算PV，一次计算一个PV。
    pv的度量方法就是客户端从浏览器发出一个web请求（request），服务器接收请求返回一个页面给客户端，这样就产生一个pv。
    pv是衡量网站被访问的一个标准，但并不准确有多少人访问了网站。

举例

  1. 例如武佩奇去访问百合网想找一个知心朋友，你觉得他能产生多少PV？
    答案可能是十几个到几十个。一个用户的访问PV量和网站的业务成正比的，武佩奇可能点击18岁左右的女性，28岁左右的女性，也可能点击18岁的小伙子。。。。因此他访问的页面会很多，自然pv也会增多

UV

  1. UV即unique visitor，同一个客户端（pc或移动端）访问网站被计算为一个访客。
  2. 一天内相同的客户端访问同一个网站只计一次uv，uv是以cookie等技术为统计依据，实际统计存在误差。
  3. 一台计算机可能有多人使用，因此uv也不是最准确的。

并发数

  1. 并发数指系统同时能处理的请求数量，也反应了系统的负载能力

响应时间

  1. 响应时间是指执行一个请求从开始到最后收到响应数据所花费的总体时间。

QPS

  1. Query Per Second
  2. 每秒查询数
  3. 服务器在一秒内处理了多少个请求，显然数字越大代表服务器的负载越高，处理能力越强。

流量术语讲解博客地址:https://fashengba.com/post/web-sites-nouns.html

Web服务软件

互联网主流web服务软件

  1. Apache
  2. IIS
  3. Nginx
  4. Tengine
  5. Tomcat
  6. Lighthttpd

主流web服务软件说明

  • Apache　　中小型 web服务器的老大哥
  • Nginx        大型网址web服务，其分支Tengine也在飞速发展
  • Lighthttpd    nginx流行前的一款web软件

提供动态服务的软件

  • php(fastcgi)  大中小的公司都会使用，动态网页语言php程序的解析容器，常配合apache解析动态程序
  • tomcat　　 中小企业动态web服务，互联网java容器主流
  • IIS              微软下的web服务软件

题目

  1. .简述dns系统的解析原理
  2. .简述http协议的工作原理
  3. .请说出状态码200,,,,,504的含义
    5.请简述什么是动态网页，静态网页
    6.简述http报文有哪些部分
 
 
 

9.5web service基础知识的更多相关文章

  1. web service基础知识

    Web服务基础 用户访问网站的基本流程 我们每天都会用web客户端上网,浏览器就是一个web客户端,例如谷歌浏览器,以及火狐浏览器等. 当我们输入www.oldboyedu.com/时候,很快就能看到 ...

  2. Android Service基础知识你知道多少？

    Android四大组件-Service 多次调用startService会怎样?会执行多次onCreate吗? StopService在哪里调用?stopSelf在哪调用? 怎样使Service被ki ...

  3. linux web服务基础知识,dns

    #web服务基础知识c/s 客户端/服务器b/s 浏览器/服务器 nginx   >   web  server  服务端浏览器  >    web  client  客户端 #dns解析 ...

  4. .NET面试题系列[1] - .NET框架基础知识(1)

    很明显,CLS是CTS的一个子集,而且是最小的子集. - 张子阳 .NET框架基础知识(1) 参考资料: http://www.tracefact.net/CLR-and-Framework/DotN ...

  5. TCP/IP协议（二）tcp/ip基础知识

    今天凌晨时候看书,突然想到一个问题:怎样做到持续学习?然后得出这样一个结论:放弃不必要的社交,控制欲望,克服懒惰... 然后又有了新的问题:学习效率时高时低,状态不好怎么解决?这也是我最近在思考的问题 ...

  6. TCP/IP协议（一）网络基础知识

    参考书籍为<图解tcp/ip>-第五版.这篇随笔,主要内容还是TCP/IP所必备的基础知识,包括计算机与网络发展的历史及标准化过程(简述).OSI参考模型.网络概念的本质.网络构建的设备等 ...

  7. Linux基础知识整理

    一.基础知识 1.Linux简介 Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和UNIX的多用户.多任务.支持多线程和多CPU的操作系统.它能运行主要的UNIX工具软件 ...

  8. Service基础使用

    Service基础使用 之前的文章一直介绍Activity的使用,很多知识和用法单一的配合Activity使用,这次将总结Android四大组件之二--Service. 本文将要介绍以下内容: Ser ...

  9. Spring基础知识

    Spring基础知识 利用spring完成松耦合 接口 public interface IOutputGenerator { public void generateOutput(); } 实现类 ...

随机推荐

  1. UIWindow及程序启动的过程

    1.   UIWindow才有自发显示的功能, 一个程序之所以能显示东西,是因为有window !//  [self.window makeKeyAndVisible]; 2.   任何view的显示 ...

  2. python 不同目录间的模块调用

    有时候调用的模块不再同一个目录.直接import 是加载不进来的.默认的加载路径是sys.path中指定的路径.如果要指定加载的目录得需要把这个目录加到sys.path里面. 比如要加载父目录的同级目 ...

  3. [bootstrap]模态框总结

    <!--data-backdrop禁止点击空白处关闭模态框,也可以js设置,其他参数可参考官网模态框文档--> <div class="modal fade" i ...

  4. Spark python集成

    Spark python集成 1.介绍 Spark支持python语言,对于大量的SQL类型的操作,不需要编译,可以直接提交python文件给spark来运行,因此非常简单方便,但是性能要比scala ...

  5. April 11 2017 Week 15 Tuesday

    Love is hard to get into, but harder to get out of. 相爱不易,相忘更难. The past are hurt, but I think we can ...

  6. UIView设置阴影无效的原因之一

    本想在底部的按钮设置个阴影, 代码如下: self.layer.shadowColor = [UIColor blackColor].CGColor; self.layer.shadowOffset ...

  7. 将xml转换成Json，数组，对象格式转换方法

    xml字符串:$simplexml 转换成Json格式:json_encode($simplexml) 转换成数组格式:json_decode(json_encode($simplexml),TRUE ...

  8. Eclipse Python插件 PyDev

    PyDev for Eclipse 是一个功能强大且易用的 Eclipse Python IDE 插件.本文将向读者介绍 PyDev 开源项目及其安装配置方法,并在此基础上详细介绍如何利用 PyDev ...

  9. 解决cdh4.5.0下 MAP任务看不到状态

    参考 http://qnalist.com/questions/772595/yarn-jobhistory-service 在mapreduce-site.xml中添加 <property&g ...

  10. JavaEE权限管理系统的搭建(一)--------项目中用到的知识点概括

    转战Java有一段时间了,.net 已不再开发的新的工程,基本上在维护,最近大半年时间在学习Java,今天抽空将学习的到的知识,应用到了一个权限管理系统的小项目中,特此记录一下.代码如有不对之处,希望 ...