|
|
|
|
|
# 04 | 导航流程：从输入URL到页面展示，这中间发生了什么？
|
|
|
|
|
|
|
|
|
|
|
|
“在浏览器里，从输入URL到页面展示，这中间发生了什么？ ”这是一道经典的面试题，能比较全面地考察应聘者知识的掌握程度，其中涉及到了网络、操作系统、Web等一系列的知识。所以我在面试应聘者时也必问这道题，但遗憾的是大多数人只能回答其中部分零散的知识点，并不能将这些知识点串联成线，无法系统而又全面地回答这个问题。
|
|
|
|
|
|
|
|
|
|
|
|
那么今天我们就一起来探索下这个流程，下图是我梳理出的“从输入URL到页面展示完整流程示意图”：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
从输入URL到页面展示完整流程示意图
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看出，**整个过程需要各个进程之间的配合**，所以在开始正式流程之前，我们还是先来快速回顾下浏览器进程、渲染进程和网络进程的主要职责。
|
|
|
|
|
|
|
|
|
|
|
|
* 浏览器进程主要负责用户交互、子进程管理和文件储存等功能。
|
|
|
|
|
|
* 网络进程是面向渲染进程和浏览器进程等提供网络下载功能。
|
|
|
|
|
|
* 渲染进程的主要职责是把从网络下载的HTML、JavaScript、CSS、图片等资源解析为可以显示和交互的页面。因为渲染进程所有的内容都是通过网络获取的，会存在一些恶意代码利用浏览器漏洞对系统进行攻击，所以运行在渲染进程里面的代码是不被信任的。这也是为什么Chrome会让渲染进程运行在安全沙箱里，就是为了保证系统的安全。
|
|
|
|
|
|
|
|
|
|
|
|
当然，你也可以先回顾下前面的[《01 | Chrome架构：仅仅打开了1个页面，为什么有4个进程？》](https://time.geekbang.org/column/article/113513)这篇文章，来全面了解浏览器多进程架构。
|
|
|
|
|
|
|
|
|
|
|
|
回顾了浏览器的进程架构后，我们再结合上图来看下这个完整的流程，可以看出，整个流程包含了许多步骤，我把其中几个核心的节点用蓝色背景标记出来了。这个过程可以大致描述为如下。
|
|
|
|
|
|
|
|
|
|
|
|
* 首先，浏览器进程接收到用户输入的URL请求，浏览器进程便将该URL转发给网络进程。
|
|
|
|
|
|
* 然后，在网络进程中发起真正的URL请求。
|
|
|
|
|
|
* 接着网络进程接收到了响应头数据，便解析响应头数据，并将数据转发给浏览器进程。
|
|
|
|
|
|
* 浏览器进程接收到网络进程的响应头数据之后，发送“提交导航(CommitNavigation)”消息到渲染进程；
|
|
|
|
|
|
* 渲染进程接收到“提交导航”的消息之后，便开始准备接收HTML数据，接收数据的方式是直接和网络进程建立数据管道；
|
|
|
|
|
|
* 最后渲染进程会向浏览器进程“确认提交”，这是告诉浏览器进程：“已经准备好接受和解析页面数据了”。
|
|
|
|
|
|
* 浏览器进程接收到渲染进程“提交文档”的消息之后，便开始移除之前旧的文档，然后更新浏览器进程中的页面状态。
|
|
|
|
|
|
|
|
|
|
|
|
这其中，**用户发出URL请求到页面开始解析的这个过程，就叫做导航**。
|
|
|
|
|
|
|
|
|
|
|
|
## 从输入URL到页面展示
|
|
|
|
|
|
|
|
|
|
|
|
现在我们知道了浏览器几个主要进程的职责，还有在导航过程中需要经历的几个主要的阶段，下面我们就来详细分析下这些阶段，同时也就解答了开头所说的那道经典的面试题。
|
|
|
|
|
|
|
|
|
|
|
|
### 1\. 用户输入
|
|
|
|
|
|
|
|
|
|
|
|
当用户在地址栏中输入一个查询关键字时，地址栏会判断输入的关键字是**搜索内容**，还是**请求的URL**。
|
|
|
|
|
|
|
|
|
|
|
|
* 如果是搜索内容，地址栏会使用浏览器默认的搜索引擎，来合成新的带搜索关键字的URL。
|
|
|
|
|
|
* 如果判断输入内容符合URL规则，比如输入的是 time.geekbang.org，那么地址栏会根据规则，把这段内容加上协议，合成为完整的URL，如 [https://time.geekbang.org](https://time.geekbang.org)。
|
|
|
|
|
|
|
|
|
|
|
|
当用户输入关键字并键入回车之后，这意味着当前页面即将要被替换成新的页面，不过在这个流程继续之前，浏览器还给了当前页面一次执行beforeunload事件的机会，beforeunload事件允许页面在退出之前执行一些数据清理操作，还可以询问用户是否要离开当前页面，比如当前页面可能有未提交完成的表单等情况，因此用户可以通过beforeunload事件来取消导航，让浏览器不再执行任何后续工作。
|
|
|
|
|
|
|
|
|
|
|
|
当前页面没有监听beforeunload事件或者同意了继续后续流程，那么浏览器便进入下图的状态：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
开始加载URL浏览器状态
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看出，当浏览器刚开始加载一个地址之后，标签页上的图标便进入了加载状态。但此时图中页面显示的依然是之前打开的页面内容，并没立即替换为极客时间的页面。因为需要等待提交文档阶段，页面内容才会被替换。
|
|
|
|
|
|
|
|
|
|
|
|
### 2\. URL请求过程
|
|
|
|
|
|
|
|
|
|
|
|
接下来，便进入了页面资源请求过程。这时，浏览器进程会通过进程间通信（IPC）把URL请求发送至网络进程，网络进程接收到URL请求后，会在这里发起真正的URL请求流程。那具体流程是怎样的呢？
|
|
|
|
|
|
|
|
|
|
|
|
首先，网络进程会查找本地缓存是否缓存了该资源。如果有缓存资源，那么直接返回资源给浏览器进程；如果在缓存中没有查找到资源，那么直接进入网络请求流程。这请求前的第一步是要进行DNS解析，以获取请求域名的服务器IP地址。如果请求协议是HTTPS，那么还需要建立TLS连接。
|
|
|
|
|
|
|
|
|
|
|
|
接下来就是利用IP地址和服务器建立TCP连接。连接建立之后，浏览器端会构建请求行、请求头等信息，并把和该域名相关的Cookie等数据附加到请求头中，然后向服务器发送构建的请求信息。
|
|
|
|
|
|
|
|
|
|
|
|
服务器接收到请求信息后，会根据请求信息生成响应数据（包括响应行、响应头和响应体等信息），并发给网络进程。等网络进程接收了响应行和响应头之后，就开始解析响应头的内容了。（为了方便讲述，下面我将服务器返回的响应头和响应行统称为响应头。）
|
|
|
|
|
|
|
|
|
|
|
|
**（1）重定向**
|
|
|
|
|
|
|
|
|
|
|
|
在接收到服务器返回的响应头后，网络进程开始解析响应头，如果发现返回的状态码是301或者302，那么说明服务器需要浏览器重定向到其他URL。这时网络进程会从响应头的Location字段里面读取重定向的地址，然后再发起新的HTTP或者HTTPS请求，一切又重头开始了。
|
|
|
|
|
|
|
|
|
|
|
|
比如，我们在终端里输入以下命令：
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
curl -I http://time.geekbang.org/
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
`curl -I + URL`的命令是接收服务器返回的响应头的信息。执行命令后，我们看到服务器返回的响应头信息如下：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
响应行返回状态码301
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看出，极客时间服务器会通过重定向的方式把所有HTTP请求转换为HTTPS请求。也就是说你使用HTTP向极客时间服务器请求时，服务器会返回一个包含有301或者302状态码响应头，并把响应头的Location字段中填上HTTPS的地址，这就是告诉了浏览器要重新导航到新的地址上。
|
|
|
|
|
|
|
|
|
|
|
|
下面我们再使用HTTPS协议对极客时间发起请求，看看服务器的响应头信息是什么样子的。
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
curl -I https://time.geekbang.org/
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
我们看到服务器返回如下信息：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
响应行返回状态码200
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看出，服务器返回的响应头的状态码是200，这是告诉浏览器一切正常，可以继续往下处理该请求了。
|
|
|
|
|
|
|
|
|
|
|
|
好了，以上是重定向内容的介绍。现在你应该理解了，**在导航过程中，如果服务器响应行的状态码包含了301、302一类的跳转信息，浏览器会跳转到新的地址继续导航；如果响应行是200，那么表示浏览器可以继续处理该请求**。
|
|
|
|
|
|
|
|
|
|
|
|
**（2）响应数据类型处理**
|
|
|
|
|
|
|
|
|
|
|
|
在处理了跳转信息之后，我们继续导航流程的分析。URL请求的数据类型，有时候是一个下载类型，有时候是正常的HTML页面，那么浏览器是如何区分它们呢？
|
|
|
|
|
|
|
|
|
|
|
|
答案是Content-Type。**Content-Type是HTTP头中一个非常重要的字段， 它告诉浏览器服务器返回的响应体数据是什么类型**，然后浏览器会根据Content-Type的值来决定如何显示响应体的内容。
|
|
|
|
|
|
|
|
|
|
|
|
这里我们还是以极客时间为例，看看极客时间官网返回的Content-Type值是什么。在终端输入以下命令：
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
curl -I https://time.geekbang.org/
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
返回信息如下图：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
含有HTML格式的Content-Type
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看到，响应头中的Content-type字段的值是text/html，这就是告诉浏览器，服务器返回的数据是**HTML格式**。
|
|
|
|
|
|
|
|
|
|
|
|
接下来我们再来利用curl来请求极客时间安装包的地址，如下所示：
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
curl -I https://res001.geekbang.org/apps/geektime/android/2.3.1/official/geektime_2.3.1_20190527-2136_offical.apk
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
请求后返回的响应头信息如下：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
含有stream格式的Content-Type
|
|
|
|
|
|
|
|
|
|
|
|
从返回的响应头信息来看，其Content-Type的值是application/octet-stream，显示数据是**字节流类型**的，通常情况下，浏览器会按照**下载类型**来处理该请求。
|
|
|
|
|
|
|
|
|
|
|
|
需要注意的是，如果服务器配置Content-Type不正确，比如将text/html类型配置成application/octet-stream类型，那么浏览器可能会曲解文件内容，比如会将一个本来是用来展示的页面，变成了一个下载文件。
|
|
|
|
|
|
|
|
|
|
|
|
所以，不同Content-Type的后续处理流程也截然不同。如果Content-Type字段的值被浏览器判断为**下载类型，那么该请求会被提交给浏览器的下载管理器，同时该URL请求的导航流程就此结束**。但如果是**HTML，那么浏览器则会继续进行导航流程**。由于Chrome的页面渲染是运行在渲染进程中的，所以接下来就需要准备渲染进程了。
|
|
|
|
|
|
|
|
|
|
|
|
### 3\. 准备渲染进程
|
|
|
|
|
|
|
|
|
|
|
|
默认情况下，Chrome会为每个页面分配一个渲染进程，也就是说，每打开一个新页面就会配套创建一个新的渲染进程。但是，也有一些例外，在某些情况下，浏览器会让多个页面直接运行在同一个渲染进程中。
|
|
|
|
|
|
|
|
|
|
|
|
比如我从极客时间的首页里面打开了另外一个页面——算法训练营，我们看下图的Chrome的任务管理器截图：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
多个页面运行在一个渲染进程中
|
|
|
|
|
|
|
|
|
|
|
|
从图中可以看出，打开的这三个页面都是运行在同一个渲染进程中，进程ID是23601。
|
|
|
|
|
|
|
|
|
|
|
|
**那什么情况下多个页面会同时运行在一个渲染进程中呢？**
|
|
|
|
|
|
|
|
|
|
|
|
要解决这个问题，我们就需要先了解下什么是同一站点（same-site）。具体地讲，我们将“**同一站点**”定义为**根域名**（例如，geekbang.org）加上**协议**（例如，https:// 或者http://），还包含了该根域名下的所有子域名和不同的端口，比如下面这三个：
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
https://time.geekbang.org
|
|
|
|
|
|
https://www.geekbang.org
|
|
|
|
|
|
https://www.geekbang.org:8080
|
|
|
|
|
|
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
它们都是属于**同一站点**，因为它们的协议都是HTTPS，而且根域名也都是geekbang.org。
|
|
|
|
|
|
|
|
|
|
|
|
Chrome的默认策略是，每个标签对应一个渲染进程。但**如果从一个页面打开了另一个新页面，而新页面和当前页面属于同一站点的话，那么新页面会复用父页面的渲染进程**。官方把这个默认策略叫process-per-site-instance。
|
|
|
|
|
|
|
|
|
|
|
|
那若新页面和当前页面不属于同一站点，情况又会发生什么样的变化呢？比如我通过极客邦页面里的链接打开InfoQ的官网（[https://www.infoq.cn/](https://www.infoq.cn/) ）， 因为infoq.cn和geekbang.org不属于同一站点，所以infoq.cn会使用一个新的渲染进程，你可以参考下图：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
非同一站点使用不同的渲染进程
|
|
|
|
|
|
|
|
|
|
|
|
从图中任务管理器可以看出：由于极客邦和极客时间的标签页拥有**相同的协议和根域名**，所以它们属于**同一站点**，并运行在同一个渲染进程中；而infoq.cn的根域名不同于geekbang.org，也就是说InfoQ和极客邦不属于同一站点，因此它们会运行在两个不同的渲染进程之中。
|
|
|
|
|
|
|
|
|
|
|
|
总结来说，打开一个新页面采用的**渲染进程策略**就是：
|
|
|
|
|
|
|
|
|
|
|
|
* 通常情况下，打开新的页面都会使用单独的渲染进程；
|
|
|
|
|
|
* 如果从A页面打开B页面，且A和B都属于**同一站点**的话，那么B页面复用A页面的渲染进程；如果是其他情况，浏览器进程则会为B创建一个新的渲染进程。
|
|
|
|
|
|
|
|
|
|
|
|
渲染进程准备好之后，还不能立即进入文档解析状态，因为此时的文档数据还在网络进程中，并没有提交给渲染进程，所以下一步就进入了提交文档阶段。
|
|
|
|
|
|
|
|
|
|
|
|
### 4\. 提交文档
|
|
|
|
|
|
|
|
|
|
|
|
所谓提交文档，就是指浏览器进程将网络进程接收到的HTML数据提交给渲染进程，具体流程是这样的：
|
|
|
|
|
|
|
|
|
|
|
|
* 首先当浏览器进程接收到网络进程的响应头数据之后，便向渲染进程发起“提交文档”的消息；
|
|
|
|
|
|
* 渲染进程接收到“提交文档”的消息后，会和网络进程建立传输数据的“管道”；
|
|
|
|
|
|
* 等文档数据传输完成之后，渲染进程会返回“确认提交”的消息给浏览器进程；
|
|
|
|
|
|
* 浏览器进程在收到“确认提交”的消息后，会更新浏览器界面状态，包括了安全状态、地址栏的URL、前进后退的历史状态，并更新Web页面。
|
|
|
|
|
|
|
|
|
|
|
|
其中，当渲染进程**确认提交**之后，更新内容如下图所示：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
导航完成状态
|
|
|
|
|
|
|
|
|
|
|
|
这也就解释了为什么在浏览器的地址栏里面输入了一个地址后，之前的页面没有立马消失，而是要加载一会儿才会更新页面。
|
|
|
|
|
|
|
|
|
|
|
|
到这里，一个完整的导航流程就“走”完了，这之后就要进入渲染阶段了。
|
|
|
|
|
|
|
|
|
|
|
|
### 5\. 渲染阶段
|
|
|
|
|
|
|
|
|
|
|
|
一旦文档被提交，渲染进程便开始页面解析和子资源加载了，关于这个阶段的完整过程，我会在下一篇文章中来专门介绍。这里你只需要先了解一旦页面生成完成，渲染进程会发送一个消息给浏览器进程，浏览器接收到消息后，会停止标签图标上的加载动画。如下所示：
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
渲染结束
|
|
|
|
|
|
|
|
|
|
|
|
至此，一个完整的页面就生成了。那文章开头的“从输入URL到页面展示，这中间发生了什么？”这个过程及其“串联”的问题也就解决了。
|
|
|
|
|
|
|
|
|
|
|
|
## 总结
|
|
|
|
|
|
|
|
|
|
|
|
好了，今天就到这里，下面我来简单总结下这篇文章的要点：
|
|
|
|
|
|
|
|
|
|
|
|
* 服务器可以根据响应头来控制浏览器的行为，如跳转、网络数据类型判断。
|
|
|
|
|
|
* Chrome默认采用每个标签对应一个渲染进程，但是如果两个页面属于同一站点，那这两个标签会使用同一个渲染进程。
|
|
|
|
|
|
* 浏览器的导航过程涵盖了从用户发起请求到提交文档给渲染进程的中间所有阶段。
|
|
|
|
|
|
|
|
|
|
|
|
导航流程很重要，它是网络加载流程和渲染流程之间的一座桥梁，如果你理解了导航流程，那么你就能完整串起来整个页面显示流程，这对于你理解浏览器的工作原理起到了点睛的作用。
|
|
|
|
|
|
|
|
|
|
|
|
## 思考时间
|
|
|
|
|
|
|
|
|
|
|
|
最后，还是留给你个小作业：在上一篇文章中我们介绍了HTTP请求过程，在本文我们又介绍了导航流程，那么如果再有面试官问你“从输入URL到页面展示，这中间发生了什么？”这个问题，你知道怎么回答了吗？可以用你自己的语言组织下，就当为你的面试做准备。
|
|
|
|
|
|
|
|
|
|
|
|
欢迎在留言区与我分享你的想法，也欢迎你在留言区记录你的思考过程。感谢阅读，如果你觉得这篇文章对你有帮助的话，也欢迎把它分享给更多的朋友。
|
|
|
|
|
|
|
