聊聊HTTPS和SSL/TLS协议

要说清楚 HTTPS 协议的实现原理,至少需要如下几个背景知识。
1. 大致了解几个基本术语(HTTPS、SSL、TLS)的含义
2. 大致了解 HTTP 和 TCP 的关系(尤其是“短连接”VS“长连接”)
3. 大致了解加密算法的概念(尤其是“对称加密与非对称加密”的区别)
4. 大致了解 CA 证书的用途

考虑到很多技术菜鸟可能不了解上述背景,俺先用最简短的文字描述一下。如果你自认为不是菜鸟,请略过本章节,直接去看“HTTPS 协议的需求”。

先澄清几个术语——HTTPS、SSL、TLS

1. “HTTP”是干嘛用滴?

首先,HTTP 是一个网络协议,是专门用来帮你传输 Web 内容滴。关于这个协议,就算你不了解,至少也听说过吧?比如你访问俺的博客的主页,浏览器地址栏会出现如下的网址

http://www.techug.com/

俺加了粗体的部分就是指 HTTP 协议。大部分网站都是通过 HTTP 协议来传输 Web 页面、以及 Web 页面上包含的各种东东(图片、CSS 样式、JS 脚本)。

2. “SSL/TLS”是干嘛用滴?

SSL 是洋文“Secure Sockets Layer”的缩写,中文叫做“安全套接层”。它是在上世纪90年代中期,由网景公司设计的。(顺便插一句,网景公司不光发明了 SSL,还发明了很多 Web 的基础设施——比如“CSS 样式表”和“JS 脚本”)
为啥要发明 SSL 这个协议捏?因为原先互联网上使用的 HTTP 协议是明文的,存在很多缺点——比如传输内容会被偷窥(嗅探)和篡改。发明 SSL 协议,就是为了解决这些问题。
到了1999年,SSL 因为应用广泛,已经成为互联网上的事实标准。IETF 就在那年把 SSL 标准化。标准化之后的名称改为 TLS(是“Transport Layer Security”的缩写),中文叫做“传输层安全协议”。
很多相关的文章都把这两者并列称呼(SSL/TLS),因为这两者可以视作同一个东西的不同阶段。

3. “HTTPS”是啥意思?

解释完 HTTP 和 SSL/TLS,现在就可以来解释 HTTPS 啦。咱们通常所说的 HTTPS 协议,说白了就是“HTTP 协议”和“SSL/TLS 协议”的组合。你可以把 HTTPS 大致理解为——“HTTP over SSL”或“HTTP over TLS”(反正 SSL 和 TLS 差不多)。

再来说说 HTTP 协议的特点

作为背景知识介绍,还需要再稍微谈一下 HTTP 协议本身的特点。HTTP 本身有很多特点,考虑到篇幅有限,俺只谈那些和 HTTPS 相关的特点。

1. HTTP 的版本和历史

如今咱们用的 HTTP 协议,版本号是 1.1(也就是 HTTP 1.1)。这个 1.1 版本是1995年底开始起草的(技术文档是 RFC2068),并在1999年正式发布(技术文档是 RFC2616)。
在 1.1 之前,还有曾经出现过两个版本“0.9 和 1.0”,其中的 HTTP 0.9 【没有】被广泛使用,而 HTTP 1.0 被广泛使用过。
另外,据说明年(2015)IETF 就要发布 HTTP 2.0 的标准了。俺拭目以待。

2. HTTP 和 TCP 之间的关系

简单地说,TCP 协议是 HTTP 协议的基石——HTTP 协议需要依靠 TCP 协议来传输数据。

在网络分层模型中,TCP 被称为“传输层协议”,而 HTTP 被称为“应用层协议”。

有很多常见的应用层协议是以 TCP 为基础的,比如“FTP、SMTP、POP、IMAP”等。
TCP 被称为“面向连接”的传输层协议。关于它的具体细节,俺就不展开了(否则篇幅又失控了)。你只需知道:传输层主要有两个协议,分别是 TCP 和 UDP。TCP 比 UDP 更可靠。你可以把 TCP 协议想象成某个水管,发送端这头进水,接收端那头就出水。并且 TCP 协议能够确保,先发送的数据先到达(与之相反,UDP 不保证这点)。

3. HTTP 协议如何使用 TCP 连接?

HTTP 对 TCP 连接的使用,分为两种方式:俗称“短连接”和“长连接”(“长连接”又称“持久连接”,洋文叫做“Keep-Alive”或“Persistent Connection”)
假设有一个网页,里面包含好多图片,还包含好多【外部的】CSS 文件和 JS 文件。在“短连接”的模式下,浏览器会先发起一个 TCP 连接,拿到该网页的 HTML 源代码(拿到 HTML 之后,这个 TCP 连接就关闭了)。然后,浏览器开始分析这个网页的源码,知道这个页面包含很多外部资源(图片、CSS、JS)。然后针对【每一个】外部资源,再分别发起一个个 TCP 连接,把这些文件获取到本地(同样的,每抓取一个外部资源后,相应的 TCP 就断开)
相反,如果是“长连接”的方式,浏览器也会先发起一个 TCP 连接去抓取页面。但是抓取页面之后,该 TCP 连接并不会立即关闭,而是暂时先保持着(所谓的“Keep-Alive”)。然后浏览器分析 HTML 源码之后,发现有很多外部资源,就用刚才那个 TCP 连接去抓取此页面的外部资源。

在 HTTP 1.0 版本,【默认】使用的是“短连接”(那时候是 Web 诞生初期,网页相对简单,“短连接”的问题不大);
到了1995年底开始制定 HTTP 1.1 草案的时候,网页已经开始变得复杂(网页内的图片、脚本越来越多了)。这时候再用短连接的方式,效率太低下了(因为建立 TCP 连接是有“时间成本”和“CPU 成本”滴)。所以,在 HTTP 1.1 中,【默认】采用的是“Keep-Alive”的方式。
关于“Keep-Alive”的更多介绍,可以参见维基百科词条(在“这里”)

谈谈“对称加密”和“非对称加密”的概念

1. 啥是“加密”和“解密”?

通俗而言,你可以把“加密”和“解密”理解为某种【互逆的】数学运算。就好比“加法和减法”互为逆运算、“乘法和除法”互为逆运算。
“加密”的过程,就是把“明文”变成“密文”的过程;反之,“解密”的过程,就是把“密文”变为“明文”。在这两个过程中,都需要一个关键的东东——叫做“密钥”——来参与数学运算。

2. 啥是“对称加密”?

所谓的“对称加密技术”,意思就是说:“加密”和“解密”使用【相同的】密钥。这个比较好理解。就好比你用 7zip 或 WinRAR 创建一个带密码(口令)的加密压缩包。当你下次要把这个压缩文件解开的时候,你需要输入【同样的】密码。在这个例子中,密码/口令就如同刚才说的“密钥”。

3. 啥是“非对称加密”?

所谓的“非对称加密技术”,意思就是说:“加密”和“解密”使用【不同的】密钥。这玩意儿比较难理解,也比较难想到。当年“非对称加密”的发明,还被誉为“密码学”历史上的一次革命。
由于篇幅有限,对“非对称加密”这个话题,俺就不展开了。有空的话,再单独写一篇扫盲。

4. 各自有啥优缺点?

看完刚才的定义,很显然:(从功能角度而言)“非对称加密”能干的事情比“对称加密”要多。这是“非对称加密”的优点。但是“非对称加密”的实现,通常需要涉及到“复杂数学问题”。所以,“非对称加密”的性能通常要差很多(相对于“对称加密”而言)。
这两者的优缺点,也影响到了 SSL 协议的设计。

CA 证书的原理及用途

关于这方面,请看俺4年前写的《数字证书及CA的扫盲介绍》。这里就不再重复唠叨了,免得篇幅太长。

HTTPS 协议的需求是啥?

花了好多口水,终于把背景知识说完了。下面正式进入正题。先来说说当初设计 HTTPS 是为了满足哪些需求?
很多介绍 HTTPS 的文章一上来就给你讲实现细节。个人觉得:这是不好的做法。早在2009年开博的时候,发过一篇《学习技术的三部曲:WHAT、HOW、WHY》,其中谈到“WHY 型问题”的重要性。一上来就给你讲协议细节,你充其量只能知道 WHAT 和 HOW,无法理解 WHY。俺在前一个章节讲了“背景知识”,在这个章节讲了“需求”,这就有助于你理解:当初

为什么

要设计成这样?——这就是 WHY 型的问题。

兼容性

因为是先有 HTTP 再有 HTTPS。所以,HTTPS 的设计者肯定要考虑到对原有 HTTP 的兼容性。
这里所说的兼容性包括很多方面。比如已有的 Web 应用要尽可能无缝地迁移到 HTTPS;比如对浏览器厂商而言,改动要尽可能小;……
基于“兼容性”方面的考虑,很容易得出如下几个结论:
1. HTTPS 还是要基于 TCP 来传输
(如果改为 UDP 作传输层,无论是 Web 服务端还是浏览器客户端,都要大改,动静太大了)
2. 单独使用一个新的协议,把 HTTP 协议包裹起来
(所谓的“HTTP over SSL”,实际上是在原有的 HTTP 数据外面加了一层 SSL 的封装。HTTP 协议原有的 GET、POST 之类的机制,基本上原封不动)

打个比方:如果原来的 HTTP 是塑料水管,容易被戳破;那么如今新设计的 HTTPS 就像是在原有的塑料水管之外,再包一层金属水管。一来,原有的塑料水管照样运行;二来,用金属加固了之后,不容易被戳破。

可扩展性

前面说了,HTTPS 相当于是“HTTP over SSL”。
如果 SSL 这个协议在“可扩展性”方面的设计足够牛逼,那么它除了能跟 HTTP 搭配,还能够跟其它的应用层协议搭配。岂不美哉?
现在看来,当初设计 SSL 的人确实比较牛。如今的 SSL/TLS 可以跟很多常用的应用层协议(比如:FTP、SMTP、POP、Telnet)搭配,来强化这些应用层协议的安全性。

接着刚才打的比方:如果把 SSL/TLS 视作一根用来加固的金属管,它不仅可以用来加固输水的管道,还可以用来加固输煤气的管道。

保密性(防泄密)

HTTPS 需要做到足够好的保密性。
说到保密性,首先要能够对抗嗅探(行话叫 Sniffer)。所谓的“嗅探”,通俗而言就是监视你的网络传输流量。如果你使用明文的 HTTP 上网,那么监视者通过嗅探,就知道你在访问哪些网站的哪些页面。
嗅探是最低级的攻击手法。除了嗅探,HTTPS 还需要能对抗其它一些稍微高级的攻击手法——比如“重放攻击”(后面讲协议原理的时候,会再聊)。

完整性(防篡改)

除了“保密性”,还有一个同样重要的目标是“确保完整性”。关于“完整性”这个概念,在之前的博文《扫盲文件完整性校验——关于散列值和数字签名》中大致提过。健忘的同学再去温习一下。
在发明 HTTPS 之前,由于 HTTP 是明文的,不但容易被嗅探,还容易被篡改。
举个例子:
比如咱们天朝的网络运营商(ISP)都比较流氓,经常有网友抱怨说访问某网站(本来是没有广告的),竟然会跳出很多中国电信的广告。为啥会这样捏?因为你的网络流量需要经过 ISP 的线路才能到达公网。如果你使用的是明文的 HTTP,ISP 很容易就可以在你访问的页面中植入广告。
所以,当初设计 HTTPS 的时候,还有一个需求是“确保 HTTP 协议的内容不被篡改”。

真实性(防假冒)

在谈到 HTTPS 的需求时,“真实性”经常被忽略。其实“真实性”的重要程度不亚于前面的“保密性”和“完整性”。
举个例子:
你因为使用网银,需要访问该网银的 Web 站点。那么,你如何确保你访问的网站确实是你想访问的网站?(这话有点绕口令)
有些天真的同学会说:通过看网址里面的域名,来确保。为啥说这样的同学是“天真的”?因为 DNS 系统本身是不可靠的(尤其是在设计 SSL 的那个年代,连 DNSSEC 都还没发明)。由于 DNS 的不可靠(存在“域名欺骗”和“域名劫持”),你看到的网址里面的域名【未必】是真实滴!
(不了解“域名欺骗”和“域名劫持”的同学,可以参见俺之前写的《扫盲 DNS 原理,兼谈“域名劫持”和“域名欺骗/域名污染”》)
所以,HTTPS 协议必须有某种机制来确保“真实性”的需求(至于如何确保,后面会细聊)。

性能

再来说最后一个需求——性能。
引入 HTTPS 之后,【不能】导致性能变得太差。否则的话,谁还愿意用?
为了确保性能,SSL 的设计者至少要考虑如下几点:
1. 如何选择加密算法(“对称”or“非对称”)?
2. 如何兼顾 HTTP 采用的“短连接”TCP 方式?
(SSL 是在1995年之前开始设计的,那时候的 HTTP 版本还是 1.0,默认使用的是“短连接”的 TCP 方式——默认不启用 Keep-Alive)

余下全文(1/3)
分享这篇文章:

请关注我们:

共有 128 条讨论

  1. 关于“Keep-Alive”的更多介绍,可以参见维基百科词条(在“这里”) 这里没有链接?

  2. JackieLiu 对这篇文章的反应是赞一个
  3. 张飞  这篇文章
    1. 应该尊重他人的劳动成果,转载的文章应该说明原创出处并与原作者沟通。

    2. +1,看到“俺”这个字眼儿,又看到了“学习技术的三部曲”,意识到是随想编程的文章。去看原版了

  4. 对这篇文章的反应是
  5. TCP短连接的开销在于连接建立时的握手的开销,主要的影响是RTT,CPU开销相对较小。

  6. 杨坤 对这篇文章的反应是赞一个
  7. 觅泉 对这篇文章的反应是赞一个
  8. Lianxw 对这篇文章的反应是赞一个
  9. test  这篇文章, 并对这篇文章的反应是垃圾敬佩
  10. star 对这篇文章的反应是赞一个
  11. youchong 对这篇文章的反应是赞一个
  12. volving  这篇文章
  13. jackson 对这篇文章的反应是赞一个
  14. youcou12 对这篇文章的反应是俺的神呀
  15. hellorice 对这篇文章的反应是赞一个
  16. Wenjail 对这篇文章的反应是赞一个
  17. 张艳军  这篇文章
  18. daisongsong 对这篇文章的反应是赞一个俺的神呀
  19. 张伟波 对这篇文章的反应是俺的神呀
  20. jairo  这篇文章, 并对这篇文章的反应是垃圾
  21. KENNY 对这篇文章的反应是赞一个
  22. 廖建国 对这篇文章的反应是赞一个
  23. xgqfrms 对这篇文章的反应是笑死了垃圾
  24. 哲男 对这篇文章的反应是垃圾
  25. Dreams 对这篇文章的反应是赞一个
  26. 房逍遥  这篇文章, 并对这篇文章的反应是赞一个俺的神呀
  27. lang 对这篇文章的反应是俺的神呀
  28. hackerwei 对这篇文章的反应是赞一个
  29. 歪麦博客 对这篇文章的反应是赞一个
  30. 刘立 对这篇文章的反应是俺的神呀
  31. 欧鹏派克 对这篇文章的反应是赞一个
  32. 欧洲 对这篇文章的反应是赞一个
  33. Risky.Duan 对这篇文章的反应是赞一个
  34. zsdning  这篇文章, 并对这篇文章的反应是赞一个俺的神呀
  35. shg104 对这篇文章的反应是赞一个
  36. 对这篇文章的反应是俺的神呀敬佩
  37. 对这篇文章的反应是赞一个
  38. 李川 对这篇文章的反应是敬佩
  39. Kaisen 对这篇文章的反应是俺的神呀
  40. 藤藤 对这篇文章的反应是飘过~
  41. 郝思强 对这篇文章的反应是赞一个
  42. bruce7.li 对这篇文章的反应是赞一个
  43. leekun 对这篇文章的反应是赞一个
  44. 刘红 对这篇文章的反应是mark
  45. star 对这篇文章的反应是赞一个
  46. 李剑鑫 对这篇文章的反应是赞一个
  47. 罗真 对这篇文章的反应是
  48. 不错 对这篇文章的反应是赞一个
  49. James 对这篇文章的反应是赞一个
  50. 白色鲨鱼 对这篇文章的反应是俺的神呀
  51. 雷丁深 对这篇文章的反应是赞一个
  52. 黄伟健  这篇文章
  53. 褚海平 对这篇文章的反应是赞一个
  54. 隔壁老王 对这篇文章的反应是赞一个
  55. luoyu 对这篇文章的反应是赞一个
  56. qingshan 对这篇文章的反应是俺的神呀赞一个
  57. 谁能告诉我,这就完了吗?没有下文吗?我怎么感觉刚刚是说了why了,啥都没解释,你是请来逗比吗?

  58. 小仙 对这篇文章的反应是赞一个
  59. Anani  这篇文章
  60. andywang 对这篇文章的反应是俺的神呀
  61. Rui Zhang 对这篇文章的反应是俺的神呀
  62. Neal Don 对这篇文章的反应是俺的神呀
  63. yegao 对这篇文章的反应是好文笑死了
  64. 王子子 对这篇文章的反应是赞一个
  65. char  这篇文章 这篇文章
  66. selina  这篇文章
  67. ErsVId 对这篇文章的反应是赞一个
  68. Zern  这篇文章
  69. Lawrence 对这篇文章的反应是赞一个
  70. 张桂平 对这篇文章的反应是赞一个
  71. 武姣  这篇文章, 并对这篇文章的反应是俺的神呀赞一个
  72. 吉小胖 对这篇文章的反应是很实用
  73. Song 对这篇文章的反应是俺的神呀
  74. 2b 对这篇文章的反应是好文
  75. 但是抓取页面之后,该 TCP 连接并不会立即关闭,而是暂时先保持着(所谓的“Keep-Alive”)。然后浏览器分析 HTML 源码之后,发现有很多外部资源,就用刚才那个 TCP 连接去抓取此页面的外部资源。

    当前TCP链接与外部资源的IP和Port都不同,这边采用原来的TCP链接是什么意思?

  76. al;ksdfj  这篇文章, 并对这篇文章的反应是俺的神呀赞一个
  77. 你次啊  这篇文章
  78. 陈俊杰 对这篇文章的反应是俺的神呀
  79. 简单明了,将晦涩的知识通过简洁的语言阐述的明明白白,佩服

  80. 刘贝贝 对这篇文章的反应是赞一个
  81. 1@1.com 对这篇文章的反应是垃圾
  82. jinbo 对这篇文章的反应是
  83. Benjamin.Liu 对这篇文章的反应是
  84. joey  这篇文章
  85. taoxiangchao  这篇文章
  86. Lily 对这篇文章的反应是赞一个
  87. 哈哈哈 对这篇文章的反应是俺的神呀
  88. 石头 对这篇文章的反应是赞一个
  89. julie  这篇文章, 并对这篇文章的反应是俺的神呀
  90. sd 对这篇文章的反应是笑死了mark
  91. yxliuxinglin  这篇文章
  92. cj 对这篇文章的反应是很实用俺的神呀
  93. ioufev 对这篇文章的反应是赞一个
  94. Hauk 对这篇文章的反应是俺的神呀
  95. surhoo  这篇文章, 并对这篇文章的反应是赞一个俺的神呀
  96. 歌在路上 对这篇文章的反应是
  97. snn  这篇文章, 并对这篇文章的反应是俺的神呀
  98. 依呑  这篇文章
  99. yangzhuhua 对这篇文章的反应是
  100. 立即我 对这篇文章的反应是赞一个
  101. 苏小乐  这篇文章
  102. Canmanciu 对这篇文章的反应是赞一个
  103. 廖聪华 对这篇文章的反应是俺的神呀
  104. lauran.lin  这篇文章
  105. 010  这篇文章, 并对这篇文章的反应是俺的神呀
  106. 010  这篇文章, 并对这篇文章的反应是赞一个
  107. 风云 对这篇文章的反应是赞一个
  108. 陈垒  这篇文章
  109. 傅强 对这篇文章的反应是
  110. 哈哈哈 对这篇文章的反应是赞一个
  111. 十II画 对这篇文章的反应是俺的神呀
  112. 十II画  这篇文章
  113. 1 对这篇文章的反应是俺的神呀
  114. shen 对这篇文章的反应是俺的神呀

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注