[HTTP协议]入门篇
文章目录
- http的前世今生
- 1. 史前时期
- 2. 创世纪
- 3. 从产生到发展
- HTTP是什么
- 与HTTP相关的各种概念
- 与HTTP相关的技术
- TCP/IP协议栈
http的前世今生
1. 史前时期
- 20世纪60年代,美国国防部高等研究计划署ARPA建立ARPA网,四个分布在各地的节点
- 20世纪70年代,TCP/IP协议产生并流行
2. 创世纪
1989年,Tim Berners-Lee在论文中提出3个关键技术——URI、HTML、HTTP,http诞生
3. 从产生到发展
a. 20世纪90年代初,HTTP/0.9
,结构简单,纯文本,只允许[GET]操作,响应后关闭连接
b. 1996年,HTTP/1.0
形式上和现在的HTTP差距不大,但只是参考文档,当时意义不大。RFC 1945
- 增加了HEAD、POST等新方法
- 增加响应状态码,标记可能的错误原因
- 引入了协议版本号概念
- 引入了http Header的概念
- 传输的数据不再仅限于文本
c. 1995年的"浏览器大战”结束后,99年HTTP/1.1
发布RFC 2616
,小幅修改,但是“正式的标准”。目前主力
- 增加了PUT、DELETE等新方法
- 增加了缓存管理和控制
- 明确了连接管理、允许持久连接
- 允许响应数据分块chunked,利于传输大文件
- 强制要求Host头,让互联网主机托管成为可能
d. 2015年,基于Google的SPDY协议的HTTP/2.0
诞生,目前普及率较低RFC 7540
- 二进制协议,不再是纯文本【安全】
- 可发起多个请求,废弃了1.1的管道【宽带】
- 使用专用算法压缩头部,减少数据传输量【宽带】
- 允许服务器主动向客户端推送数据【移动】
- 增加了安全性,“事实上”要求加密通信【安全】
e. 未来的发展方向,基于Google的QUIC协议的HTTP/3.0
HTTP是什么
HTTP(HyperText Transfer Protocol
):超文本传输协议
1. 协议:
a. 两个及以上参与者【协】
b. 对参与者的一种行为约定和规范【议】
2. 传输协议:
a. HTTP协议是一个“双向协议”——请求方&&响应方/应答方
b. 数据传输允许中间“中转”或“接力”
3. 超文本:
- 文本:简单的字符文字 -->图片、音频、视频、甚至是压缩包
- 超文本:文字、图片、音频等的混合体,含有“超链接”,能够实现跳转,复杂的非线性、网状的结构关系
HTTP
:一个在计算机世界里,专门在两点之间传输文字、图片、音频、视频等超文本数据的约定和规范
- HTTP不存在“单独的实体”,与应用程序、操作系统、Web服务器密切相关,在他们之前的通信过程中动态存在
- Internet上的协议:http/https/ftp/smtp/pop3等
- HTTP != HTML
- HTTP通常跑在TCP/IP协议栈上,依靠IP协议实现寻址和路由、TCP协议实现可靠数据传输、DSN协议实现域名查找、SSL/TLS协议实现安全通信。此外,WebSocket、HTTPDNS等协议一栏与HTTP。
与HTTP相关的各种概念
1. 网络世界
- 局域网 / 广域网 / 因特网 [FTP/BT/IMAP-POP3/MagNet] / 万维网[www]
- 万维网——基于HTTP协议,传输HTML等超文本资源
- 互联网:90%被万维网/HTTP协议覆盖;
- 互联网还包括常用的电子邮件、BT 和 Magnet 点对点下载、FTP 文件下载、SSH 安全登录、各种即时通信服务等等,它们需要用各自的专有协议来访问。
2. 浏览器
Web Browser
:检索、查看互联网上网页资源的应用程序- 本质上是HTTP协议中的
请求方
,获取资源 - 在HTTP协议中,为
User Agent
,作为访问者的代理发起HTTP请求。客户端
3. Web服务器
web Server
:HTTP协议中响应请求的主体,把控着绝大多数网络资源- 软件 && 硬件
Apache
[老牌,功能完善、相关资料多、学习门槛低] &&Nginx
[后起之秀,高性能、高稳定、易扩展]
4. CDN
Conetnt Delivery network
:内容分发网络- 应用HTTP协议的缓存和代理技术,代替源站响应客户端请求
- 缓存源站数据,在“半路”获取响应,大幅度缩短响应时间
5. 爬虫
Crawler
:可自动访问Web资源的应用程序- 爬虫的数据大都由各大搜索引擎放出来的,抓取网页存入庞大的数据库,再建立关键字索引,在搜索引擎中快速搜索互联网角落里的页面
- 过度消耗网络资源,占用服务器和带宽,影响网站对真实数据的分析,甚至导致敏感信息的泄露
- “爬虫”与“反爬虫”用到的基本技术:HTTP、HTML
6. HTML / WebService/WAF
- HTML:HTTP协议传输的主要内容之一
- Web Service:基于Web的服务架构技术,运行于内网或外网
- WAF:网络应用防火墙,专门监测HTTP流量
与HTTP相关的技术
1. TCP/IP
- 一系列网络通信协议的统称:核心是TCP和IP协议,其余还有UDP、ICMP、ARP等,构成协议栈
- 协议栈:应用层<- 传输层TCP <- 网际层IP <- 链路层
IP:Internet Protocol
主要解决寻址和路由问题,以及如何在两点间传送数据包TCP:Transmission Control Protocol
位于IP协议之上,基于IP协议提供可靠地字节流
形式的通信- 可靠——保证数据不丢失;字节流——保证数据完整性
- HTTP over TCP/IP
2. DNS
Domain Name System
:用有意义的名字作为IP地址的等价替代- DNS中
Domain Name
又称为Host
,更好地标记不同国家或组织的主机,设计有层次的结构 域名解析
:HTTP使用TCP/IP协议通信,需要使用IP协议,所以需要把域名做一个转换,映射到他的真实地址- 为了方便访问互联网上的Web服务器,通常会使用DNS来定位或标记主机名
3. URI/URL
- 定位主机上众多的文本、图片、页面
Uniform Resource Identifier
:统一资源标识符,唯一标识互联网资源Uniform Resource Locator
:统一资源定位符 => 网址- URI的三个基本构成部分:
https://mp.csdn.net/mdeditor/95049262
a. 协议名protocol:访问资源应当使用的协议。'http'
b. 主机名host:互联网上主机的标记,可以是域名或IP地址。'mp.csdn.net'
c. 路径path:资源在主机上的位置,使用'/'分隔多级目录。'/mdeditor/95049262'
4. HTTPS
HTTP over SSL/TSL
:加密通信Secure Socket Layer
发展到3.0时被更名为Transport Layer Security
5. 代理
Proxy
:请求方和响应方的中转站,既可转发客户端的请求,又可转发响应方的应答
- 负载均衡:将访问请求均匀分散到多台机器,实现访问集群化
- 内容缓存:暂存上下行数据,减轻后端压力
- 安全防护:匿名IP,使用WAF等工具抵御网络攻击,保护被代理的机器
- 数据处理:提供压缩、加密等额外的功能
TCP/IP协议栈
- TCP/IP 网络分层模型
Link Layer
:在以太网、WIFI等底层网络发送原始数据包。使用MAC地址标记网络设备。“帧frame”Internet Layer
:在链路层基础上,用IP地址代替Mac地址连接众多局域网、广域网。“包package”Transport Layer
:保证两点之间可靠传输。TCP/UDP[无连接,分散小数据包,顺序发乱序收]。“段segment”Application Layer
:面向具体应用的协议。eg:telnet、SSH、FTP、SMTP等。HTTP的传输单位是"消息或报文message"
- OSI网络分层模型
Physicql Layer
:物理层,网络的物理形式——电缆、网卡、光纤、集线器等 【无对应】Data Link Layer
:数据链路层 【== TCP/IP中Link Layer】Network Layer
:网络层 【== TCP/IP中Internet Layer】Transport Layer
:传输层 【== TCP/IP中Transport Layer】Session Layer
:会话层,维护网络中的连接状态,保持会话和同步【属于 TCP/IP中Application Layer】Presentation Layer
:表示层,把数据转换为合适、可理解的语义或语法 【属于 TCP/IP中Application Layer】Application Layer
:应用层 【属于 TCP/IP中Application Layer】
域名解析过程:
浏览器缓存 -> 操作系统dns cache -> etc/hosts文件 -> 非权威域名服务器 -> 根域名服务器 -> 顶级域名服务器 -> 二级域名服务器 -> 权威域名服务器。
相关文章:

CSS中实现DIV容器垂直居中
1.vertical-align:middle 垂直对齐 如表格元素中的<td>、<th>、<caption>等,而像<DIV>、<span>这样的元素是没有valign特性的,因此使用vertical-align对它们不起作用。 2.text-align:center 文本水平居中 一、…
如何制作自己的CocoaPod库
作者 OneTea 关注 2016.12.29 18:02* 字数 848 阅读 102评论 0喜欢 6制作流程图: 流程图1.将代码托管在github上 1.1本地代码 如图: Snip20161228_7.png在github上创建 并上传 Snip20161228_3.png切换到本地项目cd xxx路径后 用git命令行 (…

【HTTP协议】域名
1. 域名的出现 IP协议将物理网卡的MAC地址抽象转化为4位数字数字化的IP地址对人不友好,需要友好的域名便于人类识别标记 2. 域名的形式 域名是一个有层次的结构——一串用’.分隔的多个单词【主机名.二级域名.顶级域名】最左边是主机名【eg:www提供万…

iOS 多级下拉菜单
前言 App 常用控件 -- 多级下拉菜单, 如团购类, 房屋类, 对数据进行筛选. 有一级, 二级, 三级, 再多就不会以这种样式,呈现给用户了. 作者就简单聊一下 多级下拉菜单 二级下拉筛选菜单.png一 目标 默认显示一个 TableView, 点击数据后, 添加第二个TableView, 并实现大小变化第二…

fork有啥用
#include <stdio.h>#include <sys/types.h>#include <unistd.h>int main(){ pid_t pid1; pid_t pid2; pid1 fork(); pid2 fork(); printf("pid1:%d, pid2:%d\n", pid1, pid2);}输出:pid1:3411, pid2:3412 //父进…

Html Agility Pack基础类介绍及运用
Html Agility Pack 源码中的类大概有28个左右,其实不算一个很复杂的类库,但它的功能确不弱,为解析DOM已经提供了足够强大的功能支持,可以跟jQuery操作DOM媲美:) 基础类和基础方法介绍 Html Agility Pack最常…

【Python自动化测试】setuptools
setuptools Python标准的打包分发工具使用简单的setup.py文件,将Python应用打包 最基础的setup.py文件 #!/usr/bin/env python3 # -*- coding: utf-8 -*- from setuptools import setup setup(nameMyDemo, # 应用名version1.0, # 版本号packages[myd…

企业级-Mysql双主互备高可用负载均衡架构(基于GTID主从复制模式)(原创)
前言:原理与思想这里选用GTID主从复制模式Mysql主从复制模式,是为了更加确保主从复制的正确性、健康性与易配性。这里做的是两服务器A,B各有Mysql实例3310,两个实例间互为主从主从复制模式采用GTID主从复制模式,在服务器A,B上配置…

Objective-C自动生成文档工具:appledoc
作者 iOS_小松哥 关注 2016.12.13 15:47* 字数 919 阅读 727评论 10喜欢 35由于最近琐事比较多,所以好久没有写文章了。今天我们聊一聊Objective-C自动生成文档。 做项目的人多了,就需要文档了。手工写文档是一件苦差事,但是我们也有从源码中…

void main()是错的!
很多人甚至市面上的一些书籍,都使用了void main( ),其实这是错误的。C/C中从来没有定义过void main( )。C之父Bjarne Stroustrup在他的主页上的FAQ中明确地写着The definition void main( ) { /* ... */ } is not and never has been C, nor has it even…

Some tips
VScode自动换行 Code -> Perference -> Setting [ “editor.wordWrap”: “on” ]

iOS 自定义转场动画初探
最近项目刚迭代,正好闲下来捣鼓了一下iOS的自定义转场的效果。闲话不多说,直接开始上代码吧。(ps:请忽略实际的转场效果,关注技术本身呢哦。pps:主要是转场的动画做的比较low啦!) 1、首先定义一个转场动画的…

Delphi实现WebService带身份认证的数据传输
WebService使得不同开发工具开发出来的程序可以在网络连通的环境下相互通信,它最大的特点就是标准化(基于XML的一系列标准)带来的跨平台、跨开发工具的通用性,基于HTTP带来的畅通无阻的能力(跨越防火墙)。WebService给我们的软件开发带来了诸多好处,但是有一点还是必须要考虑到…

【Linux学习笔记】 - 什么是Linux?
Linux Linux内核 GNU工具 组成部分 Linux内核GUN工具图形化桌面环境应用软件 Linux内核 地位:Linux核心,控制计算机系统上的所有硬件和软件。必要时,分配硬件,并根据需要执行软件 主要功能: a. 系统内存存储 ——…

【转】 Android快速开发系列 10个常用工具类 -- 不错
原文网址:http://blog.csdn.net/lmj623565791/article/details/38965311 转载请标明出处:http://blog.csdn.net/lmj623565791/article/details/38965311,本文出自【张鸿洋的博客】 打开大家手上的项目,基本都会有一大批的辅助类&a…

CollectionView侧滑刷新
作者 SoDoIt 关注 2017.03.05 16:39 字数 33 阅读 31评论 0喜欢 2ABSideRefresh.gif效仿MJRefresh写的侧滑刷新,原理不讲了,需要的直接看代码 GitHub:https://github.com/wangjingyu0018/ABRefresh.git

函数功能MATLAB
近期一直在查找函数功能之类的题问,现在正好有机会和大家享共一下. 百科名片 录目 简介开展程历要主功能新特性版本分析特色优势开展简介开展程历要主功能新特性版本分析特色优势开展编辑本段 简介 matlab开辟任务面界 编辑本段 开展程历 编辑本段 要主功能 1.数值析分 2.数值和…

[HTTP协议]基础篇-待完结
文章目录输入网址后回车输入网址后回车 简单的浏览器HTTP请求过程: 浏览器从地址栏输入中获取服务器IP地址和端口号浏览器用TCP的三次握手与服务器建立连接浏览器向服务器发送拼好的报文服务器收到报文后处理请求,同样拼好报文再发给浏览器浏览器解析报…

IAR之工程配置
参考 : IAR的Workspace顶部下拉菜单中Debug和Release http://blog.csdn.net/yanpingsz/article/details/5588525 最近买了zigbee模块的开发板回来研究, 其中一个实验程序里面有三个版本, 分别是路由/终端/协调器, 忙活了半天不知道同一个project是如何配置成3个不同的版本的. …

CoreText入坑一
CoreText是Mac OS和iOS系统中处理文本的low-level API, 不管是使用OC还是swift, 实际我们使用CoreText都还是间接或直接使用C语言在写代码。CoreText是iOS和Mac OS中文本处理的根基, TextKit和WebKit都是构建于其上。 一. 基础 1.在使用CoreText编写代码之前, 需要先了解一些基…

mysql连接hang住问题分析
【问题现象】: 1. Linuxc多线程连接mysql数据库,每次都是短连接,操作完后就释放连接,有时候会出现mysql_real_connect挂住的现象 2. 挂住超时mysql_real_connect返回后报错如下:Lostconnection to MySQL s…

【Linux学习笔记】 -- 基本Shell命令
常见的目录名均基于文件系统层级标准(filesystem hierarchy standard,FHS) Linux的四个部分: 1 Linux内核:控制所有硬软件,必要时分配硬件根据需要执行软件 系统内存管理:可用物理内存 创建、管理虚拟内存[交换空间…

【OpenCV】图像代数运算:平均值去噪,减去背景
代数运算,就是对两幅图像的点之间进行加、减、乘、除的运算。四种运算相应的公式为: 代数运算中比较常用的是图像相加和相减。图像相加常用来求平均值去除addtive噪声或者实现二次曝光(double-exposure)。图像相减用于减去背景或周…

简明 Vim 练级攻略(转)
vim的学习曲线相当的大(参看各种文本编辑器的学习曲线),所以,如果你一开始看到的是一大堆VIM的命令分类,你一定会对这个编辑器失去兴趣的。下面的文章翻译自《Learn Vim Progressively》,我觉得这是给新手最…
iOS 的离屏渲染
原文链接:http://www.imlifengfeng.com/blog/?p593OpenGL ES 是一套多功能开放标准的用于嵌入系统的 C-based 的图形库,用于 2D 和 3D 数据的可视化。OpenGL 被设计用来转换一组图形调用功能到底层图形硬件(GPU),由 G…

MySQL 常见操作指令
什么是SQL? SQL(Structured Query Language)用于访问和操作数据库的结构化查询语言。 数据库包含一个或多个表,每个表均有名称标识,包含数据的记录(行)。 典型的SQL语句 1. SELEC语句 SELE…
iOS 实现点击微信头像效果
来源:伯乐在线 - 小良 如有好文章投稿,请点击 → 这里了解详情 如需转载,发送「转载」二字查看说明 公司产品需要实现点击个人主页头像可以放大头像、缩放头像、保存头像效果(和点击微信个人头像类似),故找…

HDU 4292 Food(dinic +拆点)
题目链接 我做的伤心了,不知是模版效率低,还是错了,交上就是TLE,找了份别人的代码,改了好几下终于过了。。 1 #include <cstdio>2 #include <cstring>3 #include <queue>4 #include <map>5 #i…

jQuery中用ajax访问php接口文件
js代码 function ajax_request(){var result;var articleId new Object();articleIdgetArticleId();$.ajax({url: "/topicPage/getComment.php",//请求php文件的路径data:{id:articleId},//请求中要传送的参数,会自动拼接成一个路径,在php中用get方式获取…

Python 数据库操作 psycopg2
文章目录安装基本使用安装 psycopg 是 Python 语言中 PostpreSQL数据库接口 安装环境: Python:v2.7, v3.4~3.8PostGreSQL:7.4~12 pip install psycopg2基本使用 import psycopg2def connect_db(host: str,port: int,database: str,user:…