负载均衡环境中和如何设置Expires和Etag
在负载均衡环境中（LVS, LoadBalance）为了减少浏览器数据的重复请求操作，一般需要设置 Http Header 的 Etage 和 Expires 告诉浏览器请求数据是否已过期。以下内容主要考虑Apache+squid 环境
ETag Header是文件修改时间、文件大小和inode号生成的校验（checksum）,在多台服务器的负载均衡环境下会因部署内容的inode节点差异造成 ETag 的不同，在多台WEB前端做负载均衡的情况下，会因为请求同一个数据但不同机器的 ETag 而影响了响应. 具体表现为用户在第一次请求某一内容时下载而再次时浏览器会发现ETag不同而再次请求下载.。（再次刷新时查看是否响应码为:304）
对于Apache 可以使用 FileEtag 选项配置
Apache 的默认ETag的值总是由文件的索引节点（Inode）、大小(Size)、最后修改时间(MTime)决定
这里我们只需要去掉Inode即可
FileETag MTime Size
具体关于 FileETag 详细内容可以查看Apache官方文档。
Expires用于控制请求文件的有效时间，当请求数据在有效期内时客户端浏览器从缓存请求数据而不是服务器端. 当缓存中数据失效或过期，才决定从服务器更新数据。
可以使用Apache的mod_expires 模块来设置，这包括控制应答时的Expires头内容和Cache-Control头的max-age指令
ExpiresActive On
ExpiresByType image/gif “access plus 1 month”
ExpiresByType image/jpeg “access plus 1 month”
ExpiresByType image/x-icon “access plus 1 month”
ExpiresByType image/png “access plus 1 month”
ExpiresByType text/html “access plus 30 minutes”
ExpiresByType text/css “access plus 30 minutes”
ExpiresByType text/js “access plus 30 minutes”
ExpiresByType application/x-javascript “access plus 30 minutes”
ExpiresByType application/x-shockwave-flash “access plus 30 minutes”
以上设置为 图片文件的有效期为从请求文件开始1个月，html,css,js,flash文件的有效期为从请求文件开始30分钟
这里只是一个常规设置，Apache官方文档 对此设置有详细介绍
当设置了expires后，会自动输出Cache-Control 的max-age 信息，这个数值是expires有效期内的秒数，(一个月的数值为2592000) 在这个时间段里，该文件的请求都将直接通过缓存服务器获取，当然如果需要忽略浏览器的刷新请求（F5)，缓存服务器squid还需要使用refresh_pattern 选项来忽略该请求
refresh_pattern -i .jpg 1440 50% 10080 reload-into-ims ignore-reload ignore-no-cache ignore-private
以下为实际输出的HTTP Header信息
Date Thu, 07 Aug 2008 07:27:57 GMT
Server Apache
Last-Modified Fri, 27 Jun 2008 07:18:52 GMT
Etag “df6-b8c8cf00″
Accept-Ranges bytes
Content-Length 3574
Cache-Control max-age=2592000
Expires Sat, 06 Sep 2008 07:27:57 GMT
Content-Type image/jpeg
Age 34241
X-Cache HIT from s1.ihompy.com
Connection keep-alive
对于动态页面的缓存如果不是频繁更新的页面数据，可以在squid缓存，只需要注意两点
1. session : 对于需要缓存的数据，一定要关闭session防止在http header 中包括session id 字段
2. Last-Modified 和 Expires 标记: 一般般纯静态页面本身都会有Last-Modified信息，这是由WEB服务器获取文件的最后修改时间生成的，而动态页面需要默认的输出内容是
Date Thu, 07 Aug 2008 16:58:37 GMT
Expires Thu, 19 Nov 1981 08:52:00 GMT
Last-Modified Thu, 07 Aug 2008 16:58:37 GMT
这里的 Last-Modified 时间和请求文件的时间相同，也就是说该文件总是声明为最新的
在程序中需要输出Last-Modifed 和 Expires信息，比如php
header(‘Last-Modified: ‘ . gmdate(“D, d M Y H:i:s”) . ‘ GMT’);
header(‘Expires: ‘ . gmdate (“D, d M Y H:i:s”, time() + 3600*24). ” GMT”);
以上信息设置php文件的过期时间为请求该文件的时间后的24小时(3600*24)
Squid和Apache中的max-age与Expires的分别
主要重点在于我们要明白一个相对(Expires)一个绝对(max-age).
分别
max-age
max-age是HTTP/1.1中,他是指我们的web中的文件被用户访问(请求)后的存活时间,是个相对的值,相对Request_time(请求时间).
例如:A.html 用户请求时间是18:00,max-age设置的是600的话,相当18:00+600秒过期,也就是相对18:00的时间后面600秒后过期.默认的max-age是由Expires算出来的.
Expires
Expires是HTTP/1.0中的,它比max-age要麻烦点.Expires指定的时间分下面二种,这个主要考虑到apache中设置是A还是M.
1.相对文件的最后访问时间(Atime)
当Apache使用A时间来做Expires时.这样设置时.他就和max-age的值相等,因为max-age是相对文件的请求时间(Atime).
例如:ExpiresByType text/html A600
由上面我们得知,Apache设置Atime时,过期为600秒时.
Expires=18:00+600=18:10
max-age=18:00+600=18:10
得出:Expires=max-age
2.绝对修改时间(MTime)
这又分二种情况,我们来拿A.htm来讲
假设文件的建立时间为18:00.
当用户Request请求为18:00时,过期为600秒
Expires=18:00+600=18:10
max-age=18:00+600=18:10
得出:Expires等于max-age
当用户Request请求为18:20时,过期为600秒
Expires=18:00+600=18:10(因为设置成Mtime时,时间由文件建立时间来决定)
max-age=18:20+600=18:30
得出:Expires不等于max-age
另外要注意,象上面这种清况时,max-age优化,所以过期时间为18:30.
在squid,如果没有指明expires和max-age这二个的截止时间,那它就会使用发式截止时间,如参考 Last-Modified.
其实上面的max-age=18:20+600=18:30,这样算max-age不对,真实环境要这样算,max-age过期为http头中的Age=600过期.
注:Age域值是缓存服务器估计从响应产生或被原始服务器重新证实以来的总时间.age的值是缓存服务器算出来的,原始服务器是没有的.
相关文章：
C++之typedef 小记
2019独角兽企业重金招聘Python工程师标准>>>  以前曾不知道为何要用typedef，随着开发的深入，真正感受到了其内涵所在： 1.如：typedef int DataType 接下来项目中的几万行代码中，如果…
Android Go初探
Android Ore(Go edition) 简介： Android Go并不是一个独立的操作系统，它只是Android O的一种轻量级配置方案，专为1GB以下内存的机型设计， 在这种设置下，一些消耗大量资源的功能将被关闭，同时预装的应用也是…
Apache HTTP Server Version 2.2 文档中文版
模块索引 | 指令索引 | 常见问题 | 词汇表 | 站点导航 Apache HTTP Server 版本2.2 Apache > HTTP Server > 文档 > 版本2.2致谢 | 本篇译者：金步国(其他作品) | 本页最后更新：2006年10月20日[查看最新版本] 电信镜像 网通镜像Apache HTTP Ser…
归一化变换 Normalizing transformations
归一化变换包含两个部分，图像坐标的平移和尺度的缩放。进行归一化的变换不但能够提高处理结果的精确度，而且通过选择一个标准的坐标系预先的消除了图像尺度和坐标原点的选择对算法最终结果的影响。 归一化变换的步骤： 对点进行平移࿰…
Arm 通过虚拟硬件与新的解决方案导向的产品 带动物联网经济转型
Arm物联网全面解决方案通过一套全栈式解决方案，大幅加速产品开发进程并提高投资回报率；Arm虚拟硬件使得开发无需基于实体芯片进行，促成软件与硬件的共同设计，让产品开发时间最多缩短两年；Project Centauri作为Arm新的生…
数据库设计 之设计 表字段类型
2019独角兽企业重金招聘Python工程师标准>>> 数据库设计 之设计 表字段类型 博客分类： sql 之前没有 数据库设计的一些经验。 这次数据库设计。由于需求原因和没经验原因。 一些数字类型的字段设计成了varchar2 一些日期类型的字段也设计成了varchar2 一…
Apache关掉Etag和Last-Modified的方法
Apache关掉Etag和Last-Modified的方法,可能也只有我这种无聊的人才会做这种事情.哈哈，关掉etag和last-modified会出现什么样的情况。做一个这样的测试. 不要问我这二个参数是做什么的。。。。。在我的blog中有写. Etag关掉的方法如下,加一个none FileETag none …
P2P最易遭受的DDoS***以及防御手段
从07年的爱沙尼亚DDoS信息战，到2009年广西南宁30个网吧遭受到DDoS勒索，再到新浪网遭受DDoS***无法提供对外服务500多分钟。DDoS愈演愈烈，***事件明显增多，***流量也明显增大，形势十分严峻，超过1G的***流量频…
从飞天到倚天 阿里云底层自研技术大爆发
10月20日，2021云栖大会上，阿里云发布了倚天、磐久、神龙4.0、龙蜥、灵杰等多款重磅产品，阿里云“做深基础”成果浮出水面，底层自研技术迎来大爆发。 阿里云智能总裁张建锋表示，过去十二年，阿里云打造出中国…
CSS vs. JS Animation: 哪个更快
CSS vs. JS Animation: 哪个更快? CSS vs. JS Animation: 哪个更快? 基于JavaScript的动画竟然已经默默地比CSS的transition动画快了？而且，Adobe和 Google竟然一直在发布可以媲美原生应用的富媒体移动站点？ 这篇文章将会逐点讲解基于JavaSc…
Squid下Http头信息优先级
no-cache>Expires>refresh_pattern>Last-Modified 也就是讲,最前面的最重要,前面的生效后,后面的基本就失效了. 另外squid本身就能对比Last-Modified,但根据我的测试，Etag还是会要向源服务器发送请求头，来确认etag的. ETag默认是需要向源网站…
阿里云PolarDB数据库将云原生进行到底！业内首次实现三层池化
10月20日，在2021云栖大会上，阿里云宣布自研云原生关系型数据库PolarDB重磅升级，实现内存池化、多主架构、HTAP实时分析等创新功能，进一步引领云原生数据库技术的持续创新。 阿里云智能数据库事业部总负责人李飞飞表示，…
zencoding实践
2019独角兽企业重金招聘Python工程师标准>>> .container<div class"container"></div>.wrap>ul>.list>.site <div class"wrap"><ul><li class"list"><div class"site"></…
第三期 OSI七层中第一层 物理层
物理层1、信号1）信息2）数据3）信号：信息传递的媒介 4）信号的分类：模拟信号：连续变化的物理量。数字信号：不连续的物理量，信号参数也不连续变化，高低固定。5&am…
Squid的refresh_pattern配置
refresh_pattern 大概是 squid 最有意思但最不好懂的配置参数了。 记住refresh_pattern 只对后端没设置Expires过期时间的页面起作用，比如论坛页面；而对类似apache mod_expires 设置过的页面不起作用。 说明之前，先将个概念LM，L…
阿里云发布第四代神龙架构云计算首次进入5微秒时延时代
10月20日，2021云栖大会上，阿里云宣布推出第四代神龙架构，这是飞天云操作系统新一代虚拟化技术，首次搭载全球唯一的大规模弹性RDMA加速网络，网络延迟整体降低80%以上。神龙4.0带来的计算架构革新，将云计算首…
【微服务】Spring-Boot整合Consul （自定义服务配置及健康检查）
为什么80%的码农都做不了架构师？>>> 目的 上文提到仅使用discovery包自带的注册功能进行服务注册，但是由于监控的是 /health，使用actuator实现自由度不够，并且有些低级异常可能不完全影响服务运行，但状态依…
Apache URL重定向避免网址结尾斜线问题
结尾斜线问题描述: 每个网主都曾受到结尾斜线问题的折磨，若在URL中没有结尾斜线，服务器就会认为URL无效并返回错误，因为服务器会根据/~quux/foo去寻找foo这个档案，而非显示这个目录。其实很多时候，这问题应留待用户自己…
16:00面试，16:08就出来了 ，问的实在是太...
从外包出来，没想到算法死在另一家厂子自从加入这家公司，每天都在加班，钱倒是给的不少，所以也就忍了。没想到8月一纸通知，所有人不许加班，薪资直降30%，顿时有吃不起饭的赶脚。好在有个兄弟内推我…
提前了解客户背景很有必要
2019独角兽企业重金招聘Python工程师标准>>> 最近，公司与某电商展开了合作，我司将为该电商提供提供一套广告解决方案。我有幸参与到这个项目，了解该电商的需求，思考公司的产品是否能够和如何满足这些需求。近日&#x…
wamp多站点访问设置
1、修改C:\Windows\System32\drivers\etc\hosts文件 2、修改httpd.conf和httpd-vhosts.conf文件 3、重启apache转载于:https://www.cnblogs.com/liusirdotme/p/8177386.html
满足极高读写性能需求的Key-Value数据库
满足极高读写性能需求的Key-Value数据库 高性能Key-Value数据库的主要特点就是具有极高的并发读写性能，Redis，Tokyo Cabinet， Flare，这3个Key-Value DB都是用C编写的，他们的性能都相当出色，但出了出色的性…
QQ群功能设计与心理学
2019独角兽企业重金招聘Python工程师标准>>> 刚刚在一个Java技术交流群，发了个 "博客投票"的广告。 群主两眼一黑，瞬间就把我给干掉了。 看到QQ给出的系统消息，发现QQ群的一个功能做得很不错。 大家注意到，右…
龙蜥降世，神龙升级，阿里云投入 20 亿发力操作系统
作者 | 贾凯强、伍杏玲 出品 | AI科技大本营（ID:rgznai100）10 月 20 日，阿里巴巴云栖大会继续在杭州进行，与开幕第一天的主论坛不同，第二天活动的主论坛更加聚焦与技术领域和技术实践。20 日上午，阿里…
35.2. Subversion 版本控制
subversion 初始化trunk branches releases tags svn co svn://127.0.0.1/document cd project mkdir trunk mkdir tags mkdir branches mkdir releases svn ci -m "Initialized empty subversion repository in your_project"创建docbook文档，安排章节…
使用卷积神经网络预防疲劳驾驶事故
作者|小白来源|小白学视觉疲劳驾驶：一个严重的问题美国国家公路交通安全管理局估计，每年有 91,000 起车祸涉及疲劳驾驶的司机，造成约50,000 人受伤和近 800 人死亡。此外，每 24 名成年司机中就有 1 人报告在过去 30 天内在驾驶时睡…
详解Apache下.htaccess文件常用配置
.htaccess文件是Apache服务器中最常用的一个配置文件，它负责相关目录下的网页配置。通过htaccess文件，可以帮我们实现：网页301重定向、自定义404错误页面、改变文件扩展名、允许/阻止特定的用户或者目录的访问、禁止目录列表、配置索引入口等…
hadoop HDFS常用文件操作命令
命令基本格式: hadoop fs -cmd < args >1.ls hadoop fs -ls /列出hdfs文件系统根目录下的目录和文件 hadoop fs -ls -R /列出hdfs文件系统所有的目录和文件 2.put hadoop fs -put < local file > < hdfs file >hdfs file的父目录一定要存在，否则…
php缓存技术总结
全页面静态化缓存也就是将页面全部生成html静态页面，用户访问时直接访问的静态页面，而不会去走php服务器解析的流程。此种方式，在CMS系统中比较常见，比如dedecms；一种比较常用的实现方式是用输出缓存：Ob_st…
两个使用 Pandas 读取异常数据结构 Excel 的方法，拿走不谢！
作者 | 周萝卜来源 | 萝卜大杂烩通常情况下，我们使用 Pandas 来读取 Excel 数据，可以很方便的把数据转化为 DataFrame 类型。但是现实情况往往很骨干，当我们遇到结构不是特别良好的 Excel 的时候，常规的 Pandas 读取操作就不怎么好…