当前位置: 首页 > 编程日记 > 正文

网站性能越来越差怎么办?

新的一年,你的老板或客户,是否曾和你抱怨公司的网站性能愈来愈差?网站大家都会写,自从有了 Visual Studio 之后,连你家楼下的正妹小喵和隔壁的王大婶都会写 ASP.NET。但同样的一个画面,背后的性能却可能是天差地远,更惶论多人同时上线的企业网站,而程序员的身价也因此有所差别。本帖提供一些改善网站性能的点子,从硬件、软件、程序技巧的层面都有,也欢迎大家分享自己的经验或秘技。


(1) 重新调整或重新设计 DB schema、索引 (index)

一个在线系统的性能不佳,主要原因都是来自于数据库规划及 SQL 语句层面,至于 .NET 程序撰写不良都还在其次。

先将数据库适度地做正规化,如:一个 Table 中,避免把常用的字段、很少用的字段,都塞在同一个表中,而影响数据扫描的速度。
应该将很少用的字段,另切割出来成为另一个表。

----------------------------------------------

(2) 改写 SQL 语句,注意 index 是否在查询时有真的被用到

* 同样的功能,一个不良的「关联子查询」和良好的「独立子查询」,之间的 SQL 性能差距,是不到一秒钟和好几分钟以上的差距。

* 一些 SQL 关键词,只要一出现在 SQL 语句中,就可能造成表的「索引 (index)」完全失效或部分失效,变成要整个表去逐行逐列地扫描,
例如: NOT、NOT IN、!=、<>、OR ...等关键词,
还有「LIKE '%关键词'」的模糊查询,也会造成索引失效,但「LIKE '关键词%'」就不会造成索引失效。

----------------------------------------------

(3) 使用 Native 的 DataProvider

放弃 OleDb,改用 ADO.NET Native 的 DataProvider,如: SqlClient、OracleClient。但若您公司坚持要用 Sybase 这种从 2003 年之后,就不曾更新 DB driver 的数据库,就只好继续用性能不佳的 OleDb 去联机了。

据版工我用 Visual Studio 内建的 stress test 工具,测试 OleDb 和 SqlClient 的性能差距,模拟 30 人同时上线,用浏览器撷取一万笔数据,两者的速度就差了一秒钟;且当数据库的数据越多,或越多人同时上线时,性能差距会更明显。

----------------------------------------------

(4) 用程序或软件做缓存

用程序做缓存,如 ASP.NET 从 1.x 时代,就已内建的 Cache (缓存) 机制;或用一些第三方的辅助软件、Framework,这方面若有其它网友知道好用的软件,亦恳请留言告知。

----------------------------------------------

(5) 用硬件做快取或缓冲、砸钱加装 AP Server

ITHome - 游戏基地网页效能提升的关键人物

以下引用自原文:

种种缺失使得网站的使用人数锐减。面对网站一堆问题,陈xx也决定要将网站再次大幅度调整,将之前的网页程序,以及 SQL 查询语句全部重写,他们花了三个月的时间执行。

陈xx还在原本的网页服务器,与数据库服务器的架构中,加入一组应用程序服务器,作为网页服务器 cache 数据的来源。

改版之后的新网站,搜寻速度提升许多,先前每日的统计数据中,处理速度超过 3 秒的数据超过 50 万笔;而改版后,每星期超过 3 秒的查询不到 10 笔,而这少数反应速度不够快的查询,也多是内部作业执行大量批处理导致的。

由于原本使用的 L4 Switch 较为老旧,负载量比较差,因此陈xx选择将它汰换新的设备,加强负载量;恰好那时正好准备将应用服务器的架构上线,就藉此机会将网络架构更新。陈xx说,这样的架构搭配负载较强的 L4 交换器,强化网站的处理性能,并凭借此抵御网络攻击。在此之后,网站依然会受到零星攻击,但都不会对造成太大影响。

----------------------------------------------

(6) 用硬件做快取或缓冲、砸钱加装 AP Server

数字之墙 - 网站外销的个人实践(二)运营

以下引用自原文:

全盛时期,来自美国 blog 的流量每天达 80 万次。这个数字其实不高,对程序高手来说是小菜一碟,但笔者是半吊子工程师,知识有限也因此可能程序写得不好,频频被主机供货商发信警告,要求改善网站系统性能。最后,我决定开发 cache system。

cache system 缓存系统上线后,将数据库读写,从每天 80 万次降低到每天 16 万次。这期间也请高手朋友帮忙进行数据库结构优化,帮助很大。笔者在过程中学习到,一个良好的「缓存系统 (cache system)」对于提供 Widget 功能的网站来说非常重要。

…中间略…

能够做到随时搬迁整个网站到另一家主机供货商,除了程序本身的调整外,还要归功于网站管理软件的盛行。在此要推荐的一套称为 Plesk 的网站管理软件。有的主机供货商会直接帮你安装 Plesk ,免费或另外付费。 Plesk 的所有管理功能都是透过 Web 界面,方便到无以复加,大大降低对技术能力的要求。

除了 Plesk 以外,网站管理软件还有其它选择。还有 WHM 加上 cPanel 的组合,也是常见的网站管理解决方案。不过笔者还是比较偏好使用 Plesk,毕竟使用起来容易,也难怪他们的市场占有率一直是独大。只是,功力高的工程师可能会喜欢 WHM + cPanel,因为弹性比较大。不论选择哪一种,都可以帮助你节省许多时间。

----------------------------------------------

(7) 加装实体机器做 Loading Balance (负载平衡)。一些 Server OS 亦内建此类设定功能。

----------------------------------------------

(8) 程序技巧 - ADO.NET

能用 DataReader 就不要用 DataSet / DataTable,前者读取速度快又不耗内存;后者虽较有弹性,但速度较慢又会每个使用者消耗许多内存。若您连 DropDownList 控件的数据来源,都用 SqlDataSource 控件的默认值 - DataSet,则当页面里塞了一堆下拉选单时,性能当然会受影响。

但前提是程序员对 ADO.NET 要有一定程度的了解,若只会用 Visual Studio 透过图形界面,拖拉 TableAdapter、DataTable、.xsd 就免谈了。

若为 DataTable 建立 Primary Key,DataTable 会建立一个索引,追踪新增到 DataTable 中的数据是否符合此条件约束 (constraint)。ADO.NET 2.0 会使用 algorithm 的「红黑树算法 (Red-Black Tree,是一种「平衡树」算法) 处理索引,让 DataTable 的数据量大时,较方便维护索引;但缺点是建立索引时会降低一性能。


此外,数据库的访问和捞值,应该尽量在一次 DB connection 做完,一个 connection 可搭配多个 DbCommand 对象使用,不用每次都一个 DbConnection 配一个 DbCommand。


在此推荐一本不错的 ADO.NET 原文书:

Programming Microsoft ADO.NET 2.0 Core Reference:
http://www.amazon.com/Programming-Microsoft%C2%AE-ADO-NET-Core-Reference/dp/073562206X/ref=sr_1_1?ie=UTF8&s=books&qid=1230971264&sr=1-1

有探讨许多市面上书籍少见的深入内容,像 Oracle + ADO.NET 的各种应用、Connection Pooling 的特性、各种的数据库 Balk (批次) 作业应用。

----------------------------------------------

(9) 程序技巧 - .NET 语法

* 避免一些书上教的,把 DataTable 或大量数据,直接塞进 Session 里,此举在真正要上线的系统必死无疑。Session 在多人同时上线时,内存的消耗是很可观的,因为 Session 是每个用户各存一份在服务器的内存里,而非像「缓存 (cache)」是所有的用户共享服务器的一块内存。在很多 ASP.NET 的需求中,可用 HiddenField 控件或  ViewState 取代 Session。

* 能用「泛型 (Generics)」就不要用旧版的写法,Generics 除了安全外,亦可避免 .NET 类型在 Boxing / Unboxing 转型时影响性能,例如:
能用 List<string> 就不要用旧的 ArrayList,能用 Dictionary<TKey,TValue> 就不要用 Hashtable 或跑双层的循环 (loop),因 ArrayList、Hashtable 的 element 属于 object 类,在存储或检索如 int 等「值类型 (Value Type)」时,会引发 Boxing / Unboxing。
在大多数的情况下,List、Dictionary 等泛型类,拥有较佳的效率,而且是类型安全的。

当然上述前提,是系统要用 .NET 开发,还在靠 ASP 或非 OOP 语言硬撑的旧系统就免谈了。

----------------------------------------------

(10) 程序技巧 - 数据库「事务 (Transaction)」

您是否知道 SQL Server 的默认「事务隔离等级 (Isolation Level)」,是「ReadCommitted」,当您在写 ADO.NET 用了 SqlTransaction 时,默认是当某个人在修改某一笔记录时,其它所有读取这一笔记录的人,都会被「锁定 (lock)」住,造成其它全部用户的浏览器都在等待中,无法做其它工作。

而 Oracle 事务的特性,是绝不会有类似无法读取的情形,至少会用类似 SQL Server 2005 新增的「快照隔离 (Snapshot Isolation)」,让用户至少能先读取到未 Commit 或 Rollback 的记录,而不用呆坐在浏览器前面傻等。

不过 SQL Server 2005 的「快照隔离」默认未启用。用 SQL Server 开发的系统,若怕用户被锁定的问题,可视 project 需求,改用最宽松的「ReadUncommitted」事务隔离等级,其特性为不会造成任何锁定,但可能会造成 Dirty Read。SQL Server 有下列七种「事务隔离等级」,有兴趣的网友可去查询 ADO.NET 书籍或 MSDN Library:

Chaos
ReadCommitted  // SQL Server 默认值
ReadUncommitted // 最宽松,会有 Dirty Read
RepeatableRead
Serializable    // 最严,会有大量的锁定
Snapshot
Unspecified

----------------------------------------------

(11) ASP.NET 分页

GridView + SqlDataSource 的默认行为,就是每次换页或排序时,不管数据库有几笔记录都全部重捞一次;当数据库有一百万笔数据,就在每个用户换页时,都一百万笔全部重捞出来,此举消耗了大量的 Web server/ AP server 内存、数据库系统资源、网络频宽,结果网站性能可想而知。

很多企业内的小型网站,为了省钱,随便外包给低价抢标的工作室,或没经验的学生和 SOHO 族,可能因此埋下了恐怖的后遗症。最可怕的是这些未爆弹,在开发期间和系统刚上线、数据量还很少时,都感觉不出来,有如癌症一样,会在将来忽然爆发。

----------------------------------------------

(12) ASP.NET AJAX 的 UpdatePanel 控件不是万能的

以下引用自 MSDN Magazine:

不论好坏,UpdatePanel 控件都是 ASP.NET AJAX 社区所喜爱的。我说“好”,是因为 UpdatePanel 使部分页面呈现变得相当简单,而说“坏”,是因为它的简便和易用性是以效率和令人啼笑皆非的带宽为代价的。

UpdatePanel 可以为一般的网页带来 AJAX 神奇的好处,但是它不能提供我们与 AJAX 正常关联的高效性。例如,您是否知道,当 UpdatePanel 控件对服务器执行异步 AJAX 回调以更新其内容时,这个请求包含了常规 ASP.NET 回发所包含的一切,其中还包括 ViewState 呢?具有太多 ViewState 的页面会降低性能,并且具有太多 ViewState 的页面在 ASP.NET 应用程序中都太常见。

如果您准备使用 UpdatePanel 控件,您需要清楚您在准备干什么。在许多情况下,从性能的角度而言,应用程序最好是不使用 UpdatePanel,而是使用对 WebMethods 或页面方法的异步调用。

…中間略…

当您使用 UpdatePanel 在一个页面上执行无闪烁更新时,您可能会认为您在进行高效构建。毕竟,UpdatePanel 使用的是 AJAX,不是吗?不幸的是,如果您在 UpdatePanel 更新时检验一下网络中的通信,您会发现您根本就没有保存什么东西,至少是在发送的时候没有保存。通常在回发期间传送到服务器的 ViewState 数据(与其他数据)也会在 UpdatePanel 回调期间传送。事实上,来自 UpdatePanel 的异步 XML-HTTP 请求中所增长的数据,几乎与在标准 ASP .NET 回发中增长的数据相同。下面是有关 ASP.NET AJAX 不可告人的秘密:UpdatePanel 虽易于使用,但是通信效率不高。

几乎没有什么办法可让您提高 UpdatePanel 的效率,但是您可以放弃使用 UpdatePanel,并转而使用 ASP.NET AJAX 的其他功能来更新页面内容,它不仅同样流畅,而且更加高效。它只需要多一点点力气,但是最后的结果往往让人觉得是值得付出的,因为您可以大大降低在客户端与服务器之间传输的数据量。

----------------------------------------------

(13) Design Patterns

虽然「设计模式」不是为解决性能问题而诞生的,但可适度防止没经验的新人做出蠢事。多学一些 .NET 技术敌营注重的系统架构、OOAD、Design Patterns 和相关的 Framework,对提升自己的身价和薪资也有帮助。

----------------------------------------------

相关文章:

如何设计一个高性能CPU?

任何一种技术都会经历从阳春白雪到下里巴人的过程&#xff0c;就像我们对计算机的理解从“戴着鞋套才能进的机房”变成了随处可见的智能手机。在前面20年中&#xff0c;大数据技术也经历了这样的过程&#xff0c;从曾经高高在上的 “火箭科技&#xff08;rocket science&#x…

Python包管理工具Distribute的安装

Python包管理工具Distribute的安装Python的包管理工具常见的有easy_install, setuptools, 还有pip, distribute&#xff0c;那麽这几个工具有什么关系呢&#xff0c;看一下下面这个图就明白了&#xff1a;可以看到distribute是setuptools的替代方案&#xff0c;pip是easy_insta…

如何用 Graylog 管理日志?- 每天5分钟玩转 Docker 容器技术(93)

上一节已经部署好了 Graylog&#xff0c;现在学习如何用它来管理日志。 首先启动测试容器。 docker run -d \ --log-drivergelf \ --log-opt gelf-addressudp://localhost:12201 \ --log-opt tag"log-test-container-A" \ b…

php调用C代码的方法详解

在php程序中需要用到C代码&#xff0c;应该是下面两种情况&#xff1a; 1 已有C代码&#xff0c;在php程序中想直接用2 由于php的性能问题&#xff0c;需要用C来实现部分功能针对第一种情况&#xff0c;最合适的方法是用system调用&#xff0c;把现有C代码写成一个独立的程序。…

如何在Django中接收JSON格式的数据

Django做了大量工作简化我们的Web开发工作, 这其中当然也包括接收来自客户端的数据这一普遍需求. 大部分时候,从客户端传入的数据主要是FORM的POST数据,和来自URL的GET数据, 在Django中对应了HttpRequest对象的POST和GET属性, 例如读取FORM表单中的用户名username输入框的内容:…

写了篇爬虫文章,收到律师函,怎么办

大家好&#xff0c;我是早起。从写公众号开始&#xff0c;不论是私信还是交流群&#xff0c;常常都会有粉丝会问出类似下面的问题xx网站能不能爬&#xff1f;爬xx数据有没有风险&#xff1f;其实我并不是爬虫从业人员&#xff0c;充其量算爬虫爱好者&#xff0c;去年也转载过一…

在SQL中使用CRL函数示例

在SQL中使用CRL函数 实验目标&#xff1a; 1. 在SQL中创建CRL函数&#xff0c;使之能够向指定的计算机发送消息 实验步骤 2. 在VS中创建类发送消息的类 3. 将以下代码黏贴进去 using System; using System.Collections.Generic; using System.Text; using System.Net.Sockets; …

ASP.NET的(HttpModule,HttpHandler)

在以前的ASP时候&#xff0c;当请求一个*.asp页面文件的时候&#xff0c;这个HTTP请求首先会被一个名为inetinfo.exe进程所截获&#xff0c;这个进程实际上就是www服务。截获之后它会将这个请求转交给asp.dll进程&#xff0c;这个进程就会解释这个asp页面&#xff0c;然后将解释…

页面GBK,用jquery.post乱码问题

2019独角兽企业重金招聘Python工程师标准>>> jquery ajax默认为UTF-8&#xff0c;所以页面上要 encodeURIComponent ("内容") 后台代码 再 URLDecoder.decode("内容" "utf-8") 转载于:https://my.oschina.net/wangchongya/blog/34651…

专访陈天桥:把钱投给甘坐冷板凳的AI研究员

作者&#xff1a;钱童心 责编&#xff1a;刘佳“别的投资人听陶虎说&#xff0c;要10年才能做出消费级产品&#xff0c;就不投了&#xff0c;我跟陶虎说&#xff0c;我给你20年时间做。”人工智能&#xff08;AI&#xff09;技术正在为各行各业赋能&#xff0c;这使得一场人才…

使用DPM2007备份还原Exchange2007邮箱数据库

创建演示环境1. 在这里&#xff0c;由于要演示备份和还原&#xff0c;所以我们先让用户bob给alice发一封信以作测试验证。2. 用户alice登录OWA后&#xff0c;可以看到bob发来的一封信&#xff0c;主题为“DPM Test For Exchange”&#xff0c;如图1.创建保护组并备份Exchange…

大有乾坤,售前机器人背后的 AI 技术

作者 | 伍杏玲出品 | AI科技大本营&#xff08;ID:rgznai100&#xff09;我们在网上购物时&#xff0c;无论多晚找客服咨询&#xff0c;对面均会回复一句“在呢&#xff0c;请问有什么可以帮助您&#xff1f;”&#xff0c;屏幕背后大部分为智能客服机器人。在不同业务场景对话…

c3p0数据库连接池使用报错【 You can't operate on a closed Connection!!!】解决方案

一般情况下&#xff0c;我们的项目中都有一个获取数据库连接的方法。我获取数据库连接的方法是这样实现的&#xff1a;1. 创建一个 ComboPooledDataSource对象&#xff0c;使用它的getConnection()方法获取连接。2. 创建一个泛型为Connection的ThreadLocal<Connection>对…

Asp.Net下通过切换CSS换皮肤

换皮肤的方式有很多种&#xff0c;最简单的通常就是切换页面CSS&#xff0c;而CSS通常写在外部CSS文件里。那么切换css其实就是更换html里的link href路径。我在网上搜索了下。一般有两种方式&#xff1a; 1,在页面放一个holder控件。然后用编程方式把当前用户的风格css link写…

用 Label 控制 Service 的位置 - 每天5分钟玩转 Docker 容器技术(106)

上一节我们讨论了 Service 部署的两种模式&#xff1a;global mode 和 replicated mode。无论采用 global mode 还是 replicated mode&#xff0c;副本运行在哪些节点都是由 Swarm 决定的&#xff0c;作为用户我们有没有可能精细控制 Service 的运行位置呢&#xff1f; 答案是&…

oracle11g数据库升级

Oracle支持周期Oracle对自己产品也一样&#xff0c;对于自己的产品在不同的时期&#xff0c;支持的强度是不一样的。大体分来&#xff0c;支持的强度分为三个级别&#xff1a;Premier Support&#xff08;最高优先级的支持&#xff09;,Extended Support&#xff08;中等优先级…

DPU加持下的阿里云如何做加密计算?

作者&#xff1a;谭婧来源&#xff1a;亲爱的数据人在干&#xff0c;天在看&#xff0c;云在算。云计算越发展&#xff0c;云安全越重要。故事得从小小的芯片讲起。一家以色列的芯片公司&#xff0c;名叫Annapurna Labs&#xff0c;以喜马拉雅山脉的最高十峰之一——安娜普尔纳…

Fastcgi是什么

一、FastCGI是什么&#xff1f;FastCGI是语言无关的、可伸缩架构的CGI开放扩展&#xff0c;其主要 行为是将CGI解释器进程保持在内存中并因此获得较高的性能。众所周知&#xff0c;CGI解释器的反复加载是CGI性能低下的主要原因&#xff0c;如果CGI解释器保持在内存 中并接受Fas…

Android 中文 API (25) —— ZoomControls

正文 一、结构 public class ZoomControls extends LinearLayout java.lang.Object android.view.View android.view.ViewGroup android.widget.LinearLayout android.widget.ZoomControls 二、概述 ZoomControls显示一个简单的设置来控制缩放并回调已注册的事件。 三、 公共方…

你知道吗?你可以在异常中解退调用栈

[原文作者]&#xff1a;Bill Horst [原文链接]&#xff1a;Did you know? You can unwind the call stack from exceptions (Bill Horst) 解退一个异常堆栈的能力是Visual Basic.NET 2005的一个新引进的特性。当调式器触发了一个异常&#xff0c;你可以解退这个堆栈以便于使用…

UnicodeDecodeError: ‘ascii’ codec can’t decode...: ordinal not in range(128 问题解决

今天在使用yum源安装时出现UnicodeDecodeError: ‘ascii’ codec can’t decode byte 0xe5 in position 108: ordinal not in range(128原因就是python的str默认是ascii编码&#xff0c;和unicode编码冲突&#xff0c;就会报这个标题错误。那么该怎样解决呢&#xff1f;/usr/li…

女程序员也有35岁危机焦虑吗?

作者 | 郭雪 信通院云大所 责编 | 张红月出品 | CSDN&#xff08;ID&#xff1a;CSDNnews&#xff09;【CSDN 编者按】在程序员界&#xff0c;我们鲜少会去关注女性的职场处境及工作危机&#xff0c;本文从女性是否适合做开发谈起&#xff0c;到35岁女性职场现状&#xff…

android:关于主工程和library project

1、如何将一个android工程作为库工程&#xff08;library project&#xff09;library project是作为jar包被其它android工程使用的&#xff0c;首先它也是普通的android工程。然后&#xff1a;1&#xff09;在eclipse Package Explorer, 右键android工程选择Properties2&#…

JavaScript 读写文件

<script> /* object.OpenTextFile(filename[, iomode[, create[, format]]]) 参数 object 必选项。object 应为 FileSystemObject 的名称。 filename 必选项。指明要打开文件的字符串表达式。 iomode 可选项。可以是三个常数之一&#xff1a;ForReading 、 ForWriting 或…

css3箭头效果

css3 record1 尝试用css写了个箭头效果 思路就是通过span和span子元素i分别通过设置他们的伪元素构造两个箭头,但是i构造的箭头两条线height都是0,hover的时候渐近的动画效果就是i箭头的高度变化而来的,还有rotate相同的角度 css3知识&#xff1a; transitiontransform伪元素::…

计算机视觉,凉了?

机器学习是目前比较热门的技术&#xff0c;包含深度学习、强化学习、对抗学习、对偶学习、迁移学习、分布式学习、以及元学习等内容。得益于大数据、大模型、大计算的发展&#xff0c;深度学习在计算机视觉、语音处理、自然语言方面相继取得了突破&#xff0c;达到甚至超过了人…

用koa mongodb 做了个简单的博客系统

最近在研究koa和mongodb&#xff0c;简单做了个博客系统&#xff0c;目前还未开放评论和发帖功能&#xff0c;欢迎大家吐槽~ ?安装 git clone https://github.com/oliyg/alljscc.git npm install ?启动 cd server node app.js ?DEMO地址 alljs http://alljs.cc ?功能 用户登…

.net 实现 URL重写,伪静态

一&#xff0c;获得Mircosoft URLRewriter.dll&#xff1a;获得Mircosoft URLRewriter.dll可以到http://www.microsoft.com/china/msdn/library/webservices/asp.net/URLRewriting.mspx?mfrtrue 下载完毕后&#xff0c;导入工程&#xff0c;我这里没有对该工程做任何修改&…

AI 技术升级,这一新方法遏制在线语言骚扰

编译 | 禾木木图源 | IC photo出品 | AI科技大本营(ID:rgznai100)哥本哈根IT大学的 Nina Nrgaard 和她的组员正在参与一项非同寻常的工作&#xff0c;更好地方法来识别网络上的偏见。研究人员对数千条 Facebook、Reddit 和 Twitter 帖子进行了调查&#xff0c;并验证这些帖子是…

MFC中快速应用OpenCV(转)

转载链接&#xff1a;http://wiki.opencv.org.cn/index.php/MFC%E4%B8%AD%E5%BF%AB%E9%80%9F%E5%BA%94%E7%94%A8OpenCV 简介和缘起 本教程原始讨论主题&#xff0c;请见 【原创】MFC中快速应用OpenCV教程&#xff0c;制作此教程的目的&#xff0c;就是为了方便广大windows下面使…