关系经济人类预测化学自然
投稿投诉
自然科学
知识物理
化学生物
地理解释
预测理解
本质社会
人类现象
行为研究
经济政治
心理结构
关系指导
人文遗产

9大高性能优化经验总结,强烈建议收藏

10月6日 不回头投稿
  性能优化基本属于Java高级岗的必备技能了,特备对于大流量的互联网应用至关重要mikechen
  今天主要给大家介绍下9种性能优化的方法:
  1。代码
  之所以把代码放到第一位,是因为这一点最容易引忽视,比如拿到一个性能优化的需求以后,言必称缓存、异步等。
  实际上,第一步就应该是分析相关的代码,找出相应的瓶颈,再来考虑具体的优化策略。
  有一些性能问题,完全是由于代码写的不合理,通过直接修改一下代码就能解决问题的,比如for循环次数过多、作了很多无谓的条件判断、相同逻辑重复多次等,这样的优化成本是最低的。2。数据库
  1。SQL优化
  这里以MySQL为例,最常见的方式是,由自带的慢查询日志或者开源的慢查询系统定位到具体的出问题的SQL,然后使用explain、profile等工具来逐步调优,最后经过测试达到效果后上线。
  这里举几个优化的例子:
  1。查询优化
  对查询进行优化,要尽量避免全表扫描,首先应考虑在where及orderby涉及的列上建立索引。
  2。避免null判断
  应尽量避免在where子句中对字段进行null值判断,否则将导致引擎放弃使用索引而进行全表扫描,如:selectidfromtwherenumisnull
  3。避免全表扫描
  应尽量避免在where子句中使用!或操作符,否则将引擎放弃使用索引而进行全表扫描。
  应尽量避免在where子句中使用or来连接条件,如果一个字段有索引,一个字段没有索引,将导致引擎放弃使用索引而进行全表扫描。
  in和notin也要慎用,否则会导致全表扫描,如:selectidfromtwherenumin(1,2,3)
  对于连续的数值,能用between就不要用in了:selectidfromtwherenumbetween1and3
  4。大数据量查询
  对于多张大数据量的表JOIN,要先分页再JOIN,否则逻辑读会很高。
  5。合理使用索引
  索引并不是越多越好,索引固然可以提高相应的select的效率,但同时也降低了insert及update的效率,因为insert或update时有可能会重建索引,所以怎样建索引需要慎重考虑,视具体情况而定。
  一个表的索引数最好不要超过6个,若太多则应考虑一些不常使用到的列上建的索引是否有必要。
  6。多使用数字型字段
  尽量使用数字型字段,若只含数值信息的字段尽量不要设计为字符型,这会降低查询和连接的性能,并会增加存储开销。
  这是因为引擎在处理查询和连接时会逐个比较字符串中每一个字符,而对于数字型而言只需要比较一次就够了。
  7。避免大数量
  尽量避免向客户端返回大数据量,若数据量过大,应该考虑相应需求是否合理。
  8。避免大事务
  尽量避免大事务操作,提高系统并发能力。2。连接池调优
  我们的应用为了实现数据库连接的高效获取、对数据库连接的限流等目的,通常会采用连接池类的方案,即每一个应用节点都管理了一个到各个数据库的连接池。
  随着业务访问量或者数据量的增长,原有的连接池参数可能不能很好地满足需求,这个时候就需要结合当前使用连接池的原理、具体的连接池监控数据和当前的业务量作一个综合的判断,通过反复的几次调试得到最终的调优参数。3。架构层面
  这一类调优包括读写分离、多从库负载均衡、水平和垂直分库分表等方面,一般需要的改动较大,但是频率没有SQL调优高,而且一般需要DBA来配合参与。
  3。分布式缓存
  缓存可以称的上是性能优化的利器,缓存主要用来存放那些读写比很高、很少变化的数据。
  什么情况适合用缓存?考虑以下两种场景:短时间内相同数据重复查询多次且数据更新不频繁,这个时候可以选择先从缓存查询,查询不到再从数据库加载并回设到缓存的方式。此种场景较适合用单机缓存。高并发查询热点数据,后端数据库不堪重负,可以用缓存来扛。
  使用缓存需要注意的问题:1。避免缓存失效
  把频繁修改的数据放入缓存,容易出现数据写入缓存后,应用还来不及读取缓存,数据就已经失效的情形,徒增系统负担。2。缓存热点数据
  缓存使用的内存资源非常宝贵,只能将最新访问的数据缓存起来,而把历史数据清理出缓存,即缓存资源应该留给20的热点数据。3。数据不一致性
  一般会对缓存设置失效时间,超过失效时间,就要从数据库重新加载。
  因此应用要忍受一定时间的数据不一致,另一种策略是数据更新时立即更新缓存,不过这也会带来更多的系统开销和事务一致性的问题。4。缓存可用性
  业务发展到一定阶段时,缓存会承担大部分数据访问的压力,数据库已经习惯了有缓存的日子,所以当缓存服务器崩溃时,数据库会因为完全不能承受如此大的压力而宕机,进而导致整个网站不可用,这种情况被称作缓存雪崩,发生这种故障,甚至不能简单地重启缓存服务器和数据库服务器来恢复网站访问。
  解决方式:
  1)缓存热备(当某台服务器宕机时,将缓存访问切换到热备服务器上;
  2)缓存服务器集群。5。缓存预热
  缓存中存放的是热点数据,热点数据是缓存系统用LRU对不断访问的数据筛选出来的,这个过程需要较长的时间。
  新启动的缓存系统没有任何数据,此时系统的性能和数据库负载都不太好。因此可以选择在启动缓存是就把热点数据预加载好。6。缓存穿透
  因为不恰当的业务或恶意攻击,持续高并发地访问某一个不存在的数据,如果缓存不保存该数据,就会有大量的请求压力落在数据库上。
  简单的解决方式是把请求的不存在的数据也放进缓存,其value是null。4。异步化
  针对某些客户端的请求,在服务端可能需要针对这些请求做一些附属的事情,这些事情其实用户并不关心或者用户不需要立即拿到这些事情的处理结果,这种情况就比较适合用异步的方式处理这些事情。
  异步化的作用:缩短接口响应时间,使用户的请求快速返回,用户体验更好。避免线程长时间处于运行状态,这样会引起服务线程池的可用线程长时间不够用,进而引起线程池任务队列长度增大,从而阻塞更多请求任务,使得更多请求得不到技术处理。线程长时间处于运行状态,可能还会引起系统Load、CPU使用率、机器整体性能下降等一系列问题,甚至引发雪崩。异步的思路可以在不增加机器数和CPU数的情况下,有效解决这个问题。
  比如:使用消息队列(MQ)中间件服务,MQ天生就是异步的。
  一些额外的任务,可能不需要我这个系统来处理,但是需要其他系统来处理,这个时候可以先把它封装成一个消息,扔到消息队列里面,通过消息中间件的可靠性保证把消息投递到关心它的系统,然后让这个系统来做相应的处理。
  再比如C端在完成一个提单动作以后,可能需要其它端做一系列的事情,但是这些事情的结果不会立刻对C端用户产生影响,那么就可以先把C端下单的请求响应先返回给用户,返回之前往MQ中发一个消息即可,而且这些事情理应不是C端的负责范围,所以这个时候用MQ的方式,来解决这个问题最合适。5。Web前段
  Web前端指网站业务逻辑之前的部分,包括:浏览器加载网站视图模型图片服务CDN服务等
  主要优化手段有优化浏览器访问,使用反向代理,CDN等。1。浏览器访问优化(1)减少http请求
  HTTP协议是无状态的应用层协议,意味着每次HTTP请求都需要简历通信链路,进行数据传输,而在服务器端,每个HTTP都需要启动独立的线程去处理,这些通信和服务的开销都很昂贵,减少HTTP请求的数目可有效提高访问性能。
  减少HTTP请求的主要手段是:合并CSS,以及压缩CSS大小合并JavaScript,以及压缩JS大小合并图片
  将浏览器一次访问需要的JavaScript,CSS合并成一个文件,这样浏览器就只需要一次请求。多张图片合并成一张,如果每张图片都有不同的超链接,可通过CSS偏移响应鼠标点击操作,构造不同的URL。(2)使用浏览器缓存
  对一个网站而言,CSS,JavaScript,Logo,图标等这些静态资源文件更新的频率都比较低,而这些文件又几乎是每次HTTP请求都需要的,如果将这些文件缓存在浏览器中,可以极好地改善性能。通过设置HTTP头中CacheControl和Expires属性,可设定浏览器缓存,缓存时间可以是数天甚至是几个月。有时候,静态资源文件变化需要及时应用到客户端浏览器,这种情况可以通过改变文件名实现,比如一般会在JavaScript后面加上一个版本号,使浏览器刷新修改的文件。(3)启用压缩
  在服务器端对文件进行压缩,在浏览器端对文件解压缩,可有效较少通信传输的数据量。文本文件的压缩效率科大80以上。(4)CSS放在页面最上面,JavaScript放在页面最下面
  浏览器会在下载完全部CSS之后对整个页面进行渲染,因此最好的做法是将CSS放在页面最上面,让浏览器尽快下载CSS。JS则想法,浏览器在加载JS后立即执行,有可能会阻塞整个页面,造成页面显示缓慢,因此JS最好放在页面最下面。(5)减少Cookie传输
  一方面,Cookie包含在每次请求和响应中,太大的Cookie会严重影响数据传输,因此哪些数据需要写入Cookie需要慎重考虑,尽量减少Cookie中传输的数据量。另一方面,对于某些静态资源的访问,如CSS,JS等,发送Cookie没有意义,可以考虑静态资源使用独立域名访问,避免请求静态资源时发送Cookie,减少Cookie传输的次数。2。CDN加速
  CDN(ContentDistributeNetwork,内存分发网络)的本质上仍然是一个缓存,而且将数据缓存在离用户最近的地方,是用户以最快速度获取数据,即所谓网络访问第一跳。
  CDN一般缓存的是静态资源,如图片,文件,CSS,Script脚本,静态网页等,但是这些文件访问频率很高,将其缓存在CDN可极大改善网页的打开速度。3。反向代理
  传统代理服务器位于浏览器一侧,代理浏览器将HTTP请求发送到互联网上,而反向代理服务器位于网站机房一侧,代理网站Web服务器接收HTTP请求。
  和传统代理服务器可以保护浏览器安全一样,反向代理服务器也具有保护网站安全的作用,来自互联网的访问请求必须经过代理服务器,相当于在Web服务器和可能的网络攻击之间建立了一个屏障。
  除了安全功能,代理服务器也可以通过配置缓存功能加速Web请求,当用户第一次访问静态内容的时候,静态内容就被缓存在反向代理服务器上,这样当其他用户访问该静态内容的时候,就可以直接从反向代理服务器返回,加速Web请求响应速度,减轻服务器负载要。6。服务化
  做服务化最基础的是按业务做服务拆分,避免跨业务间的互相影响,数据和服务同时拆分。同一个业务内部我们还按计算密集型IO密集型的服务拆分、C端B端服务拆分、核心非核心服务拆分、高频服务单独部署等原则做拆分。7。硬件升级
  硬件问题对性能的影响不容忽视。
  举一个例子:一个DB集群经常有慢SQL报警,业务排查下来发现SQL都很简单,该做的索引优化也都做了,后来DBA同学帮忙定位到问题是硬件过旧导致,将机械硬盘升级成固态硬盘之后报警立马消失了,效果立竿见影!8。搜索引擎
  复杂查询以及一些聚合计算不适合在数据库中做,可以利用搜索引擎来实现,另外搜索引擎还可以帮我们很好的解决跨库、跨数据源检索的场景。9。产品逻辑优化
  业务逻辑优化经常会容易被忽略,但效果却往往比数据库性能优化、JVM调优之类的来的更明显。
  举一个例子,12306春运抢火车票的场景,由于访问的人多,用户点击查票之后系统会非常卡,进度条非常慢,作为用户,我们会习惯性的再去点查票,可能会连续点个好几次。
  假设平均一个用户点5次,则后端系统负载就增加了5倍!而其中80的请求是重复请求。
  这个时候我们可以通过产品逻辑的方式来优化,比如,在用户点击查询之后将按钮置灰,或者通过JS控制xx秒只能只能提交一次请求等,有效的拦截了80的无效流量。
  以上!
  更多架构技术干货,私信【架构】即可查看我原创的300期BAT架构技术系列文章与1000大厂面试题答案合集。
投诉 评论 转载

别自持出身高贵!三国游戏宁要顶尖紫卡武将,也不养摸鱼橙卡玩过《荣耀新三国》的玩家,应该知道橙卡是这款游戏中最顶级的武将卡片,随后才是紫卡。虽然橙卡和紫卡只是相差一个等级,但是橙卡绝对是玩家心中的白月光,这大多是被头部超强势橙卡武将所……随时随地举办世界大赛!实况足球手游和橘子海说毫无压力一年一度的夏天,它又来了。虽然从阴雨连绵的春天,转入阳光明媚的夏天,是件很令人开心的事;但是,随之而来的高温,也属实是把很多人折磨的不轻。尤其今年还是个大热年;连着数天,甚至数……水煮蛋会引起骨质疏松?能不能天天吃鸡蛋?医生说了大实话很多老年人都会有骨质疏松的问题,这种疾病让他们感到惧怕。因为骨质疏松症最严重的后果就是骨质疏松性骨折,不仅会让人失去独立生活的能力,还会长期处于关节肿痛的痛苦之中,让人备受折磨……健康笔记48梦里水乡千百回来过就不曾离开如果说,江南是水做的,那么,乌镇就是一副飘逸的绢丝水墨画:小桥、流水、人家。成全了它所有的诗情画意。多少次,梦里烟雨江南,寻常小巷里,一把红的油纸伞,一抹靓丽的身影,在水乡飘然……3消息!胡明轩抱腿掀人,郭艾伦上篮被帽,徐长锁无计可施人逢喜事精神爽,走上背运也没治!广东队虽然逆转了福建,但场面异常艰难,最令人揪心的是,广东队似乎还没有走出恶犯的怪圈,胡明轩的一次明显对人不对球的犯规直接被裁判忽视,郭艾伦在比……9大高性能优化经验总结,强烈建议收藏性能优化基本属于Java高级岗的必备技能了,特备对于大流量的互联网应用至关重要mikechen今天主要给大家介绍下9种性能优化的方法:1。代码之所以把代码放到……养老保险个人账户能取钱吗?深圳社保部门称两种情况可退费南都讯记者张小玲最近,有市民问,近期手头有点紧,我的养老保险个人账户可以随时取出来用吗?深圳市社保基金管理局近日解释称,不可以。不过,以下两种情况可以办理退费。深圳市社保……26岁的前皇马王储会来巴萨吗?走出伤病的他,有一点很迷人尽管只是处于流言阶段,不过当阿森西奥可能加盟巴萨的消息一传出,立刻就掀起轩然大波。虽然在这个时点上早早被爆料,以巴萨和皇马的敌对关系,这笔签约最终落笔的可能性不见得会很大……智能汽车风潮里,窥见中国城市的野心作者汽车之心中关村智能网联研究汇农业经济、工业革命、数字经济曾是城市崛起的垫脚石。智能化则是迎面而来的第四次产业浪潮,其中智能汽车产业链为中国城市崛起提供了新的可能……你现在的微信顶置文案是什么?1、山行野宿,孤身万里。2、与人间寥寥月色长眠一场。3、让花成花,让树成树。4、听一万种声音,但只成为自己。5、与理想平等交易,同喧嚣保持距离。6……哪几种食物最有营养?一共有九种养生篇1,红薯。红薯含有较多类胡萝卜素,可以完善人体整体抗氧化能力。类胡萝卜素还可以转化成维生素A,是一种安全的补充维生素A的方式。红薯里钾含量也很多,钾的作用主要是维持体液平衡和神……宝宝几个月学会翻身?把握关键信号,父母4招引导,助娃一臂之力导语自从孩子呱呱落地,父母对孩子的养育就正式开始了,照顾好孩子,可不是只有吃和睡。然而,很多父母比较注重宝宝的喂养,对于宝宝大动作的发育却疏忽了。个别父母对孩……
工作积极性下降的原因燃气热水器如何防止煤气中毒鸿蒙OS3获央视点赞,告别系统卡顿,华为的努力没白费大学生诚信个人总结精选多篇让宝宝主动按时睡觉的小方法明明还很年轻就长皱纹了是怎么回事?什么样的产品适合建设私域流量池当前煤矿工人思想政治教育中的五种意识散文这个秋季,风景与人,各有各的美原来他们只是人生中的过客沃土发酸造句用发酸造句大全
宏光MINIEV,120公里续航,1米85的大块头一样能装亚当密茨凯维奇诗歌《青春颂》原文及赏析反身动词海洋灾害有哪些特点一年级数学复习课教学反思天问一号登陆火星,给中国人长脸精品端午节包粽子的作文600字4篇因筹钱给弟弟治病来中国踢球,谁曾想后来成了洛国富一年称情人三年称知己四年称亲人五年称回忆二十年称什么期待幸福的QQ说说心情短语英媒炒作英国在全球超级计算机竞赛中已落后于俄罗斯和中国阅兵式2019观后感两篇

友情链接:中准网聚热点快百科快传网快生活快软网快好知文好找菏泽德阳山西湖州宝鸡上海茂名内江三亚信阳长春北海西安安徽黄石烟台沧州湛江肇庆鹤壁六安韶关成都钦州