性能优化方案及思考

简介: 周末闲暇在家,朋友让我帮忙优化一个接口,这个接口之前每次加载都需要40s左右,经过优化将性能提了10倍左右;又加了缓存直接接口响应目前为300ms左右,于是将自己的优化思路整理总结一下

一、背景介绍


周末闲暇在家,朋友让我帮忙优化一个接口,这个接口之前每次加载都需要40s左右,经过优化将性能提了10倍左右;又加了缓存直接接口响应目前为300ms左右,于是将自己的优化思路整理总结一下


二、思路&方案


  • 1.分析需求,梳理业务流程,明确执行范围边界;绘制当前业务调用图
  • 2.将边界地方加入时间消耗,查看需要优化的地方
  • 3.绘制优化后的业务调用图
  • 4.进行代码的调整
  • 5.测试验证


三、过程


  • 1.如下是分析的业务调用图


7256267fb6954e5aa709a5de83d496c0.png


  • 2.如下是边界加入时间消耗的执行结果


9e9849a5b7944e62affa4a090f439cc5.png


  • 3.如下为优化后的业务终版图(通过线程池、多线程并发爬取数据)


01e7d55f05514ed989fb97b4ca9783dd.png


  • 4.进行代码调整(初步优化,只放了自己调整的核心内容;和终版图还不太一致)


060c7c95ea3f462f93584b73124f916d.png


  • 5.测试验证(爬取和加载还未隔离的耗时结果)


2da9f460a92e4d98a08920757a93c27a.png


  • 6.加入缓存之后基本就达到了300ms(当然针对于这个时间还可以优化,思路就是将可以提前处理的内容再进行预制处理)


四、总结


  • 1.做事情之前一定要先梳理清楚、画好图,对照图给自己或者别人讲解一下
  • 2.根据业务需求,合理"压榨"cpu资源(使用多线程,并且要交给线程池去管理避免由于线程过多导致cpu时间都消耗在任务切换上)
  • 3.使用redis的rightPushAll方法的时候,不会根据value值去重,需要先删除key键对应的值再增加
  • 4.缓存其实也是数据分层的一种实现方式


五、升华


通篇总结下来,其实就是运用了预制和分治的思想;另外,在数据存储层面可以通过不同业务提供不同数据层级的数据以保证访问效率,还可以保证数据一致性

相关文章
|
5天前
|
消息中间件 缓存 NoSQL
如何做性能优化?
如何做性能优化?
|
10月前
|
消息中间件 监控 固态存储
榨干服务器:一次惨无人道的性能优化
做过2B类系统的同学都知道,2B系统最恶心的操作就是什么都喜欢批量,这不,我最近就遇到了一个恶心的需求——50个用户同时每人导入1万条单据,每个单据七八十个字段,请给我优化。
|
11月前
|
监控 网络协议 安全
聊聊服务器性能优化~(建议收藏)
聊聊服务器性能优化~(建议收藏)
282 0
|
Web App开发 SQL 缓存
性能优化
性能优化 前言 以前写过一篇性能优化的笔记前端性能优化小结,那时候算是列了一些优化的点,最近又读了几篇性能优化相关的文章,加上自己动手做了一些实践,相比之前有了更深一点的理解
|
SQL 缓存 NoSQL
服务性能优化总结
服务性能优化总结
|
Android开发 芯片 UED
初识性能优化
性能优化一词相信大家都经常听到,今天我们就简单的来认识以下性能优化,了解做性能优化的必要性以及优化的分类。
初识性能优化
|
并行计算 程序员 Linux
C++服务性能优化的道与术-道篇:阿姆达尔定律
在之前的文章 《2004:当CPU温和地走入那个良夜》 中我讲到了2000年后摩尔定律的终结,CPU时钟频率定格,多核成为CPU发展的新方向,并行计算成为趋势。
193 0
C++服务性能优化的道与术-道篇:阿姆达尔定律
|
机器学习/深度学习 缓存 JavaScript
http://www.vxiaotou.com