百科问答小站 logo
百科问答小站 font logo



为什么Stack Overflow只需要11台IIS 服务器和4台负载均衡就可以支撑这么大的流量? 第1页

  

user avatar   warmwine 网友的相关建议: 
      

因为他们把买硬件的钱花在找程序员身上了


user avatar   zhang-hai-1024 网友的相关建议: 
      

2013年还是2014年,stackoverflow第一次公布了部分数据和架构,引发了我很大的兴趣。

当时stackoverflow日UV 300W+,PV 2Y+,正好和我司当时的数据完全一样。他们使用了8台物理服务器,而我们呢,使用了400+近500台物理服务器。

我们是lamp架构,和stackoverflow的windows体系架构有区别,但是性能差异不至于到大数量级。而且一般来说lamp架构的性能更好,而我们正相反。我们采购的是戴尔低端机型,换算到stackoverflow的性能,大概是2:1,那么硬件资源的对比是250:8,性能差异是反比,8:250。

我们的架构上应该没有大问题,db分布了,缓存分布了,solr做的search,图片资源多但走的是外部的cdn,该做的调优也做了,打了google的malloc,开了大页内存,nginx mysql redis的各项参数,也做了性能测试和ab test经过n轮调整,那为什么性能差异还是这么大?

一个原因应该是业务逻辑,我们带有社交元素,交叉的各种点赞,关注,收藏等关系和查询,有更多性能开销,但是这个我觉得不是主要原因。主要的性能差异在我看来,是应用层面开发的程序员造成的。

我们处理过许多许多典型的性能坑:

db查询没用到索引

联表查询太复杂性能奇差

循环里写查询一次连接变几十次

打开文件句柄 socket连接没有释放

300k文本直接存到redis里

curl请求没有加超时

不同的进程争抢同一个文件资源写日志

get_image_size()获取图片尺寸(会把图片文件整个读取到内存里,每个连接都会!)

写的扩展内存溢出

直接读取整个巨大文本文件(应该逐行方式读取)

在代码逻辑循环里直接发短信发邮件(应该扔到队列异步处理)

ip黑名单和关键词过滤直接用文本查找比对(应该做成hash表)

每次看面试题都是算法,调优,架构(我们自己也是),其实我想说90%的情况下我们需要的是能合格编写增删改查的业务需求的程序员就够了。

至于stackoverflow,我想他们也没有发明什么太多银子弹黑魔法,指数级的提高性能。他们做到的只是:找到了合格的程序员。

这就够了。




  

相关话题

  不可能在 Windows Server 上实现 C100K 吗? 
  Telegram聊天记录为什么可以自动永久备份在服务器,服务器容量不会炸吗? 
  有什么好用的廉价云服务器? 
  如果 Google 全球服务器崩溃一天,会产生什么重大影响? 
  云服务器1M带宽表示什么意思,购买服务器时如何选择服务器带宽? 
  国内的arm处理器厂商也不少,像全志、瑞芯微、展讯、海思。为何他们不做一款基于A72的服务器cpu? 
  有什么好用的云服务器吗? 
  个人用途,国内哪个厂商的云服务器比较好? 
  如何看待知乎、饿了么后端的招聘纷纷由 Python 渐渐转向 Java? 
  有那些免费的VPS? 

前一个讨论
为什么在教室喝袋装的牛奶就会被老师批评,而把牛奶挤到杯子里就可以肆无忌惮地喝?
下一个讨论
公务员在工作中都碰到过哪些有意思的事情?





© 2024-09-19 - tinynew.org. All Rights Reserved.
© 2024-09-19 - tinynew.org. 保留所有权利