流量大的网站 如何处理高并发流量问题？（含教程） 时间: 2020-03-25 17:58 分类: 猿码 热度: 10715°C 评论 ####《[Clash for OpenWRT（软路由）实现全屋设备科学上网【图文教程】](https://inurl.top/archives/ClashforOpenWRT/ "Clash for OpenWRT（软路由）实现全屋设备科学上网")》 很多平台一旦做大了，平台的流量就会陡增，同时并发访问的流量也会暴增，原本规划的硬件配置就无法满足当下的流量问题。 #### 那么如何处理好高并发的流量问题呢？ 小编将这些分为2个方面：**架构层面**和**网站本地项目层面**。 ## 一、架构层面 ### 1、硬件升级 假设一台服务器最多能支持每天10万独立IP，如果访问量增大的话，那么必须升级这台服务器的配置才能解决问题，否则怎么优化都不可能彻底解决性能问题。 这对于企业用户来说不是问题，买就是了。 为了避免采购浪费，建议先对服务器做一下压力测试，看看到底能支持多少访问量。 > 详细参考《[怎么做服务器压力测试？](https://blog.gaomeluo.com/archives/fwqcy/ "怎么做服务器压力测试？")》 **建议使用**： 1、[阿里云服务器ECS](https://iil.ink/e3ymx "阿里云服务器")，阿里云的口碑不用说了，最主要的是可以弹性扩展升级。 > **阿里云哪个节点服务器好？ping一下看看**：[https://ping.gaomeluo.com/aliyun/](https://ping.gaomeluo.com/aliyun/ "https://ping.gaomeluo.com/aliyun/") 2、[腾讯云服务器CVM](https://cloud.tencent.com/redirect.php?redirect=10000&cps_key=ff47a5bb6fc88a1b3721636857446f74 "腾讯云服务器CVM")，腾讯云的还可以，也支持弹性扩展升级。 > **腾讯云哪个节点服务器好？ping一下看看**：[https://ping.gaomeluo.com/tengxun/](https://ping.gaomeluo.com/tengxun/ "https://ping.gaomeluo.com/tengxun/") ### 2、负载均衡 它是对多台云服务器进行流量分发的负载均衡服务，让整个服务器群来处理网站的请求。负载均衡支持亿级连接和千万级并发，可轻松应对大流量访问，满足业务需求。 一般有钱的公司，可以购买专门负责负载均衡的硬件,效果肯定会很好。 但是对于大部分公司，会选择廉价有效的方法扩展整个系统的架构，来增加服务器的吞吐量和处理能力，以及承载能力。通常会选择相对成熟的成品架构，比如：[阿里云的负载均衡SLB](http://iil.ink/alislb "阿里云的负载均衡SLB")、[腾讯云的负载均衡CLB](https://cloud.tencent.com/redirect.php?redirect=10267&cps_key=ff47a5bb6fc88a1b3721636857446f74 "腾讯云的负载均衡CLB") > 详细可参考《[阿里云负载均衡SLB怎么用](https://blog.gaomeluo.com/archives/alfzjhsy/ "阿里云负载均衡SLB怎么用")》、《[腾讯云负载均衡CLB怎么用](https://blog.gaomeluo.com/archives/txfzjhsy/ "腾讯云负载均衡CLB怎么用")》 ### 3、服务器集群 服务器集群就是指将很多服务器集中起来一起进行同一种服务，在客户端看来就像是只有一个服务器。集群可以利用多个计算机进行并行计算从而获得很高的计算速度，也可以用多个计算机做备份，从而使得任何一个机器坏了整个系统还是能正常运行。 如果你的企业、平台够大，那么完全可以自己来搞集群。但是对于一遍企业来讲，这种服务器框架耗钱、耗时、耗力。好在现在云服务厂商都提供了集群服务器，比较有名的就是[阿里云集群](https://iil.ink/alijq1)、腾讯云集群。这也给企业省去不少人力、时间成本。 > 详细可参考《[如何搭建阿里云集群服务器](https://blog.gaomeluo.com/archives/djalijq/ "如何搭建阿里云集群服务器")》、《[如何搭建腾讯云集群服务器](https://blog.gaomeluo.com/archives/djtxjq/ "如何搭建腾讯云集群服务器")》 ### 4、分布式结构 分布式结构就是将一个完整的系统,按照业务功能,拆分成一个个独立的子系统,在分布式结构中,每个子系统就被称为“服务”.这些子系统能够独立运行在web容器中,它们之间通过RPC方式通. 好处就是系统之间的耦合度大大降低,可以独立开发、独立部署、独立测试,系统与系统之间的边界非常明确,排错也变得相当容易,开发效率大大提升。 #### 提示一下： 负载均衡： 是一种优化手段，目的是为了让集群中的每台机器的负载保持均衡，这样就不会出现集群中某台机器挂了的情况； 集群： 多台机器做相同的业务，对外如一台机器在做事情一样，集群中任意一台机器挂了没有影响，因为其他机器还在工作； 分布式： 一个业务在不同的物理点上做，比如web服务器、应用服务器、数据库服务器，这三个节点分开部署在不同的机器上，共同完成一个业务；分布式的特点是，每个节点都不能挂，否则这个业务就不能完成了；当然，我们可以给分布式中的每个节点都做集群处理，这样可以降低分布式系统的单节点故障； 所以，针对自己业务量大小，对上述的负载均衡、服务器集群、分布式结构，任意选用方案。 ## 二、网站本地项目层面 ### 1、页面静态化 前台实现完全的静态化最好，可以完全不用访问数据库。这样服务器的压力就减轻了不少。 这点我们可以借鉴一些比较成熟的框架方案，比如说dedecms、帝国cms、wordpress等，他们都可以对已产生的网页生成纯静态页面，每次更新内容，会再次生成纯静态页面。 另外还建议，页面中的图文进行动静分离处理，把页面用到的图片放到专用存储空间（比较常见的有[阿里云OSS](https://iil.ink/alioss "阿里云OSS")、[腾讯云COS](https://cloud.tencent.com/redirect.php?redirect=10042&cps_key=ff47a5bb6fc88a1b3721636857446f74 "腾讯云COS")），减少网站服务器的压力，另外也建议动静分离的那一部分也做一下CDN加速。让图片等相对较大的资源才CDN节点获取，提高网站打开速度。 > 详细可参考《[【图文】wordpress站如何用阿里云OSS做动静分离?](https://aliyun.gaomeluo.com/389.html "【图文】wordpress站如何用阿里云OSS做动静分离?")》 ### 2、缓存技术(Memcache、Redis等) 缓存技术就是另一个解决方案，就是将动态数据存储到缓存文件中，动态网页直接调用 这些文件，而不必再访问数据库。 **简单罗列一下redis和memcache的区别** 1. Redis和Memcache都是将数据存放在内存中，都是内存数据库。不过memcache还可用于缓存其他东西，例如图片、视频等等； 2. Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，hash等数据结构的存储； 3. 虚拟内存--Redis当物理内存用完时，可以将一些很久没用到的value 交换到磁盘； 4. 过期策略--memcache在set时就指定，例如set key1 0 0 8,即永不过期。Redis可以通过例如expire 设定，例如expire name 10； 5. 分布式--设定memcache集群，利用magent做一主多从;redis可以做一主多从。都可以一主一从； 6. 存储数据安全--memcache挂掉后，数据没了；redis可以定期保存到磁盘（持久化）； 7. 灾难恢复--memcache挂掉后，数据不可恢复; redis数据丢失后可以通过aof恢复； 8. Redis支持数据的备份，即master-slave模式的数据备份； 9. 应用场景不一样：Redis出来作为NoSQL数据库使用外，还能用做消息队列、数据堆栈和数据缓存等；Memcached适合于缓存SQL语句、数据集、用户临时性数据、延迟查询数据和session等。 ### 3、数据库优化 **数据库的优化总结为如下三点** 1、数据库分表技术 当一张的数据达到几百万时，你查询一次所花的时间会变多，如果有联合查询的话，很有可能会死在那儿了。分表的目的就在于此，减小数据库的负担，缩短查询时间。 > 可参考《[mysql数据库如何分表](https://blog.gaomeluo.com/archives/sjkfb/ "mysql数据库如何分表")》 2、数据库读写分离 数据库读写分离的基本原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT查询操作。 > 可参考《[如何实现数据库读写分离](https://blog.gaomeluo.com/archives/sjkdxfl/ "如何实现数据库读写分离")》 3、表建立相应的索引 使用索引可快速访问数据库表中的特定信息。 > 可参考《[mysql建表并创建索引](https://blog.gaomeluo.com/archives/sjkcjsy/ "mysql建表并创建索引")》 对于一些成熟的数据库产品，已经无需自己做分表，不需要自己做读写分离，只要主实例下有只读实例以及开通读写分离功能即可。 > 比如说 [阿里云的RDS](https://iil.ink/rds85zhe "阿里云的RDS") > 详情参考《[RDS是否需要自己做分表、读写分离？](http://iil.ink/alirdsfbdx "RDS是否需要自己做分表、读写分离？")》 ### 4、CDN 将源站内容分发至最接近用户的节点，使用户可就近取得所需内容，提高用户访问的响应速度和成功率。解决因分布、带宽、服务器性能带来的访问延迟问题，适用于站点加速、点播、直播等场景。 使用CDN的好处不仅仅是缓存网站静态资源，还可以起到隐藏源IP的作用，这样还可以应对一些小的流量攻击，避免源IP泄露被人攻击。 通常用的CDN就那么几家，这里以比较大的两家为例：[阿里云CDN](https://iil.ink/alicdn "阿里云CDN")和[腾讯云CDN](https://cloud.tencent.com/redirect.php?redirect=10502&cps_key=ff47a5bb6fc88a1b3721636857446f74 "腾讯云CDN")。 ### 5、禁止盗链 外部网站的图片或者文件盗链往往会带来大量的负载压力，因此应该严格限制外部对于自身的图片或者文件盗链。 这个操作相对就简单了很多，如果你使用了阿里云的CDN（对象存储OSS）和腾讯云的CDN（对象存储COS），这些CDN/对象存储（OSS、COS）的控制台里可以一键设置防盗链。 ### 6、控制大文件的上传下载 大文件的下载会占用很大的流量，并且对于非SCSI硬盘来说，大量文件下载会消耗 CPU，使得网站响应能力下降。因此，尽量不要提供超过2M的大文件下载，如果需要提供，建议将大文件放在专门的存储空间上（对象存储OSS/COS）。 这个方法详细参考： 《[如何限制windows系统服务器上传文件的大小](https://blog.gaomeluo.com/archives/winscfjdx/ "如何限制windows系统服务器上传文件的大小")》 《[如何限制Linux系统服务器上传文件的大小](https://blog.gaomeluo.com/archives/linuxscfjdx/ "如何限制Linux系统服务器上传文件的大小")》 #### 友情提示： 在产品的选用上，尽量都选用同一家的产品（要么都用阿里云家的，要么都用腾讯云家的），部分产品也尽量选同一区域。选同一家是为了，一来是方便管理，二来部分产品不适合两家接入使用。选同一区域的，是为了同一区域可以内网互联，还能节省一些费用。 ####扩展阅读： 《[【图文】云服务器如何安装宝塔面板？](https://blog.gaomeluo.com/archives/anzhuangbt/ "【图文】云服务器如何安装宝塔面板？")》 《[【教程】如何安装wordpress网站程序？](https://blog.gaomeluo.com/archives/anzhuangwordpress/ "【教程】如何安装wordpress网站程序？")》 《[如何将1个项目部署到多台服务器上？](https://blog.gaomeluo.com/archives/xmbsdfwq/ "如何将1个项目部署到多台服务器上？")》 《[如何在线生成自己的短网址，可自定义域名 可统计点击数](https://blog.gaomeluo.com/archives/shorturl/ "如何在线生成自己的短网址，可自定义域名 可统计点击数")》 标签: 服务器
评论已关闭