说说大型高并发高负载网站的系统架构(中)

日期:2008-12-29作者:俊麟

大型网站   高负载   并发   架构   

    3、数据库集群和库表散列

  大型网站都有复杂的应用,这些应用必须使用数据库,那么在面对大量访问的时候,数据库的瓶颈很快就能显现出来,这时一台数据库将很快无法满足应用,于是我们需要使用数据库集群或者库表散列。

  在数据库集群方面,很多数据库都有自己的解决方案,Oracle、Sybase等都有很好的方案,常用的MySQL提供的Master/Slave也是类似的方案,您使用了什么样的DB,就参考相应的解决方案来实施即可。

  上面提到的数据库集群由于在架构、成本、扩张性方面都会受到所采用DB类型的限制,于是我们需要从应用程序的角度来考虑改善系统架构,库表散列是常用并且最有效的解决方案。我们在应用程序中安装业务和应用或者功能模块将数据库进行分离,不同的模块对应不同的数据库或者表,再按照一定的策略对某个页面或者功能进行更小的数据库散列,比如用户表,按照用户ID进行表散列,这样就能够低成本的提升系统的性能并且有很好的扩展性。sohu的论坛就是采用了这样的架构,将论坛的用户、设置、帖子等信息进行数据库分离,然后对帖子、用户按照板块和ID进行散列数据库和表,最终可以在配置文件中进行简单的配置便能让系统随时增加一台低成本的数据库进来补充系统性能。

    4、缓存

  缓存一词搞技术的都接触过,很多地方用到缓存。网站架构和网站开发中的缓存也是非常重要。这里先讲述最基本的两种缓存。高级和分布式的缓存在后面讲述。

  架构方面的缓存,对Apache比较熟悉的人都能知道Apache提供了自己的mod_proxy缓存模块,也可以使用外加的Squid进行缓存,这两种方式均可以有效的提高Apache的访问响应能力。

  网站程序开发方面的缓存,Linux上提供的Memcached是常用的缓存方案,不少web编程语言都提供memcache访问接口,php、perl、c和java都有,可以在web开发中使用,可以实时或者Cron的把数据、对象等内容进行缓存,策略非常灵活。一些大型社区使用了这样的架构。

  另外,在使用web语言开发的时候,各种语言基本都有自己的缓存模块和方法,PHP有Pear的Cache模块和eAccelerator加速和Cache模块,还要知名的Apc、XCache(国人开发的,支持!)php缓存模块,Java就更多了,.net不是很熟悉,相信也肯定有。

    5、镜像

  镜像是大型网站常采用的提高性能和数据安全性的方式,镜像的技术可以解决不同网络接入商和地域带来的用户访问速度差异,比如ChinaNet和EduNet之间的差异就促使了很多网站在教育网内搭建镜像站点,数据进行定时更新或者实时更新。在镜像的细节技术方面,这里不阐述太深,有很多专业的现成的解决架构和产品可选。也有廉价的通过软件实现的思路,比如Linux上的rsync等工具。

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

评论
查看更多评论

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

网络设计>更多

  • 增长的API:软件定义网络带来的强力副产品

    API正迅速成为现代网络的必备品。API的大量增长迫使供应商开始重新思考他们究竟想要如何配置并管理他们的设备。

  • 2017年技术变革与发展趋势预测

    2016年,企业向软件定义的网络迈进,充分利用新的IP(New IP)技术来改造其数据中心架构,按需为用户提供弹性基础设施服务。2017年又将呈现怎样的态势呢?

  • 站到站VPN配置与远程访问VPN有何不同?

    站到站VPN可以将多个网络整体连接在一起——例如,连接分公司网络和公司总部网络;远程访问VPN可以将各个主机连接到私有网络上——例如,移动工作者和远程工作者,他们需要通过互联网安全地访问公司网络……

  • 博科下一代路由解决方案:可视性和自动化是关键

    云、物联网及移动连接正以指数级在增长,在此情形下,企业一方面需确保其基础设施能够支撑起未来流量的大幅增长,另一方面,随着网络运营的复杂性持续增加,可视性和自动化对于企业实现业务敏捷则尤为重要。

相关推荐

技术手册>更多

  • 防火墙应用指导手册

    防火墙是为防止非法访问或保护专用网络而设计的一种系统。本文将从防火墙的简介、种类、选择的方法、配置、管理和维护等几个方面向您做详细的讲解。

  • IPv6协议疑难解答手册

    随着网络应用的发展,各种互联网协议正在发生微妙的变化。目前,IPv6网络正从试验性网络逐步走向实际应用,在设计IPv6时不仅仅扩充了IPv4的地址空间,而且对原IPv4协议各方面都进行了重新考虑,做了大量改进。

  • 云计算网络知识大全

    采用云技术的好处是它使公司能够纵向地动用他们的业务开支来实现与往常一样的创新和增长,这对于他们的客户来说是真正的附加价值。但你是否了解云计算网络知识呢?

  • 2009年最受欢迎技巧TOP6

    本技术手册为大家呈现了2009年TT网络网站中最受读者青睐的原创技术文章,其中包括了网络故障修复,企业网络管理,网络安全,备份管理,网络认证,交换机配置等多方面的内容。

TechTarget

最新资源
  • 安全
  • 存储
  • CIO
  • 服务器
  • 数据中心
  • 云计算