您当前的位置:首页 > 计算机论文>计算机网络论文

池化负载均衡技术在证券网络系统中的研究与实

2015-07-09 11:33 来源:学术参考网 作者:未知
摘 要 针对证券网络系统日益增加的海量存储和访问量,如何保障信息系统可靠运行,并维持合理的访问速度,保证高可用性和高可靠性,是亟待解决的问题之一。本文提出一种新的高效率负载均衡技术,并结合某证券公司的测试实践,介绍基于池化技术的负载均衡实现。
关键词 Web服务器;负载均衡;池化

1 引言

随着市场经济的发展,越来越多的市民涉足证券股市,足不出户进行网上证券交易已成为炒股主要手段。但随之而来的证券公司网站访问量的激增,尤其是当大规模并发访问所带来业务量上升,访问量和数据流量增长,导致相应处理强度也迅速增大,从而引起核心网络设备过载,网络瓶颈和网络拥塞等问题。因此如何构建数据信息资源中心共享平台,以确保信息平台在运行过程中的稳定性和高可用性是需要得到解决的关键问题。
单纯追求高性能硬件来解决问题,无疑造成成本高额投入,且无法应对当前和今后快速增长的业务量的需求。因此,研究负载均衡技术在证券交易网站中的实际应用,成为解决上述问题的重要途径。

2 传统负载均衡技术特征分析

负载均衡是基于现有网络结构,以扩展原有网络设备和服务器的带宽,增加网络吞吐量,加强数据处理能力,提高网络的灵活性和可用性为目的,解决网络供应量和业务需求量之间矛盾的一种廉价、有效、透明的方法。传统负载均衡技术主要可归类为:
1)DNS负载均衡为多个不同IP地址配置同一域名,查询域名的客户机经DNS服务器解析后得到其中一个IP地址,使得不同客户可访问不同服务器,达到负载均衡目的。其优点是简单而有效,缺点是不能区分服务器之间差异,不能反映服务器当前运行状况。另外DNS刷新时间设置太小会造成太大额外网络流量。
2)反向代理负载均衡将客户端请求转发给内部多台服务器,反向代理服务器本身虽可达到很高效率,但针对每次代理,代理服务器就必须维护两个连接,随着并发连接数量不断增加,代理服务器自身负载变得非常庞大,最后反向代理服务器本身将成为网络瓶颈。
3)网络地址转换负载均衡可将一个外部IP地址映射为多个内部IP地址,对每次TCP连接请求动态使用其中一个内部地址,达到负载均衡目的。该技术使用硬件实现,因而缺乏灵活性,仅能处理几种最标准的负载均衡协议,此外存在带宽限制。
理想的负载均衡技术应具有以透明性为主的特征,实现动态自动优化调度和无网络瓶颈目的。根据这一目标和上述三类负载均衡技术的分析,可以看出实现高效率稳定负载均衡难点在于优化的负载均衡策略的应用和网络负载瓶颈的彻底消除。

3 池化负载均衡技术原理与特征

3.1 池化负载均衡原理

池化负载均衡技术是新提出的,效率非常高的均衡技术,池化系统中,某项服务由多台服务器共同提供,所有冗余服务器组成一个虚拟服务器池。每个服务器池都有一个唯一池名,用户通过池名访问服务器池,池化器为用户提供池名解析服务,并掌握所有服务器池的相关实时信息。池化结构示意图如图1所示。
多台冗余服务器组成一个服务器池,池名(如zqServer.pool)是唯一标识,嵌入式硬件池化器对服务器池进行统一管理、监控和操作,并负责对多台服务器资源的均衡、协调和调整,最大限度利用池中所有服务器资源,用户以池名访问服务器池,需要先在池化器处进行相应池名解析,后得到一个最佳服务器IP(最佳服务器由相应池负载均衡策略决定)。用户与服务器之间建立直接连接,之间没有任何中转和瓶颈。值得注意的是,池名解析是完全实时和动态的多IP解析,而传统的DNS则是静态解析。

3.2 池化负载均衡特征

1)无瓶颈限制,分布式的服务器池架构下,所有用户均能选择到一个当时状况下最佳的服务器,与之建立直接连接,突破了传统方案不能从根本上解决服务器处理能力的瓶颈。
2)更高的可用性,由多台冗余服务器组成的服务器池,完全能保障无停止服务,只有在所有服务器同时发生故障时,服务才中断,且系统具有高度容错能力,能应对所有软、硬件故障或网络故障。
3)更智能的可靠性保障,服务的故障处理和恢复过程实现完全透明化,自动化,用户无需对其过程进行干涉。
4)扩展性好,系统具有灵活的扩展性,对服务器的软、硬件类型配置没有任何限制,服务器可随时加入服务器池,以满足系统应用的需求。池中的服务器没有地理位置的限制,有各自IP地址。
本文以笔者为某证券交易网络公司进行的负载均衡部署测试为实例,介绍基于池化技术的负载均衡的实现。


图1池化结构示意图

4 池化负载均衡的架构与实现

4.1 池化架构下服务器网络连接的优化

某证券交易网络公司未实施负载均衡前,所有服务器同时运行网站Web应用和证券行情咨询应用,各自有单独公网IP地址,用户使用交易平台过程中,通过浏览器向Web服务器群发出服务请求,Web服务器群根据请求类型(不同区域站点)将业务分流到各不同服务器上,由各个服务器分别作出响应,一台服务器每秒最大承受大约15000个连接。
池化架构下,按照区域分布,由多台冗余服务器组成多个服务器池,所有服务器均以各自公共IP与互联网相连。3台X2池化器作用于不同区域中,同时为池化系统提供池化服务。各服务器池中的服务器将共同承担用户的访问量,由池化器统一管理监控,均衡使用。用户以池名(如:zq.stock .bj.pool)访问相应区域服务,通过池化器的池名解析,用户可得到当时状况下的最佳服务器IP,并与之建立连接,一旦该服务器发生故障,该连接也能透明地进行故障迁移至池中另一台最佳服务器上,并实现故障恢复与无缝连接。池化
后的网络拓扑结构如图2所示。


图2池化证券信息平台网络拓扑图

4.2 池化负载均衡策略
池化负载均衡技术提供11种灵活均衡策略算法,将数据流有效地转发到服务器池中的服务器中。用户只需记住池名,通信数据流被池化器采用用户设定的策略,灵活地均衡到池中所有服务器。这11种策略可归纳为两种类型:静态均衡策略和动态均衡策略,静态负载均衡策略包括:轮循法、随机法、加权轮循法、加权随机法和加权优先法。动态负载均衡策略包括:最少使用法、最少使用递减法、随机最少使用法、随机最少使用递减法、随机优先递减法和随机优先最少使用递减法。
针对该证券网络交易现状,分别采用不同策略来实现池化器分流均衡管理。该证券公司交易数据表明,93%的用户连接进行股票查询与信息更新,仅7%的用户连接进行股票交易。因此我们可以根据用户连接类型不同,在服务器端设置选择不同策略,进行查询或更新时,可优先采用最少使用法,而进行股票交易时,可选择轮循法。这样既缓解了“峰值堵塞”的压力,又降低了为调整系统性能而增加的投资。

4.3 服务器池化负载均衡设置

在池化架构下,我们对12台物理服务器进行了参数设置,建立了两个服务器池(行情咨询北京池和行情咨询广州池),每个池“池化”6台服务器。各节点池目前测试均采用轮循法,池化的配置文件pe_zqserver.conf部分内容
destport=808080
destip=127.0.0.1
poolname=zq.stock.bj.pool
proto=http
servicename=zq-server
PoolPolicyType=ROUNDROBIN
pooling_port=6100
pooled_servicename=ZqHttpServer
Failure_Recovery=U
heartbeat=second
response_timeout=300
timeout=900
loglevel=1
logfile=debug.log

4.4 证券交易采用池化负载均衡应用效果

交易系统实施负载均衡后,系统持续运行30分钟,我们对相关性能做了对比(见表1)。

表1池化负载前后性能对比
名称
服务器配置
可靠性
故障识别
恢复
是否存在瓶颈
系统每秒最大承受连接数
服务器
平均负载
结论
池化前
高配置
不可靠
不可识别
恢复
存在
30948
86%
最大承受连接数增加456%
服务器平均负载下降60%
高可靠,无瓶颈
池化后
普通PC机配置
高可靠
连接级容错,程序级容错,无缝连接
不存在
172236
34%

测试结果表明,证券交易信息系统应用池化负载均衡后性能明显提高,保证了服务的高可靠性和高可用性,取得以下效果:1)系统无瓶颈限制,用户均能连接到服务器。2)强行关闭池中某台服务器时,该服务器的用户连接迅速无缝切换至池中另一服务器中。3)针对系统每秒最大承受连接数取平均值,池化后系统承受量为池化前承受量5.57倍。

5 结束语

本文在分析传统负载均衡技术特征基础上,指出网络负载均衡难点在于优化的负载均衡策略的应用和网络负载瓶颈的彻底消除。本文从网络架构角度出发,提出一种新的、高效率的池化负载均衡技术,并结合某证券交易系统测试实践,介绍了基于池化技术的负载均衡的实现。测试结果表明在现有网络结构之上建立池化负载均衡,是一种廉价的、有效的扩展服务器带宽和增加吞吐量的方法,它不仅能增加网络数据处理能力,能提高网络应用的灵活性和扩展性,对构建类似的大规模网络应用具有较大的参考意义。

参考文献

[1] 张焰,爻尔软件池化技术白皮书. http://www.x2-soft.com
张焰,朱双双,Grace.华. 证券池化负载均衡解决方案. http://www.x2-soft.com
罗清,罗宇. 网络应用系统服务器集群技术研究. 计算机工程与科学 2004,26(7):37-40
章勤,鄢娟,金海等. 昊宇网络计算平台体系结构研究[J]. 计算机研究与发展,2003,40(12):1725-1730
薛军,李增智,王云岚[J]. 小型微型计算机系统,2003,(12)
相关文章
学术参考网 · 手机版
https://m.lw881.com/
首页