摘 要:云计算环境下文件系统监测技术是存储领域的一项重要技术,对系统进行预测分析也应用得越来越广泛。本文针对基于RPC的云计算文件系统平台,着重研究了云计算文件系统个性信息(服务端命令处理速率)的监测以及预测分析技术。
关键词:云计算系统;个性网络监测;预测分析
1.背景介绍
随着云计算系统的深入研究,基于对象的云计算存储系统的日益完善,带来以下两个问题:一是现有的云计算监测软件只能满足对硬件信息(节点网络输入/输出,CPU信息,内存信息)的监测,无法满足使用者对云计算文件系统的软件个性信息(如服务端命令处理速率)的监测需求;二是没有建立数学模型,描述云计算系统服务端软硬件信息的相关性,从而进行一定的预测与分析工作。
针对上述问题,通过对云计算系统监测技术的研究,以及对预测方法的学习和调研,本文提出了一种基于远程过程调用协议(Remote Procedure Call Protocol,RPC)的个性监测技术与预测分析技术相结合的监测系统。
2. 个性监测技术
2.1服务端个性监测的实现框架
基于RPC的云计算系统分为服务器端和监控端两部分。个性监测模块插入在元数据服务端代码中,然后通过监控端的设计将提取的信息发送到WEB端进行分组显示。系统的模块划分如图2.1所示。
图2.1 系统模块划分图
本系统主要是基于RPC的云计算系统仿真平台,实现对云计算系统服务端对来自不同客户端命令处理速率的统计和计算。
2.2服务端个性信息的获取与管理
个性监测技术的应用使得系统监测得到更微观的监测。为此,在系统中加入了个性监测功能模块,首先需要从服务端代码中设置监测点,将每个客户端请求的命令都记录在一个哈希表中,并对此表进行定期更新和删除,并能将表中数据定时刷到指定文件中。
个性监测功能模块上层与个性监测机制模块交互,负责给个性监测机制模块提供监测信息;下层与服务端软件模块交互,负责将服务端接受到的命令及时刻点存入到哈希表中,并及时刷到磁盘文件中。
图2.2 个性监测功能模块
2.3个性监测信息处理模块
个性监测信息处理模块的主要功能为将本地个性监测文件信息传送到监测管理服务器中,并按照指定格式显示在WEB页面上。如图2.3所示,个性监测信息处理模块主要包括个性监测的环境配置和个性监测脚本实现模块两个方面。
图2.3 个性监测信息处理模块设计图
3.预测分析技术
预测分析技术一直是国内外长期探讨研究的重点课题,它广泛应用于各个学科之中,如地质勘测、计算机性能、生物医学等重要领域。因此,对云计算系统的监测数据进行预测分析是一个重要的课题方向。
通过对云计算系统监测的研究可知,服务端节点有两类监测信息,一是可以通过云计算监测软件获取的硬件信息,二是可以通过上述个性监测方法获取的软件信息。利用现有的硬件信息和软件信息建立一个数学模型,这个模型可以预测在某种硬件环境下,系统可以达到的吞吐率,同时,通过对系统吞吐率的性能要求,可以人为设定一组硬件环境,来满足既定的性能要求。
3.1预测模型
通过对云计算系统的监测可知,每个节点的硬件信息都是时间序列型的数据,因此可以选择回归预测模型作为分析模型;又由于预测对象为元数据服务器的命令处理速率,此速率与多项因素相关,因此需要建立一个单因变量-多自变量的预测模型 何丽萍,刘立程.改进的基于Ganglia的网格监测系统.广东工业大学学报,2006,23(1):85~89