| 浅析网格与校园网格体系结构 |
倪 鹏 (长春工业大学,吉林 长春130012) |
摘 要:网格是将互联网连接的所有资源整合成一台超级虚拟计算机。校园网格是网格 技术在校园范围内的实现。将校园网内的各种计算资源以有效的方式动态的组织起来,形成 一个可相互利用、相互合作、对用户相对透明的高性能计算环境。本文首先研究了网格体系 结构,然后基于对网格资源管理系统的研究,提出了校园网格的系统架构。 关键词:元计算;网格;异构性;Portal 中图分类号:G434 文献标识码:A 文章编号:1008-7508( 2009)06-0114-03 |
一、网格 网格这个词来源于电力网格。一方面,计算机网纵横交错,很像电力网;另一方面,电 力网格用高压线路把分散在各地的发电站连接在一起,向用户提供源源不断的电力。用户只 需插上插头就能用电,不需要关心电能是从哪个电站送来的。随着网络技术的成熟、国际互 联网的建立直到现在万维网的广泛使用等重大技术,给人们的生活带来的巨大变革,但是随 着国际互联网和万维网技术的成熟和推广应用,人们产生了把国际互联网集成起来使用的想 法,人们想利用已有的国际互联网设施建立一种新的基础设施,把世界上的各种计算资源集 成在一起,为世界范围的用户提供使用这些资源的良好接口,这种新的基础设施就是网格。 建设网格的最终目的是希望它能够把分布在因特网上数以亿计的计算机形成一个虚拟的超级 计算机,满足不断增长的计算、存储需求,并使信息世界成为一个有机的整体。 1、网格计算的概念 网格计算起源于元计算(Metacomputing),它最早是由Smarr和Catlett提出的。①网 格计算的概念是在I-WAY项目中提出来的。虽然对网格计算的研究已经有了很大的进步,但 是到目前为止,关于什么是网格计算,还没有一个普遍接受的定义,关于网格概念的分歧和 争议依然存在。那么究竟什么是所谓的网格计算?1998年,Ian Foster在《网格:一种未来 计算基础设施蓝图》一书中写道:一个计算网格是一个硬件和软件基础设施,此基础设施提 供对高端计算能力可靠的、一致的、普遍的和不昂贵的接入。因此,我们可以这样认为:网 格就是一个集成的计算与资源环境。它能够把整个互联网集成为一台巨大的超级计算机,实 现全球范围的计算资源、存储资源、数据资源、信息资源、知识资源、专家资源、设备资源 甚至是人才资源等各种相关的广泛的各种资源的全面共享。② 2、 网格计算的发展过程和趋势 网格的发展目标就是在将来使用网格时,就像现在使用电力网一样,用户只要把设备的 插头插入网格的“插座”就可以使用网格中的资源。到目前为止,它已经经历了三个阶段: 第一阶段是萌芽阶段:20世纪90年代早期,主要是千兆网的实验床以及一些元计算实验;第 二阶段是实验期:20世纪90年代中晚期,比如I-WAY项目、学术性研究项目、Globus,Legio n以及一些应用;第三阶段是发展期:本世纪以来,出现了大量的网格计算项目,出现了影 响很大的组织-全球网格论坛GGF(Global Grid Forum),同时网格计算也不再仅仅局限于 科学研究,工业界和学术界联盟正致力于使网格计算在更广泛的领域内得到推广和应用。 David等人把网格按照技术发展的顺序分为:1995年以前的网格-把超级计算机节点连 接起来以提供高性能的计算服务,代表项目有FAFNER和I-WAY;1995年至2000年的网格-以 开发支持大规模数据和计算的中间件为目标,以构建面向协议和模块的网格体系结构为中心 ,代表项目Globus,Legion;2000年至今的网格-以建立面向服务的网格结构为特征,代表 体系为开放网格服务体系结构OGSA。 目前,网格已经成为全球研究的热点,发展网格被认为是下一代Internet的核心任务 之一。从网格技术发展的总体来看,其趋势如下: 标准化趋势;技术融合趋势;大型化趋 势。 二、校园网格系统架构 校园网格是网格技术在校园范围内的实现。分布在校园内的计算资源主要包括各个组织 和团体贡献出来的各种高性能大型计算机、高性能集群系统以及校内空闲的PC计算资源,校 园网格系统目的是将校园网内的各种计算资源以有效的方式动态的组织起来,隐藏其内部异 构性和动态性,向网格用户提供高效的计算环境和统一的透明网格服务。因此,系统重点解 决三个问题: 第一,安全、有效的资源管理:由于分布在校园内的计算资源大都是一些异构的系统, 因此,通过校园网将这些资源进行物理连接之后,对这些资源进行安全有效的管理是首要问 题。 第二,合理、高效的任务调度: 对于用户提交的应用作业,采用合理高效的动态自适应 调度模式进行调度。 第三,简便,直观的访问方式:针对不同网格用户群的特点,给他们提供他们熟悉的容 易理解和方便操作的界面,使得用户在不需要知道网格的具体实现与细节的情况下也能通过 友好的界面方便的访问网格服务和资源。 整个体系结构由网格Portal层、网格中间件和网格结点三部分组成。③ 1、Portal服务层 网格Portal层作为系统资源代理完成作业的全局调度,并为用户通过Web浏览器访问网 格系统提供一个统一的安全有效的入口。由于系统中的作业运行流程涉及到用户账户合法性 检查、信息查询以及文件传输等,因此系统通过用户管理、信息管理、作业管理和文件管理 四个基本模块来完成资源代理的功能。网格Portal层将为网格用户提供以下服务:用户账号 注册,网格资源信息查询,作业在线提交,作业的全局调度,作业执行过程的实时监控,以 及作业结果的在线收集以及文件的安全传输等。 网格Portal层中的各个模块的主要功能如下: 第一,用户管理模块。 提供注册、修改功能;提供用户验证功能;采用分级用户的管理机制。 第二,信息管理模块。 用户的登陆信息;计算资源节点的基本信息;提交用户资源信息。 第三,作业管理模块。 提供作业提交功能;提供和文件管理功能,提供作业文件的上传及结果下载功能;实时监 控作业运行状态,允许用户撤销作业;对作业结果进行处理。 2、网格中间件 网格中间件提供网格系统最基本的服务,并向网格Portal层提供相应的调用接口,在本 文设计的校园网格框架中采用Globus作为网格中间件。Globus提供的网格安全框架GSI,是 对单一签名和代理机制的一种扩展,它提供了对本地安全接口的机制和服务,针对于网格中 两点间通信的复杂性,可灵活地绑定不同的安全级别;在Globus中,MDS提供了网格信息服 务器的功能。MDS分为两类:网格资源信息服务GRIS和网格索引信息服务GIIS,GRIS提供网 格结点具体资源的信息,GIIS记录有GRIS的地址,并能提供GRIS信息缓冲。用户通过GIIS访 问到全局的资源信息,也能通过GRIS直接获取该结点的具体资源信息。Globus所提供的文件 传输机制GridFTP支持网格环境中安全、高效的数据移动。这个协议在标准FTP协议上进行扩 展,支持Globus的GSI安全框架,并加入数据传输的第三方控制、并行文件传输、部分文件 传输等功能以支持可靠数据传输。 3、网格节点 网格结点可以是分布在校园内的各类资源,包括运行在UNIX、NT等各种操作系统下的各 类集群、工作站甚至PC机,也可以是大型存储设备、数据库或其它设备。校园网格系统主要 整合了不同环境下的高性能计算资源以及PC机这两类计算资源。校园内的PC机是一笔非常丰 富的计算资源,这些资源在大部分的时间里都处于空闲或者半空闲状态,即便是在工作时间 ,这些资源的利用率也远远不到100%。以上网格节点通过原有的网络连接在一起,组成了一 个校园网格系统。
注释: ① Joshy Joseph .Grid Computing网格计算[M].清华大学出版社,2005. ② 福斯特.网格计算(英文版 第2版)[M].机械工业出版社,2005. ③ 动态负载均衡算法在校园网格中的应用.微计算机信息[J].2006,(24). 参考文献: [1] 孙瑜,李志平.网格资源管理体系结构模型研究[J].华中理工大学学报,2005,(6 ). [2] 徐志伟,冯百明,李伟.网格计算技术[M].北京:电子工业出版社,2004. [3] Ian Foster.What is the Grid: A Three Point Checklist[J]. Grid Today,2000 ,(2). [4] 高全泉.网格体系结构详解[M].计算机科学,2003,6.
收稿日期:2009-07-28 作者简介: 倪鹏(1980—),吉林长春人,长春工业大学软件职业技术学院教师,硕士,研 究方向为计算机软件及计算机网络等。
|
| |