摘 要:网格技术" title="网格技术">网格技术是一种新兴技术,有着很多的优点和亟待解决的问题。本文详细阐述了网格的基本概念及其内涵,分析了目前广泛研究的体系结构。在讨论了关于网格的研究状况之后,指出网格研究必须面临的问题和发展前景。
关键词:网格 Globus 开放网格服务" title="网格服务">网格服务结构OGSA 沙漏结构

2003年10月13日,IBM与中国国家教育部在京宣布,双方将建立中国教育科研网格以促进全国高校在教育、科研及更广泛项目上的全面合作。该项目由北京大学、华南理工大学、清华大学等12所大学联合提出,是迄今为止由政府推出的最宏大的网格工程,也是迄今为止世界上规模最大的网格计算" title="网格计算">网格计算工程之一。其应用领域包括从生命科学、图像处理到远程教育等方面的众多领域。到网格建成时,它将在教育科研网上把全国100所211工程建设重点大学的资源广泛共享。届时中国教育科研网格将拥有超过6万亿浮点运算,并将在该工程完成时达到超过15万亿浮点运算的功能。美国《福布斯》杂志的科技版《Forbes ASAP》2001年就曾预言下一代互联网浪潮将是万维网(World Wide Web)升级为网格(Great Global Grid)。那么到底什么是网格呢?
1 网格的涵义
1.1 网格概念
网格就是一个集成的计算与资源环境,或者说是一个计算资源池。它能够把整个国际互联网集成为一台巨大的超级计算机,实现全球范围的计算资源、存储资源、数据资源、信息资源、知识资源、专家资源、设备资源甚至是人才等各种相关的广泛分布的各种资源的全面共享。网格的根本特征是资源共享" title="资源共享">资源共享,消除资源孤岛。当然,我们也可以构造地区性的网格、企事业内部网格、局域网网格甚至家庭网格和个人网格。可从以下三方面理解网格概念:
第一,从概念上, 网格的目标是资源共享和分布协同工作。网格的这种概念可以清晰地指导行业和企业中各个部门的资源进行行业或企业整体上的统一规划、部署、整合和共享,而不仅仅是行业或大企业中的各个部门自己规划、占有和使用资源。
第二,网格是一种技术。为了达到多种类型的分布资源共享和协作,网格计算技术必须解决多个层次的资源共享和合作技术,制定网格的标准,将Internet从通讯和信息交互的平台提升到资源共享的平台。但是目前并行计算、分布计算中间件等现行技术远远没有解决多组织之间资源的共享问题,以及广域范围的多系统之间联合处理和计算等网格计算所面临的关键问题。因此,网格计算技术研究具有独特性、紧迫性和挑战性。
第三,网格是基础设施, 是通过各种网络综合计算机、数据、设备和服务等资源的基础设施。这种设施的建立,将使用户如同今天我们按需使用电力一样,无需在用户端配套大量的全套计算机系统和复杂软件,就可以简便地得到网格提供的各种服务。这样,设备、软件投资和维护开销将大大减少。
1.2 网格组成
网格环境的构建层次如图1所示,主要由资源、中间件、工具软件和应用程序等几部分组成。其中资源由分布在Internet上的各类资源组成,包括各类主机、工作站甚至PC机,也可以是上述机型的机群系统、大型存储设备、数据库或其他设备。中间件是网格计算的核心,负责提供远程进程管理、资源分配、存储访问、登录和认证、安全性和服务质量(QoS)等。工具软件和应用程序提供用户二次开发利用的环境、工具、语言及接口等,以便更好地利用网格资源。

2.2 开放网格服务结构OGSA
开放式的网格服务体系OGSA是一个由节点和连线构成的框架。该框架的节点是网格服务而网格服务之间的连线是网格服务相互交流时所用的语言。网格服务是特殊的网络服务专供用来维持和管理网格体系。
OGSA网格也为五层结构,其结构同五层沙漏结构,自下而上为构造层、连接层、资源层、汇聚层及应用层。但OGSA结构较五层沙漏结构有着以下特点:
(1)以服务为中心的模型
如果说五层沙漏结构是以协议为中心的“协议结构”,其试图实现的是对资源的共享,则OGSA就是以服务为中心的“服务结构”,其实现的是对服务的共享。OGSA将一切看作服务,并定义了“网格服务”,该服务提供了一组接口,这些接口明确遵守特定的惯例,解决服务发现、动态服务创建、生命周期管理、通知等问题。因此,网格是可扩展的网格服务的集合。简单地说,网格服务=接口/行为+服务数据。
(2)统一的Web Service框架
Web Service描述了一种新出现的、重要的分布式计算范式,定义了一种技术,用于描述被访问的软件组件、访问组件的方法以及找到相关服务者的发现方法,解决了发现和激发永久服务的问题。OGSA是符合标准的Web service框架的。但是在网格中,大量的是临时服务,因此OGSA对Web service进行了扩展,提出的网格服务(Grid Service)的模仿,使得它可以支持临时服务实例,并且能够支柱创建和删除。
(3)突破科技应用领域
正如Web技术一开始是为科学协作而出现的,但是后来在商业领域却大量使用一样,OGSA将原来主要在科技领域应用的网格技术转移到工商业领域。OGSA面向服务的特点允许我们在不同的层次虚拟化资源,因此相同的机制与抽象可以应用于多个组织之间的分布式网格支持的协作,或者是跨越多个结点的主机环境。
2.3 应用实例:Globus系统
Globus是美国Argonne国家实验室研发的网络计算项目,有12所大学和研究机构参加该项目。Globus对资源管理、信息安全、信息服务、数据管理等网络计算关键理论进行了研究,开发了在各种平台上运行的网格计算工具软件?穴Toolkit?雪,帮助组建和规划大型网络试验平台,开发大型网络系统运行的应用软件。Toolkit是Globus最重要的成果,其第一版在1999年推出。2003年1月13日,符合OGSA 规范的Globus Toolkit 3.0(Alpha版)已经在第一届Globus world 会议上发布。这标志着OGSA已经从一种理念、一种体系结构,走到付诸实践的阶段了。Toolkit开放源码,任何人都可以从其网站上直接下载源代码。
Globus的协议分为五层:构造层、连接层、资源层、汇集层和应用层。每层都有自已的服务、API和SDK,上层协议调用下层协议的服务。网格内的全局应用都通过协议提供的服务调用操作系统。Globus的网格计算协议建立在互联网协议之上,以互联网协议中的通信、路由、名字解析等功能为基础。在Globus看来,现有的共享方案,比如互联网、B2B、ASP、SSP、Java、CORBA、DCE等,要么在共享配置的灵活性上、要么在共享资源种类上不能完全满足虚拟组织的需要。同时,Globus并不试图取代现有技术,而是希望在现有技术之上建立更高层次的共享。为了有效支持网格计算环境,Globus工具包针对Globus项目中提出的各种协议,提供了一系列的服务、软件库、编程接口(API)和使用例子。
迄今为止,Globus Toolkit已经成为事实上的网格标准。一些重要的公司,包括IBM、Microsoft、Compaq、Cray、SGI、Sun、Fujitsu、Hitachi、NEC 等公开宣布支持Globus Toolkit。目前大多数网格项目都是基于Globus Toolkit 所提供的协议及服务而建设的,例如美国的物理网格GriPhyN、欧洲的数据网格DataGrid、荷兰的集群计算机网格DAS-2、美国能源部的科学网格、DISCOM 网格、美国学术界的TeraGrid等等。
3 网格的研究历史与现状
从美国、日本及欧洲的发达国家到印度这样的发展中国家都启动了大型网格研究计划,并得到了产业界的大力支持。网格的发展到目前为止基本上可以划分为以下几个阶段:
一是萌芽阶段:在上个世纪90年代初期,主要是千兆网的测试床以及一些元计算的实施。
二是早期实验阶段:在上个世纪90年代中期到晚期,如I-WAY项目,还包括一些学术性的软件项目,例如Globus、Legion等。
三是飞速发展阶段:2002年以来,出现了大量的应用社团和项目,主要基础市话的开发和使用,工业界对网格计算的兴趣在增长,例如IBM、Platform、Microsoft、Sun、Compaq等重要的公司。同时也出现了一比较显著的技术基础,如Globus Toolkit,形成了具有相当规模和世界影响的全球网格论坛GGF(Global Grid Forum)组织。
目前,IBM是网格系统和服务方面的领先供应商,已经为很多科技团体、政府机构、商业化用户的网格系统提供了产品和服务,其中包括英国国家网格、荷兰国家网格、北卡州的生物网格等等。美国太阳微系统公司2002年发布了“网格引擎”企业版的测试版。HP公司也提出了Utility Computing计划和Utility Data Center产品。Oracle公司2002年11月推出面向网格的基于Globus的数据库应用工具。2008年北京奥运会的计算机信息处理系统将应用网格,IBM、Oracle、SUN、HP都已推出了一系列可应用网格的产品。日本文部科学省2003年5月决定投资700亿日元开发超大型网格计算机,它比现在世界上运算速度最快的计算机还快近10倍,将达每秒300万亿次。
我国“十五”863计划的高性能计算专项和软件专项等重大科研项目都与网格技术相关。目前,我国已开展了“国家高性能计算环境”和“先进计算基础设施北京上海试点工程”两个项目,对网格计算进行研究。中科院计算所正在进行的“织女星计划”(Vega计划)正是以元数据、构件框架、智能体、网格公共信息协议和网格计算协议为主要突破点对网格计算进行的研究。
4 网格存在问题及发展前景
4.1 存在问题
下—代互联网技术是完全崭新的,从光纤到路由器、交换机、上层服务器、操作系统、各种系统软件和应用软件都将产生革命性的变革。因而,在网格的发展道路上,Globus和它的各种替代版本将面临巨大障碍。为实现网格的广泛应用,还必须解决下列问题:
(1)标准是成功关键。就像TCP/IP协议是互联网的核心一样,构建网格计算也需要对标准协议和服务进行定义。迄今为止,网格计算还没有正式的标准,但在核心技术上, GlobusToolkit已成为网格计算事实上的标准。
(2)网格资源动态分配问题。如何在动态、异构虚拟组织间实现协同的资源共享以及协同是网格中非常重要的问题。已有的一些并行和分布计算系统的资源分配技术,并不能很好地适应计算网格资源分配问题的特点。
(3)数据通过因特网时形成的延迟问题。智能软件应确保按时传送数据,否则,网格处理问题的手段将被限定在“并行运算”。并行计算在不同的机器上完成,某一台计算机不需要等待另一台计算机的处理结果。
(4)目前互联网的数据传输能力不足问题。为此,发展网格要和建设下一代宽带互联网(如美国的“下一代Internet(NGI)”和“Internet2”等)结合起来。另一方面,采用无线移动通信和卫星通信,也是一种现实的途径。
(5)进一步解决人机结合问题,使网格更加个性化、智能化和科学化。
(6)通过法律的手段解决网上资源共享中的知识产权、相互信任和报酬等问题以及如何保障网格计算的安全性、认证和可靠性等。
4.2 发展前景
网格是一种面向问题和应用的技术,它的目标是实现网络虚拟环境上的高性能资源共享和协同工作,消除信息孤岛和资源孤岛。这种新的网络体系不仅仅可能带来信息资源的获取、分布、传输和有效利用的、革命性的、结构性的巨大变化,而且将根本改变我们的研究方式、教育方式、生活方式与生产活动的方式。一旦建立起了网格,就可以开展许多以前无法进行的工作和研究,可以带动工业界大量的相关产品的生产和消费,基于网格会激发无数的服务提供和服务消费。据《Forbes ASAP》预测,网格技术将在2005年达到高峰,并带来因特网的新生。如果网格技术能促使市场按预期的17%年增长率持续成长的话,那么在2020年将会形成一个年产值20万亿美元的大产业。
参考文献
1 李三立.Internet和后PC时代.我国机遇何在.中国计算机世界,2000-1-3
2 李 刚.网格概念及要解决的问题.中国网格?熏2003-10-18
3 徐志伟,李 伟.织女星网格的体系结构研究.中科院计算所
4 都志辉,陈 渝,刘 鹏.网格计算.中国网格论坛CGF,http://www.gridhome.com/grid/datateam/index.htm
5 http://www-900.ibm.com/cn/grid/index.shtml