学科分类
/ 1
15 个结果
  • 简介:分布式计算研究主要集中在分布式操作系统和分布式计算环境研究两个方面。但随着Internet技术的飞速发展,分布式计算的研究热点也从以分布式操作系统为中心的传统模式转换到以网络计算平台为中心的实用分布式技术,并取得了较大的成功。关键词分布式计算;中间件技术;P2P技术中图分类号TP393文献标识码A文章编号1007-9599(2010)04-0000-02Net&DistributedComputingCuiLisheng(ComputerApplication&TechnologyCollege,InformationEngineeringCollege,Chengdu610059,China)AbstractDistributedcomputingresearchfocusesondistributedoperatingsystemsanddistributedcomputingenvironmentstwoaspects.ButwiththerapiddevelopmentofInternettechnology,theresearchfocusondistributedcomputingtodistributedoperatingsystemfromthetraditionalmodelcenterswitchtoanetwork-centricutilitycomputingplatformdistributedtechnology,andachievedconsiderablesuccess.KeywordsDistributedcomputing,Middlewaretechnology,P2Ptechnology一、分布式计算技术的工作原理要想实现分布式计算,首先就要满足三方面的条件(一)计算机之间需要能彼此通信(二)需要有实施的规则(例如,决定谁第一个通过,第二个做什么,如果某事件失败会发生什么情况等)(三)计算机之间需要能够彼此寻找只有满足了这三点,分布式计算才有可能实现。二、分布式计算技术(一)中间件技术中间件是基础软件,是分布式系统中介于应用层和网络层的一个功能层次,它能够屏蔽操作系统(或网络协议)的差异,实现分布式异构系统之间的互操作。分布式应用软件借助这种软件在不同的技术之间共享资源。中间件位于客户机服务器的操作系统之上,管理计算资源和网络通信。它扩展了C/S结构,形成了一个包括客户端、中间件和服务器的多层结构。基于中间件的分布式计算技术以中间件为桥梁,通过把数据转移到计算之处的计算方式,把网络系统的所有组件集成为一个连贯的可操作的异构系统,从而达到网络“透明”的目的。(二)网格技术网格计算是通过Internet把分散在各处的硬件、软件、信息资源连结成为一个巨大的整体,从而使得人们能够利用地理上分散于各处的资源,完成各种大规模的、复杂的计算和数据处理的任务。网格计算无疑是分布式计算技术通向计算时代的一个非常重要的里程碑.网格的体系结构是有效进行网格计算的重要基础,到目前为止比较重要的网格体系结构有两个1.是以Globus项目为代表的五层沙漏结构,它是一个以协议为中心的框架。2.是与Web服务相融合的开放网格服务结构OGSA(OpenGridServicesArchitecture),它与Web服务一样都是以服务为中心。但是,所有的网格系统都有这样一个基本的、公共的体系结构(1)网格资源层它是构成网格系统的硬件基础。包括Internet各种计算资源,这些计算资源通过网络设备连接起来。(2)网格中间件层它是一系列工具和协议软件。其功能是屏蔽资源层中计算资源的分布、异构特性,向网格应用层提供透明、一致的使用接口。(3)网格应用层它是用户需求的具体体现。在网格操作系统的支持下,提供系统能接受的语言、Web服务接口、二次开发环境和工具,并可配置支持工程应用、数据库访问的软件等。(三)移动Agent技术目前还没有一个关于移动Agent的确切定义,我们一般认为移动Agent是一类能在自己控制之下从一台计算机移动到另一台计算机的自治程序,它们能为分布式应用提供方便的、高效的执行框架。移动Agent是一类特殊的软件Agent,可以看成是软件Agent技术与分布式计算技术相结合的产物,它除了具有软件Agent的基本特性——自治性、响应性、主动性和推理性外,还具有移动性。即它可以在网络上从一台主机自主地移动到另一台主机,代表用户完成指定的任务。由于移动Agent可以在异构的软、硬件网络环境中自由移动,因此这种新的计算模式能有效地降低分布式计算中的网络负载、提高通信效率、动态适应变化的网络环境,并具有很好的安全性和容错能力。但目前,所有的移动Agent系统还都很不成熟,存在着各种各样的缺陷。所以,我们可以把目前的众多Agent系统看成是实验室系统,它们离真正实用的产品还有很大的距离。(四)P2P技术P2P系统由若干互联协作的计算机构成,是Internet上实施分布式计算的新模式。它把C/S与B/S系统中的角色一体化,引导网络计算模式从集中式向分布式偏移,也就是说网络应用的核心从中央服务器向网络边缘的终端设备扩散,通过服务器与服务器、服务器与PC机、PC机与PC机、PC机与WAP手机等两者之间的直接交换而达成计算机资源与信息共享.此外一个P2P系统至少应具有如下特征之一1.系统依存于边缘化(非中央式服务器)设备的主动协作,每个成员直接从其他成员而不是从服务器的参与中受益。2.系统中成员同时扮演服务器与客户端的角色。3.系统应用的用户能够意识到彼此的存在,构成一个虚拟或实际的群体。P2P技术已发展为一种重要的分布式计算技术,典型代表就是Napster。(五)WebService技术WebService技术是对Web进行扩展,为相互间连接的软件提供服务。WebService技术是一种分布式应用程序,它可以通过编程并使用标准的Internet协议,像HTTP和XML,将功能展示在互联网和网内部。WebService结合了以组件为基础的开发模式以及Web的出色性能,一方面,WebService和组件一样,具有黑匣子的功能,可以在不关心功能如何实现的情况下重用;同时,与传统的组件技术不同,WebService可以把不同平台开发的不同类型的功能块集成在一起,提供相互之间的互操作。我们也可以认为WebService技术是以Internet为载体,通过将紧密连接的、高效的n层技术与面向消息、松散联接的Web概念相结合来实现的。Web服务是一种构建在简单对象访问协议(SOAP)之上的分布式应用程序,其实质是由XML通过HTTP协议来调度的远过程调用实现Web服务的体系结构。参考文献1Middlewarewhitepaper.InternationalSystemsGroup.Inc,1997,22都志辉,陈渝,刘鹏.网格计算M.北京清华大学出版社,20023FosterI,KesselmanC,NickJ,etal.GridServicesforDistributedSystemIntegrationJ.Computer,2002,35,637-464TbaiT,LamHQ..NET框架精髓M.王敏之.北京电力出版社,20015胡道元.计算机网络(高级)M.北京清华大学出版社,19996王柏,王红熳,邹华.分布计算环境M.北京北京邮电大学出版社,2000

  • 标签:
  • 简介:近几年,数据如井喷之势在增加,每天都会有更多的日增数据需要进入存储和计算平台,这就使得大数据体系还需要提供更可靠、更实时、更强拓展性、更高吞吐量的数据接入能力,由此消息传输系统愈发受到重视。本文将深入阐释某大型互联网公司的数据平台实时消息传输系统的组成及其架构演变过程。

  • 标签: 分布式系统 消息 支撑 传输系统 互联网公司 计算平台
  • 简介:写日记好像成了十几岁女孩、政客和那些在晚年准备写回忆录的人的一种爱好。日记是记下每天或者每周的想法的私人之地。无论是为一个疯狂爱上摇滚巨星罗宾·威廉姆斯的15岁的女孩所有,还是为一个德国大臣所有.它们都具有共同的特征.那就是它们都是锁着的最高机密,不与任何人分享。

  • 标签: 关系数据库系统 DasBlog 分布式.NET协作系统 日记
  • 简介:CKV(CloudKeyValue)是腾讯自主研发的分布式存储系统,服务于QQ空间、朋友网、相册、音乐等核心业务,日访问量超过万亿次。本刊3月期《腾讯CKV海量分布式存储系统:日访问过万亿次背后的技术挑战》一文中,全面剖析7CKV的实现原理和技术挑战。本文则将从部署架构、质量、效率和成本四个方面来讲述CKV的运营实践。

  • 标签: 分布式存储系统 腾讯 运营 自主研发 QQ空间 核心业务
  • 简介:随着全球计算机的普及,计算机网络技术的应用进程加快,当前形势下,分布式数据库顺应时代需求,呼之欲出。如今,分布式数据库已成功应用于网络教学中,促进了网络教学的全面革新。本文概述了分布式数据库特点,阐述了分布式网络教学现状,基于CSCW分布式数据库,分析了分布式数据库在网络教学中的应用实现。关键词分布式数据库;网络教学;CSCW;应用中图分类号TP393文献标识码A文章编号1007-9599(2010)04-0000-01TheApplicationofDistributedDatabasesintheNetworkTeachingZhouGang(ThesecondmechanicschoolinHangzhou,Hangzhou311203,China)AbstractWiththeglobalpopularityofcomputerandthequickspeedforcomputernetworktechnology,distributeddatabasecomesupwiththetimesdemand.Today,thenetworkdistributeddatabasehasbeensuccessfullyappliedtoteaching,andpromotedtheteachingofcomprehensivereformofthenetwork.Thisarticleoutlinedthecharacteristicsofthedistributeddatabase,distributedthesituationofdistributeddatabasesinthenetworkteaching,andanalyzedtheachievementofdistributeddatabaseinthenetworkteaching,whichisbasedonCSCW.KeywordsDistributeddatabase;NetworkEducation;CSCW;Application数据库以及网络技术的飞速发展,标志着信息时代的到来。对于网络教学来说,将网络技术融入到教学中,全面促进了教育事业的发展。尤其是基于分布式数据库技术,应用在网络教学中,全面革新了传统的课堂教学以及教学思想,形成了全新的教育模式。分布式数据库成功应用于网络教学中,是教学体制的全面更新的重要基础。一、分布式数据库概述(一)分布式数据数据库系统的发展使得计算机产生了全新的变更,当前形势下,绝大多数的数据处理都离不开数据库的发展。分布式数据库(DDB),毫无疑问,是全面融合数据和网络技术。传统意义上的数据库技术是数据集中管理,通过集中的方式,达到共享有关数据,比较抽象,给使用用户提供的是一个统一的、整体的管理方法。对于网络技术而言,计算机网络偏于分散,需要理由可靠的网络来连接和处理计算机之间的相关数据(即分布式数据及程序),来满足分散用户的需求。(二)CSCW的分布式教学首先,CSCW(Computer一Supported,CooperativeWork),其旨在计算机网络条件下,对群体用户提供相关支持,即在计算机环节中,协调完成相关任务。CSCW能将分散的各个群体,通过计算机网络相关技术,融合起来,然后协同合作完成某一固定任务。CSCW的分布式数据库应用于教学,其可以不同时间不同地点进行教学活动,是融合计算机网络、数据库以及多媒体相关技术。应用全新的分布式教学方式,对于教学而言,完全脱离传统教学方式,任何时间地点来安排教学进度和方法;对于学习而言,学生可以全面衡量自身的专业水准,以此来自由安排学习时间,制定学习计划,按照自己的学习进度来进行相关知识的学习。因此,教育部一九九八年十二月二十四日,将网络教学(分布式或e一leaming)列入二十一世振兴行动计划中,并把分布式教学方式作为终身教学的机构。CSCW硬件平台包含五个部分传递、处理、存贮、交互和表示(见图1)。控制传递处理存储交互表示基于网络技术(ISDN)编码解码器、图像加速器以及时标器硬盘、软盘以及读写光盘键盘、鼠标话筒、摄像机、照相机监视器、听筒以及打印机

  • 标签:
  • 简介:背景资料:美国的游戏分级组织“娱乐软件定级委员会”(ESRB)是一个独立的机构,它的任务是在娱乐软件业的支持下,为互劝娱乐软件产品制定一套标准的定级系统。

  • 标签: 游戏 级分 平台 主机 背景资料 软件产品
  • 简介:信息技术的发展提升了网络资源的利用宽度,资源共享的远程控制已经成为当前网络技术发展的重要组成部分,但是随之而来也出现了一系列的安全性问题。本文主要针对分布式环境下的资源共享的远程控制安全管理问题进行分析,首先研究了分布式资源的远程控制的主要过程,对三个阶段进行了细致的讨论,随后,对资源远程管理的安全性进行了探讨,对实际的资源共享远程安全性管理问题的研究提供了一定的理论参考。

  • 标签: 资源共享 远程控制 分布式环境 安全性
  • 简介:摘要分布式数据库存在于开放的网络环境,给数据的安全带来了一定的隐患。文章由分布式数据库系统的安全需求入手,对安全策略和安全机制中身份验证、访问控制、数据库加密等策略进行了综合分析及解决问题的关键技术。

  • 标签: 分布式 数据库 安全 防护策略
  • 简介:本文从分布式数据库系统结构特点出发,根据贝尔·拉帕丢拉安全模型和安全规则,研究了分布式数据库自主与强制对分布式数据库安全控制器进行了深入的分析。并对它的各个模块进行了详细的研究。

  • 标签: 分布式数据库 DDM安全机制 分布式数据库安全控制器
  • 简介:文章介绍了利用计算机、数据库等技术,面向业务科研需要,建立基于基数据的西藏地区多普勒天气雷达资料管理及共享服务系统的实现方法。关键词多普勒雷达;基数据;管理中图分类号TL822+.6文献标识码A文章编号1007-9599(2010)04-0000-02DesignandImplementationofInformationManagementandSharingSystemBasedonRawDataofTibetDopplerRadarLiChunyan,LiuYong,CiRenCuoMu(TibetMeteorologicalInformation&NetworkCenter,Lhasa850000)AbstractThispaperintroducestheuseofcomputers,databasetechnology,business-orientedresearchneedstoestablishbasicdataonTibetDopplerweatherradardatamanagementandsharingsystemrealization.KeywordsDopplerradar;Rawdata;Management一、引言新一代多普勒天气雷达(CINRAD)采用了目前世界上先进的雷达技术、计算机技术、数字信号处理以及图像处理等高新技术,具有全天候和高时空分辨率的探测能力,是监测跟踪中小尺度天气系统发生、发展、成熟、消亡过程的有效探测工具。对多普勒天气雷达资料的广泛应用可以大大加强对中小尺度天气系统的探测和预警能力,为开展短时灾害性天气系统及洪涝灾害的监测和预警、人工影响天气、中尺度数值预报奠定坚实基础。随着中国气象局“新一代天气雷达发展规划”的全面实施,西藏地区已相继建成了四部多普勒天气雷达,并逐步投入业务运行。建立有效收集、管理、使用多普勒天气雷达资料系统,实现资料的共享,是最大限度地发挥新型探测设备作用的关键。二、西藏地区多普勒天气雷达资料的管理及共享系统的实现(一)系统设计原则针对目前西藏地区多普勒天气雷达资料管理分散、无统一的数据管理系统、资料使用效率不高等问题,面向业务科研需要,设计合理的多普勒雷达资料管理策略,对资料进行有效的存储管理,并搭建资料管理和共享服务系统,通过网络将资料进行方便、快捷的共享。(二)数据管理策略多普勒天气雷达资料主要包括基数据(既雷达体扫文件,该数据含雷达反射因子Z、径向风速度V、谱宽W等信息,为二进制文件格式),还有基于基数据经过各种气象算法和数字图像处理生成的产品,如组合反射率因子(CR)、垂直液态水(VIL)、回波顶(ET)、谱宽剖面产品(SCS)等丰富的天气雷达二次产品。由于多普勒天气雷达基数据数据量大,一个站点一天数据约为2.9G,其衍生产品可达三十多种,如何对这些资料进行有效分类,并进行科学的存储及管理是本项目需解决的重要问题之一。针对多普勒雷达资料基数据文件大、数据产品种类多等特点,系统研究制定了针对西藏地区多普勒雷达资料的管理策略1.根据业务需要及该资料的特点,确定资料存储管理的重点为雷达基数据资料,因为该资料为雷达运行的基础资料,其中包含天气变化信息、雷达运行状况信息、雷达所在环境信息等,所有的衍生产品均是基于此数据;2.由于基数据为二进制数据格式,需要专业的软件才能读取其中的有用信息,为便于该资料的共享使用,系统开发后台资料处理系统,实时提取基数据中最重要的雷达反射因子Z、径向风速度V、谱宽W三种数据,并运用图形图像技术,形成直观的图像,在共享系统上共享应用;3.根据现有资料的传输情况,对业务要求传输的资料进行存储管理及共享;4.由于基数据量大,为便于存储,系统采用压缩技术,开发资料自动压缩处理模块,对基数据进行有效压缩后存储;5.为便于资料的共享使用,与相关自动站站点资料结合,提供按时间和按天气类型两种方式进行资料检索;6.为便于历史资料的使用,系统开发了针对下载后的雷达资料显示软件。(三)技术实现针对多普勒雷达资料特点,系统采用B/S(浏览器/服务器模式)和C/S(客户端/服务器模式)结合的方式开发,其中数据共享应用系统采用B/S方式开发,资料管理系统采用C/S方式开发。1.系统流程为便于资料管理,本系统按时间将资料分为实时资料和历史资料两部分进行管理。(1)实时资料库为近期雷达资料,库中含①实时雷达基数据既雷达体扫文件;②宽带网实时传输的五种数据图;③基数据初步分析的四种数据产品图像回波强度、谱宽、径向速度、无定证回波强度。(2)历史资料库为非实时库中所有的雷达基数据,采用压缩格式存储,以天为单位,全天数据一个压缩包。为便于使用,提供两种检索方式①按时间检索、下载;②按天气要素检索、下载(与相关自动站资料相结合)。下图为系统资料管理流程及结构图。图1.资料管理流程图2.系统开发技术方法系统开发主要分为三部分资料管理系统、资料共享应用系统、基数据图像显示软件三部分。(1)资料管理系统系统采用C++BUIDER6.0作为开发工具,结合MYSQL数据接口技术、WINZIP软件的命令行工具(WZZIP.EXE和WZUNZIP.EXE)、目录监控技术以及利用MICPAS3系统中西藏各县的经纬度数据,实现了全区多普勒天气雷达资料的自动处理和存储。主要有以下模块1)多普勒天气雷达资料的监控和接收模块。2)多普勒天气雷达基数据的显示处理模块。3)多普勒天气雷达基数据图像化处理模块。4)多普勒天气雷达基数据图像的地图叠加模块。5)多普勒天气雷达基数据图像的自动生成模块。6)多普勒雷达基数据及图形产品自动入库模块。7)雷达数据自动入库和维护。8)历史多普勒雷达基数据的压缩存贮模块。(2)资料共享应用系统该系统以B/S模式采用PHP、MYSQL等工具开发,实现对雷达资料的网络浏览、共享、查询及下载等功能。主要有以下模块1)数据关联模块。2)共享系统数据演示模块。3)资料查询及下载模块。(3)雷达基数据显示程序以Windows系统作为操作系统系统,采用C++BUIDER6.0作为开发系统。(四)系统主要实现的功能1.资料管理系统(1)实现对西藏地区多普勒雷达资料的自动收集、分类、入库,监控;(2)实时处理基数据资料,并生成四种雷达图像产品实时入库;(3)实现了对实时资料和历史资料的可控管理,既实时资料的保留时间可根据实际需要进行调节,调节范围在1-21天之间;(4)图像压缩质量可根据资料存储状况进行调整;(5)实现了对历史资料的自动按天压缩、存储、入库;(6)实现了对雷达站相关自动站资料的自动收集、入库。2.数据共享应用系统(1)对实时传输的5种整点图形资料的动画显示;(2)对实时传输基数据的4种分析图像产品的动画显示;(3)实时基数据的查看、下载;(4)实时库中5种整点图形资料的回放;(5)实时库中4种分析图像产品的回放。3.资料应用软件针对已下载解压后的多普勒雷达基数据文件,实现基数据文件的图形显示,包括单个基数据文件的图形显示和多个基数据文件的动画显示,显示包括多个要素(回波强度、径向速度、谱宽、无订正回波强度),多个显示范围(240公里、120公里、60公里、30公里),多个层次(九个层次)。(五)运行情况系统于2009年9月正式投入业务运行,系统运行稳定。经相关单位应用,在气象业务及科研中,发挥了较好的作用。三、结论(一)系统采用计算机、数据库等技术针对多普勒雷达资料特点,以C\S和B\S模式相结合方式开发建设系统。数据管理科学规范,易于管理和共享、应用,为面向全区雷达资料的广泛应用奠定了基础。(二)系统采用开放式网络环境、标准化协议以及通用系统开发工具,使系统具有良好的可移植性,易于实现和其他系统的互操作,有利于系统未来的发展。(三)应用界面友好用户只需要浏览器即可初步使用该资料,显示、浏览、查询、下载、使用方便,操作简单、明了。参考文献1高梅,张文华,接连淑,阮征等.基于气象信息共享系统的雷达资料网络数据库.气象科学.第30卷第1期2002年2月

  • 标签: