面向分布式文件系统的可扩展数据快照技术

快照作为保证存储系统数据安全性的重要技术已经得到越来越广泛的应用.然而,在面向海量数据的分布式文件系统中,快照技术在快照创建和快照恢复两个方面存在着高开销和低可扩展性的问题.因此,本文提出了一种面向分布式文件系统的可扩展数据快照技术,采用基于数据压缩的增量快照和恢复链路缩减的方法,实现了可扩展性的快照创建技术和快照恢复技术.通过与目前现有的快照技术相比较,本文从理论角度证明了该方法可以有效降低快照开销,从而实现可扩展的分布式文件系统数据快照.     

分布式文件系统在脉冲星数据处理中的应用

随着500 m口径球面射电望远镜（fi ve hundred meters aperture spherical telescope, FAST）巡天扫描的数据量不断增加,现有分布式计算集群所采用的文件存储系统逐渐成为限制计算速度的瓶颈之一。通过对计算集群架构的分析,将脉冲星数据处理与分布式文件系统技术相结合,针对目前计算集群中存在的问题,提出使用Alluxio+HDFS的分布式文件系统代替原先使用的Lustre文件系统,并根据脉冲星数据处理计算的特点和文件系统机制重新设计了任务分配算法和计算任务。实验表明使用该存储系统能够在相同的网络环境下提高网络带宽和节点内存利用率,减少网络传输时延及冗余磁盘读写开销,提高集群脉冲星数据处理的整体计算效率。     

云计算中的分布式文件系统

云计算是一种基于互联网提供服务的业务模式,它能够实现IT基础设施的资源化和服务化．用户可以按需进行定制和付费,从而彻底改变了传统IT基础设施的提供和支付方式。有效解决了无限增长的海量信息存储和计算问题。文章给出了云计算分布式文件系统的主要类型。分析了Google文件系统（GFS）和Hadoop分布式文件系（HDFS）的...     

应用级分布式文件系统接口标准化探索

回顾了分布式文件系统的发展,分析了已有标准和分布式文件系统的通用体系架构,从接口类型、数据操作接口、管理接口等方面对主流的分布式文件系统的应用接口的特点与异同进行比较,结果表明分布式文件系统的标准化研究是必要的和可行的。     

大庆油田云容灾备份中心的技术研究

本文通过阐述一般云数据中心发展现状,分析构建多云联合资源建设的不足,结合大庆油田目前云部署模式,应用本地化云容灾中心的建立,为油田业务系统提供强有力的数据保障,提升数据可靠性,强化业务连续性,为油田信息化发展提供优质数据保护解决方案。     

依据连续数据保护技术保障医院信息系统安全的探讨

CDP就是连续数据保护,是一种能够进行灾难恢复并及时储存数据的新兴高科技,还能保护系统的生存性,为其提供短时间内的目标恢复点,并且恢复后的数据和应用还具有高度的可用性。连续数据保护作为一种全新理念的技术,在保障医院信息安全方面越来越重要。     

一种块级别多模式数据容灾模型

提出一种基于Linux平台逻辑卷管理系统的块级别多模式数据容灾模型,论述了其系统结构与工作流程,并详细讨论了快照数据备份、连续数据保护、远程数据复制3种容灾模式的工作原理与关键技术。     

试论灾难备份/恢复技术在银行中的应用

在分析计算机系统灾难备份基础上,分析连续数据保护技术相关问题,并对比探讨了连续数据保护和传统的灾难备份和恢复技术技术,最后提出,应该在银行系统中采用整合的连续数据保护技术和传统的数据保护技术。     

“互联网+”时代信息系统备份技术

随着互联网、大数据、云计算等技术的快速发展和改进,信息系统存储的数据越来越多,当人们使用这些数据时软硬件故障、人为故障等可能会造成数据丢失,因此为了保障信息系统的正常应用,可以采用备份技术。本文针对信息系统备份技术进行研究,分析了文件备份、数据库备份、操作系统备份相关技术特征,重点描述了重删技术,同时展望了未来备份技术发展趋势,为信息系统备份提供支撑和参考。     

云存储技术在视频监控中的应用研究

在视频监控系统中应用云存储技术,可以满足高清视频大规模接入、数据存储安全以及数据管理维护的要求,本文首先对云存储技术进行介绍,并对云存储技术的优点以及具体的应用方式进行了探讨.     

分布式文件系统Lustre的研究

随着高性能技术的不断发展,传统存储系统在可扩展性、可用性和性能上已不再满足高性能计算的I／O要求,分布式文件系统Lustre可以有效地解决这些问题。探讨了分布式文件系统和Lustre体系结构,通过实验在普通PC机群上搭建了Lustre文件系统,并对机群I／O性能进行了测试。     

网页防篡改中分布式文件同步复制系统

为了解决Web服务器核心内嵌防篡改系统中,文件的分布式发布以及文件篡改后的即时恢复的问题。文中基于J2EE技术架构以及MVC（模型一视图一控制）的软件开发模式,设计了一种分布式文件同步复制系统。该系统能将文件分布式的发送到多个Web服务器上;当检测到某个Web服务器上的文件被篡改了,系统能迅速从原始库同步复制到相应的Web服务器上,以达到网页防篡改的目的。系统通过对文件进行比对,只传输差异部分,提高了系统资源利用率。     

分布式文件系统Lustre的研究

随着高性能技术的不断发展,传统存储系统在可扩展性、可用性和性能上已不再满足高性能计算的I/O要求,分布式文件系统Lustre可以有效地解决这些问题。探讨了分布式文件系统和Lustre体系结构,通过实验在普通PC机群上搭建了Lustre文件系统,并对机群I/O性能进行了测试。     

Windows NT文件系统过滤驱动程序在信息安全中的应用

文中首先介绍了Windows NT文件系统过滤驱动程序工作原理和开发方法，以及在设计过程中遇到的诸如动态附着文件系统等关键问题的解决方法，之后着重阐述了如何利用它来实现文件访问控制、文件访问事件的事后审计、文件的动态加密，和文件的镜像备份等信息安全领域中的关键技术。     

分布式文件交互系统节点身份认证方案

基于分布式云存储系统利用椭圆曲线和散列函数等内容,提出了一种云环境下的双向身份认证方案,实现双向认证过程。新方案的优点在于产生对通信双方公正的会话密钥,同时设计了2种不同类型的认证: 本地网内认证和跨网络认证。最后对该方案进行了安全性和性能分析,证明了本方案具有很强的安全性,能够保护用户的隐私性和抗抵赖性,且具有较低的计算量。该方案满足云存储在通信环境中的需求。     

针对海量小文件的可伸缩分布式文件系统研究

在对分布式文件系统可靠性、可用性以及可伸缩性进行深入研究后,设计并实现了一套可伸缩的分布式文件系统,针对当前互联网应用中大部分图片资源大小不超过100 KB的具体应用场景,进一步对设计的文件系统做出改进,确保文件系统在应对海量小文件存储、频繁读写时具有良好的性能。     

网络分布式文件系统NDFS的设计与实现

分布式文件系统能够有效地解决分布式系统中海量数据存储和I/O瓶颈问题,分布式文件系统是任何大规模分布式计算环境的重要组成部分,它的性能直接影响着整个分布式计算环境的执行效率.通过系统地研究分布式文件系统性能建模中的若干关键技术,在服务器Linux操作系统中加入一个新的文件系统模块,该模块采用存储虚拟化技术使Linux服务器上的应用软件可以透明的使用网络上的数据文件资源,并且对这些分布式的文件通过软件RAID方式实现了数据冗余,保证存储的可靠性,并通过并行存取提高I/O吞吐率.     

基于对象存储的Lustre文件系统的研究

随着高性能计算网络集群系统的高速发展，传统的网络存储架构——网络附加存储NAS和存储区域网SAN已越来越不能够满足系统对存储性能的要求。针对SAN和NAS的不足，新一代的网络存储技术——基于对象存储OBS成为了研究的热点。重点论述了基于对象存储的架构和特点，并针对基于对象存储的Luster文件系统进行了初步测试，通过和传统的NFS文件系统对比，分析了对象存储文件系统在可扩展性、性能、易用性和安全性等方面的优越性能。     

Hierarchical storage management in a distributed VOD system

The article describes the storage management algorithms in the Berkeley Video-on-Demand System, a hierarchical storage management system designed to support transparent access to thousands of hours of video material. Storage management algorithms handle continuous media objects stored on video servers within a hierarchical distributed video-on-demand system. Media objects stored permanently on tertiary storage devices are moved to video servers when needed. Algorithms manage the distributed cache in the video servers and select a video server on which to place a requested object. The object-placement algorithm uses server load, network load, and service-wait times to optimize system performance     

一种基于云芯一号的分布式文件多维混合存储机制

近年来,硬件加速逐渐广泛用于分布式存储服务,各种存储服务的稳定性受到用户的额外关注。FPGA是最常用的硬件加速设备,用来对存储文件进行存储前的压缩和读取前的解压。长时间的压缩/解压工作,使得FPGA存在服务中断等不稳定因素。尽管存储服务中断并不像以前其他云服务中断那样具有灾难性,但它们的影响可能比以前更广泛。为了解决上述问题,文章提出了一种基于拥有自主产权的云芯一号加速卡的分布式多维混合文件存储机制。首次在多Hadoop集群中,考虑芯片温度、芯片频率、文件存储大小等三个方面的因素,结合层次分析法(AHP),进行多维度的存储节点选择。文章利用传统的软件压缩和其他FPGA加速卡作对比实验,实验结果表明本文提出硬件加速设备和所述多维文件存储机制可以有效地降低多Hadoop集群的宕机率,提高文件存储压缩率和集群中各个节点的利用率。