广东省自然科学基金(S2011010006118) 作品数:9 被引量:14 H指数:2 相关作者: 蔡涛 牛德姣 梁东莺 鞠时光 倪晓蓉 更多>> 相关机构: 江苏大学 深圳信息职业技术学院 清华大学 更多>> 发文基金: 广东省自然科学基金 江苏省高校自然科学研究项目 国家自然科学基金 更多>> 相关领域: 自动化与计算机技术 更多>>
基于合并控制消息的分布式文件系统优化机制 被引量:1 2013年 目前将控制消息通信与数据通信分离能大大提高分布式文件系统的性能,但大量的控制消息通信仍然是影响分布式文件系统性能的重要因素.在分析pNFS中控制消息通信协议的基础上,基于操作语义,提出一种基于合并RPC的控制消息通信协议,通过减少控制消息通信的数量,达到提高分布式文件系统读写性能的目的;并在pNFS-2.6.33的基础上实现一个原型系统,使用Filebench以及多种负载数据集进行了测试与分析,实验结果显示在文件大小达到2GB以上时读写性能比之前提高了约5%. 刘扬宽 蔡涛 鞠时光 詹永照关键词:分布式文件系统 远程过程调用 通信协议 并行网络文件系统 面向非易失存储器外存系统的缓存机制 2014年 非易失存储器具有接近于DRAM的访问速度,是构建高性能外存系统和提高大数据系统性能的重要手段,但非易失存储器存在写次数有限和写能耗较高等问题.本文引入缓存技术,使用写缓存合并对同一数据的多次写操作,减少对非易失存储器的写次数;使用原始缓存减少写回非易失存储器的数据量;设计了写缓存混合粒度管理算法、双缓存协调算法和缓存空间协调策略,减少了非易失存储器的写数据量,增加外存系统的使用寿命,降低了外存系统能耗,提高了I/O性能.最后在开源基于对象存储设备Open-osd上,实现了面向非易失存储器外存系统缓存机制的原型,使用存储系统通用测试工具Filebench和Postmark、以及多个通用数据集进行了测试与分析,验证了面向非易失存储器外存系统缓存机制能减少21%-77%的外存写数据量,提高了8%-37%的I/O性能,检验了面向非易失存储器外存系统缓存机制的有效性. 蔡涛 张永春 倪晓蓉 牛德姣 梁东莺 周东明关键词:非易失存储器 缓存 一种适合网络传输的JPEG2000图像容错编码方法 2012年 最新的静止图像压缩编码标准JPEG2000,提供了许多容错工具,这些容错工具的基本思想是"有错误,但我让它局限在尽量小的范围,并跳过它们",在误码率较低的通信信道中,这些容错工具能提供良好的容错性能。然而,在像无线信道这种误码率较高且易丢包的通信信道中,解码器就要跳过相当多的数据,不能得到好的重建图像。本文利用经过小波变换的子带间存在较大的空间相关性,提出了一种相关子带间错误补偿技术。实验结果表明,此技术能很好地提高JPEG2000图像在无线信道传输中的鲁棒性。 周刘兵 梁东莺关键词:JPEG2000 容错编码 基于语义依存关系匹配的汉语句子相似度计算 被引量:4 2014年 在中文信息处理中,句子相似度计算是一项基础而核心的研究课题,长期以来一直是人们研究的一个热点和难点。句子相似度计算在实际中有着广泛的应用,它的研究状况直接决定着其他一些相关领域的研究进展,如信息检索的相似句子匹配、自动问答的问题匹配与答案抽取等,句子相似度计算都是非常重要的环节。本文提出了一种基于依存关系匹配的句子相似度计算方法,利用词语内在概念和词语相互依存关系计算句子之间的相似度。结果表明,该算法能显著提高返回结果的准确率。 汪卫明 梁东莺关键词:自然语言处理 NVMMDS——一种面向非易失存储器的元数据管理方法 被引量:3 2013年 元数据管理方法是影响文件系统性能的重要因素.针对现有元数据管理方法存在的查找性能低、适应性差和丢失元数据等问题,设计了面向非易失存储器的元数据管理方法(NVMMDS).首先针对元数据的访问特性和管理要求,给出了NVMMDS的结构和元数据管理流程,混合使用非易失存储器和DRAM存储元数据,为提高元数据查找性能和避免丢失元数据奠定了基础;设计了基于NVBB树的元数据查找算法和基于主动写回的元数据缓存算法,提高了元数据的查找性能,增强了元数据管理方法的适应能力,避免了元数据丢失问题.与现有元数据管理方法进行了分析和比较,在单机文件系统ReiserFs和分布式文件系统pNFS中实现了NVMMDS原型,使用FileBench和多个标准数据集进行了测试与分析,验证了NVMMDS能提高文件系统最大35%的操作处理速度和I/O性能. 蔡涛 牛德姣 刘扬宽 李帅 鞠时光关键词:非易失存储器 基于PCM的分布式文件系统写缓存机制 被引量:1 2014年 分布式文件系统在写操作结束前所需的元数据和数据写回需要大量的时间开销,现有的写缓存机制无法解决易丢失更新、使用寿命短和无法适应元数据访问特点等问题.提出基于PCM的写缓存机制,在主机中使用PCM构建写缓存,并针对分布式文件系统写操作和PCM的特性,设计了基于PCM缓存的写流程和自适应缓存写回策略,使得应用在将元数据和数据写入PCM缓存后就能安全返回,并使用自适应的写回线程池将PCM缓存中元数据和数据写回,提高了分布式文件系统的写速度,避免了元数据服务器和磁盘成为影响分布式文件系统I/O性能的瓶颈.在分布式文件系统pNFS的基础上,实现了原型系统,使用标准测试工具filebench和postmark和多个通用测试数据集进行了测试,验证了基于PCM的写缓存机制能使得pNFS提高7%-1倍的I/O性能和1倍以上的事务处理速度. 李帅 蔡涛 肖铁军 陆游游关键词:分布式文件系统 PCM 缓存 面向云应用的存储缓存子系统 被引量:1 2014年 性能是云应用的重要指标,云应用与现有应用在数据存储与管理方式和访问模式等方面存在较大差异,这使得传统的缓存管理算法难以适应云应用的要求.针对云应用的特性,设计了基于影响因子的缓存策略,亦即将元数据和数据缓存分开管理,使用影响因子综合管理影响缓存被再次访问的几率的多种因素,区别创建、打开、读取和修改等操作对缓存再次访问的几率的影响;设计了缓存关联管理策略,即利用元数据和数据之间的关联提高缓存管理的性能;设计了缓存主动调度策略,即通过主动淘汰较低影响因子的缓存项和动态调整元数据与数据缓存的大小来提高缓存子系统的适应能力和性能.最后实现了原型系统,并使用Filebench和Postmark进行了测试和分析,验证了面向云应用缓存子系统原型能提高1%~120%的I/O性能以及2%~87%的操作处理速度. 蔡涛 牛德姣 张永春 倪晓蓉 周东明关键词:缓存 基于生存期的云存储元数据缓存算法 被引量:2 2012年 针对元数据管理子系统成为云存储中性能瓶颈的问题,研究了云存储元数据缓存算法.在分析元数据被访问特性的基础上,提出了元数据缓存生存期的概念;依据云存储的特性设计了元数据缓存生存期的计算规则,给出了基于生存期的元数据调出策略和元数据缓存写回策略,提高了云存储元数据管理的效率;分析了基于生存期元数据缓存算法适应用户访问特性的能力,讨论了使用基于生存期元数据缓存算法后如何保证元数据一致性的问题;使用基于生存期元数据缓存算法,实现了云存储元数据缓存原型系统,并使用通用数据集和测试工具进行了测试与分析.结果表明,该算法能提高云存储15%的I/O速度和16%的操作处理速度. 牛德姣 蔡涛 詹永照 鞠时光关键词:元数据 云计算 分布式计算 缓存 面向新型非易失存储器的文件级磨损均衡机制 被引量:2 2015年 自旋转移力矩磁存储器(spin transfer torque random access memory,STTRAM)和磁阻式随机存储器(magnetic random access memory,MRAM)等新型存储器具有接近于DRAM的访问速度,是构建高性能外存系统和提高计算机系统性能的重要手段,但有限的写次数是其重要局限之一.设计了文件系统级磨损均衡机制,使用Hash函数分散文件在外存中的存储,避免在创建和删除文件时反复分配某些存储块,通过分配文件空间时选择写次数较低的存储块,避免写操作的集中;使用主动迁移策略,在外存系统I/O负载较低时主动迁移写次数较高的数据块,减少磨损均衡机制对I/O性能的影响.最后在开源的基于对象存储设备Open-osd上实现了面向新型存储器文件系统级磨损均衡机制的原型,使用存储系统通用测试工具filebench和postmark的多个通用数据集进行了测试与分析,验证了基于新型存储器的文件系统级磨损均衡机制能稳定地将存储块写次数差减少到原来的1/20左右,同时最高仅损失了6%的I/O性能和增加了0.5%的额外写操作,具有高效和稳定的特性. 蔡涛 张永春 牛德姣 倪晓蓉 梁东莺关键词:非易失存储器