孙竞
- 作品数:8 被引量:6H指数:1
- 供职机构:清华大学更多>>
- 发文基金:国家高技术研究发展计划国家重点基础研究发展计划更多>>
- 相关领域:自动化与计算机技术更多>>
- 一种广域网环境下的分布式冗余删除存储系统被引量:1
- 2010年
- 分布式存储系统中存储了海量的数据,这些数据中存在着大量的冗余,将冗余数据删除技术应用到分布式存储系统当中,用来发现并去除数据中的冗余,可以有效地提高存储空间以及网络带宽利用率。文章设计并实现了广域网环境下的分布式冗余删除存储系统——Aegean Store。该系统在数据被上传之前将冗余数据去除,达到提高存储资源和网络资源利用率的目的,并且进一步地降低存储系统的成本,在保持分布式系统固有的容灾特性的同时,可提高存储系统的可扩展性和整体性能。
- 尹玉冰孙竞余宏亮
- 关键词:分布式系统
- 支持分布式存储删冗的相似文件元数据集合索引被引量:5
- 2013年
- 分布式存储技术因其良好的可扩展性、高性价比在当前云存储系统和企业存储中心得到广泛应用.在分布式存储系统中进行内嵌删冗可以有效降低系统存储开销,提高数据存取效率,实现内嵌删冗的关键在于高性能和可扩展的元数据索引方法.该方法应确保删冗操作不影响存储性能.通过分析影响索引性能的关键因素,提出一种分布式相似文件元数据集合索引的构建方法.该方法使用位置敏感Hash函数,将具有相同数据片的相似文件元数据组成集合并建立索引,使一个文件所有数据片元数据检索只需要访问一次外存,有效提高元数据检索效率.并且所生成的索引具有良好可扩展性和很小的内存开销,适合在采用分布式存储结构的云存储系统或者企业存储系统中进行应用.
- 孙竞余宏亮郑纬民
- 关键词:分布式存储系统
- 冗余数据删除系统若干关键问题研究
- 孙竞
- 关键词:分布式存储
- 一种基于位置敏感哈希的删冗块设备存储方法
- 本发明公开了一种基于位置敏感哈希的删冗块设备存储方法,涉及数据存储领域。该方法包括:将删冗写操作的数据块和相应的数字指纹放入当前工作队列;D:判断队列中数据块的数量是否超过阈值,如果是,将阈值个数据块作为一个数据段,执行...
- 余宏亮孙竞
- 文献传递
- 基于位置敏感哈希的删冗存储系统元数据管理方法
- 本发明公开了一种基于位置敏感哈希的删冗存储系统元数据管理方法,该方法利用位置敏感哈希函数快速将相似文件数据块元数据组织在一起,从而在对删冗存储系统写入数据块时,能快速查找到是否系统中已经存在该数据块,提高删冗存储系统的元...
- 余宏亮孙竞
- 文献传递
- SHIFT:支持删冗的云存储系统元数据管理
- 云存储系统日益得到广泛应用,而对存储文件分块删冗不但能大大减少云存储系统存储开销,也能减少使用云存储的互联网用户需要上传的数据量,提高访问云存储系统性能.但是文件分块会极大增加云存储系统元数据数量,为元数据的高效访问带来...
- 孙竞余宏亮郑纬民
- 关键词:元数据管理
- 文献传递
- 基于位置敏感哈希的删冗存储系统元数据管理方法
- 本发明公开了一种基于位置敏感哈希的删冗存储系统元数据管理方法,该方法利用位置敏感哈希函数快速将相似文件数据块元数据组织在一起,从而在对删冗存储系统写入数据块时,能快速查找到是否系统中已经存在该数据块,提高删冗存储系统的元...
- 余宏亮孙竞
- 一种基于位置敏感哈希的删冗块设备存储方法
- 本发明公开了一种基于位置敏感哈希的删冗块设备存储方法,涉及数据存储领域。该方法包括:将删冗写操作的数据块和相应的数字指纹放入当前工作队列;判断队列中数据块的数量是否超过阈值,如果是,将阈值个数据块作为一个数据段,执行步骤...
- 余宏亮孙竞
- 文献传递