新疆维吾尔自治区自然科学基金(2011211A011)
- 作品数：25 被引量：205H指数：8
- 相关作者：于炯廖彬杨兴耀英昌甜鲁亮更多>>
- 相关机构：新疆大学新疆财经大学新疆医科大学更多>>
- 发文基金：新疆维吾尔自治区自然科学基金国家自然科学基金博士科研启动基金更多>>
- 相关领域：自动化与计算机技术更多>>
- 基于存储结构重配置的分布式存储系统节能算法被引量：40
- 2013年
- 作为云计算底层核心基础设施,分布式数据存储系统是各种云计算服务的基础,是云计算重要的组成部分.然而随着系统规模的不断扩大以及设计时对能耗因素的忽略使其暴露出高能耗问题.由于存在数据可用性要求,使其并不能简单采用已有节能技术解决能耗问题,保证数据可用性成为设计分布式存储系统节能算法的前提.对系统与数据的可用性进行了建模,并通过对存储结构与机制、节点状态与数据块可用性之间的关系的研究提出构造数据块可用性度量矩阵解决数据可用性完全覆盖问题.定义了分布式存储系统的节能模型,将RACK划分为Active-Zone与Sleep-Zone两个存储区域,根据不同数据的访问频率与规律计算活动因子以配置数据的存储区域,通过数据中心负载规律适时对Sleep-Zone区域中的服务器进行休眠处理以达到节能的目的.实验结果表明:算法在适应数据访问规律与可用性保证前提下,能够提高分布式存储系统的能耗利用率,并且当系统负载与数据平均活动因子越低时算法节能效率越高.
- 廖彬于炯孙华年梅
- 关键词：云计算分布式存储系统节能计算
- 改进的Kerberos协议在HDFS环境下的研究被引量：4
- 2014年
- 由于Kerberos认证模型是中心管理方式,当Kerberos应用于大型的分布式网络中时,会产生服务器的瓶颈问题。为扩大Kerberos的应用范围,使其很好的与分布式系统HADOOP结合,对Kerberos在HDFS环境下的应用进行研究和描述,针对Kerberos密钥分发中心的瓶颈问题和HADOOP分布式文件系统的特殊需求,提出改进的Kerberos协议模型。该模型结合分布式思想,且对协议的消息传递模型进行改进。仿真结果表明,该协议解决了HADOOP分布式文件系统集成Kerberos的缺点,提升了HADOOP分布式文件系统的存储安全以及分布式文件系统的用户认证效率。
- 朱建波李萍于炯廖彬
- 关键词：分布式文件系统云安全身份认证
- 评分可信度条件下的协同过滤模型
- 2013年
- 通过对用户信任度进行量化,再从项目的角度进行调整,最终获得了较为准确的评分可信度度量.在此基础上,建立了评分可信度矩阵,并对提出的四种可信度相似性模型进行了优化.实验比较结果表明,基于不同的数据集,新提出的相似性模型在合理的时间开销下,相对于传统模型在项目预测准确性方面拥有出色的表现.
- 杨兴耀于炯吐尔根.依布拉音英昌甜闫歌
- 关键词：推荐系统协同过滤
- 一种面向低延迟的内存HDFS数据存储策略被引量：2
- 2014年
- 从底层存储介质的选择和上层分布式文件系统效率的角度出发,提出基于HDFS的内存分布式文件系统架构Mem-HDFS,同时利用集群DataNode的内存和磁盘存储数据,以提高基于HDFS应用的读取性能.并对其进行性能优化,提出一种适应的同分布数据存储策略以及并行读取访问算法.对比实验表明:提出的算法能够较好地降低读取访问延迟.
- 英昌甜于炯廖彬鲁亮
- 关键词：数据存储策略低延迟
- 结构化查询语言动态功耗解析及建模被引量：3
- 2015年
- 为构建节能的绿色数据库,提出一种基于结构化查询语言(SQL)资源(中央处理单元(CPU)、磁盘)消耗的最小单位的数据库动态能耗模型。该模型对系统动态能耗进行解析,将系统主要硬件(CPU、磁盘)的资源消耗映射成功率消耗,采用多元线性回归方法拟合模型关键参数,实时地估算系统动态功率,构建单位统一的动态功耗模型。实验结果表明,相比基于元组总数的模型,CPU指令总数能更好地反映CPU的功率消耗,所构模型在数据库管理系统(DBMS)独占系统资源的静态环境下,平均相对误差小于6%,绝对误差不超过9%。该动态功耗模型更适合于构建节能的绿色数据库。
- 国冰磊于炯廖彬杨德先
- 关键词：查询处理结构化查询语言
- SQL能耗建模及优化研究被引量：7
- 2015年
- IT系统能耗的节节攀升,使得设计新一代DBMS时必须考虑其能耗效率问题。由于SQL语句的执行过程大约消耗70%~90%的数据库资源,因此对SQL进行能耗建模及优化对提高数据库的能源使用效率具有重要的意义。在对SQL查询处理机制进行研究的基础上,构建了SQL能耗模型,并对一系列查询优化原则进行了实验,以表明不同优化原则对性能提升及能耗减少的有效性。实验及能耗数据分析表明:CPU利用率是影响系统功耗的最关键因素,SQL能耗优化方法可忽略内存优化且应该均衡考虑性能优化及功耗优化两方面,提出的SQL能耗模型及节能优化方法具有较强的应用价值。
- 国冰磊于炯廖彬杨德先
- 关键词：查询处理
- 基于可靠性的云工作流调度策略被引量：9
- 2014年
- 经过对已有云工作流调度算法中可靠性问题进行分析研究,针对一些算法在任务调度过程中只考虑提高整个工作流的可靠性而牺牲了时间或增加花费的问题,结合云计算的特点,提出一种基于可靠性的工作流调度策略。该策略结合了工作流中任务的可靠性,充分考虑任务的优先顺序并结合复制的思想,在减少传输过程失败率的同时降低传输时间,使整个工作流在降低完成时间的同时,提高整体可靠性。通过实验和分析表明,通过该策略云工作流在不同任务数和通信运算比(CCR)的可靠性比异态最早结束时间算法(HEFT)算法及其改进算法——SHEFTEX都有所提升,完成时间比HEFT算法有所减少。
- 闫歌于炯杨兴耀
- 关键词：云计算工作流可靠性调度策略
- Hadoop平台下改进的LATE调度算法被引量：15
- 2014年
- 对Hadoop平台下的MapReduce现有的调度器进行分析研究。针对LATE调度算法在分配节点执行落后任务的备份任务时的不足,结合Hadoop集群的异构性和工作负载的特殊性,在LATE调度算法的基础上提出了一种改进的LATE调度算法。对该算法进行实验和性能分析,表明该算法在完成时间和负载均衡方面有很大改进。
- 胡丹于炯英昌甜邹伟明
- 关键词：HADOOPMAPREDUCELATE
- 基于可用性度量的分布式文件系统节点失效恢复算法被引量：8
- 2013年
- 现有分布式文件系统中处理节点失效时采用的恢复策略耗费较多的带宽与磁盘空间资源,且影响系统的稳定性。通过研究分布式文件系统HDFS集群结构、数据块存储机制、节点与数据块状态之间的关系,定义了集群节点矩阵、节点状态矩阵、文件分块矩阵、数据块存储矩阵与数据块状态矩阵为度量数据块可用性建立了基础数据模型。在实现数据块可用性度量基础上,设计了基于可用性度量的节点失效恢复算法并分析了算法的性能。实验结果表明:新算法在保证系统中所有数据块可用性的前提下比原恢复策略减少了恢复所需带宽与磁盘资源,缩短了节点恢复时间,提高了系统稳定性。
- 廖彬于炯钱育蓉杨兴耀
- 关键词：云计算分布式文件系统
- 基于小文件的内存云存储优化策略被引量：6
- 2014年
- 由于内存云RAMCloud采用日志段的方式存储数据,因此当大量小文件存储于RAMCloud集群时,每个小文件独占整个段,会产生较多的段内碎片,从而导致内存的有效利用率较低以及大量的内存空间浪费。为了解决这个问题,提出基于文件分类的RAMCloud小文件存储优化策略。该策略首先根据文件的相关特性将小文件分为结构相关文件、逻辑相关文件以及相互独立文件三类;然后在存储时对结构相关的文件使用文件合并算法,逻辑相关和相互独立的小文件则使用分组算法。实验结果表明:同未进行优化的RAMCloud存储策略相比,该策略能有效提高集群内存利用率。
- 英昌甜于炯鲁亮刘建矿
- 关键词：存储策略
