梁毅
- 作品数：81 被引量：62H指数：5
- 供职机构：北京工业大学更多>>
- 发文基金：国家自然科学基金国家高技术研究发展计划北京市自然科学基金更多>>
- 相关领域：自动化与计算机技术文化科学机械工程更多>>
- 异构存储的HDFS副本选择策略研究被引量：1
- 2017年
- 大数据时代的到来,给海量数据的存储与管理带来了更为严峻的挑战。HDFS能够有效缓解飞速增长的海量数据存储需求。最初HDFS被设计用于同构的硬件环境,然而随着集群硬件的迭代更新,存储介质的硬件异构特性愈发明显。为了充分利用高性能存储介质,提升HDFS的数据访问性能,设计了一种基于层次分析法的异构存储的HDFS副本选择策略,并在扩展的CloudSim仿真系统中实现了该策略。实验结果表明,该策略在HDFS数据访问性能方面优于HDFS默认副本选择策略。
- 杨姗姗陈彩梁毅
- 关键词：大数据异构存储HDFS
- 一种面向Map/Reduce型海量数据处理平台的作业调度方法
- 一种面向Map/Reduce型海量数据处理平台的作业调度方法，属于海量数据处理领域，特别涉及Map/Reduce型海量数据处理平台中的作业调度和资源管理。本发明提出一种基于Reduce任务资源抢占的Map/Reduce作...
- 梁毅王玉凤樊明璐张辰
- 文献传递
- 一种第三方软件可信构建方法
- 本发明属于信息安全和可信计算技术领域，涉及一种第三方软件可信构建方法。所述方法包括：根据软件可信构建安全需求，生成基于XACML语言的可信软件策略语法语义；用户根据本发明提供的可信软件策略语法语义、参考软件开发商提供的参...
- 詹静蔡磊梁毅
- 文献传递
- 基于FILTER算子匹配的增量式DAG计算复用方法
- 2017年
- 伴随着数据的爆炸式增长,越来越多的大数据业务分析与处理选择分布式计算平台。目前针对大数据的分布式计算框架都支持DAG式的任务编排。由于大数据采集来源以及分布式存储系统特点,很多使用DAG框架进行计算的应用都是增量式的大数据集,但现有的DAG框架对这样的数据集进行计算时有许多冗余,造成计算资源浪费。提出了在DAG框架上进行增量式复用的方法,并针对FILTER算子特点提出了基于FILTER算子匹配的间接复用机制。
- 阚京陈彩梁毅
- 关键词：分布式计算查询优化
- Spark Streaming中参数与资源协同调整策略被引量：2
- 2019年
- Spark Streaming是一种典型的批量流式计算平台,可用于处理持续到达的数据流。流式数据最重要的两个特征是波动性和时效性。利用动态调整系统参数和动态调整资源满足不同数据到达速率的响应延迟,但调整参数的方式具有局限性,其用户成本较大。因此提出一种参数和资源协同调整策略,采用动态邻域粒子群算法找到一种满足SLO目标且使用资源最少的系统方案。实验表明,AdaStreaming与DyBBS相比,延迟性降低了70.1%,在资源使用量上比DRA降低了42.1%。
- 梁毅刘飞常仕禄程石帆
- 关键词：SPARKSTREAMING资源分配
- 一种数据中心在线服务资源预测方法
- 一种数据中心在线服务资源预测方法属于数据中心云计算领域，分为周期提取、利用子序列训练模型、利用预测模型进行在线负载资源预测等三个步骤。本方法针对在线负载在运行过程中资源使用量具有明显的周期性特征，收集在线负载资源序列样本...
- 翟锦鹏张爱唯秦乐萌梁毅
- 基于相对效费比的网格工作流调度算法被引量：5
- 2010年
- 为解决计算网格中有向无环图表示的截止期约束下的工作流时间费用优化问题,提出了一个新的启发式优化算法——相对效费比算法。该算法首先根据调度系数得到初步方案,再逐步调整,当方案完工时间小于截止期时,用时间换成本,选择成本消减最快的节点进行调整,中选服务有最大的正相对效费比值;当方案完工时间超过截止期时,用成本换时间,调整成本增加最慢服务的节点,中选服务有最大的负相对效费比值,该方法在保证截止期约束的同时能有效降低总成本。通过大量模拟实验和与最小关键路径、正向分层费用优化算法、逆向分层费用优化算法的比较,证明了相对效费比的有效性。
- 龙浩梁毅邸瑞华
- 关键词：网格工作流有向无环图启发式算法
- 基于共享内存的机群服务检查点机制研究被引量：3
- 2010年
- 针对既有基于稳定存储的机群服务检查点存在的系统成本高、恢复时间长的问题,提出了一种基于共享内存的机群服务检查点机制;设计了一套面向基于共享内存的检查点信息主-备存储模式的检查点信息管理协议,确保机群服务检查点信息一致性;设计了一套基于单向逻辑环的检查点组管理协议,确保检查点逻辑备份环中检查点进程的成员视图一致性.性能实验结果表明,该检查点机制具有较好的检查点信息读写性能,组管理协议系统开销小,较好地满足了机群服务检查点需求.
- 梁毅王磊樊建平方娟
- 关键词：检查点共享内存一致性
- 一种自动确定聚类中心的混合属性数据集聚类方法
- 本发明设计了一种自动确定聚类中心的混合属性数据集聚类方法，针对K‑Prototypes聚类算法中需人为指定初始聚类中心和聚类数目导致算法准确度和稳定性低下的问题，该方法分为初始化、聚类中心点预选取、确定聚类中心点、迭代聚...
- 孙志冉苏航梁毅韩永鹏
- 文献传递
- 基于Domino邮件服务器的性能建模被引量：1
- 2005年
- 现有的邮件服务器的评测方式大多是定量的,缺乏对系统的定性描述和有效建模。本文中,我们利用排队论理论,对基于Domino的邮件服务器进行性能建模,并对模型进行了验证和分析。实验表明,该模型较好地描述了邮件服务器的系统行为,是对邮件服务器的性能进行定性分析的一种较为理想的工具。
- 王磊梁毅
- 关键词：DOMINO邮件服务器排队论
