搜索到360篇“ MAPREDUCE框架“的相关文章
- 基于MapReduce框架的编码分布式计算方法
- 本发明公开一种基于MapReduce框架的编码分布式计算方法,通过将N个输入文件分成若干份,并将其分别存储到不同的分布式计算节点上;然后,在进行输出函数分配时,为每个分布式计算节点设计了新的输出函数集W<Sub>k</S...
- 周玲玲蒋静
- 一种面向编码MapReduce框架的传输纠错方法及系统
- 本发明公开了一种面向编码MapReduce框架的传输纠错方法及系统。所述方法面向编码MapReduce中Shuffle阶段的传输正确性问题,基于编码MapReduce组播组内多播的特性,在充分利用各个节点本身所具有的冗余...
- 丁黄陈叶保留陆桑璐
- 一种基于MapReduce框架的大数据空地联合计算方法
- 本发明涉及移动边缘计算技术领域,公开了一种基于MapReduce框架的大数据空地联合计算方法,包括:S1、构建大数据空地联合计算模型,所述模型包括一个地面基站和N个无人机,其中,每个无人机覆盖范围下有M个地面用户设备;S...
- 王丰李宇龙
- 混合云下基于MapReduce框架的完整性可验证计算方法
- 本发明公开了混合云下基于MapReduce框架的完整性可验证计算方法,包括(1)定义应用模型:(2)定义安全模型;(3)用户MapReduce作业准备及用户程序预处理;(4)程序上传至公有云;(5)在可信计算单元中,使用...
- 裴春红张烜陈东高标
- MapReduce框架下决策树的差分隐私保护方法
- 本发明公开一种MapReduce框架下决策树的差分隐私保护方法,首先,在MapReduce框架下基于差分隐私的决策树的实现大幅地减少了算法的计算时间并避免了对大规模数据分类时的内存限制;接着,在决策树构建过程中,利用指数...
- 王金艳颜奇李先贤
- 基于MapReduce框架下的海量文本快速聚类的方法
- 本发明提出一种基于MapReduce框架下的海量文本快速聚类的方法。本发明是利用Hadoop框架并采用改进后的K均值聚类算法对海量文本数据实现快速聚类的方法,该方法包括对文本数据进行预处理;利用TF‑IDF(词频‑逆文件...
- 程永龙李美晶
- 基于MapReduce框架分布式计算环境的源代码编译方法及系统
- 本发明涉及基于MapReduce框架分布式计算环境的源代码编译方法及系统,通过分析不同阶段的文件之间依赖关系,使得源代码编译能更好分配到集群的机器进行编译;并提供并发写锁模块使得集群机器间相互并发写文件;本发明提供的基于...
- 劳生刘艳彬吴春光刘晓东申利飞
- 文献传递
- 一种基于MapReduce框架的电网多时段未来方式断面生成方法
- 本发明公布了一种基于MapReduce框架的电网多时段未来方式断面生成方法,该方法采用MapReduce框架实现电网未来多个时间段的电网计划数据和预测数据整合,通过形成未来时间和未来电网数据键值对,实现Map函数将电网多...
- 徐晓亮邹大云蒲桂林施雄华赵月辉陈根军
- 基于MapReduce框架的支持向量机最优分类模型参数搜索的方法
- 本发明公开了一种基于MapReduce框架的支持向量机最优分类模型参数搜索的方法,包括以下步骤:A、在Map阶段为每组参数赋予不同的键值,使得在Reduce阶段每个并行执行的任务只对一组参数进行交叉验证;B、以串行Map...
- 刘黎志何经纬
- 基于MapReduce框架下的数据隐私保护
- 2021年
- 为了解决MapReduce框架下因私有加密密钥被发送到不信任的云服务器,造成数据隐私泄露问题。提出了一种改进的完全同态加密方案,该方案应用逻辑Merkle哈希树存储结构,降低时空代价,解决元数据动态和认证路径问题,对输入文件分解(MAP阶段)和密文检索算法(Reduce阶段)进行优化。此外,为了提高计算成本和安全性检测的效率,采用了标量同态方法,避免了繁杂的多项式时间计算。并提出了一种优化的三值搜索尝试(TST)算法来管理元数据认证。实验结果表明,优化后的密码体制能明显降低通信和计算成本,整体密文检索时间降低了3倍。
- 姚庚梅张永棠
- 关键词:信息安全同态加密隐私保护MAPREDUCE密码体制