资料介绍
机器学习领域内的多数模型均需要通过迭代计算以求解其最优参数,而MapReduce模型在迭代计算中的缺陷不足导致其在迭代计算中无法得到广泛应用。为解决上述矛盾,基于MapReduce模型提出并实现了一种可用于模型参数求解的并行迭代模型MRI。MRI模型在保持Map以及Reduce阶段的基础上,新增了Iterate阶段以及相关通信协议,实现了迭代过程中模型参数的更新、分发与迭代控制;通过对MapReduce状态机进行增强,实现了节点任务的重用,避免了迭代过程中节点任务重复创建、初始化以及回收带来的性能开销;在任务节点实现了数据缓存,保障了数据的本地性,并在Map节点增加了基于内存的块缓存机制,进一步提高训练集加载效率,以提高整体迭代效率。基于梯度下降算法的实验结果表明:MRI模型在并行迭代计算方面性能优于MapReduce模型。
- 面向移动终端图像颜色显示的节能模型 5次下载
- 面向学分银行的区块链学习成果管控模型综述 5次下载
- 基于MapReduce并行处理的机电特种设备故障诊断 13次下载
- 面向双目立体视觉的迭代式局部颜色校正方法 5次下载
- 面向人脸识别的FusNet网络模型 8次下载
- 基于MapReduce的时间序列索引及数据查询 7次下载
- 一种面向MapReduce的中间数据传输流水线优化机制 4次下载
- 声子BTE方程迭代求解在GPU上的并行加速方案 24次下载
- 基于MapReduce和加权网络信息熵的DBWGIE-MR算法 11次下载
- 基于迭代膨胀卷积神经网络与ATT的实体名识别方法 6次下载
- MapReduce连接查询的IO代价研究 0次下载
- 基于MapReduce的新会话识别方法 0次下载
- 基于MapReduce的并行化轨迹压缩方法 0次下载
- 面向大数据的并行分类混合算法研究 0次下载
- 算法隐含并行性的物理模型
- 基于PyTorch的模型并行分布式训练Megatron解析 3195次阅读
- 大模型分布式训练并行技术(一)-概述 1531次阅读
- 图解大模型训练之:Megatron源码解读2,模型并行 4680次阅读
- 以Gpipe作为流水线并行的范例进行介绍 1128次阅读
- 基于动量的迭代算法来构造对抗扰动以攻击黑盒和白盒模型 5681次阅读
- 基于OpenMP的电磁场FDTD并行方法的程序设计 1255次阅读
- 一种基于MapReduce模型的并行化k-medoids聚类算法 5377次阅读
- PRAM模型、BSP模型、LogP模型优缺点分析 1.6w次阅读
- mapreduce二次排序_ mapreduce二次排序原理 6297次阅读
- mapreduce工作原理图文详解_Map、Reduce任务中Shuffle和排序 8575次阅读
- mapreduce的应用开发步骤 4806次阅读
- 详解MapReduce的模式、算法和用例 2443次阅读
- mapreduce编程实例 1.1w次阅读
- 什么是mapreduce_mapreduce工作原理_mapreduce_mapreduce逻辑模型图 2.5w次阅读
- 基于FPGA的并行硬件ECC模型的设计 5944次阅读
下载排行
本周
- 1DC电源插座图纸
- 0.67 MB | 2次下载 | 免费
- 2AN158 GD32VW553 Wi-Fi开发指南
- 1.51MB | 2次下载 | 免费
- 3AN148 GD32VW553射频硬件开发指南
- 2.07MB | 1次下载 | 免费
- 4AN111-LTC3219用户指南
- 84.32KB | 次下载 | 免费
- 5AN153-用于电源系统管理的Linduino
- 1.38MB | 次下载 | 免费
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下载 | 免费
- 7SM2018E 支持可控硅调光线性恒流控制芯片
- 402.24 KB | 次下载 | 免费
- 8AN-1308: 电流检测放大器共模阶跃响应
- 545.42KB | 次下载 | 免费
本月
- 1ADI高性能电源管理解决方案
- 2.43 MB | 450次下载 | 免费
- 2免费开源CC3D飞控资料(电路图&PCB源文件、BOM、
- 5.67 MB | 138次下载 | 1 积分
- 3基于STM32单片机智能手环心率计步器体温显示设计
- 0.10 MB | 130次下载 | 免费
- 4使用单片机实现七人表决器的程序和仿真资料免费下载
- 2.96 MB | 44次下载 | 免费
- 53314A函数发生器维修手册
- 16.30 MB | 31次下载 | 免费
- 6美的电磁炉维修手册大全
- 1.56 MB | 24次下载 | 5 积分
- 7如何正确测试电源的纹波
- 0.36 MB | 17次下载 | 免费
- 8感应笔电路图
- 0.06 MB | 10次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935121次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420062次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233088次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191367次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183335次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81581次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73810次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65988次下载 | 10 积分
评论