博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
【Spark Summit EU 2016】Glint: Spark的异步参数服务器
阅读量:5789 次
发布时间:2019-06-18

本文共 242 字,大约阅读时间需要 1 分钟。

更多精彩内容参见云栖社区大数据频道;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问。

本讲义出自Rolf Jagerman在Spark Summit EU 2016上的演讲,主要介绍了Spark的异步参数服务器Glint,随着机器学习的数据量越来越多,其所生成的模型的规模也越来越大,于是就出现了模型大小已经超出了一台机器的内存的情况,于是就需要参数服务器来解决这一问题。参数服务器其实是一个机器学习框架,它将机器学习模型分布到多台机器上进行计算实现。

81c4bb87efae60074bd8b8edc574811bb4f14a6d

4ace5f0e03153bbb343a02c4b3b0e780c855e5d1

ba5b193dff0b3242d23332aac72cdf690a9554a0

ea48a002da1ae33e60d5e00443b1b90c4539a726

3da5955a4a45c49d5c0c103909208b8397c595b1

e955c6780d3d999163cfea2fcb3e254747614c95

811e6f6a39225adc30cba34794c7213cea7fa030

8901bbe84eb485ad6fcadbff55b1cd808e785e07

b202a9d7a0953064a44d5c349f35e9a49a542642

afc3b8c38a3c8365c1e436a9cb0a25b3187e0ebd

7ac144ac86ef6f3b2beae143c244a69cf98bf657

f0b5111a019e75a567850e3396ddb9f68fd340b7

4a80620a359b46fe5b9a25a134808df5c5a6e40e

692879c1a5e9771be11506e3eb87e3e7ddae1f05

4a1e6e6e48a872c2b5af4dad2248c37ff19e9703

60ae2d5e06e0dd6b6be0bafaf87bd0b63e85c729

e43c253b3748ef2baaeecc02655202a66eb17e3d

c7c49f28a896199708764c424593b999b47c2c56

54cb08e3c17c43e955dfb5ba0af82f2df61d0a8c

71754d1331e29716d9f9bd5a26b7a143f58ee174

276fe9e8969c52855df57897e66e0f1c42178730

bc5e0ba3fa25ac798e7e3456e0c853275b9593bf

42c4083ee327036af2bbeacc1b621bea36a44043

e776c275be36159068ff931043c9de5c178000ee

74eea510ebc4bbb2160a68efd7fea4243bc8ae2e

4f654506893b05fd51411172aaceb690b010664b

3d32a532bac3cb747c6934e93a5ceb481613c5a7

21bff17954600a6eaf43664f8d0228ad0f8b0bd4

30721af93b14018babc5ff4f0d380207adabe4ab

19f879f046a457d453d6f40e5e997c057934b29d

8e11f2006d6ef089e47fa28aef378909c20c6332

d42d8f2ca9a62b39c587efb13f02fa0df5230528

877d5da0ace3e8d2ed397be25b089aa407fbbf2b

4966ba5ec29ec379531e5831cb7030b0e14ee08f

f9b66cfe82ac10ee03e822002d5b736b971aa420

c5c0416407951df216b58bc74868726829db5c7c

9bfa448270b636fe180205b691822be4402023ae

40d86dadca7387d3b1e97771475a357d72b5f3a7

转载地址:http://prqyx.baihongyu.com/

你可能感兴趣的文章
Android系统匿名共享内存Ashmem(Anonymous Shared Memory)简要介绍和学习计划 (二)
查看>>
iptables 清空规则
查看>>
Base58编码简介
查看>>
mysql 连接出错 'mysqladmin flush-hosts'
查看>>
mysql性能优化
查看>>
Linux常用命令(十一)计划任务管理
查看>>
.NET 4.0 WinForm无法引用System.Web.dll的解决方法
查看>>
thinkpad x240s ubuntu下wifi断网bug解决方案
查看>>
点击空白处隐藏菜单
查看>>
三种方法实现Javascript控制ScrollBar(滚动条)
查看>>
了解--Android Bootstrap模板
查看>>
oracle 一些应用技巧
查看>>
我的北漂感悟录,程序员你是否也曾有过?!
查看>>
常用缓存淘汰算法
查看>>
MapReduce on Hbase
查看>>
结构型模式之七:代理模式
查看>>
Python CGI编写web程序-加法器
查看>>
精通Java设计模式从初见到相爱之原型设计模式(4)
查看>>
天狗农业网把农业科网络科技结合起来
查看>>
HTML5 Canvas效率如何?
查看>>