看板 [ Cloud ]
討論串[問題] 關於stragglers的Backup task
共 3 篇文章
內容預覽： 開啟 | 關閉 | 只限未讀
首頁
上一頁
1
下一頁
尾頁
#1
[問題] 關於stragglers的Backup task
推噓1(1推 0噓 1→)留言2則，0人參與, 最新作者gmoz ( This can't do that. )時間14年前 (2010/09/07 11:58), 編輯資訊
2
0
0
內容預覽:
這幾天在對MapReduce做一些survey. 不過有個地方我不太了解細節 o.o. 就是google用來解決starggles的Backup Task. 原文如下：. We have a general mechanism to alleviate the problem. of straggl
(還有156個字)
#2
Re: [問題] 關於stragglers的Backup task
推噓2(2推 0噓 6→)留言8則，0人參與, 最新作者yauhh (喲)時間14年前 (2010/09/07 13:29), 編輯資訊
0
0
0
內容預覽:
The problem of stragglers是說,MapReduce指派每個工作是試試把工作送出去.. 工作在遠端能不能完成,無法確定. 所以在主控端做的事情是,. 它一邊派送工作,同時一邊將剛派送出去正在執行的工作放在queue中.. 等一段時間,發現遠端機器死了,不管工作或產出資料都鎖在那
(還有44個字)
#3
Re: [問題] 關於stragglers的Backup task
推噓1(1推 0噓 49→)留言50則，0人參與, 最新作者ledia (下班後才下棋)時間14年前 (2010/09/07 16:19), 編輯資訊
0
0
0
內容預覽:
這要先了解到 Google 很多機器都是用便宜的硬體所組成. 因此經驗告訴我們, 如果某個 node 如果執行太久, 可能是因為他的硬體出問題. 無論是原本 computation 能力就比其他機器低階. 或者是硬碟快升天了, 卡卡讓 I/O 變得特別慢. 或者 RAM 偵測不到了, node 以為
(還有284個字)
首頁
上一頁
1
下一頁
尾頁