研究

Tachyon:群集計算框架的可靠,記憶速度存儲

作者:Haoyuan Li,Ali Ghodsi,Matei Zaharia,Scott Shenker,Ion Stoica

下載紙張

抽象的

Tachyon是一個分布式文件係統,可在群集計算框架上實現以內存速度的可靠數據共享。雖然CACHING今天改善了讀取工作負載,但寫入是網絡或磁盤,因為複製用於容錯。Tachyon通過將譜係,眾所周知的技術推入存儲層來消除這種瓶頸。在失敗的情況下,製作長期運行的線性存儲係統的關鍵挑戰是及時的數據恢複。Tachyon通過引入一種檢查點化算法來解決這個問題,可以保證常用資源調度程序下的重新計算的有界恢複成本和資源分配策略。我們的評價表明,Tachyon以110倍為內存中的內存HDF而言。它還提高了4倍的現實工作流的端到端延遲。Tachyon是開源,部署在多家公司。

相關內容

作者:Anand Padmanabha Iyer,Zaoxing Liu,Xin Jin,Shivaram Venkataraman,Vladimir Braverman,Ion Stoica

作者:Shivaram Venkataraman,Aurojit Panda,Kay歐斯特赫特,邁克爾·阿姆布呂,阿裏Ghodsi,Michael J. Franklin,Benjamin Recht,Ion Stoica

作者:Ali Ghodsi,Matei Zaharia,Benjamin Hindman,Andy Konwinski,Scott Shenker,Ion Stoica

作者:Eric Jonas,Chifan Pu,Shivaram Venkataraman,Ion Stoica,Benjamin Recht

作者:Benjamin Hindman,Andy Konwinski,Matei Zaharia,Ali Ghodsi,Anthony D. Joseph,Randy Katz,Scott Shenker,Ion Stoica

作者:Matei Zaharia,Dhruba Borthakur,Joydeep Sen Sarma,Khaled Elmeleegy,Scott Shenker,Ion Stoica

作者:Michael Armbrust,Armando Fox,Rean Griffith,Anthony D.Joseph,Randy Katz,Andy Konwinski,Gunho Lee,David Patterson,Ariel Rabkin,Ion Stoica,Matei Zaharia

作者:Matei Zaharia,Andy Konwinski,Anthony D. Joseph,Randy Katz,Ion Stoica

作者:D. Karger,H. Balakrishnan,I. Stoica,M.F.Kaashoek,R. Morris

Baidu
map