伦伦影院久久影视,天天操天天干天天射,ririsao久久精品一区 ,一本大道香蕉大久在红桃,999久久久免费精品国产色夜,色悠悠久久综合88,亚洲国产精品久久无套麻豆,亚洲香蕉毛片久久网站,一本一道久久综合狠狠老

電子發燒友App

硬聲App

掃碼添加小助手

加入工程師交流群

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示
電子發燒友網>電子資料下載>電子資料>Flink Remote Shuffle Flink任務間數據交換

Flink Remote Shuffle Flink任務間數據交換

2022-06-14 | zip | 66.26 MB | 次下載 | 2積分

資料介紹

授權協議 Apache 2.0
開發語言 Java
操作系統 跨平臺
軟件類型 開源軟件
所屬分類 大數據數據處理

軟件簡介

Flink Remote Shuffle 是一種批場景下利用外部服務完成任務間數據交換的 Shuffle 實現,本文后續將詳細介紹 Flink Remote Shuffle 研發的背景,以及 Flink Remote Shuffle 的設計與使用。

重要特性

  1. 存儲計算分離:存儲計算分離使計算資源與存儲資源可以獨立伸縮,計算資源可以在計算完成后立即釋放,Shuffle 穩定性不再受計算穩定性影響。

  2. 支持多種部署模式:支持 Kubernetes、Yarn 以及 Standalone 環境下部署。

  3. 采用了類似 Flink Credit-Based 流量控制機制,實現了零拷貝數據傳輸,最大限度的使用受管理的內存 (managed memory) 以避免 OOM,提高了系統穩定性與性能。

  4. 實現了包括負載均衡、磁盤 IO 優化、數據壓縮、連接復用、小包合并等諸多優化,實現了優秀的性能與穩定性表現。

  5. 支持 Shuffle 數據正確性校驗,能夠容忍 Shuffle 進程乃至物理節點重啟。

  6. 結合 FLIP-187: Flink Adaptive Batch Job Scheduler[11]?可支持動態執行優化,如動態決定算子并發度。

設計思路與原理介紹

參閱此文章:https://www.oschina.net/news/171564/flink-remote-shuffle-open-source

?

?

存儲 Remote Shuffle
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

下載該資料的人也在下載 下載該資料的人還在閱讀
更多 >

評論

查看更多

下載排行

本周

  1. 1PD取電芯片 ECP5702規格書
  2. 0.88 MB   |  3次下載  |  免費
  3. 2PC5200 700V_10A GaN HEMT驅動器數據手冊
  4. 1.63 MB   |  1次下載  |  免費
  5. 31節電池用電池保護IC S-8261D系列數據手冊
  6. 3.07 MB   |  1次下載  |  1 積分
  7. 4PD取電芯片,可取5/9/12/15/20V電壓ECP5702數據手冊
  8. 0.88 MB   |  1次下載  |  免費
  9. 5飛騰FT2000-4 COM Express核心板技術手冊0603
  10. 1.22 MB  |  1次下載  |  免費
  11. 6飛騰S5000C-64雙路服務器系列應用宣傳冊--一乘科技
  12. 945.81 KB  |  1次下載  |  免費
  13. 7OPAx188-Q1 高精度、低噪聲、軌至軌輸出、36V、零漂移、汽車級運算放大器中文手冊
  14. 1.19 MB   |  次下載  |  1 積分
  15. 8EMC PCB設計總結
  16. 0.33 MB   |  次下載  |  免費

本月

  1. 1美的電磁爐電路原理圖資料
  2. 4.39 MB   |  22次下載  |  10 積分
  3. 2反激式開關電源設計解析
  4. 0.89 MB   |  16次下載  |  5 積分
  5. 3耗盡型MOS FET產品目錄選型表
  6. 0.14 MB   |  3次下載  |  免費
  7. 4PD取電芯片 ECP5702規格書
  8. 0.88 MB   |  3次下載  |  免費
  9. 5簡易光伏控制器原理圖資料
  10. 0.07 MB   |  1次下載  |  5 積分
  11. 62EDL05x06xx系列 600V半橋門驅動器帶集成自舉二極管(BSD)手冊
  12. 0.69 MB   |  1次下載  |  免費
  13. 7PC5200 700V_10A GaN HEMT驅動器數據手冊
  14. 1.63 MB   |  1次下載  |  免費
  15. 81節電池用電池保護IC S-8261D系列數據手冊
  16. 3.07 MB   |  1次下載  |  1 積分

總榜

  1. 1matlab軟件下載入口
  2. 未知  |  935137次下載  |  10 積分
  3. 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
  4. 1.48MB  |  420064次下載  |  10 積分
  5. 3Altium DXP2002下載入口
  6. 未知  |  233095次下載  |  10 積分
  7. 4電路仿真軟件multisim 10.0免費下載
  8. 340992  |  191457次下載  |  10 積分
  9. 5十天學會AVR單片機與C語言視頻教程 下載
  10. 158M  |  183360次下載  |  10 積分
  11. 6labview8.5下載
  12. 未知  |  81605次下載  |  10 積分
  13. 7Keil工具MDK-Arm免費下載
  14. 0.02 MB  |  73831次下載  |  10 積分
  15. 8LabVIEW 8.6下載
  16. 未知  |  65991次下載  |  10 積分