2018即將推出的ApacheSpark2.4都有哪些新功能-創新互聯
本文來自于2018年09月19日在 Adobe Systems Inc 舉行的Apache Spark Meetup。
即將發布的 Apache Spark 2.4 版本是 2.x 系列的第五個版本。 本文對Apache Spark 2.4 的主要功能和增強功能進行了概述。
- 新的調度模型（Barrier Scheduling），使用戶能夠將分布式深度學習訓練恰當地嵌入到 Spark 的 stage 中，以簡化分布式訓練工作流程。
- 添加了35個高階函數，用于在 Spark SQL 中操作數組/map。
- 新增一個新的基于 Databricks 的 spark-avro 模塊的原生 AVRO 數據源。
- PySpark 還為教學和可調試性的所有操作引入了熱切的評估模式（eager evaluation mode）。
- Spark on K8S 支持 PySpark 和 R ，支持客戶端模式（client-mode）。
- Structured Streaming 的各種增強功能。 例如，連續處理（continuous processing）中的有狀態操作符。
- 內置數據源的各種性能改進。 例如，Parquet 嵌套模式修剪（schema pruning）。
- 支持 Scala 2.12。
點擊 示說網 ，即可下載此PPT。
總結
網站標題：2018即將推出的ApacheSpark2.4都有哪些新功能-創新互聯
網站網址：http://www.js-pz168.com/article46/cohehg.html
成都網站建設公司_創新互聯，為您提供關鍵詞優化、網站策劃、網站設計、做網站、自適應網站、品牌網站制作
聲明：本網站發布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創新互聯
- 美國云服務器有哪些優勢？為什么國外服務器推薦租用美國云服務器 2022-10-04
- 云服務器上怎樣搭建FTP服務 2021-02-06
- 選擇云服務器控制面板需要注意哪些方面？ 2022-10-02
- 為什么要租用云服務器？企業都可以用云服務器做什么? 2022-10-09
- 為什么你身邊的企業都選擇了云服務器 2021-03-07
- 什么是云服務器租用?用戶對于云服務器有哪些操作權限? 2022-10-03
- 云服務器采用的安全策略都有哪些呢？ 2022-10-12
- 怎么區分云主機和云服務器？ 2021-02-06
- 高防云服務器的優勢 2021-02-02
- 云服務器怎么建站具體步驟 2022-10-06
- 云服務器適合哪些網站租用 2022-10-04
- 虛擬主機與云服務器的區別 2023-04-03