為什麼磚火花的速度比AWS EMR火花?

[kali_tummala]

//www.eheci.com/blog/2017/07/12/benchmarking-big-data-sql-Beplay体育安卓版本platforms-in-the-cloud.html

你好,

隻是想知道為什麼磚火花是更快的S3與AWS EMR火花都引發2.4版本的係統,是磚有另一個版本的優化火花不致力於開源火花?

[的孩子叫]

在其核心,EMR發射引發應用程序,而磚是一個更高層次的平台,還包括多用戶支持,交互式UI,安全和作業調度。Beplay体育安卓版本特別是磚標準引發應用程序運行在用戶的AWS帳戶,類似於EMR,但它增加了各種各樣的功能來創建一個端到端的環境與火花。這些包括:

• 交互式用戶界麵(包括一個工作區與筆記本,儀表板,作業調度器,單擊集群管理)
• 集群共享(多個用戶可以連接到相同的集群,節約成本)
• 安全特性(訪問控製整個工作區,集群)
• 協作(多用戶訪問相同的筆記本,版本控製,IDE和GitHub集成)
• 數據管理(支持連接不同數據源的火花,緩存服務加快查詢)

想法是,很多火花部署很快就需要引入多個用戶,不同類型的工作,等等,我們想要這些內置。但如果你隻是想連接到現有的數據和運行工作,這也有效。磚添加一些特性,比如允許多個用戶在同一集群運行命令和運行多個版本的火花。因為磚也是最初的團隊建立了火花,服務非常及時,與最新的火花緊密集成特性——例如你可以預覽下一個版本的運行,引發視覺上可以顯示任何數據,等等。

[kali_tummala]

1. 不這不是我想要的答案的功能你給不幫助引發性能(速度快),如果我做一個代碼之間的差異開源火花引發2.4和磚最新版本我將看看差異嗎?為什麼不如果我看到差異數據磚版本是開源嗎?做數據磚不想開源時間?他們想要引發磚外慢嗎

[User16817872376]

@(電子郵件保護)磚運行時非常類似於開源的火花,完全API兼容。任何開源火花(OSS)你寫的代碼將運行相同的等效磚運行時版本。有些功能我們已經建立了由我們的客戶和要求沒有開源的等價物。beplay体育app下载地址因為開源火花是一個Apache項目,它是由Apache項目管理規則,而磚運行時是磚專有軟件控製100%。識別出任何正確性錯誤將立即固定在OSS。

[User16817872376]

@(電子郵件保護)一般來說雖然答案你想太複雜的解釋在一個論壇帖子,你有聯係人在磚,你可以設置時間?如果沒有,你可以聯係我(電子郵件保護)