Linode

Amazon EMR現已支持Apache Iceberg

Editor

Amzon EMR是一箇託管集羣平臺,可簡化在AWS上運行大數據框架的過程,以處理和分析海量數據。Amzon EMR6.5.0現已包含Apche Icebeg版本0.2。Apche Icebeg是一種開放的表格格式,專爲巨大的PB級表格而設計。

Apche Icebeg爲存儲在數據湖中的數據提供了一種開源表格式,可幫助數據工程師管理複雜的挑戰,例如在保持查詢性能的同時管理不斷變化的數據集。主要功能如下:

  • 保持多箇應用程序之間表的事務一致性,其中文件可以通過完全的讀取隔離和多箇併發寫入的方式進行原子化的添加、刪除或修改。
  • 實施完整的模式演變以跟蹤表隨時間的變化。
  • 發出時間旅行查詢以查詢歷史數據並對更新之間的更改進行驗證。
  • 通過分區演化將表組織爲靈活的分區佈局,從而能夠在查詢和數據量發生變化時更新分區方案,而無需依賴物理目錄。
  • 將表回滾到以前的版本以快速糾正問題並將表恢復到已知的良好狀態。
  • 在大型數據集等的高性能查詢中執行高級規劃和篩選。

帶有Apche Icebeg的Amzon EMR版本6.5.0現已在美國東部(弗吉尼亞北部)、美國東部(俄亥俄)、美國西部(俄勒岡)、南美洲(聖保羅)、歐洲(愛爾蘭)、歐洲(斯德哥爾摩)、AWS GoCloud(US)、Amzon Web Seices 中國(北京區域)、Amzon Web Seices中國(寧夏)區域,未來幾周將增加更多區域。


相关文章

  • Ubuntu 22.04.2 LTS發佈 帶有Linux 5.19 HWE堆棧選項

    Ubuntu 22.04.2發佈,這是Ubuntu 22.04 LTS系列的第二個安全版本。Ubuntu 22.04.2引入了一箇新的硬件支持堆棧(HWE),由更新的Linux內核和Linux圖形驅動程序組成。 Ubuntu 22.04 LTS包括Linux內核5.9、Mes 22.2.5和libd...

  • Visual Studio Code 1.65版本發佈

    Visul Studio Code是一款開源的帶GUI的代碼編輯器,它能在Windows、Linux、mcOS等各種平臺上運行,功能非常強大。近日,Visul Studio Code .65版本發佈,帶來了諸多新特性和功能,下面一起來了解下。 Visul Studio Code .65主要更新內容包...

  • RAKsmart韓國機房雲服務器新品上線 可選精品網或大陸優化帶寬

    RAKsmt韓國機房日前上新了雲服務器產品,有自定義配置和推薦配置可選,提供了大陸優化和精品網帶寬,可按需擴展雲服務器資源。RAKsmt韓國雲服務器靈活穩定、彈性可伸縮,性價比高,是部署韓國本地或周邊地區業務的佳選。 RAKsmt雲服務器按機房位置不同,有香港雲服務器、美國雲服務器、日本雲服務器、新...

  • Swarm正式主網上線 Bee v1.0-rc4版本發佈!

    6月20日,Swm官方團隊發佈Bee 客戶端.0-c4版本。運行測試網節點的節點運營商現在必須更新到這個新版本,升級後藉此機會參加空投活動的最後幾天,並且體驗主網版本確定。      此次版本的重大改變是允許節點連接到未部署支票簿的其他節點,從而爲零 eth、零 bzz 和零 xDAI 網絡鋪平道路...

  • Vultr服務器操作系統選項新增Ubuntu 22.04

    Ubuntu 22.04 LTS在上週正式發佈,它是一箇長期支持版本,將提供五年的支持,現在一些國外服務器商家已陸續提供Ubuntu 22.04系統支持。Vult作爲優秀的海外雲服務器提供商,旗下服務器產品支持多種不同版本的Linux發行版和Windows系統,其中Ubuntu服務器已新增了Ubun...

  • 華爲雲宣佈將在印尼和愛爾蘭開服 加快構建全球數字產業生態

    華爲全聯接大會(HUAWEI CONNECT)昨日在泰國曼谷開幕,此乃該會議首次出海。華爲雲CEO張平安在會上宣佈華爲雲印尼、愛爾蘭近期即將開服,並計劃在全球規劃更多綠色智能的雲數據中心。此外,華爲雲在雲原生、AI開發等領域的超過5項創新服務,也將首次面向全球落地。 在全球信息化和數字化浪潮中,雲業...

  • 英特爾和谷歌雲推出E2000 IPU芯片 使雲計算更安全高效

    英特爾和谷歌共同設計了新型定製基礎設施處理單元(IPU)芯片E2000 ,代號爲“Mount Ens”,以降低數據中心主CPU負載,並更有效和安全地處理數據密集型雲工作負載。 E2000 IPU將被用於谷歌新的C3虛擬機(VM),可部署在公共雲中。這些虛擬機將使用英特爾第四代Intel至強可擴展處理...

  • Linode應用市場更新 啓用全新界面設計

    國外服務器提供商Linode自2020年3月上線了應用市場(Linode Mketplce)以來,一直在積極地增加市場上可用應用的數量,並擴展其類型,旨在通過提供對開源和第三方集成服務輕鬆訪問來幫助開發人員加速他們在雲中的項目。 Linode應用市場近期又新增了Micowebe和UniFi Netw...

  • Ubuntu 23.10改進PPA管理以增強安全性和可靠性

    在Ubuntu系統下,升級軟件通常會採用PPA,不用像CentOS系統一樣尋找、安裝、配置源,簡單的幾個命令就能升級軟件版本。Ubuntu 23.0中,PPAs的管理方式發生了變化,以增強安全性和可靠性。 到目前爲止,Ubuntu通過傳統方式管理PPA的檔案,如通過存儲在/etc/pt/souces...

  • Vultr宣佈推出全託管式PostgreSQL數據庫服務

    海外服務器提供商Vult近日宣佈推出全託管式PostgeSQL數據庫服務,以滿足用戶多樣化數據庫託管需要。Vult目前已提供MySQL和PostgeSQL數據庫託管服務,未來還可能會增加更多主流數據庫支持。 PostgeSQL是一箇非常高級的、可擴展的開源對象關係數據庫,通常因其可靠性、功能集和性能...