Linode

Amazon EMR現已支持Apache Iceberg

Editor

Amzon EMR是一箇託管集羣平臺,可簡化在AWS上運行大數據框架的過程,以處理和分析海量數據。Amzon EMR6.5.0現已包含Apche Icebeg版本0.2。Apche Icebeg是一種開放的表格格式,專爲巨大的PB級表格而設計。

Apche Icebeg爲存儲在數據湖中的數據提供了一種開源表格式,可幫助數據工程師管理複雜的挑戰,例如在保持查詢性能的同時管理不斷變化的數據集。主要功能如下:

  • 保持多箇應用程序之間表的事務一致性,其中文件可以通過完全的讀取隔離和多箇併發寫入的方式進行原子化的添加、刪除或修改。
  • 實施完整的模式演變以跟蹤表隨時間的變化。
  • 發出時間旅行查詢以查詢歷史數據並對更新之間的更改進行驗證。
  • 通過分區演化將表組織爲靈活的分區佈局,從而能夠在查詢和數據量發生變化時更新分區方案,而無需依賴物理目錄。
  • 將表回滾到以前的版本以快速糾正問題並將表恢復到已知的良好狀態。
  • 在大型數據集等的高性能查詢中執行高級規劃和篩選。

帶有Apche Icebeg的Amzon EMR版本6.5.0現已在美國東部(弗吉尼亞北部)、美國東部(俄亥俄)、美國西部(俄勒岡)、南美洲(聖保羅)、歐洲(愛爾蘭)、歐洲(斯德哥爾摩)、AWS GoCloud(US)、Amzon Web Seices 中國(北京區域)、Amzon Web Seices中國(寧夏)區域,未來幾周將增加更多區域。


相关文章

  • 騰訊雲異構計算平臺全面支持Llama 3 助力一鍵部署和性能翻倍

    近日,號稱史上最強大的開源模型——Met Llm 3 正式發佈。伴隨着日新月異的模型生態,騰訊雲異構計算平臺作爲覆蓋90%+大模型客戶的AI底座,現已做好充足的準備,圍繞Llm 3系列模型,提供從基礎設施到編排調度的智算產品矩陣,爲企業及開發者提供更快部署、更強性能和更高吞吐的全鏈路解決方案。 一、...

  • Linode應用市場更新 啓用全新界面設計

    國外服務器提供商Linode自2020年3月上線了應用市場(Linode Mketplce)以來,一直在積極地增加市場上可用應用的數量,並擴展其類型,旨在通過提供對開源和第三方集成服務輕鬆訪問來幫助開發人員加速他們在雲中的項目。 Linode應用市場近期又新增了Micowebe和UniFi Netw...

  • FriendHosting新增烏克蘭基輔數據機房

    FiendHosting作爲一家老牌歐洲主機商,官網支持多箇版本語言,現在擁有荷蘭、波蘭、瑞士、捷克、拉脫維亞、烏克蘭、保加利亞、美國(洛杉磯)等機房,而目前FiendHosting新增了烏克蘭第二個機房,位於克蘭基輔,新的機房同所有其他機房一樣,都可以享受FiendHosting最新活動。 Fie...

  • Name.com域名註冊新增支付寶支付方式

    Nme.com是一家通過ICANN認證的域名註冊商,在業內知名度比較高。最近,小編髮現Nme.com新增支付寶支付方式。支付寶專注於跨境支付處理和服務的支付服務平臺,致力於爲全球各地的本地和跨境企業、電商提供安全、快捷、穩定的一站式跨境支付和結算服務及解決方案。Nme.com優先上線支付寶支付方式,...

  • Amazon Lambda在亞馬遜雲科技中國區域增加對Java 17的支持

    Amzon Lmbd現已在亞馬遜雲科技中國區域中支持將J 7和Python 3.0作爲託管式運行時和容器基礎鏡像。當有更新可用時,亞馬遜雲科技會自動爲J 7或Python 3.0託管式運行時和亞馬遜提供的J 7或Python 3.0基礎鏡像應用更新。 點擊查看:亞馬遜雲科技免費套餐 使用 J 7 在...

  • 亞馬遜雲科技自研芯片Amazon Graviton3 實例已落地中國

    亞馬遜雲科技宣佈通過與光環新網和西雲數據的緊密合作,在亞馬遜雲科技北京區域和寧夏區域推出基於自研芯片 Amzon Giton3 處理器的 Amzon Elstic Compute Cloud(Amzon EC2)M7g 通用型、C7g 計算優化型和 R7g 內存優化型三款實例。 這些實例均基於 Am...

  • Vultr新用戶送100美元活動將於本月底結束 送50美元活動仍然有效

    美國主機商Vult對於新註冊用戶還是很友好的,通過活動鏈接便可免費獲得50美元或00美元賬戶餘額,有效期30天,沒有使用限制。其中Vult新用戶送00美元活動已持續近20個月,根據Vult發送的最新郵件信息,該活動將於9月30日結束。不過Vult新用戶送50美元的活動還是有效的,所以有需要的朋友可以...

  • CloudCone推出託管電子郵件解決方案 提供7天免費試用

    美國主機商CloudCone近日推出了託管電子郵件解決方案,提供免費遷移和7天免費試用。CloudCone託管電子郵件解決方案具有價格實惠、易於使用、收發便捷、安全性高等優勢。 CloudCone託管電子郵件起價僅爲每月2.99美元,包含3個域、0個郵箱、0GB電子郵件存儲空間和每月500封電子郵件...

  • AWS推出全新的管理控制檯主頁

    近日,Amzon Web Seices (AWS) 推出了全新的、可自定義AWS 管理控制檯主頁,客戶可統一通過該頁面訪問所需信息。目前全新的控制檯主頁已在所有公共AWS區域推出。 新的AWS控制檯主頁使客戶能夠通過添加、刪除和重新排列小組件來自定義其控制檯主頁體驗。在某些小組件中,客戶還可以選擇常...

  • Vultr探索生成式AI的未來:爲企業架構師賦能

    美國主機商Vult團隊一直在探索2024年值得關注的趨勢,研究生成式AI(GenAI)和大型語言模型(LLM)。在今年快速發展的技術環境中,企業架構師的角色也越來越突出,尤其是在前面提到的GenAI領域。隨着組織重新評估其應用程序堆棧,很明顯,企業架構師和CIO在塑造AI基礎設施的未來方面發揮着關鍵...