2022年11月19日 星期六

DataBricks發表安全資料共享開源協定Delta Sharing



由Apache Spark技術團隊所創立的企業Databricks,現在啟動了一項新的開源專案,這是用於即時安全交換大型資料集的開放協定,官方表示,Delta Sharing是第一個實現跨產品的安全資料共享協定。目前Databricks正積極與全球軟體和資料供應商,合作發展並推廣Delta Sharing。


企業存在與其客戶、供應商和合作夥伴安全交換資料的需求,以零售商為例,如此就可以和其供應商即時共享銷售資料,或是供應商也能與零售商共享即時庫存,但DataBricks提到,由於共享解決方案與廠商相關,因此資料共享便受到了限制,也對不同平臺的資料供應者與消費者帶來障礙。


而透過Delta Sharing,資料使用者就可以在Pandas、Tableau或各種實作開源協定的系統,直接連接共享資料,而不需要特別部署特定的平臺,如此便能減少存取資料的準備時間,也最大程度減少資料供應者的工作。DataBricks舉例,過去零售商要跟供應商資料分析師共享資料,分析師必須與自家IT、安全和採購團隊合作,在公司部署與零售商相同的資料倉儲解決方案,才能從資料倉儲匯出資料到資料科學工具,而這個過程可能需要歷經數個月。


Delta Sharing的目的就是要在不需複製資料的情況下,直接即時地共享資料,DataBricks指出,大多數企業的資料儲存在雲端資料湖系統,而Delta Sharing能夠讓企業安全地以Delta Lake或Apache Parquet格式共享任何既存的資料集。Delta Sharing適合大規模應用,支援TB級資料集等對傳統解決方案是一大挑戰的共享情境,Delta Sharing利用雲端儲存系統的低成本和靈活性,可靠地共享大規模資料集。


隨時健康喝好水,高品質飲水機,優質安全有把關

飲水機的問題主要有三個方面,一是水沸騰溫度不足,絕大多數的飲水機最高溫度是95度,再沸騰溫度是90度,泡茶殺菌的溫度不夠





攻戰消費者第一視覺,包裝設計很重要!

包裝設計是指對包裝的形狀、大小、構造及包裝材料等方面進行創造或選擇並以適當方式吸引消費者的注意力,進而增加購買率,以及對使用者友善之特性。



一般貨櫃標準尺寸?

金誠貨櫃尺寸種類分別為,20呎櫃、20呎高櫃、40呎櫃、40呎高櫃、20呎冷凍櫃、400呎冷凍櫃。


買不起高檔茶葉,精緻包裝茶葉罐,也能撐場面!

紫砂茶葉罐是多孔性材料製成,透氣性非常好,因為罐子多微小氣孔,用來存放茶葉,不僅能保鮮鮮,還能消除茶葉中的異雜味。 但也是因為多孔,所以紫砂茶葉罐容易吸收茶葉的香味。





資料接收者可以直接從選用的工具中使用資料,不需要安裝新的平臺,Delta Sharing協定的設計讓大多數工具容易實作,而且因為以Parquet為基礎,該格式已經受大多數工具支援,因此要實作連接器非常簡單。DataBricks也強調了Delta Sharing的安全性,該協定能滿足用戶對隱私和法規的要求,可讓用戶單點執行授權、追蹤和稽核共享資料存取。


Delta Sharing是一個簡單的REST協定,能夠安全地分享部分雲端資料集的存取權限,其利用S3、ADLS或GCS等雲端系統,可靠地傳輸大型資料集。對資料提供者來說,Delta Sharing讓用戶可以共享以Delta Lake格式儲存在雲端上的資料表格。官方提到,Delta Lake表格其實就是Parquet檔案的集合,可以按需求將現有Parquet表格,簡單地打包到Delta Lake中。


資料提供者可以決定要共享的資料,透過執行共享伺服器來實作Delta Sharing協定,並且管理資料接收者。DataBricks在發表Delta Sharing的同時,也開源了共享伺服器實作,可供雲端供應商提供托管主機服務。當資料提供者把共享資料環境架設完成,接受者就可以使用連接器,在Pandas、Apache Spark、Rust和Python上方便地存取資料。

https://www.ithome.com.tw/news/144655


找工作! 想知道堆高機駕駛日薪是多少嗎? 哪裡有職缺?幫你快速媒合

堆高機,又稱叉架起貨機或叉式起重車,香港稱為鏟車,中國大陸稱為叉車,台灣國語稱為堆高機,台語俗稱豬哥(ti-ko),是指工廠、倉儲等地方對成件托盤貨物進行裝卸、堆垛和短距離運輸作業的各種輪式搬運車輛。國際標準化組織ISO/TC110稱為工業車輛。堆高機的發展於1920年代,今天在生產和倉儲運營過程中它已成為不可或缺的設備。






測試專家告訴你如何好好使用示波器

示波器主要由電源系統、同步系統、水平偏向系統、垂直偏向系統、延遲掃描系統、顯示系統和標準訊號源等部封包成。




CCD外觀檢查包裝機

品質優益穩定,效率高成本低,並已獲得國內外大廠承認使用,品質合乎EIA國際標準, 此外也針對客戶端的需要代客Tape and Reel封裝服務。



總是為了廚餘煩惱嗎?

雅高環保提供最適用的廚餘機,滿足多樣需求。



Orignal From: DataBricks發表安全資料共享開源協定Delta Sharing

沒有留言:

張貼留言