AI & Big Data 10月06日
Databricks推出Mooncake,AI代理運算效能躍升百倍
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Databricks近期公布了其名為Mooncake的資料整合技術,該技術源自於9月底對AI新創公司Mooncake Labs的收購。Mooncake技術基於Apache Iceberg開發,旨在大幅提升代理型AI的運算效能。傳統上,OLTP(線上交易處理)和OLAP(線上分析處理)任務需透過ETL管線進行資料轉換,存在時間延遲,不適合需要即時反應的代理型AI。Mooncake整合了儲存、索引及運算,打破了交易與分析的界限,將代理型AI的作業速度提升了100倍,為詐欺偵測、供應鏈串接及生成式AI代理人等自主應用提供即時的回饋循環。此舉也進一步鞏固了Databricks作為資料與AI整合基礎架構的定位。

🚀 **Mooncake技術顯著提升AI代理效能:** Databricks推出的Mooncake技術,透過收購Mooncake Labs而來,能將代理型AI的運作效能提升高達100倍。此技術基於Apache Iceberg開放表格格式,整合了儲存、索引及運算,克服了傳統OLTP與OLAP任務之間的時間延遲問題。

💡 **打破交易與分析的界限:** 傳統的資料處理方式將交易型(OLTP)和分析型(OLAP)任務分開,需要ETL管線進行資料轉換,這對於需要即時決策和行動的代理型AI來說是瓶頸。Mooncake技術實現了儲存、索引和運算的緊密整合,消除了這種區分,使得資料能夠即時被分析和利用。

🔄 **實現即時回饋循環:** Mooncake技術能夠縮小資料處理的時間差,為代理型AI提供即時的資料狀態,形成一個快速的回饋循環。這對於需要快速響應的自主應用至關重要,例如詐欺偵測、供應鏈管理以及由生成式AI驅動的代理人。

🧱 **鞏固Databricks的整合架構願景:** 此次收購Mooncake Labs,連同先前對MosaicML(生成式AI訓練)和Arcion(即時資料管線)的收購,進一步強化了Databricks將湖濱小屋(lakehouse)建置為資料和AI整合基礎架構的藍圖,旨在打破資料的孤島,提供全面的AI解決方案。

Databricks上周公布了資料整合技術Mooncake,號稱可讓代理型AI運作效能提升100倍。

這是Databricks 9月底收購一家AI新創公司Mooncake Labs的結果。Mooncake Labs是以Apache Iceberg開發解決方案。

Databricks說明Moonkcake技術能大幅提升AI運算的效能。OLTP(Online Transaction Processing)是為用於擷取訂單、支付和登入等「寫入」應用,講求快速插入和更新,但並不適於分析。OLAP(Online Analytics Processing)則是用於報表、儀表板和模型的「讀取」應用。在這些應用中,資料被集結、查詢和摘要,但是是事後進行,而不會及時執行。

過去OLTP和OLAP任務要靠ETL管線(pipeline)將歷史資料從交易型系統擷取出來、轉換,再倒入分析型資料倉儲中。這種技術在一些非同步作業中,如季報甚至每日作業都可行。但是在代理型AI中,自主系統被訓練成在幾秒內就要完成接收資料、決策和行動,任何時間延遲都不容許。

而Mooncake Labs的技術正是為了縮小時間差。該方案是在Apache Iceberg的開放表格格式上緊密整合儲存、索引及運算打造而成,其運算不再基於管線和時間差區分成交易和分析。而結果是使代理型AI作業速度提高100倍,成為一種回饋循環,支援自主應用,包括詐欺偵測、供應鏈串接到生成式AI代理人。

Databricks表示,該公司一直以來力圖將湖濱小屋(lakehouse)建置為資料和AI的整合基礎架構,其收購也是依此藍圖。MosaicML是為了生成式AI訓練而收購,Arcion是為了即時資料管線,都是為了打破資料壁壘。MosaicML強化了Databricks訓練和部署基礎模型的體格,Mooncake則是給了它心跳:即時、交易資料狀態,但又可立即分析。5月間,Databricks還另外買下無伺服器的Postgres平臺供應商Neon,可提供客戶建置AI代理人。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Databricks Mooncake AI 代理型AI 資料整合 Apache Iceberg 效能提升 即時運算 生成式AI
相关文章