VAST Data開(kāi)發(fā)了一款新的軟件工具,用于發(fā)現(xiàn)、編目和捕獲其他供應(yīng)商存儲(chǔ)和數(shù)據(jù)管理系統(tǒng)中的文件和對(duì)象數(shù)據(jù),將其引入VAST的私有AI專(zhuān)用環(huán)境中。
VAST表示,SyncEngine是"一個(gè)通用數(shù)據(jù)目錄和高性能數(shù)據(jù)載入解決方案"。它是一個(gè)所謂的通用路由器,為文件系統(tǒng)、對(duì)象存儲(chǔ)以及SharePoint、Google Drive和Salesforce等SaaS應(yīng)用程序提供實(shí)時(shí)、可搜索的目錄。這使得PB到EB級(jí)數(shù)據(jù)集中數(shù)十億甚至數(shù)萬(wàn)億個(gè)文件和對(duì)象能夠被即時(shí)發(fā)現(xiàn)。
聯(lián)合創(chuàng)始人Jeff Denworth表示:"AI的未來(lái)屬于那些能夠利用所有數(shù)據(jù)的企業(yè),而不僅僅是那些容易獲取的數(shù)據(jù)。數(shù)據(jù)分散是企業(yè)AI戰(zhàn)略的隱形殺手,SyncEngine終結(jié)了這個(gè)問(wèn)題時(shí)代。"該公司聲明:"SyncEngine消除了發(fā)現(xiàn)和調(diào)動(dòng)分布式非結(jié)構(gòu)化數(shù)據(jù)集和企業(yè)SaaS平臺(tái)的摩擦,使組織能夠簡(jiǎn)化其基礎(chǔ)設(shè)施,更快地從原始數(shù)據(jù)轉(zhuǎn)向現(xiàn)實(shí)世界的AI成果。"
顯而易見(jiàn),如果AI模型或智能體能夠訪問(wèn)組織的盡可能多的數(shù)據(jù),它們就能為用戶請(qǐng)求提供更好的響應(yīng)。理想情況下,需要有一個(gè)全方位的單一數(shù)據(jù)池,無(wú)論是虛擬的還是物理的。VAST希望它是物理的,并存儲(chǔ)在其自己的分解式、共享一切的存儲(chǔ)系統(tǒng)和軟件環(huán)境中,現(xiàn)在稱(chēng)為VAST AI OS。這包括VAST的InsightEngine和DataEngine,用于支持AI管道。
該公司現(xiàn)在構(gòu)建了自己的數(shù)據(jù)吸塵器,能夠發(fā)現(xiàn)和攝取存儲(chǔ)在競(jìng)爭(zhēng)對(duì)手系統(tǒng)中的數(shù)據(jù)。它表示,大規(guī)模使用AI的最大制約因素"不僅僅是模型復(fù)雜性或GPU供應(yīng),而是數(shù)據(jù)本身——分散在過(guò)時(shí)的文件和對(duì)象系統(tǒng)中,被孤立在企業(yè)SaaS應(yīng)用程序內(nèi)部,對(duì)AI管道不可見(jiàn)。"
SyncEngine工具的發(fā)現(xiàn)和遷移功能替代了外部和獨(dú)立的編目和遷移工具,例如來(lái)自Datadobi、Data Dynamics、Komprise和其他供應(yīng)商的工具。發(fā)現(xiàn)的文件和對(duì)象被編目在VAST數(shù)據(jù)庫(kù)中,可以在數(shù)百萬(wàn)億級(jí)別進(jìn)行搜索。它表示該目錄具有多個(gè)命名空間和"深度元數(shù)據(jù)索引"。
編目的文件和對(duì)象可以遷移到VAST數(shù)據(jù)系統(tǒng),并與源保持同步。包括雙向數(shù)據(jù)流,意味著VAST系統(tǒng)可以向發(fā)現(xiàn)的源系統(tǒng)提供數(shù)據(jù)。遷移不需要外部提取、轉(zhuǎn)換和加載(ETL)程序或自定義腳本。該功能是內(nèi)置的,包括數(shù)據(jù)完整性驗(yàn)證和自動(dòng)恢復(fù)。
VAST系統(tǒng)上的AI管道可以從這種遷移中獲得數(shù)據(jù)供應(yīng),數(shù)據(jù)被分塊和向量化用于RAG,并可用于智能體工作流,包括任何基于LangChain的應(yīng)用程序。
VAST聲稱(chēng)SyncEngine提供世界上最快的數(shù)據(jù)遷移服務(wù),"從攝取到洞察提供破紀(jì)錄的速度",但沒(méi)有引用具體數(shù)字。它表示,通過(guò)橫向擴(kuò)展節(jié)點(diǎn)添加,具有無(wú)限制的攝取吞吐量,具有網(wǎng)絡(luò)線速性能。
SyncEngine覆蓋哪些目標(biāo)系統(tǒng)?VAST提到了傳統(tǒng)的POSIX和S3兼容源,以及Confluence、Microsoft SharePoint、Google Drive和Salesforce等企業(yè)應(yīng)用程序。
它斷言SyncEngine:"取代昂貴的獨(dú)立工具和復(fù)雜的開(kāi)源選項(xiàng),通過(guò)集成智能大大簡(jiǎn)化數(shù)據(jù)編目和遷移。客戶受益于統(tǒng)一堆棧,無(wú)需額外許可費(fèi)用,降低復(fù)雜性、運(yùn)營(yíng)負(fù)擔(dān)和總擁有成本。"
Denworth說(shuō):"傳統(tǒng)IT創(chuàng)造了孤島,我們正在拆除它們。無(wú)論您的數(shù)據(jù)是埋藏在本地系統(tǒng)中還是隱藏在SaaS應(yīng)用程序中,SyncEngine都能使其全部可訪問(wèn)、可見(jiàn)和有價(jià)值。我們?yōu)榭蛻籼峁┝藦臄?shù)據(jù)現(xiàn)在所在位置到AI轉(zhuǎn)型開(kāi)始位置的直接路徑,即在VAST AI操作系統(tǒng)內(nèi)部。"
SyncEngine免費(fèi)提供給VAST客戶。
Q&A
Q1:VAST SyncEngine是什么工具?
A:VAST SyncEngine是一個(gè)通用數(shù)據(jù)目錄和高性能數(shù)據(jù)載入解決方案,用于發(fā)現(xiàn)、編目和捕獲其他供應(yīng)商存儲(chǔ)系統(tǒng)中的文件和對(duì)象數(shù)據(jù),將其引入VAST的AI專(zhuān)用環(huán)境中。
Q2:SyncEngine能解決什么問(wèn)題?
A:SyncEngine主要解決企業(yè)數(shù)據(jù)分散問(wèn)題,能夠發(fā)現(xiàn)分散在不同文件系統(tǒng)、對(duì)象存儲(chǔ)和SaaS應(yīng)用程序中的數(shù)據(jù),使數(shù)十億甚至數(shù)萬(wàn)億個(gè)文件和對(duì)象能夠被即時(shí)發(fā)現(xiàn)和利用。
Q3:SyncEngine支持哪些數(shù)據(jù)源?
A:SyncEngine支持傳統(tǒng)的POSIX和S3兼容源,以及企業(yè)應(yīng)用程序如Confluence、Microsoft SharePoint、Google Drive和Salesforce等SaaS平臺(tái)。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.