圖數(shù)據(jù)庫(kù)廠商N(yùn)eo4j公司今日發(fā)布了Infinigraph，稱其為分布式圖技術(shù)的重大進(jìn)步。

該公司表示，這一架構(gòu)允許用戶在單一圖數(shù)據(jù)庫(kù)平臺(tái)上同時(shí)運(yùn)行操作和分析工作負(fù)載，處理規(guī)模超過100TB，且無需分割圖結(jié)構(gòu)、復(fù)制基礎(chǔ)設(shè)施或影響性能。

經(jīng)過兩年多的開發(fā)，Infinigraph解決了事務(wù)系統(tǒng)與分析工作負(fù)載協(xié)調(diào)的問題。Neo4j的早期版本需要在單臺(tái)物理計(jì)算機(jī)上運(yùn)行，這意味著組織必須使用提取/傳輸/加載管道、同步或多個(gè)數(shù)據(jù)庫(kù)來處理大量數(shù)據(jù)。

Infinigraph通過使用分片技術(shù)解決了這一限制。分片是一種將大型數(shù)據(jù)集拆分為更小、更易管理片段的數(shù)據(jù)庫(kù)技術(shù)，可支持?jǐn)?shù)十億關(guān)系和數(shù)千個(gè)并發(fā)查詢跨多個(gè)處理器執(zhí)行，同時(shí)保持事務(wù)場(chǎng)景所需的原子性、一致性、隔離性和持久性（ACID）特性。

該公司可以在多臺(tái)機(jī)器間對(duì)圖數(shù)據(jù)進(jìn)行分片，同時(shí)保持其邏輯一致性，實(shí)現(xiàn)數(shù)據(jù)的自動(dòng)分發(fā)和擴(kuò)展，無需應(yīng)用程序重寫或人工干預(yù)。

Neo4j表示，新架構(gòu)允許客戶將數(shù)千萬文檔作為向量直接嵌入圖中。這使得欺詐檢測(cè)、產(chǎn)品知識(shí)圖譜、長(zhǎng)期合規(guī)監(jiān)控和語義搜索等用例能夠在更大、更豐富的數(shù)據(jù)量上進(jìn)行。

Neo4j技術(shù)總裁Sudhir Hasbe表示："我們現(xiàn)在能夠在Neo4j數(shù)據(jù)庫(kù)中支持?jǐn)?shù)十億個(gè)向量。這在生命科學(xué)領(lǐng)域特別有用，公司需要處理數(shù)千萬份科學(xué)文檔進(jìn)行藥物發(fā)現(xiàn)。過去，這些文檔是孤立的。現(xiàn)在，它們可以直接嵌入到圖中。"

四年前，Neo4j通過引入Fabric為新架構(gòu)奠定了基礎(chǔ)，實(shí)現(xiàn)了跨機(jī)器的聯(lián)邦圖查詢，但客戶必須自己管理分片。Infinigraph自動(dòng)化了這一過程，同時(shí)保持完整的ACID合規(guī)性。

"由于遍歷查詢的存在，圖分片是一個(gè)困難的問題，"Hasbe說，"我們通過在一個(gè)環(huán)境中維護(hù)全局索引實(shí)現(xiàn)快速路徑查詢，同時(shí)將實(shí)際數(shù)據(jù)分布在多臺(tái)機(jī)器上實(shí)現(xiàn)水平擴(kuò)展來解決這個(gè)問題。即使是分布式事務(wù)也保持一致和可靠。"

Neo4j還強(qiáng)調(diào)了圖作為生成式AI中使用的向量數(shù)據(jù)庫(kù)的價(jià)值。AI訓(xùn)練需要結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。該公司在2023年首次添加了向量支持，允許文檔以向量嵌入的形式存儲(chǔ)。Infinigraph實(shí)現(xiàn)了更大規(guī)模的存儲(chǔ)。

"生成式AI使非結(jié)構(gòu)化數(shù)據(jù)比以往更有價(jià)值，"Hasbe說，"我們看到客戶從使用Elastic Store處理向量轉(zhuǎn)向在Neo4j內(nèi)管理一切。這大大簡(jiǎn)化了他們的技術(shù)棧。"

Infinigraph目前在Neo4j自管理企業(yè)版中提供早期訪問，更廣泛的可用性計(jì)劃在10月推出。該公司表示，該功能很快將在其AuraDB云原生圖平臺(tái)中提供。

Infinigraph的定價(jià)將采用解耦模式，分離計(jì)算和存儲(chǔ)以提供更大的靈活性。"我們正在將定價(jià)模式與現(xiàn)代分布式系統(tǒng)的運(yùn)行方式保持一致，"Hasbe說，"這允許客戶擴(kuò)展工作負(fù)載而不會(huì)產(chǎn)生意外成本。"他表示，工作負(fù)載較小的客戶可能會(huì)看到成本較當(dāng)前支付的費(fèi)用有所下降。

Q&A

Q1：Infinigraph是什么？它解決了什么問題？

A：Infinigraph是Neo4j公司發(fā)布的分布式圖技術(shù)架構(gòu)，它解決了事務(wù)系統(tǒng)與分析工作負(fù)載協(xié)調(diào)的問題。該架構(gòu)允許用戶在單一圖數(shù)據(jù)庫(kù)平臺(tái)上同時(shí)運(yùn)行操作和分析工作負(fù)載，處理規(guī)模超過100TB，無需分割圖結(jié)構(gòu)、復(fù)制基礎(chǔ)設(shè)施或影響性能。

Q2：Infinigraph與之前的Neo4j版本有什么區(qū)別？

A：之前的Neo4j版本需要在單臺(tái)物理計(jì)算機(jī)上運(yùn)行，組織必須使用多個(gè)數(shù)據(jù)庫(kù)來處理大量數(shù)據(jù)。Infinigraph通過分片技術(shù)可以在多臺(tái)機(jī)器間對(duì)圖數(shù)據(jù)進(jìn)行分片，同時(shí)保持邏輯一致性，實(shí)現(xiàn)數(shù)據(jù)的自動(dòng)分發(fā)和擴(kuò)展，無需應(yīng)用程序重寫或人工干預(yù)。

Q3：Infinigraph在生成式AI方面有什么優(yōu)勢(shì)？

A：Infinigraph能夠支持?jǐn)?shù)十億個(gè)向量，可以將數(shù)千萬文檔作為向量直接嵌入圖中。這在生命科學(xué)等領(lǐng)域特別有用，比如處理數(shù)千萬份科學(xué)文檔進(jìn)行藥物發(fā)現(xiàn)。生成式AI使非結(jié)構(gòu)化數(shù)據(jù)更有價(jià)值，客戶可以在Neo4j內(nèi)管理一切，大大簡(jiǎn)化技術(shù)棧。