直擊亞馬遜云科技生成式AI構(gòu)建者大會(huì)現(xiàn)場(chǎng),Zilliz分享新時(shí)代向量數(shù)據(jù)庫(kù)

生成式 AI 應(yīng)用落地已經(jīng)從熱火朝天的“百模大戰(zhàn)”,步入到了少數(shù)優(yōu)秀模型脫穎而出,工具鏈百花齊放,以及企業(yè)主管認(rèn)真尋找生成式 AI 落地場(chǎng)景的新階段。然而,大模型是否能夠真正落地并應(yīng)用于實(shí)踐、如何基于開發(fā)者自身 IT 架構(gòu)快速構(gòu)建AI Native 應(yīng)用、如何衡量引入生成式 AI 的價(jià)值等問題引發(fā)行業(yè)關(guān)注。

在此背景下,亞馬遜云科技舉辦亞馬遜云科技生成式 AI 構(gòu)建者大會(huì)。在本次大會(huì)中,眾行業(yè)大咖和技術(shù)專家們深度聚焦生成式 AI 前沿技術(shù),就生成式 AI 的熱點(diǎn)技術(shù)話題和熱門應(yīng)用場(chǎng)景展開了深入分享與交流,為開發(fā)者們解讀了當(dāng)下應(yīng)如何應(yīng)對(duì)生成式 AI 帶來的機(jī)遇,在 AI 時(shí)代保持強(qiáng)有力的競(jìng)爭(zhēng)力。

Zilliz 合伙人兼技術(shù)總監(jiān)欒小凡、Zilliz AI 云平臺(tái)負(fù)責(zé)人陳將受邀參加。

以下是他們的精彩發(fā)言:

欒小凡表示,向量數(shù)據(jù)庫(kù)是一種將數(shù)據(jù)存儲(chǔ)為高維向量的數(shù)據(jù)庫(kù),高維向量是特征或?qū)傩缘臄?shù)學(xué)表示。拆解來看,向量數(shù)據(jù)庫(kù)有兩個(gè)關(guān)鍵要素,一是面向高維向量數(shù)據(jù)的處理能力,二是具備一個(gè)數(shù)據(jù)庫(kù)的基本能力。因此,作為向量數(shù)據(jù)庫(kù)需要具備支持向量數(shù)據(jù)的增刪改查、高性能的向量檢索、支持?jǐn)?shù)據(jù)的持久化、支持一種易用的查詢語(yǔ)言的能力。

此外,還可以從許多角度來評(píng)估向量數(shù)據(jù)庫(kù):系統(tǒng)的擴(kuò)展性、彈性、可用性,所采用的向量檢索算法,是否支持標(biāo)量過濾、混合查詢、多向量等功能,是否開源,是否提供云服務(wù),以及是否有完善的生態(tài)支持等。Milvus 和 Zilliz Cloud 作為全球領(lǐng)先的向量數(shù)據(jù)庫(kù),能夠從多個(gè)維度滿足開發(fā)者對(duì)于向量數(shù)據(jù)庫(kù)的需求。

Zilliz 合伙人兼技術(shù)總監(jiān)欒小凡

當(dāng)然,并非所有的向量數(shù)據(jù)庫(kù)都生而平等。欒小凡認(rèn)為,開發(fā)者評(píng)判自己是否需要真正的向量數(shù)據(jù)庫(kù)時(shí),需要著重考慮應(yīng)用場(chǎng)景。向量數(shù)據(jù)庫(kù)的傳統(tǒng)應(yīng)用場(chǎng)景包括文本類(如翻譯和語(yǔ)義檢索)、圖片類(如去重和以圖搜圖)、視頻類(如推薦和內(nèi)容合規(guī)檢測(cè))、生物制藥、自動(dòng)駕駛等。隨著大模型時(shí)代的到來,向量數(shù)據(jù)庫(kù)的應(yīng)用場(chǎng)景也隨之拓展,包括 RAG(Retrieval-augmented generation)、AI Agent、多模態(tài)大模型等。

陳將在進(jìn)行主題分享時(shí)則對(duì) RAG 應(yīng)用于向量數(shù)據(jù)庫(kù)的場(chǎng)景進(jìn)行了詳細(xì)拆解。陳將認(rèn)為,LLM 的最大問題就是缺乏最新的知識(shí)和特定領(lǐng)域的知識(shí)。對(duì)于這一問題,業(yè)界有兩種主要解決方法:微調(diào)和檢索增強(qiáng)生成。業(yè)內(nèi)許多公司(如 Zilliz、OpenAI 等)都認(rèn)為相比微調(diào),RAG 是更好的解決方法。歸根究底是因?yàn)槲⒄{(diào)的成本更高,需要使用的數(shù)據(jù)也更多,因此主要適用于風(fēng)格遷移(style transfer)的場(chǎng)景。

Zilliz AI 云平臺(tái)負(fù)責(zé)人陳將

相比之下,RAG 方法使用例如 Milvus 之類的向量數(shù)據(jù)庫(kù),從而將知識(shí)和數(shù)據(jù)注入到應(yīng)用中,更適用于通用場(chǎng)景。陳將提到,采用 RAG 方法就意味著使用向量數(shù)據(jù)庫(kù)存儲(chǔ)真理數(shù)據(jù),這樣可以確保應(yīng)用返回正確的信息和知識(shí),而不是在缺乏數(shù)據(jù)時(shí)產(chǎn)生幻覺,捏造回答。不過,隨著越來越多的文檔、用例等信息被注入應(yīng)用中,越來越多開發(fā)者意識(shí)到信息來源的重要性,它可以確保信息準(zhǔn)確性,使得大模型的回答更加真實(shí)。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )