Elasticsearch 8.9:RRF混合搜尋,讓向量搜尋及公共搜尋反應時間提升30%

Elasticsearch 8.9:RRF混合搜尋,讓向量搜尋及公共搜尋反應時間提升30% -1200

Elastic Search 8.9 導入了混合搜索與 Reciprocal Rank Fusion (RRF) 技術,將向量、關鍵字和語義技術結合,可以獲得更好的結果。此版本還更新了向量搜尋功能能,反應時間提高了 30%。

使用者可以透過新的 SharePoint Online 連接器(包括文件層級級安全性)獲得更多導入的選項。

此外,8.9 版本可透過搜尋應用程式測試版為您的 Elasticsearch 索引帶來了一個新的公共搜尋終端設備節點。

介紹這些新功能讓使用者使用:

– 透過輕鬆添加多種檢索技術來改善搜尋結果


– 透過文件級安全性快速取得 SharePoint Online 數據

– 創建面向公眾的搜尋端點

Elastic Search 8.9 現已在 Elastic Cloud 上推出,這是 Elasticsearch 中唯一包含此最新版本中所有新功能的託管產品。

您還可以下載 Elastic Stack 和我們的雲端編排產品 Elastic Cloud Enterprise 和 Elastic Cloud for Kubernetes,以獲得自我管理的體驗。

Elastic 8.9 版還新增了哪些功能?查看 8.9 公告內容以了解更多資訊>>

具有倒數排名融合 (RRF) 的混合搜尋結合多種搜尋技術以獲得更好的結果

現在越來越多的Elasticsearch使用者需要在搜尋中處理不同類型的資訊,比如文字和向量。他們會用BM25模型搜尋文字,用向量搜尋技術處理密集向量。

混合搜尋技術通常能提供更好的結果:在對多個BIER資料集進行測試後發現,當結合了BM25和基於ELSER的排名時,相關性得到了提升。

現在,使用者可以更輕鬆地組合所有這些搜尋方法。在8.9版本中,使用倒數排名融合(RRF)的混合搜尋現在允許使用者組合來自各種不同的搜尋方法

– Elastic®向量資料庫搜尋

 

– 基於關鍵字的 BM25f 搜尋

– 使用 Elastic Learned Sparse EncodeR (ELSER) 模型進行文字擴充搜尋 

開箱即用,無需標準化或配置權重,因此您可以快速無縫地將 ELSER 模型的向量或語義搜尋整合到現有搜尋體驗中。RRF 作為 Platinum+ 使用者的技術預覽版提供。

在文件中了解有關 RRF 的更多資訊

加速向量硬體指令

在 8.9 中,我們利用了一個孵化的 Java API(巴拿馬向量 API),它允許使用本機指令 (SIMD) 來顯著提高向量計算的性能。這導致 HNSW (kNN) 和暴力搜索的向量搜索和向量索引的性能提高了 30% 。請注意,這在支援它的CPU上是可能的。

查看我們夜間基準測試中的性能改進範例。

為了進一步改善暴力向量搜尋的查詢速度,我們將向量中的浮點元素編碼從大端改為小端。這個改變使得解碼速度更快,因此暴力向量搜尋的查詢速度大幅提升了幾十個百分點。這些改進在最重要的搜尋中特別顯著,其中的改進速度可達到大約50%左右的時間。這個改進是因為使用了Panama API 而帶來的功能提升。

使用新的連接器和功能輕鬆導入

使用者現在可以直接從更多的資料來源將資料提取到Elasticsearch中。在8.9版本中,正式推出了針對Platinum+使用者的新SharePoint Online連接器,這個連接器有一系列改進:功能更好、文檔級安全性增量同步選項以提高數據更新速度,還有針對大型檔案的本地二進位內容提取

新的ServiceNow和Dropbox連接器用戶端現已推出測試版。這些連接器用戶端可以讓客戶更輕鬆地整合更多專有數據源。同時,從這個版本開始,在Elastic Cloud上原生支援以下連接器:Azure Blob儲存、Atlassian Confluence Cloud和Server、Atlassian Jira Cloud和Server,以及Network Drive。

查看可用本機連接器連接器用戶端的完整清單。

使用搜尋應用程式建立可公開存取的搜尋端點

8.9 透過公共搜尋 API為 Platinum+ 使用者引入了搜尋應用程式測試版,因此使用者現在可以為其 Elasticsearch 索引建立面向公眾的搜尋端點。

_applications/search-application/<app-name>/_search端點僅允許關聯搜尋範本中定義的查詢,因此您無需在用戶端和 Elasticsearch 部署之間可直接透過查詢系統即可提供搜尋。

然後,當與使用新 API 金鑰「search_application_query」工作流程角色限制的
僅限公共搜尋端點的 API 金鑰配對時,搜尋應用程式可用於建立可公開存取的搜索,該限制提供對搜尋應用程式端點的只讀訪問。

使用新的搜尋應用程式 Javascript 用戶端,開發變得更加容易!

試試看

發行說明中閱讀有關這些功能和更多信息的資訊。

現有的 Elastic Cloud 客戶可以直接從 Elastic Cloud 控制台訪問其中的許多功能。沒有利用 Elastic 雲端?開始免費試用

解決方案產品:

Elasticsearch

Logstash

Kibana

訂閱偉康科技洞察室部落格,掌握最新科技趨勢!

專人協助

由偉康業務人員為您詳細說明偉康的解決方案,以及相關產業經驗。

立即訂閱電子報

掌握最新科技趨勢!