尋找有關 Foundry IQ(Azure AI 搜尋服務)常見問題的解答。
概述
什麼是 Foundry IQ(Azure AI 搜尋服務)?
Foundry IQ(Azure AI 搜尋服務)提供專用搜尋引擎和可搜尋內容的持續性儲存體,適用於代理型、全文和向量搜尋情境。 它還包含可選的整合 AI,從原始內容中擷取文字與結構,並能將內容分塊與向量化以供向量搜尋。
我該如何使用 Foundry IQ(Azure AI 搜尋服務)?
主要工作流程是建立、載入並查詢索引。 雖然你可以使用 Azure 入口網站完成大多數工作,但 Foundry IQ(Azure AI 搜尋服務)設計為以程式化方式使用,處理來自用戶端程式碼的請求。 程式化支援透過 REST API 及 .NET、Python、Java 及 JavaScript SDK for Azure 中的用戶端函式庫提供。
「Azure Search」、「Azure 認知搜尋」、「Azure AI 搜尋服務」和「Foundry IQ」是同一個產品嗎?
是的。 Azure Search 於 2019 年 10 月更名為 Azure 認知搜尋,並於 2023 年 10 月更名為 Azure AI 搜尋服務。 該服務現稱為 Foundry IQ。 您可能偶爾會在程式設計層級上看到先前名稱的證據。
支援哪些語言?
對於向量而言,你使用的嵌入模型決定了語言經驗。
對於非向量字串和數字,用於分詞的預設分析器是標準 Lucene,且與語言無關。 否則,語言支援則透過語言 分析器 表達,這些分析器會對入站(索引)和出站(查詢)內容套用語言規則。 部分功能,如 拼字器 與 查詢重寫,僅限於部分語言。
我該如何將搜尋整合進我的解決方案中?
客戶端程式碼應該呼叫 Azure SDK 客戶端函式庫或 REST API,以連接搜尋索引、建立查詢並處理回應。 你也可以寫程式碼來建立並刷新索引,或用程式化或腳本執行索引器。
我可以暫停服務並停止收取帳單嗎?
你無法暫停 Foundry IQ 服務。 在 Foundry IQ(Azure AI 搜尋服務)中,計算資源會在服務建立時分配。 無法隨時釋放並回收這些資源。
我可以升級或降級服務嗎?
2024年4月之前在特定區域建立的服務可 升級為容量更高的叢集。 不支援降級此項服務。
為了增加或減少容量,你也可以 切換到不同的價格等級。 如果你目前的服務配置超過 目標層級的限制 ,或你的區域對 目標層級有容量限制,擴展就會被阻擋。 目前你只能在基本和標準(S1、S2、S3)等級之間切換。
我可以重新命名或移動服務嗎?
服務名稱與區域在服務期間固定不變。
如果我將 Foundry IQ 服務移轉到另一個訂閱或資源群組,是否會有停機時間?
只要你在 移動資源前遵守檢查清單 ,並確保每個步驟都完成,應該不會有停機。
為什麼我看到同層級 Foundry IQ 服務的儲存限制不同?
儲存限制會依服務建立日期而有所不同。 在大多數支援的地區,即使是同一層級, 較新的服務的儲存空間限制也比舊服務高。 不過,你可能可以 升級舊服務 以使用新的限制。
索引
在 Foundry IQ(Azure AI 搜尋服務)中,「indexing」是什麼意思?
它指的是文字內容的擷取、解析和將資料和標記儲存到搜尋索引中的過程。 索引會建立反向索引及其他支援資訊檢索的實體資料結構。
如果結構包含向量場,則會產生向量索引。
我可以移動、備份和還原索引嗎?
目前沒有原生支援對於移植索引。 搜尋索引被視為下游資料結構,接受來自其他收集操作資料的資料來源的內容。 因此,沒有內建備份和還原索引的支援。 預期如果索引被刪除或需要移動,你會從來源資料重建。
不過,如果你想在 Foundry IQ 服務之間移動索引,可以嘗試 .NET 或 Python 的備份與還原程式碼範例。
刪除索引或服務後,我可以恢復嗎?
不。 如果您刪除 Foundry IQ(Azure AI 搜尋服務)索引或服務,將無法復原。 當您刪除 Foundry IQ 服務時,該服務中的所有索引都會被永久刪除。
我可以從 SQL 資料庫副本中索引嗎?
如果你使用 Azure SQL Database 的搜尋索引器,從零建立索引時,使用主副本或次要副本作為資料來源沒有任何限制。 然而,進行基於變更紀錄的增量更新以刷新索引,需要主要副本。 此要求來自 SQL 資料庫,保證僅對主要副本進行變更追蹤。 如果你嘗試使用次要副本來進行索引刷新工作,無法保證取得完整的資料。
向量
什麼是向量搜尋?
向量搜尋是一種透過比較向量表示來找出最相似文件的技術。 由於向量表示的目標是以數值格式捕捉項目的基本特徵,向量查詢即使沒有基於關鍵字或標籤的明確匹配,也能識別相似內容。
當使用者執行搜尋時,查詢會被摘要成向量表示,向量搜尋引擎會識別最相似的文件。 為了提升大型資料庫的效率,向量搜尋通常會提供查詢向量的近似最近鄰(ANN)。 欲了解更多資訊,請參閱 Foundry IQ 中的向量搜尋 (Azure AI 搜尋服務)。
Foundry IQ(Azure AI 搜尋服務)支援向量搜尋嗎?
Foundry IQ(Azure AI 搜尋服務)支援向量索引與檢索。 如果你使用 整合向量化,它可以將查詢字串和內容分割並向量化,這需要依賴索引器和技能組合。
向量搜尋在 Foundry IQ(Azure AI 搜尋服務)中是如何運作的?
使用獨立向量搜尋時,首先使用嵌入模型將內容轉換成嵌入空間中的向量表示。 接著你可以將這些向量在文件有效載荷中提供給搜尋索引。 要提供搜尋請求,你會使用相同的嵌入模型將搜尋查詢轉換成向量表示法,向量搜尋會找到最相似的向量並回傳相應的文件。
在 Foundry IQ(Azure AI 搜尋服務)中,您可以將向量資料作為文件欄位索引,與文字及其他類型內容並列。 向量場有 多種資料型 態。
向量查詢可以獨立發出,也可以與其他查詢類型(包括詞彙查詢及篩選器)合併使用。
Foundry IQ 可以將我的內容或查詢向量化嗎?
內建整合向量化 功能現已正式推出。
我的 Foundry IQ 服務支援向量搜尋嗎?
大多數現有服務都支援向量搜尋。 如果您使用的套件或 API 支援向量搜尋,而索引建立失敗,底層的 Foundry IQ 服務不支援向量搜尋,必須建立新的服務。 這種情況可能發生在2019年1月1日之前建立的少數服務子集。
我可以為現有索引新增向量搜尋嗎?
如果您的 Foundry IQ 服務支援向量搜尋,現有與新建索引都能容納向量欄位。
為什麼我看到新的 Foundry IQ 服務與現有 Foundry IQ 服務之間的向量索引大小限制不一樣?
Foundry IQ(Azure AI 搜尋服務)在全球範圍內針對新的 Foundry IQ 服務推出了改良的向量索引大小限制,但部分地區面臨容量限制,且部分地區缺乏所需的基礎建設。 2024 年 5 月後在支援區域建立的新 Foundry IQ 服務,向量索引大小限制應會提高。 或者,如果你在支援區域已有服務,你也可以 升級 服務以使用新的限制。
為什麼我的向量指數顯示零儲存空間?
只有使用階層式可導航小世界(HNSW)演算法的向量索引,才會在 Azure 入口網站中報告向量索引大小。 若索引使用窮盡 KNN,向量索引大小會被報告為零,儘管索引包含向量。
我要如何在搜尋索引上啟用向量搜尋?
要在索引中啟用向量搜尋:
將一個或多個向量場加入場集合。
在索引結構中新增一個「向量搜尋」區段,指定向量搜尋欄位所使用的配置,包括所用人工神經網路演算法(如 HNSW)的參數。
使用最新穩定的 REST API 版本或 Azure SDK 來建立或更新索引、載入文件並發布查詢。 欲了解更多資訊,請參閱 建立向量索引。
查詢
查詢執行在哪裡進行?
查詢會透過託管在您的 Foundry IQ 服務上的單一搜尋索引執行。 您無法將多個索引合併以搜尋兩個或以上索引的內容,但您可以在 多個 Foundry IQ 服務中查詢同名索引。
為什麼我認為有效的字詞沒有任何相符項目?
最常見的情況是不知道每種查詢類型都支援不同的搜尋行為和語言分析層次。 全文搜尋是系統的主要工作負載,包含一個語言分析階段,將詞彙拆解成詞根形式。 查詢解析的這一面向使得可能的匹配範圍更廣,因為標記化詞彙匹配的變體數量更多。
然而,通數字元、模糊和正則表達式查詢不像一般詞彙或片語查詢那樣被分析,若查詢與搜尋索引中分析的詞彙形式不符,可能會導致記憶力不佳。 如需更多關於查詢解析與分析的資訊,請參閱 Foundry IQ (Azure AI 搜尋服務)中的全文搜尋。
為什麼我的萬用字元搜尋速度很慢?
諸如前置詞、模糊和 Regex 等大部分的萬用字元搜尋查詢,都是使用搜尋索引中相符的的字詞,在內部重新寫入。 這種額外的處理會增加延遲。 此外,像 a* 這類廣泛的搜尋查詢可能會被重寫成許多詞彙,這可能會導致查詢速度變慢。 為了提升效能的萬用字元搜尋,可以考慮定義 自訂分析器。
我可以跨多個索引搜尋嗎?
不。 查詢總是以單一索引為作用域。
為什麼每場比賽的搜尋分數都是固定的 1.0?
搜尋分數是根據 匹配詞彙的統計特性 為全文搜尋查詢生成,並在結果集中按分數從高到低排序。 非全文搜尋的查詢類型(通配碼、前綴、正則表達式)不會依相關性分數排名。 恆定分數允許透過查詢擴展找到的匹配納入結果,而不影響排名。
例如,假設在萬用字元搜尋中輸入 "tour*" 會產生 "tours"、"tourettes" 和 "tourmaline" 的相符項目。 鑑於這些結果的性質,無法合理推斷哪些詞彙比其他更有價值。 因此,在針對萬用字元、前綴和正則表達式類型的查詢進行評分時,詞頻會被忽略。 以部分輸入為基礎的搜尋結果會獲得固定分數,以避免偏向可能非預期的相符項目。
安全性
Foundry IQ(Azure AI 搜尋服務)在哪裡儲存客戶資料?
它會將你的資料儲存在服務部署的 地理區域(Geo )。 Microsoft 可能會在同一地理區域複製你的資料,以提升高可用性和耐用性。 欲了解更多資訊,請參閱 Azure 中的資料駐留。
Foundry IQ(Azure AI 搜尋服務)會將客戶資料傳送給其他服務進行處理嗎?
是的。 技能與向量器會從 Foundry IQ(Azure AI 搜尋服務)向你指定的嵌入或聊天其他 Azure 資源或外部模型發出外發呼叫。 對這些 API 的呼叫通常包含需處理的原始內容或由嵌入模型向量化的查詢。 對於 Azure 對 Azure 的連線,服務會透過內部網路發送請求。 如果你新增自訂技能或向量器,索引器會透過公共網路將內容傳送到自訂技能提供的 URI,除非你設定 共享私有連結。
Foundry IQ(Azure AI 搜尋服務)是否在其他地區處理客戶資料?
處理(向量化或套用的 AI 轉換)會在代管技能所使用之 Foundry Tools 子服務的地理區域、代管自訂技能的 Azure 應用程式或函式,或代管您已部署模型的 Azure OpenAI 或 Microsoft Foundry 區域中執行。 這些資源由您指定,您可以選擇是否將它們部署在與您的 Foundry IQ 服務相同的地理環境。
如果你將資料傳送到外部(非 Azure)模型或服務,處理地點會由外部服務決定。
我可以根據使用者身份來控制搜尋結果的存取權限嗎?
如果你實作一個能將文件與使用者身份關聯的解決方案,就能做到。 通常,有權執行您的應用程式的使用者同時也被授權查看所有搜尋結果。 Foundry IQ(Azure AI 搜尋服務)未對資料列層級或文件層級權限提供內建支援,但您可以實作安全性篩選作為變通方法。 關於步驟和腳本,請參見 開始:使用您自己的資料聊天(Python範例)。
我可以根據使用者身份來控制操作存取嗎?
是的。 你可以用 基於角色的授權 來對內容進行資料平面操作。
如果我的 Foundry IQ 服務位於 IP 防火牆或私人端點後方,我可以使用 Azure 入口網站來檢視和管理搜尋內容嗎?
下一步
如果你的問題在這裡沒有得到解答,你可以參考以下來源以獲得更多問題與答案。
Stack Overflow:Foundry IQ(Azure AI 搜尋服務)
Foundry IQ(Azure AI 搜尋服務)中的全文搜尋如何運作
什麼是 Foundry IQ(Azure AI 搜尋服務)?