Copilot Studio does not provide fallback answers when no documents are found

Levi Schoonen 0 Reputatiepunten
2025-12-17T14:43:10.8833333+00:00

We are experiencing an issue in Copilot Studio where the Create generative answers node does not return any response when no relevant documents are found, even though the following settings are configured:

  • Allow use of AI’s general knowledge: Enabled
  • Restrict responses to your data: False
  • Strictness: 2–3
  • Top N documents: 8–10
  • Query type: Semantic
  • Semantic configuration: Applied

Expected behavior: When no relevant documents are retrieved, the agent should provide a fallback answer based on general AI knowledge (as Foundry does with similar settings).

Actual behavior: The agent returns no visible response to the user. In the test environment, only the debug message “Visible only to you” appears. Adding a condition and a separate Generative response node without an index also fails because Copilot Studio requires a model binding for generation, and the fallback node does not produce output.

Afbeelding van gebruiker

Request:

Please confirm if this is a known limitation or provide guidance on enabling fallback answers without requiring an index in the Generative answers node. Ideally, Copilot Studio should behave consistently with Foundry by allowing fallback to general knowledge when no grounding is available.

Microsoft Copilot | Windows Copilot | App
0 opmerkingen Geen opmerkingen

1 antwoord

Sorteren op: Meest nuttig
  1. Sjaak Ketting 7,635 Reputatiepunten
    2025-12-18T00:03:44.9066667+00:00

    Copilot Studio geeft geen fallback‑antwoorden zonder documenten

    Samenvatting

    In Copilot Studio geeft de Create generative answers‑node geen antwoord wanneer er geen relevante documenten worden gevonden, ondanks dat de optie Gebruik algemene kennis van AI is ingeschakeld. Het verwachte gedrag is dat de agent een fallback‑antwoord geeft op basis van algemene AI‑kennis, vergelijkbaar met Foundry.

    Analyse & Oorzaak

    Instellingen:

    Gebruik algemene kennis van AI: ingeschakeld

      Beperk reacties tot eigen data: uitgeschakeld
      
         Strengheid: 2–3
         
            Top N documenten: 8–10
            
               Querytype: semantisch
               
                  Semantische configuratie: toegepast
                  
                  **Verwacht gedrag**: fallback‑antwoord op basis van algemene kennis wanneer geen documenten worden opgehaald.
                  
    
    • Daadwerkelijk gedrag: geen zichtbare reactie voor de gebruiker; enkel debugbericht “Alleen zichtbaar voor jou”.
    • Extra test: toevoegen van een voorwaarde en aparte generatieve responsnode zonder index faalt, omdat Copilot Studio een modelbinding vereist en de fallback‑node geen output produceert.
    • Preventie

      Documenteer vooraf of fallback‑antwoorden ondersteund zijn in de gekozen configuratie.
      Test de node in een omgeving met zowel relevante als irrelevante queries om het gedrag te verifiëren.
      
      • Houd rekening met verschillen tussen Copilot Studio en Foundry in de manier waarop fallback wordt afgehandeld.
        • Oplossing / Richtlijnen

           **Bevestiging**: Dit lijkt een bekende beperking van Copilot Studio.
          
        • Richtlijn: Fallback‑antwoorden zonder index zijn momenteel niet standaard beschikbaar in de Create generative answers‑node.
          - **Aanpak**:
          
                   Gebruik een alternatieve node of flow die expliciet een generatieve respons triggert wanneer er geen documenten worden gevonden.
          
                            Overweeg een conditionele logica die een vaste tekst of algemene AI‑antwoordbron aanroept buiten de indexbinding.
          
                                     Raadpleeg Microsoft‑ondersteuning of productdocumentatie voor updates over toekomstige ondersteuning van fallback‑gedrag.
          

    Was dit antwoord nuttig?

    0 opmerkingen Geen opmerkingen

Uw antwoord

Antwoorden kunnen door de auteur van de vraag worden gemarkeerd als Geaccepteerde antwoorden, zodat gebruikers weten met welk antwoord het probleem van de auteur is opgelost.