Jak zlepšit odpovědi vašeho bota

Bot je tak dobrý, jak dobrý je jeho obsah a nastavení. Tady je praktický návod, jak najít a odstranit problémy s kvalitou odpovědí.

Krok 1: Využijte ladicí panel

Ladicí panel (Debug) v Playgroundu je váš nejdůležitější nástroj. U každé odpovědi ukazuje:

Úryvky zdrojů (source chunks): konkrétní části obsahu, které bot použil. Jsou relevantní?
Skóre relevance: jak dobře každý úryvek odpovídal dotazu. Nízké skóre znamená slabou shodu.
Rozšířený dotaz (enhanced query): jak bot otázku pochopil. Dává to smysl?

Když se najde správný obsah, ale odpověď je špatně: zapracujte na systémovém promptu (Krok 2).

Když se najde špatný obsah: zapracujte na RAG prahu nebo obsahu (Kroky 3 a 4).

Když se nenajde žádný obsah: máte mezeru ve znalostech (Krok 5).

Krok 2: Vylaďte systémový prompt

Systémový prompt (základní prompt) říká botovi, kdo je, jak se má chovat a na co se má zaměřit. ChatbotIQ pod ním uplatňuje vlastní pravidla (odpovídat ze znalostní báze, citovat zdroje, říct, když něco není pokryto), takže prompt slouží osobnosti, rozsahu a tónu. Dobře napsaný prompt udělá obrovský rozdíl:

Buďte konkrétní:

You are a technical support assistant for [Product Name]. Help users troubleshoot issues and find documentation. Be concise and link to source pages.

Vymezte hranice:

Only answer questions about [Product]. For billing questions, direct users to support@company.com.

Určete tón:

Be friendly and professional. Use simple language. Avoid jargon unless the user uses it first.

Krok 3: Upravte RAG práh

Minimální spolehlivost odpovědi určuje, jak relevantní obsah musí být, aby ho bot použil:

Příliš vysoký (např. 0.7): bot je moc vybíravý a často odpovídá „Nevím“.
Příliš nízký (např. 0.1): bot sáhne i po okrajově relevantním obsahu, a odpovědi pak míří mimo téma.
Výchozí (nenastaveno): nechte posuvník ve výchozí poloze a engine práh doladí sám (kolem 0.30 podle typu obsahu). Pro většinu případů je to dobrý začátek.

Jak ho ladit:

Pokládejte otázky v Playgroundu.
Sledujte skóre relevance v ladicím panelu.
Když se dobrý obsah odfiltrovává (skóre pod prahem), práh snižte.
Když se dostává dovnitř špatný obsah, práh zvyšte.

Krok 4: Vylepšete obsah

Někdy problém není v botovi, ale v obsahu:

Zapněte Režim čtečky, pokud stránky obsahují navigaci nebo postranní panel, který vyhledávání mate.
Přidejte Q&A záznamy k častým otázkám, které nejsou dobře pokryté.
Po úpravě webu projděte stránky znovu, ať se změny obsahu promítnou.
Zkontrolujte prázdné nebo zkrácené stránky ve zprávě o procházení.