Chatbot vám nikdy neřekne, že něco neví. Řekne loňskou pravdu se stejnou jistotou jako tu dnešní, a firma tak půl roku nemá důvod ho kontrolovat. Většina firem svého bota jednou nakrmí, spokojeně zapne a po roce se diví, proč odpovídá jako mimo. Chybu přitom neodhalí nikdo zevnitř, ale ten, kdo si podle špatné odpovědi něco naplánoval – platící zákazník.
Měl jsem to stejně. Nasadil jsem bota, pár týdnů odpovídal skvěle a já měl pocit hotové práce. Jenže svět se mezitím pohnul: přibyla služba, změnila se cena, natočil jsem video, které jednu věc vysvětlovalo líp. Knihovna znalostí ale zůstala stát a bot dál klidně recitoval včerejšek.
Chatbot neumře hlučně, umře potichu
Znalosti chatbota nejsou dokument, který jednou napíšete a máte odškrtnuto. Je to živá věc a zestárne přesně ve chvíli, kdy na ni přestanete sahat.
Jedna zastaralá odpověď se zdá jako maličkost. Jenže každá ubírá kousek důvěry: zákazník, který jednou dostal špatnou informaci, příště napíše konkurenci a vy se to nikdy nedozvíte. Nezvoní žádný alarm, jen se pomalu rozevírají nůžky mezi tím, co bot tvrdí, a jak to doopravdy je.
Zastaralá odpověď nezazní jako chyba. Zazní jako fakt – a přesně to je na ní nebezpečné.
Údržbu je potřeba zabudovat do systému, ne ji dopisovat ručně
Aby bot nezestárl, nestačí ho hlídat silou vůle. Údržba musí být součástí systému, ne úkolem, na který si po večerech vzpomenete.
Ať bota stavíte na čemkoli, drží ho aktuálního tři věci. Rychlá dráha, kterou novinku doplníte za pár minut, ne až u příští velké revize. Pravidelná generálka, co projde celou knihovnu a vyhází, co zastaralo. A možnost vrátit se o krok zpět, když je nová verze slepá ulička.
Když jsem stavěl AI experta pro svoji komunitu, tohle byl první problém, který jsem chtěl vyřešit natrvalo. Neřešil jsem „jak bota vůbec rozjet“, ale jak zařídit, aby byl za rok chytřejší než dneska, ne hloupější.
Dnes čerpá z knihovny, která má přes megabajt textu a 876 otázek a odpovědí v češtině. Nejsou to náhodné odstavce naházené do okna, ale pečlivě stavěná báze. Někdo napíše „Kdy začíná další běh a co je v ceně?“ a odpověď přijde slušnou češtinou, celou větou s aktuálním termínem, ne suchým „viz web“.
Knihovna znalostí (knowledge base)
Knihovna znalostí je sada otázek, odpovědí a textů, ze které si chatbot bere, co má zákazníkovi říct. Není to jeho „mozek“, spíš učebnice: co je v ní zastaralé, to bot s klidem zopakuje dál. Proto o kvalitě odpovědí nerozhoduje ani tak model, jako to, jak čerstvá ta knihovna je.
Dvě rychlosti: pět minut a generálka jednou za půl roku
Knihovnu držím ve dvou režimech a každý má úplně jinou rychlost.
Ten první je bleskový. Objeví se nová informace, řekněme, že jsem natočil video, které něco vysvětluje přesněji. Zadám ji obyčejnou větou, jako když nástroji řeknete, co chcete, a do pěti minut podle ní bot odpovídá. Konkrétní změnu přitom vždycky schválím dřív, než se do knihovny zapíše.
Druhý režim je pomalý a důkladný. Vypadá jako revize, kterou by běžná firma zadala oddělení na měsíc práce. U mě ji tým agentů zvládne společně za zlomek času. Zhruba dvakrát ročně projde celá knihovna generálkou – co pořád platí, co přepsat, co dávno zastaralo.
Minutový sebetest
Otevřete svého chatbota a zeptejte se ho na cenu, termín nebo storno podmínky. Sedí odpověď na to, co platí dnes? A kdyby se cena zítra změnila, víte, kde ji přepsat a jak rychle by to bot věděl?
Nic se neztratí a nic nejde rozbít nadobro
Poslední vrstva je nenápadná, ale spím díky ní klidněji. Každá verze knihovny je uložená a dohledatelná.
Když se ukáže, že nějaká změna byla krok vedle, vrátím se ke starší verzi, jako bych přetočil čas. Žádné bezradné „a jak to vlastně bylo předtím?“, na které už nikdo neumí odpovědět.
A přesně tohle mi dovoluje pracovat s knihovnou odvážně. Nová informace tam smí za pět minut právě proto, že chyba není katastrofa, ale jeden krok zpátky. Odvaha měnit věci rychle stojí na jistotě, že se nic neztratí.
Co ten výsledek hlídá
Půlroční generálku nedělá jeden model, ale tým rešeršních agentů, každý na svém kusu. Co by jeden pročítal týden, zvládnou souběžně za chvíli a výsledek se poskládá do jedné souvislé knihovny, ne do sady záplat.
A pak přijde část, na které mi záleží nejvíc. Všechno, co ten tým vytvořil, si vezme do parády nezávislý audit, který schválně hledá chyby, ne aby chválil. Prověří výsledek hned v několika rovinách:
- jestli je to pravda,
- jestli si to někde neodporuje,
- jestli to sedí v češtině,
- jestli tam něco podstatného nechybí.
Teprve co projde tímhle sítem, zůstane v knihovně.
Komu se tahle údržba nevyplatí? Kdo má na webu pár neměnných vět a bota spíš pro ozdobu, tomu stačí je občas přečíst očima. Systém dvou rychlostí a verzování se vyplatí tam, kde se informace mění a špatná odpověď něco stojí: u cen, termínů, podmínek.
Celý systém v kostce
- Berte knihovnu znalostí jako živou věc, ne jako jednou hotový dokument.
- Postavte si rychlou dráhu: novinku doplníte za pár minut, ale až po svém schválení.
- Naplánujte pravidelnou generálku, která projde celou knihovnu a vyhází, co zastaralo.
- Nechte výsledek projít skeptickou kontrolou dřív, než se zapíše.
- Verzujte, ať se dá každá změna vzít zpět – teprve to vám dovolí měnit věci rychle.
Vraťme se k tomu zákazníkovi, co se ptal na cenu. U mého bota dostane tu dnešní, ne loňskou, a když se něco změnilo, ví to do pěti minut po mně. Dobrý chatbot se nepozná v den spuštění, kdy zvládne úplně všechno. Pozná se za rok, podle toho, jestli pořád odpovídá dnešní pravdu – a to není otázka lepšího modelu, ale systému, který ho udrží chytrého.
