Prvý AI pilot: vyberte úlohu, ktorú viete overiť

Začnite pracovným krokom

Zadanie „chceme AI vo firme“ je príliš široké na zmysluplné vyhodnotenie. Presnejší začiatok je: pracovník podpory hľadá odpoveď v návodoch, obchodník porovnáva požiadavku s katalógom alebo kolega prepisuje údaje z dokumentu. Pri každej takejto úlohe sa dá opísať vstup, očakávaný výsledok a rozhodnutie, ktoré zostáva človeku.

Vyberte proces, ktorý pozná konkrétny tím a ktorý sa opakuje dostatočne často, aby ste získali reprezentatívne príklady. Pilot na výnimočnej úlohe môže vyzerať dobre pri ukážke a pritom veľa nepovedať o každodennej práci. Rovnako pomôže vedieť, čo má tím robiť, keď podklady nestačia.

Zistite, čo dnes stojí čas

Pred zapojením AI zmapujte súčasný postup. Koľko času zaberá hľadanie? Ktoré kroky sa opakujú? Kde vznikajú opravy? Vyhodnotenie musí počítať aj s kontrolou návrhu. Ak nástroj vytvorí odpoveď rýchlo, ale človek ju potom dlho opravuje, samotný čas generovania nevysvetľuje prínos.

Ukazovateľ nemusí byť finančný. Pri znalostnom asistentovi môže tím hodnotiť, či odpoveď obsahuje potrebné informácie a či sa dá podložiť zdrojom. Pri dokumentoch môže kontrolovať správnosť jednotlivých polí. Dôležité je dohodnúť pravidlá skôr, ako uvidíte prvé výsledky.

Podklady a prístupy sú súčasť zadania

Úspech úlohy závisí aj od toho, čo riešenie môže použiť. Dokumenty môžu byť neaktuálne, obsahovať rozdielne verzie alebo mať odlišné prístupové práva. Pri pilote preto nestačí odovzdať priečinok súborov. Potrebujete určiť zdroj, vlastníka obsahu a postup jeho aktualizácie.

Riešenie nemá poskytovať používateľovi informácie iba preto, že ich niekde dokáže nájsť. Návrh musí počítať s tým, kto môže vidieť zdroj aj výsledok. Na prvé testy sa dajú vybrať vhodné ukážkové podklady; prístup k citlivým údajom má predchádzať dohoda o prostredí a zodpovednostiach.

Ukážkový rozsah: podpora pri výbere produktu

Predstavte si pilot, v ktorom asistent navrhuje vhodnú kategóriu produktu podľa zákazníckej otázky. Tím vyberie ukážkové požiadavky, ku každej pripraví prijateľnú odpoveď a určí podklady, ktoré ju vysvetľujú. Katalóg môže obsahovať podobné názvy aj rozdielne vlastnosti. Preto treba hodnotiť vecnú vhodnosť odporúčania, nie iba jeho plynulé znenie.

Pri otázke bez potrebných parametrov má asistent vedieť požiadať o doplnenie. Pri nedostupnej informácii nemá vymyslieť vlastnosť produktu. Takto ohraničená úloha umožňuje preveriť správanie na bežných aj problematických otázkach. Ide o ilustračný rozsah pilotu, ktorého testy a výsledky treba pripraviť pre konkrétny katalóg.

Vyskúšajte aj neúplnú otázku

Testovacia sada by mala obsahovať bežné úlohy aj prípady, pri ktorých chýba údaj, dokument si odporuje alebo odpoveď nie je v zdrojoch. Pri každom určte prijateľné správanie. Niekedy je správnym výsledkom otázka na doplnenie alebo odovzdanie človeku.

Testy uchovajte a zopakujte ich pri zmene podkladov, modelu alebo nastavenia. Nová verzia môže zlepšiť jednu úlohu a zhoršiť inú. Rovnaká sada pomáha odlíšiť dojem z pôsobivej ukážky od výsledku, ktorý sa dá porovnať.

Pilot a produkcia potrebujú odlišné dohody

Pilot môže bežať s obmedzeným počtom používateľov a ručnou kontrolou každého výstupu. Pred širším použitím treba vyriešiť integrácie, oprávnenia, náklady, sledovanie chýb a zodpovednosť za podporu. Prínos pilotu preto posudzujte spolu s tým, čo bude stáť jeho ďalšia prevádzka.

Výstupom má byť aj rozhodnutie: pokračovať, upraviť úlohu alebo pilot zastaviť. Keď sa ukáže, že postačí jednoznačné pravidlo alebo lepšie vyhľadávanie bez generovania, je to užitočné zistenie. Ušetrí firme ďalšiu investíciu do nesprávne zvoleného riešenia.

Od témy ku konkrétnemu riešeniu.

Súvisiaca realizácia: CBC Slovakia