smolagents
smolagents poskytuje agentov, ktorí použijú zaregistrované nástroje a podľa konfigurácie aj vykonanie kódu. Významnou hranicou je prostredie, v ktorom sa výsledná akcia vykoná.
Príklad z pracovného postupu
Čítací nástroj vráti dvadsať riadkov a označenie, že výsledok má ďalšiu stránku. Ukončenie agenta po dosiahnutí limitu má používateľovi vysvetliť, že ide o čiastkový prehľad. Nemožno ho označiť ako úplný súpis.
Ako výsledok overiť
Skúška kontroluje ukončenie po limite a zachovanie dôkazu o tom, ktorý nástroj vrátil použitú hodnotu.
Rozpracovaná akcia v podnikovom systéme
Pri akcii s účinkom mimo rozhovoru potrebujeme nezávislý stav operácie. Požiadavka na vytvorenie dokladu môže doraziť na server, hoci sa odpoveď už stratila. Aplikácia má pred opakovaním dokázať dohľadať, či existuje výsledný doklad a kto schválil jeho vytvorenie.
Správanie možno preveriť na správe, ktorá súčasne reklamuje dodávku a objednáva ďalší kus. Dve požiadavky majú samostatný stav. Potvrdenie jednej nesmie automaticky uzavrieť druhú ani vytvoriť dve rovnaké objednávky.
Malý výber nástrojov zjednoduší kontrolu výsledku výpočtu
Agent má napríklad odpovedať na otázku o odchýlke spotreby elektriny. Na túto úlohu mu môže stačiť načítanie meraní a dohodnutý výpočet súhrnu. Vopred rozlíšime, ktoré parametre zadáva používateľ a ktoré sa dopĺňajú z platnej evidencie, napríklad jednotky a pracovné zmeny.
Medzivýsledky zachytíme spolu s časovým rozsahom. Pri nesprávnej odpovedi potom skontrolujeme skutočný výber meraní, jednotky a spracovanie chýbajúcej smeny, čo býva užitočnejšie než samotné porovnanie dvoch záverečných viet.
Otázky z praxe
Aký je praktický rozdiel medzi čítaním a nástrojom s účinkom?
Pri čítaní posudzujeme rozsah oprávnených dát, pri zmene navyše overujeme identitu operácie, súhlas a výsledok zápisu. Agent sumarizujúci zákazky môže vystačiť s výhradne čítacím rozhraním. Náhodná formulácia používateľa tak nemá dôvod meniť účtovné alebo skladové údaje.
Ako ukázať používateľovi, že zdroj vrátil iba časť dát?
Nástroj musí spolu so záznamami vrátiť informáciu o rozsahu alebo pokračovaní. Ak agent dosiahne časový limit pred načítaním ďalšej strany, odpoveď uvedie hranice zhrnutia. V teste porovnáme zobrazený počet s autoritatívnou evidenciou aj s rozsahom skutočne spracovaných strán.
Čo vyhodnocovať okrem úspešného dokončenia agenta?
Sledujeme, či agent vybral primeraný nástroj, dodržal hranice dát a zostal v rozpočte. Pri významnej chybe má uviesť rozpracovaný stav a čo potrebuje od pracovníka. Úloha skončená s plynulým súhrnom, ktorý vynechal časť dokladov bez upozornenia, neprešla vecnou kontrolou.
Súvisiace stránky
-
LiveKit
LiveKit Agents spája mediálny prenos s komponentmi pre hlasového agenta.
Otvoriť -
Dify
Dify ponúka rozhranie na zostavenie aplikácií s jazykovým modelom, dátovými zdrojmi a pracovnými postupmi.
Otvoriť -
Riešenia s umelou inteligenciou
Vyvíjame AI funkcie pre firemný softvér. Model pripraví návrh zo správy alebo dokladu, pracovník skontroluje zdroj a potvrdí zápis do systému.
Otvoriť