AI vytvořila hezkou tabulku: jak ověřit obsah každé důležité buňky

Proč hezká tabulka působí důvěryhodněji, než by měla

Zarovnané sloupce, jednotné jednotky a přesvědčivé popisky vytvářejí dojem hotové práce. proto oddělujte vzhled od obsahu a ke každé důležité buňce přistupujte jako k samostatnému tvrzení, které může být špatně opsané, dopočítané jinak, než jste chtěli, nebo doplněné bez opory ve vstupu.

Praktické riziko je hlavně v rutině. Když tabulka vypadá profesionálně, člověk snadno přeskočí kontrolu řádků uprostřed, součtového řádku a poznámek pod čarou. Právě tam se přitom často skrývá záměna období, jiná měna, jiný sloupec zdroje nebo hodnota, kterou model domyslel, aby tabulka nepůsobila neúplně.

Pomáhá proto jednoduché pravidlo, které jako doporučenou praxi CIAD uvádíme i v návodu jak ověřit odpověď AI: nejdřív si označte, které buňky skutečně ovlivní rozhodnutí, a teprve ty procházejte buňku po buňce. Zbytek tabulky může zůstat orientační, ale důležité buňky musí mít dohledatelný zdroj a záznam o kontrole.

Co formát potvrzuje a co už ne

Formát potvrzuje pouze tvar, tedy že je vyplněný správný počet sloupců, správný typ hodnoty a očekávané názvy polí. Neříká nic o tom, zda číslo patří do daného řádku, zda součet sedí a zda textové shrnutí odpovídá podkladům.

Podle dokumentace Structured Outputs může strukturovaný výstup dodržet předepsané schéma, a přesto obsahovat věcné chyby; správný tvar tedy není potvrzením faktů.

Proto berte striktní šablonu spíše jako pomoc pro strojové zpracování a čitelnost, nikoli jako kontrolu pravdivosti. I když výstup projde automatickou validací, člověk musí důležité buňky porovnat se zdrojem. Obecný princip platí napříč nástroji a je třeba ho odlišit od chování jednoho konkrétního produktu nebo jedné konkrétní funkce.

Které buňky označit jako důležité

Nejdřív si v tabulce barevně nebo značkou označte buňky, bez kterých by rozhodnutí bylo jiné. doporučujeme začít součty, jednotkovými cenami, termíny, identifikátory a každou buňkou, která se dále kopíruje do smlouvy, objednávky, reportu nebo prezentace.

Druhou skupinou jsou buňky odvozené výpočtem. Právě u nich se hodí připomenout, proč AI špatně počítá, tedy že problém často není ve vzhledu vzorce, ale ve špatně zvoleném vstupu, zaokrouhlení nebo záměně sloupců. Takovou buňku označte jako důležitou vždy, když se výpočet nedá na první pohled zopakovat z hlavy.

Třetí skupinou jsou chybějící hodnoty. Prázdná buňka, pomlčka, nula a text typu neuvedeno nejsou totéž. si předem určete, co každá značka znamená ve vašem souboru, jinak budete při kontrole tápat, zda jde o skutečnou nulu, nebo jen o nedoplněný údaj.

Buněčný kontrolní list: zdroj, přepočet, chybějící hodnota, schválení

Následující kartu si zkopírujte do poznámek nebo tabulkového souboru a vyplňte pro každou důležitou buňku. Jde o doporučenou praxi CIAD, nikoli o zákonnou povinnost, a jejím cílem je možnost chybu včas zachytit, ne chybu zcela vyloučit.

Postup vyplnění je úmyslně krátký. Do sloupce Zdroj napište přesné místo, ne pouze název podsložky. Do sloupce Přepočet napište výsledek vlastní kontroly a čím jste počítali. Do sloupce Chybějící hodnota napište, jak jste prázdné nebo nejasné místo vyložili. Do posledního sloupce napište rozhodnutí a kdo ho udělal.

Když zdroj chybí, buňku neschvalujte. ji označte jako neověřenou a vraťte se k podkladům. Podobný postup podrobněji popisuje i návod jak kontrolovat vzorek výstupu AI, který pomáhá vybrat, kdy stačí vzorek a kdy je nutná kontrola všech důležitých buněk.

Ilustrativní příklad: tři řádky a jeden nesedící součet

Tento příklad je zcela hypotetický a ilustrativní, neslouží jako měření přesnosti žádného nástroje. Představte si, že AI dostane tři položky za měsíc a má vrátit tabulku se součtem.

Vstupní podklad říká: položka A 12 400 Kč, položka B 8 600 Kč, položka C 5 000 Kč. Výstup AI vypadá vzorně, ale v řádku Celkem uvádí 25 000 Kč. Vlastní přepočet mimo AI dává přesný výsledek 12 400 + 8 600 + 5 000 = 26 000 Kč.

Rozdíl je tedy přesně 1 000 Kč a buňka Celkem je chybná, i když formát tabulky je v pořádku. Do kontrolní karty byste zapsali: zdroj tři řádky podkladu, přepočet 26 000 Kč kalkulačkou, chybějící hodnota se netýká, stav nesedí a tabulku vracíte k opravě. Teprve opravených 26 000 Kč byste mohli schválit jménem a datem.

Omezení této buněčné kontroly

Tento postup jako doporučený pracovní postup zvyšuje možnost chybu najít, ale nezaručuje, že v tabulce už žádná chyba není. Spoléhá na to, že máte správný a úplný zdroj. Pokud je chybný už podklad, bude chybná i pečlivě zkontrolovaná buňka.

Omezením je také lidská pozornost u velkých tabulek. Kontrolní list funguje dobře pro desítky důležitých buněk, ale u stovek řádků snadno sklouzne k povrchnímu odškrtávání. V takovém případě zmenšete rozsah, rozdělte kontrolu mezi dva lidi, nebo si vyžádejte nový užší výstup pouze pro důležité položky.

Posledním omezením je výklad textových buněk. U čísel lze přepočet zopakovat, u slovního shrnutí často ne. Tam si zapište, která věta podkladu tvrzení podporuje, a pokud taková věta neexistuje, považujte buňku za neověřenou. Nepředstírejte živé testování nástroje, kontrola má ověřit konkrétní tabulku před vámi, ne hodnotit model obecně.

Další krok, když kontrola nesedí

Když některá důležitá buňka nesedí, zastavte šíření tabulky dál. Opravte nejdřív zdrojovou nejasnost, teprve pak žádejte AI o novou verzi s přesnějším zadáním, například jaký sloupec se má sčítat a co se má stát s prázdnými buňkami.

Si ponechte původní výstup, opravenou verzi a vyplněnou kontrolní kartu u sebe. Příště hned uvidíte, zda se stejná chyba opakuje na stejném typu buňky, a zadání upravíte cíleně. Pro rozhodnutí pak použijte pouze verzi, která má u všech důležitých buněk stav sedí včetně jména a data schválení.