Ako meriame prínos AI
AI riešenie sa neoplatí preto, že pôsobí moderne. Musí zlepšiť rovnakú firemnú metriku oproti dnešnému postupu.
Základná hodnota
Zmeriame dnešný čas na prípad, objem, chybovosť, náklady a výsledok.
Malý pilot
Rovnakú úlohu vykonáme na reprezentatívnej vzorke s kontrolou človekom.
Rovnaké meranie
Porovnáme čas, kvalitu, opravy, náklady a spokojnosť používateľa.
Rozhodnutie
Rozšíriť, upraviť, ponechať iba ako asistenciu alebo riešenie zastaviť.
Čo sa oplatí sledovať
(minúty pred - minúty po) × počet prípadov.
Ušetrené hodiny × reálna hodinová cena práce.
Počet chýb, opráv, reklamácií alebo vrátených výstupov.
Rýchlosť odpovede, počet dopytov, úspešnosť ponúk alebo konverzia.
Malý servis pripravuje cenové ponuky
Poznámky sa ručne prepisujú do starej ponuky.
Agent pripraví návrh, majiteľ overí cenu a termín.
Pri 20 ponukách mesačne ide o modelovú úsporu približne 8 hodín. Skutočný výsledok sa musí odmerať na dátach konkrétnej firmy.
Výskum ako východisko, vlastný pilot ako dôkaz
Výsledky štúdií ukazujú potenciál, nie garanciu. Educado preto odporúča rovnakú metriku zmerať pred pilotom aj po ňom.
Historická štúdia Lead Response Management uvádza, že pri telefonickom kontakte do 5 minút boli šance kvalifikovať online dopyt 21-krát vyššie než pri kontakte po 30 minútach. Nejde o 21× viac uzavretých obchodov a výsledok sa nemusí preniesť na každé odvetvie.
Zdroj: Lead Response Management Study (2007)V experimente so 444 vysokoškolsky vzdelanými profesionálmi skrátila generatívna AI čas na vybrané písomné úlohy v priemere o 40 % a zvýšila hodnotenú kvalitu o 18 %. Platí to pre úlohy v rozsahu experimentu, nie automaticky pre každú firemnú prácu.
Zdroj: Science: Noy a Zhang (2023)Pri nasadení AI asistenta medzi 5 179 pracovníkmi zákazníckej podpory vzrástla produktivita priemerne o 14 %; najväčší prínos mali menej skúsení pracovníci. Skúseným ľuďom nástroj pomohol menej, preto má zmysel pilot a vlastné meranie.
Zdroj: NBER: Generative AI at WorkOECD medzi prínosy digitalizácie pre malé a stredné firmy zaraďuje vyššiu produktivitu, nižšie prevádzkové a transakčné náklady, lepšiu prácu s informáciami, automatizáciu a väčší dosah na zákazníkov. Zároveň upozorňuje na bariéry zručností, financií a bezpečnosti.
Zdroj: OECD: The Digital Transformation of SMEsBez zlepšenia sa automatizácia nerozširuje
Vyššia rýchlosť nestačí, ak rastie chybovosť alebo riziko. Rozhodnutie má zohľadniť kvalitu, bezpečnosť, prijatie ľuďmi a celkové náklady vrátane kontroly.