Moniagentti laskee AI-pilotin ROI:n: kannattaako, mitä maksaa ja mitä ei saa tehdä

Toimittaja lupaa AI-pilotille säästöt, mutta kukaan ei tiedä, mitä pilotissa saa tehdä ja mitä ei. Tänään rakennat moniagenttityön, jossa jokainen luku on jäljitettävissä. Kuvitteellinen alkukuva: kolme agenttia neuvottelee kahvihuoneessa laskimen äärellä. Se on fiktiota – luvut sen sijaan eivät. Pelkkä chat-vastaus kertoo, miltä ROI voisi näyttää. Agentti sen sijaan saa tavoitteen, työkalut ja lopetusehdon: se […]

Toimittaja lupaa AI-pilotille säästöt, mutta kukaan ei tiedä, mitä pilotissa saa tehdä ja mitä ei. Tänään rakennat moniagenttityön, jossa jokainen luku on jäljitettävissä. Kuvitteellinen alkukuva: kolme agenttia neuvottelee kahvihuoneessa laskimen äärellä. Se on fiktiota – luvut sen sijaan eivät.

Pelkkä chat-vastaus kertoo, miltä ROI voisi näyttää. Agentti sen sijaan saa tavoitteen, työkalut ja lopetusehdon: se hakee luvut sinun dokumenteistasi, laskee, merkitsee oletukset ja pysähtyy, jos näyttö ei riitä. Tehdään tämä yhdelle tapaukselle. Kuvitteellinen esimerkki: keskikokoinen yritys harkitsee AI-pilottia asiakaspalvelun sähköpostien käsittelyyn. Kaikki luvut ovat havainnollistavia, eivät tuloksia mistään asiakkuudesta.

Tehtäväbrief: tavoite, syöte, työkalut, rajat, lopetusehto

Aloita roolijaosta. Roolit ovat tutkija, toteuttaja ja tarkastaja – ja tarkastaja ei ole sama keskustelu kuin tekijät. Tässä kopioitava tehtäväbrief. Tavoite: arvioi, kannattaako AI-pilotti tässä prosessissa, ja rajaa se. Syöte: prosessikuvaus, tuntikustannukset ilman henkilötietoja, nykyinen käsittelymäärä, toimittajan tarjous. Työkalut: yrityksen omat dokumentit, taulukot ja tarjous-PDF:t. Rajoitukset: ei salasanoja, ei henkilötietoja, ei keksittyjä lukuja. Lopetusehto: kolme skenaariota, jokaiselle luvulle lähde, oletukset merkitty, go/no-go-suositus ja kirjallinen lista siitä, mitä pilotissa ei saa tehdä.

Tutkija: hakee, merkitsee lähteet, ei arvaa

Tutkija-agentti työskentelee rinnalla. Se lukee prosessikuvauksen, poimii viestimäärät ja käsittelyajat järjestelmästä ja käy läpi toimittajan tarjouksen – myös skannatut ja kuvana tallennetut liitteet ovat nykyään agentille luettavaa sisältöä, samoin kymmenet tiedostot yhdellä kertaa. Monivaiheinen suunnittelu näkyy järjestyksenä: ensin agentti listaa, mitä lukuja tarvitaan, sitten hakee ne, ja merkitsee jokaisen kohdalle lähteen sekä sen, onko luku mitattu vai arvioitu. Jos jokin puuttuu, se ei arvaa – se jättää aukon näkyviin ja kertoo, keneltä tiedon saa.

Toteuttaja: skenaariot, oletukset, herkkyysanalyysi

Toteuttaja-agentti rakentaa mallin noista luvuista. Havainnollistava esimerkki: nykyinen käsittely 8 000 viestiä kuukaudessa, keskituntikustannus 45 euroa työnantajakulut sisältäen, agentin osuus käsittelystä kolmessa skenaariossa 30, 55 ja 70 prosenttia. Ihmisen työaika vähenee vain osittain, koska tarkistus ja poikkeukset jäävät ihmiselle. Työkaluina taulukko, jossa jokainen solu viittaa lähteeseen, ja erillinen oletuslista. Malli tuottaa herkkyysanalyysin: mikä muuttuja heilauttaa tulosta eniten. Tässä tapauksessa se on yleensä ihmisen tarkistukseen kuluva aika, ei mallin hinta.

Yksi päätösmuistio: rajat, vaatimukset, go/no-go

Yhdistäminen tuottaa yhden päätösmuistion, ei kolmea erillistä raporttia: yksi sivu, jossa kannattavuusrajat, käyttöönottovaatimukset ja punaiset rajat. Punaiset rajat ovat tämän työn tärkein osa. Havainnollistava lista: pilotissa ei käsitellä henkilötietoja sisältäviä viestejä ilman erillistä arviota, agentille ei anneta oikeutta lähettää vastauksia asiakkaalle ilman ihmisen hyväksyntää, eikä asiakasdataa siirretä työkaluun, jota ei ole hyväksytty. Jos nämä ehdot eivät täyty, suositus on: älä aloita vielä. Se on hyväksyttävä lopputulos.

Tarkastaja-agentti arvioi – ja pysäyttää tarvittaessa

Tarkastaja-agentti arvioi tuloksen erillisillä kriteereillä: onko jokaisella luvulla lähde, onko arviot merkitty arvioiksi, sisältääkö aineisto henkilötietoja tai tunnisteita, ja täyttyvätkö hyväksymiskriteerit. Tyypillinen löydös: keskituntikustannus oli laskettu ilman työnantajakuluja, mikä kaunisti säästöä. Toinen: yhdestä skenaariosta puuttui kokonaan lähde. Tarkastaja ei korjaa hiljaa, vaan palauttaa työn tekijälle ja pysäyttää julkaisun. Näin käy myös silloin, kun näyttö on riittämätöntä: epävarma työ ei mene eteenpäin koristeltuna, vaan palaa kysymyksenä takaisin.

Kolme asiaa mukaan. Yksi: jaa työ rooleihin – tutkija, toteuttaja, tarkastaja – ja pidä tarkastaja erillään tekijöistä. Kaksi: vaadi lähde jokaiselle luvulle ja merkitse arviot arvioiksi; herkkyysanalyysi kertoo, mihin kannattaa keskittyä. Kolme: kirjaa pilotin kielletyt alueet ennen kuin kukaan koskee tuotantodataan.

Harjoitus

Valitse yksi toistuva prosessi (voi olla kuvitteellinen). Kirjoita tehtäväbrief videon rakenteella: tavoite, syöte, työkalut, rajoitukset, lopetusehto. Aja se kahdella roolilla: tutkija-agentti listaa tarvittavat luvut ja niiden lähteet, toteuttaja-agentti tekee kolme skenaariota taulukkoon ja merkitsee oletukset. Käytä vain keksittyjä, selkeästi merkittyjä esimerkkilukuja – ei oikeita henkilötietoja, salasanoja tai asiakasaineistoa. Tarkasta lopuksi tulos hyväksymislistalla ja kirjaa ylös vähintään yksi kohta, joka ei mennyt läpi.

Tarkistuslista

  • Jokaisella luvulla on merkitty lähde tai merkintä 'arvio' ja perustelu, mihin arvio nojaa
  • Kolme skenaariota (varovainen, perus, optimistinen) sekä herkkyysanalyysi siitä, mikä muuttuja vaikuttaa tulokseen eniten
  • Kirjallinen lista siitä, mitä pilotissa ei saa tehdä, ja selkeä pysäytysperuste: jos näyttö, käyttöoikeudet tai hyväksymiskriteerit eivät täyty, työ ei etene
  • Missään vaiheessa ei ole annettu agentille salasanoja eikä tarpeettomia henkilötietoja

— Aino Pilvi, AI-asiantuntija, Cloud Computing Oy

Kysyttävää? aino@cloudcomputing.fi | WhatsApp: +358 33 119 3196

Haluatko lisää AI-vinkkejä sähköpostiisi?

Liity Cloud Computing Oy:n postituslistalle. Saat käytännön vinkkejä AI-agenteista, laskutuksen automatisoinnista ja muusta — ei spämmiä.

    Pysy ajan tasalla AI-agenteista ja tekoälyn mahdollisuuksista pienyrityksille. Ei spämmiä, ei lähettämisiä joka päivä.

    [cloudflare-turnstile cf-turnstile-response]



    Kysy Ainolta