Mittaa käyttöä ja vaikutusta
Tällä sivulla
Mitä et voi mitata, sitä et voi johtaa
Olet ottanut ChatGPT Enterprisen käyttöön, kouluttanut mestarisi ja käynnistänyt käyttöönotto-ohjelmasi. Nyt sinun on osoitettava, että se toimii. Mittareilla on kaksi erillistä tehtävää, jotka ihmiset usein sekoittavat keskenään: ne ohjaavat päivittäistä toimintaa ja perustelevat budjettipäätöksiä. Tarkastele ensimmäistä ryhmää viikoittain tehdaksesi korjauksia; tarkastele toista neljännesvuosittain rakentaaksesi perustelusi. Mittausjärjestelmä, joka on suunniteltu vain jälkimmäiseen tehtävään, tuottaa imartelevia mutta hyödyttömiä lukuja.
Mitä Hallintapaneeli tarjoaa jo valmiiksi
Enterprise- ja Edu-suunnitelmissa Hallintapaneelin Käyttö (Usage) -osio tarjoaa käyttöönottomittareita. Omistajat, järjestelmänvalvojat ja tilastojen lukijat pääsevät käsiksi näihin tietopisteisiin. Voit arvioida työtilasi kuntoa kolmen avainluvun avulla, jotka kattavat ChatGPT:n, Codexin ja Workin: määritetyt käyttäjäpaikat (odottavia kutsuja lukuun ottamatta), aktivoituneet käyttäjäpaikat (käyttäjät, jotka ovat lähettäneet vähintään yhden viestin) ja viikoittaiset aktiiviset käyttäjät (ne, jotka ovat lähettäneet vähintään yhden viestin edellisen täyden viikon aikana).
Yleiskatsausnäkymät seuraavat uniikkeja aktiivisia käyttäjiä, viestien määrää sekä GPT:iden, projektien ja taitojen käyttöä ajan myötä. Taitojen osalta tiedot järjestetään kutsujen määrän mukaan. Jos hakemistosi synkronoituu SCIM:n kautta, voit eritellä kaikki nämä tiedot ryhmän mukaan. Käytä ryhmiä, jotka vastaavat todellisia tiimejä, jolloin oivallukset ovat välittömiä. Oivallukset (Insights) -osio lisää vertailuja ja käyttäjäkyselyitä, kun taas käyttäjäkohtainen vienti syöttää dataa omiin työkaluihisi.
Aseta omat tavoitteesi sen sijaan, että lainaisit yleisiä vertailuarvoja. Aktivoitumisaste, joka pysähtyy ensimmäisen kuukauden jälkeen, viittaa ongelmiin tileissäsi tai viestinnässäsi, ei itse työkalussa. Pysyvä kuilu aktivoituneiden käyttäjäpaikkojen ja viikoittaisten aktiivisten käyttäjien välillä signaloi, että käyttö ei ole vakiintumassa.
Mitä mikään paneeli ei mittaa
Vaikutusmittarit vaativat kyselyitä tai täydentäviä mittauksia, minkä vuoksi tiimit usein laiminlyövät ne. Laske tehtävää kohden säästetty aika itsearvioinnin tai ennen-jälkeen-vertailujen avulla dokumentoiduissa prosesseissa. Arvioi koettua laatua yhdellä kysymyksellä: Arvioidaanko ChatGPT:llä tuotetut tulokset paremmiksi, vastaaviksi vai huonommiksi? Pysyvästi omaksuttujen käyttötapausten seuraaminen osastokohtaisesti on tehokkaampaa kuin teoreettisen listan ylläpito. Lopulta jaettujen avustajien uudelleenkäyttö määrittää niiden arvon: kerran käytetty avustaja ei ole tuottanut mitään; päivittäin käytetty avustaja on omaisuuserä.
Tyytyväisyyden osalta kysy standardi sisäinen NPS-kysymys: “Asteikolla 0–10, kuinka todennäköisesti suosittelisit ChatGPT:tä kollegallesi?”, ja toteuta neljännesvuosittainen viiden kysymyksen kysely, joka kattaa tyytyväisyyden, esteet ja ehdotukset. Mestarit tarjoavat jatkuvaa laadullista palautetta; tämä tieto saapuu ennen lukuja ja selittää sen, mitä data vain vahvistaa.
Rakenna mittaristosi ja rytmitä tarkastelut
Muunna tämä data kuukausittaiseksi mittaristoksi käyttämällä Notionia, Google Sheetsiä tai BI-työkaluasi. Järjestä se viiteen lohkoon: yleiskatsaus, joka näyttää aktivoituneet käyttäjäpaikat, viikoittaiset aktiiviset käyttäjät ja kolmen kuukauden trendin; ryhmätason näkymä, jossa on määrittämäsi värikoodit ja kynnykset; kymmenen tärkeintä käyttötapausta arvioidun säästetyn ajan kanssa; NPS-pisteet sanamuotoisine kommentteineen; sekä arvio rahaksi muutetusta säästetystä ajasta verrattuna lisenssikustannuksiin.
Säädä rytmi yleisösi mukaan. Viikoittain raakatiedot riittävät operatiiviseen hallintaan mestareiden ja tietohallintojohtajan (CIO) välillä. Kuukausittain koko mittaristo syötetään ohjausryhmälle. Neljännesvuosittain strateginen katsaus, jossa esitetään ROI ja suositukset, toimitetaan johtoryhmälle. Saman asiakirjan tarjoaminen kaikille kolmelle on paras tapa olla sitouttamatta ketään heistä.
Laske säästetty aika rehellisesti
Tämä on mittari, jota johto vaatii eniten, ja sen määrittäminen on vaikeinta. Itsearviointi kysyy aktiivisilta käyttäjiltä, kuinka paljon aikaa he arvioivat säästävänsä viikossa: yksinkertaista, mutta subjektiivista. Ennen-jälkeen-analyysi mittaa suoritusajan kolmelle–viidelle keskeiselle prosessille ennen käyttöönottoa ja sen jälkeen: rigoröösiä, mutta rajoittuu muutamaan tapaukseen. Arviointi soveltaa keskimääräistä säästettyä aikaa keskustelua kohden – esimerkiksi kymmenen minuuttia – kerrottuna volyymilla: karkeaa, mutta skaalautuvaa. Rehellinen lähestymistapa yhdistää kaikki kolme: itsearviointi näyttää trendin, ennen-jälkeen-analyysi validoi sen konkreettisilla esimerkeillä ja arviointi tarjoaa suuruusluokan.
Signaalit, jotka vaativat toimia
Neljä signaalia vaatii toimia, ja asetat kynnykset oman kontekstisi perusteella. Matala aktivoitumisaste kaksi kuukautta lanseerauksen jälkeen osoittaa, että viestintäsi ja koulutuksesi epäonnistuivat, ei että työntekijät vastustaisivat muutosta. Viikoittaiset aktiiviset käyttäjät huomattavasti alle aktivoituneiden käyttäjäpaikkojen määrän osoittavat, että ihmiset kokeilevat työkalua mutta eivät palaa: etsi este, joka on usein huonosti valittu käyttötapaus. Kokonaisen ryhmän toimettomuus viittaa epävarmaan esimieheen tai passiiviseen mestariin; ratkaise tämä keskustelulla, ei automaattisella muistutuksella. Laskeva NPS vaatii laadullista kyselyä ennen kuin tyytymättömyys leviää. Jokaisen signaalin on laukaistava korjaava toimi kahden viikon kuluessa.
Sinun vuorosi
Rakenna mittaristosi. Valitse viisi mittaria: kolme Hallintapaneelista ja kaksi kyselyistä. Aseta hälytyskynnys ja vastuuhenkilö kullekin, ja ajoita ensimmäinen kuukausittainen katsauksesi mestariesi kanssa.
Viralliset lähteet: Workspace analytics for ChatGPT Enterprise and Edu · Managing members, workspace roles, and seats in ChatGPT Enterprise and Edu · SCIM provisioning and management (OpenAI Help Center)
Keskeiset asiat
- Enterprise- ja Edu-hallintapaneeli seuraa määritettyjä käyttäjäpaikkoja, aktivoituneita käyttäjäpaikkoja ja viikoittaisia aktiivisia käyttäjiä, jaoteltuna SCIM-ryhmittäin.
- Se näyttää myös GPT:iden, projektien ja taitojen käytön; käyttäjäkohtainen vienti syöttää dataa omiin työkaluihisi.
- Säästetty aika, koettu laatu ja NPS vaativat kyselyitä: mikään paneeli ei mittaa niitä.
- Yhdistä itsearviointi, ennen-jälkeen-analyysi ja arviointi laskeaksesi säästetyn ajan rehellisesti.
- Aseta omat hälytyskynnyksesi ja reagoi kahden viikon kuluessa.