juni 2023

IT Department Solipsism

Når en IT-organisasjon tar sine egne måltall, veikart og arkitektur for forretningens sentrum, og hvordan man vender linsen utover igjen

Sammendrag

Solipsisme er troen på at bare ens eget sinn er sikkert å eksistere, og at verden utenfor det er en slutning. Denne artikkelen argumenterer for at en IT-avdeling kan falle inn i en organisatorisk versjon av den: en innovervendt tilstand der avdelingen behandler sine egne systemer, måltall, veikart og målarkitektur som virksomhetens sentrum, og menneskene som bruker systemene dens som en slutning trukket fra saker. Vi i Nashua navngir fire manifestasjoner, overført fra et bredere bedriftsmønster. Sentralitetsillusjonen er troen på at forretningen tenker like mye på IT som IT tenker på seg selv, når en bruker berører et system i et kort, instrumentelt øyeblikk inne i en dag som handler om noe annet. Det interne ekkokammeret er styringen der en idé overlever arkitekturråd og styringsgrupper fordi den behager avdelingen, for så å møte arbeidet og mislykkes. Abstraksjonsfrakoblingen er ledelsens oppmerksomhet rettet mot plattformen, den ene kilden til sannhet og målarkitekturen, mens arbeidet på bakkenivå og nødløsningene som faktisk holder virksomheten i gang, forblir usett. Den innovervendte linsen er vanen med å måle suksess ut fra oppetid, lukkede saker og nådde milepæler, som beskriver avdelingens egen verden snarere enn om noen fikk gjort arbeidet sitt. Vi gir en minimal modell som skiller verdien forretningen oppnår fra arbeidet avdelingen teller, viser hvordan feiletterspørsel lar de målte tallene forbedre seg mens den oppnådde verdien faller, og utleder tidlige varselindikatorer og deres utovervendte erstatninger. Vi leser den nederlandske situasjonen, der etterspørsel–tilbud-delingen i regieorganisatie og et tiår med offentlige IKT-gjennomganger gjør mønsteret uvanlig synlig, og sporer et konstruert tilfelle av en avdeling som er grønn på hvert dashbord mens forretningen den betjener ikke er det. Dette er praktikerrettet analyse; artikkelen avsluttes med hvordan gapet kunne måles og testes.

Nøkkelord: IT-ledelse; IT–forretning-samstemming; brukersentrert design; tjenestedominant logikk; feiletterspørsel; skygge-IT; innenfra-perspektiv; måltall; virksomhetsarkitektur; organisatorisk solipsisme; Nederland; regieorganisatie

1. Innledning

Spør en IT-avdeling hvordan det går, og den vil svare på sitt eget språk: tilgjengelighet på tre nier, servicedesken innenfor sine mål, migreringen etter plan, revisjonen bestått, veikartet i rute. Spør menneskene avdelingen finnes for å betjene hvordan det går med IT, og svaret kommer på et helt annet språk: det de trengte tok en uke, den nye portalen har ett trinn mer enn den gamle, rapporten de lever etter er et regneark de holder utenfor systemet, og den raskeste måten å få gjort noe på er å kjenne noen. Begge svarene kan være sanne samtidig, og når de er det, har avdelingen en tilstand som denne artikkelen navngir og anatomiserer: den har vendt seg innover, og tatt sin egen verden for verden.

Vi låner ordet solipsisme med vilje. I filosofien er det posisjonen at bare ens eget sinn er sikkert å eksistere og alt annet er en slutning som kan ta feil. En organisasjon kan ikke bokstavelig holde den troen, men den kan oppføre seg som om den gjorde det. En IT-avdeling oppfører seg solipsistisk når dens egne artefakter, systemene den drifter, måltallene den fører, veikartet den forsvarer, arkitekturen den bygger mot, blir det den behandler som virkelig, og brukerne, arbeidet og resultatene blir en slutning den trekker fra sine egne instrumenter, mest fra saker. Slutningen er tapsbefengt, og avdelingen merker ikke tapet, fordi instrumentene fortsetter å vise grønt. Dette er ikke dumhet, og det er sjelden vond vilje. Det er den naturlige driften til enhver gruppe som måles på sin egen aktivitet, isolert fra menneskene den betjener av et lag av saker og kundeansvarlige, og belønnet av et hierarki som ser de samme innovervendte tallene som den selv.

Mønsteret er ikke spesielt for IT. Det er en anerkjent svikt hos organisasjoner generelt, noen ganger kalt bedriftssolipsisme: et selskap som handler som om dets merkevare, dets måltall og dets interne mål er sentrum av kundenes liv, ute av kontakt med menneskene og realitetene utenfor sine egne vegger. Markedsføringskampanjen som begeistrer styret og dør i markedet, omorganiseringen som optimaliserer organisasjonskartet og ikke arbeidet, besettelsen av overordnet kontroll over en abstraksjon mens arbeidet på bakkenivå som holder forretningen i gang blir ignorert, er alle den samme vendingen innover. Denne artikkelen overfører det mønsteret til IT-avdelingen, der det har sine egne karakteristiske former, sine egne instrumenter for selvbedrag, og, vil vi argumentere, sin egen kur.

Bidraget er et vokabular og en liten modell, ikke en ny teori. Vokabularet er fire manifestasjoner (avsnitt 3), hver den IT-formen av et bedriftsmessig original. Modellen (avsnitt 4) skiller verdien forretningen oppnår fra arbeidet avdelingen teller, og viser mekanismen, feiletterspørsel, som gjør at de to kan bevege seg i motsatte retninger, slik at avdelingen ser sunnest ut på dashbordene akkurat der den betjener dårligst. Fra modellen leser vi et sett med tidlige varselindikatorer og deres utovervendte erstatninger (avsnitt 5). Spørsmålet artikkelen stiller er derfor: hvordan kommer en IT-avdeling til å forveksle sine egne instrumenter med forretningen den betjener, hvordan kan den oppdage det, og hvordan vender den linsen utover igjen?

Artikkelen er skrevet for den nederlandske situasjonen, som viser mønsteret med uvanlig klarhet (avsnitt 6). Den organiserende ideen i nederlandsk IT-styring de siste femten årene, regieorganisatie som skiller en etterspørselsorganisasjon fra en leverende, institusjonaliserer nettopp avstanden mellom avdelingen og arbeidet som nærer vendingen innover; og et tiår med offentlige gjennomganger, fra den parlamentariske IKT-granskingen til det stående gjennomgangsorganet som fulgte den, er i stor grad en opptegnelse over offentlige IT-prosjekter som betjente sin egen logikk snarere enn borgerens. Avsnitt 7 sporer et konstruert tilfelle. Avsnitt 8 til 11 gir kuren, besvarer innvendinger, angir grenser og konkluderer.

2. Bakgrunn og beslektet arbeid

2.1 Solipsisme som en organisatorisk metafor

At organisasjoner mister kontakten med sitt ytre er en gammel observasjon under mange navn. Janis (1972) beskrev gruppetenkning, tendensen hos en samholdt gruppe til å konvergere mot et syn som bevarer dens egen harmoni på bekostning av virkelighetstesting. Beer (1979) bygde en hel ledelseskybernetikk på prinsippet om at en organisasjon er levedyktig bare hvis dens interne modell av verden korrigeres av kanaler som bærer det ytre inn, og svikter når de kanalene atrofierer; hans leveregel om at formålet med et system er det det gjør, ikke det det sier at det gjør, er diagnosen denne artikkelen anvender på dashbord. Weick (1995) viste hvordan organisasjoner iscenesetter miljøet de deretter tar for gitt, slik at en innovervendt enhet ikke bare feiltolker sin verden, men delvis produserer avlesningene. Ingen av disse forfatterne skrev om IT-avdelinger, men hver beskrev mekanismen som gjør at en gruppe kommer til å leve inne i sin egen beretning om tingene.

2.2 Innenfra-perspektivet og utenfra-perspektivet

Den mest presise beskrivelsen av den kognitive feilen tilhører Kahneman og Lovallo. Innenfra-perspektivet framskriver et prosjekt fra selve prosjektets detaljer, planen, teamet, Gantt-diagrammet; utenfra-perspektivet framskriver det fra opptegnelsen over lignende prosjekter, de fleste av dem ble forsinket (Lovallo & Kahneman, 2003). Innenfra-perspektivet føles mer stringent fordi det er bygd av det planleggeren kan se, og det tar pålitelig feil, fordi det planleggeren kan se er avdelingens eget maskineri og ikke verdens basisrate. En IT-avdeling som planlegger, måler og rapporterer fra innenfra-perspektivet er solipsistisk i nettopp den tekniske betydningen: den resonnerer fra sitt eget innhold og behandler det ytre som en slutning. Kuren forfatterne foreslår, å forankre i den ytre opptegnelsen, er kuren denne artikkelen foreslår for måltall.

2.3 Verdi slik brukeren erfarer den

En parallell litteratur insisterer på at verdi ikke skapes av en leverandør og sendes ut, men realiseres av en bruker i bruk. Tjenestedominant logikk (Vargo & Lusch, 2004) poengterer det generelt: leverandøren kan bare tilby et verdiforslag, og verdi medskapes og bestemmes av den som nyter godt av den i sin egen kontekst. Jobs-to-be-done-tradisjonen gjør det operasjonelt: folk vil ikke ha et produkt, de leier det inn for å gjøre framgang på en jobb som oppstår i livet deres, og analyseenheten er jobben, ikke produktet (Christensen et al., 2016; Ulwick, 2005). Von Hippel (1986) viste at brukerne i forkant av et behov ofte er en bedre kilde til hva som skal bygges enn leverandørens egen planlegging. Normans (2013) designtradisjon sier det samme fra bruksens side: et system bør formes rundt brukerens mål og strukturen i oppgaven deres, og et system formet rundt leverandørens modell av seg selv er standardmåten å produsere noe ubrukelig på. Lest sammen sier disse at en IT-avdelings produkt ikke er systemer, men arbeidet de systemene lar folk gjøre, og at avdelingen ikke kan se det produktet fra innsiden.

2.4 Gapet mellom planen og arbeidet

Til slutt har en tradisjon i informasjonssystemer gang på gang dokumentert at det formelle systemet og det faktiske arbeidet divergerer, og at divergensen er der verdi lever eller dør. Suchman (1987) viste at menneskelig handling er situert, improvisert mot øyeblikkets detaljer, og bare løst styrt av planene som skal lede den, slik at et system bygd fra planen ikke passer arbeidet. Ciborra (2002) beskrev hvordan virkelige informasjonssystemer driver bort fra designernes intensjoner mens folk får dem til å fungere gjennom bricolage og nødløsninger, og argumenterte for at nødløsningen er data om mistilpasningen, ikke ulydighet. Markus (1983) og Keen (1981) viste at brukermotstand mot et system vanligvis er et rasjonelt svar på hvordan systemet omfordeler innsats og makt, og derfor et signal som skal leses snarere enn et hinder som skal overvinnes. Orlikowski (2000) omformulerte teknologi som noe konstituert i bruk snarere enn nedfelt i artefakten. Den felles observasjonen er at grunnsannheten i et IT-system ligger i hendene på menneskene som bruker det, som er nettopp stedet en solipsistisk avdeling ikke ser. Skyggesystemene som følger, regnearkene og de usanksjonerte verktøyene, har blitt sitt eget studiefelt (Haag & Eckhardt, 2017); vi leser dem i avsnitt 3 som det klareste budskapet forretningen sender om mistilpasningen, og det som oftest mishøres.

3. Fire manifestasjoner

Vi navngir fire former vendingen innover tar i en IT-avdeling. De overlapper og forsterker hverandre, men hver har et distinkt kjennetegn, og å navngi dem hver for seg lar en avdeling finne hvilken den har. Tabell 1 setter hver ved siden av sitt bedriftsmessige original og sitt tegn på bakkenivå.

3.1 Sentralitetsillusjonen

Den første manifestasjonen er troen på at forretningen tenker omtrent like mye på IT som IT tenker på seg selv. Avdelingen har en merkevare i egne øyne: et navn, en portal, en tjenestekatalog, et sett verdier på en vegg, et veikart den er stolt av. Den forestiller seg brukeren som kommer til portalen med oppmerksomhet og hensikt, leser kunngjøringen, setter pris på den nye funksjonen, bryr seg om hvilken utgivelse det er. Brukeren gjør ingenting av dette. Brukeren er midt i en dag som handler om å avslutte et salg, behandle en pasient, bestille en forsendelse eller undervise en klasse, og systemet er en ting de må passere gjennom for å komme videre, helst uten å merke det. Deres samhandling med IT er kort, instrumentell og motvillig, ett av dusinvis verktøy som konkurrerer om en flik av oppmerksomheten deres, og følelsen de bringer til den er i beste fall nøytral og i verste fall irritasjonen over en avbrytelse.

Illusjonen er kostbar fordi den setter feil mål. En avdeling som tror den opptar plass i brukerens sinn bygger for engasjement: portaler med nyheter, dashbord for alle, funksjoner som innbyr til utforsking, varsler som kunngjør seg selv. En avdeling som forstår at den opptar et motvillig øyeblikk bygger for å forsvinne: færrest trinn, sterkeste standardvalg, systemet som gjør det opplagte uten å bli bedt om det og deretter trekker seg unna. De to bygger motsatte ting, og bare det andre betjener en bruker hvis oppmerksomhet er annetsteds. Sentralitetsillusjonen er grunnen til at så mange interne verktøy er utformet som destinasjoner når de burde vært utformet som dører.

3.2 Det interne ekkokammeret

Den andre manifestasjonen er styring som velger ut det som behager avdelingen snarere enn det som betjener arbeidet. En idé, en ny plattform, en standard, en selvbetjeningsportal, en omorganisering av støtten, blir født inne i IT og må overleve et spissrotløp av interne organer: et arkitekturråd, et endringsråd, en styringsgruppe, et stabsmøte hos en CIO. Hvert organ bedømmer ideen mot interne kriterier, eleganse, standardisering, leverandørstrategi, kostnadsfordeling, kontroll, og en idé som smigrer de kriteriene går gjennom og samler sponsorer mens den klatrer. Innen den når forretningen har den blitt foredlet i månedsvis mot preferansene til folk som aldri vil bruke den, og den møter arbeidet for første gang ved lansering, der den mislykkes, ikke fordi ingeniørarbeidet var dårlig, men fordi ingen ytre kanal noensinne lå i dens løype. Portalen ingen ba om, selvbetjeningsverktøyet som genererer flere henvendelser enn det avverger, migreringen som løste et IT-problem og skapte et forretningsproblem, er alle produkter av en vurderingsprosess uten vindu mot det ytre.

Ekkokammeret er IT-formen av den tonedøve kampanjen som begeistrer styrerommet og dør i markedet. Dets signatur er at svikt er overraskende. En avdeling hvis ideer testes mot arbeidet forventer at noen vil mislykkes og lærer billig; en avdeling hvis ideer testes mot seg selv blir gjentatte ganger forbløffet, fordi alle den konsulterte var enige. Botemiddelet er ikke bedre organer, men en annen port: en idé bør møte en virkelig bruker som gjør virkelig arbeid før den samler interne sponsorer, ikke etterpå, slik at det ytre kan ta livet av den mens det fortsatt er billig å ta livet av den.

3.3 Abstraksjonsfrakoblingen

Den tredje manifestasjonen er oppmerksomheten ledelsen vier overordnet kontroll og abstraksjon framfor arbeidet på bakkenivå som holder virksomheten i gang. Den øverste samtalen handler om målarkitekturen, den ene kilden til sannhet, plattformen, skyposisjonen, datastrategien, single pane of glass, abstraksjoner som er attraktive nettopp fordi de lover kontroll ovenfra uten kontakt med rotet nedenfor. Imens går virksomheten faktisk på et underlag abstraksjonen ikke modellerer: nattkjøringen én person forstår, avstemmingen noen gjør for hånd hver måned, integrasjonen holdt sammen av en planlagt eksport, den stammekunnskapen om hvilket system man skal stole på når to er uenige. Dette arbeidet er usynlig fra toppen fordi det ikke dukker opp i arkitekturdiagrammet, og en avdeling i grepet av abstraksjonen behandler diagrammet som terrenget.

Frakoblingen er farlig nettopp i de øyeblikkene abstraksjonen er ment å hjelpe. En konsolidering over på den ene plattformen, planlagt fra diagrammet, oppdager for sent at det avviklede systemet var bærende på en måte ingen diagram viste, fordi dets virkelige rolle levde i en nødløsning. Kartet utelot brua trafikken faktisk brukte. Virksomhetsarkitektur som disiplin er ikke problemet; problemet er arkitektur utøvd som en innovervendt handling, som tegner systemet avdelingen skulle ønske den drev snarere enn å oppdage systemet den faktisk driver. Kuren er etnografisk før den er arkitektonisk: gå og se på arbeidet, finn de manuelle avstemmingene og de bærende regnearkene, og behandle dem som spesifikasjonen for hva plattformen ikke må ødelegge.

3.4 Den innovervendte linsen

Den fjerde manifestasjonen ligger under de tre andre: vanen med å se på alt gjennom måltall som beskriver avdelingens egen drift snarere enn brukerens resultat. Tilgjengelighet, gjennomsnittlig tid til løsning, lukkede saker, endringers suksessrate, nådde prosjektmilepæler, budsjettoverholdelse, lukkede revisjonsfunn, dette er instrumentene på veggen, og hvert eneste av dem måler noe som skjer inne i IT. Ingen av dem måler om en person var i stand til å gjøre arbeidet sitt, hvor lenge oppgaven deres faktisk tok fra ende til ende, hvor mye av innsatsen deres som gikk til å kjempe mot verktøyene, eller om det de trengte eksisterer i det hele tatt. Linsen peker innover, og det den ikke kan se kan den ikke styre.

Den innovervendte linsen er ikke bare ufullstendig; den er aktivt villedende, fordi de innovervendte måltallene kan optimaliseres på måter som skader det utovervendte resultatet. En servicedesk målt på lukkede saker og tid-til-lukking lærer å lukke saker, som ikke er det samme som å løse problemer; en rask, overfladisk lukking som ikke retter den underliggende feilen produserer en ny sak, og avdelingen som teller begge som gjennomstrømming ser produktivitet der brukeren ser et problem som tok to telefoner. Dette er mekanismen neste avsnitt modellerer, og det er grunnen til at en avdeling kan være grønn på hvert dashbord mens forretningen den betjener ikke er det. Brukersentrert design er, i bunn og grunn, instruksen om å snu denne linsen: å starte fra brukerens mål og se tilbake på IT, snarere enn å starte fra IT-s drift og slutte seg til brukeren.

Tabell 1. De fire manifestasjonene av IT-avdelingssolipsisme: bedriftsmønsteret hver overfører, formen den tar i en IT-avdeling, og tegnet på bakkenivå på at den er til stede.

Manifestasjon Bedriftsmessig original Form i IT-avdelingen Kjennetegnet
Sentralitetsillusjonen Merkevaren forestilt som en stor del av kundens liv Portalen, katalogen og veikartet forestilt som objekter for brukerens oppmerksomhet Verktøy bygd som destinasjoner å besøke, ikke dører å passere gjennom
Det interne ekkokammeret Kampanjer som behager styret og mislykkes i markedet Ideer som overlever arkitektur- og styringsorganer, møter så arbeidet og mislykkes Svikt ved lansering er overraskende; alle som ble konsultert var enige
Abstraksjonsfrakoblingen Besettelse av overordnet kontroll og IP framfor arbeid på bakkenivå Oppmerksomhet på målarkitektur og plattformer mens manuelle nødløsninger driver foretaket En avvikling ødelegger noe ingen diagram viste
Den innovervendte linsen Å bedømme suksess ut fra interne driftsmåltall Oppetid, lukkede saker og milepæler måles; oppgavefullføring ikke Dashbord grønne mens brukere kjører utenom systemene

4. En minimal modell: solipsismegapet

De fire manifestasjonene deler en målbar konsekvens: et gap mellom det avdelingen teller og det forretningen oppnår. Dette avsnittet gir en liten modell av det gapet, nok til å vise hvorfor de to kan divergere og hvorfor divergensen er selvforsterkende. Modellen er en skisse ment å gjøre mekanismen eksplisitt, ikke en kalibrering.

4.1 To slags etterspørsel

Følg tjenesteledelsestradisjonen i å dele arbeidet som kommer til en IT-avdeling i to slag (Seddon, 2008). Verdietterspørsel er arbeid forretningen genuint ønsker gjort: en ny kapabilitet, en reell endring, et spørsmål som trenger svar. Feiletterspørsel er arbeid skapt av avdelingens egen tidligere svikt i å gjøre noe, eller å gjøre det riktig: brukeren som ringer tilbake fordi den første retten ikke holdt, forespørselen om en nødløsning til et system som ikke burde trengt en, den gjenåpnede saken, det andre besøket. La total etterspørsel i en periode være

D=Dv+Df,(1)D = D_{v} + D_{f}, \tag{1}

Likning 1. Etterspørselen på avdelingen deles i verdietterspørsel og feiletterspørsel.

og definer solipsismeforholdet som andelen av avdelingens arbeid som handler om dens egne tidligere feil,

σ=DfDv+Df(2)\sigma = \frac{D_{f}}{D_{v} + D_{f}} \tag{2}

Likning 2. Solipsismeforholdet: hvor mye av avdelingens aktivitet som er en reaksjon på seg selv.

Forholdet er godt navngitt. En avdeling med en høy σ\sigma bruker mesteparten av innsatsen sin på å respondere på konsekvensene av sitt eget arbeid, en bokstavelig vending innover av aktivitet, og likevel dukker hver enhet av den innsatsen opp i de innovervendte måltallene som en behandlet sak og et lukket problem.

4.2 Hvorfor tallene og verdien divergerer

La avdelingens målte produksjon, mengden den innovervendte linsen rapporterer, være det totale arbeidet den behandler, som til en første tilnærming er hele DD: hver lukket sak, verdi eller feil, teller. La den oppnådde verdien, mengden forretningen erfarer, være verdietterspørselen som faktisk ble dekket, netto av friksjonen feilene påfører, slik at den faller når σ\sigma stiger. Med MM for målt produksjon og VV for oppnådd verdi som funksjoner av avdelingens gjennomstrømming TT og forholdet σ\sigma,

M=T,V=T (1−σ) q,(3)M = T, \qquad V = T\,(1-\sigma)\,q , \tag{3}

Likning 3. Målt produksjon teller alt arbeid; oppnådd verdi teller bare dekket verdietterspørsel, skalert med tilpasning qq.

der q∈(0,1]q \in (0,1] er hvor godt det leverte arbeidet passer brukerens faktiske jobb, mengden manifestasjonene i avsnitt 3 forringer. Gapet mellom det som telles og det som oppnås,

G=M−V=T (1−(1−σ) q),(4)G = M - V = T\,\bigl(1 - (1-\sigma)\,q\bigr), \tag{4}

Likning 4. Solipsismegapet vokser med gjennomstrømming, med feiletterspørsel og med dårlig tilpasning.

vokser med gjennomstrømming, med feilforholdet og med mistilpasning. Avdelingen kan heve MM ved å heve TT, jobbe hardere, lukke raskere, mens VV holder seg flat eller faller, og dashbordene vil vise innsatsen som framgang. Figur 1 tegner de to mengdene når den innovervendte orienteringen øker: målt ytelse stiger mens oppnådd verdi avtar, et par blad som krysser hverandre i punktet der avdelingen ser sunnest ut akkurat idet den begynner å betjene dårligst.

4.3 Hvorfor det forsterker seg selv

Gapet ville bare vært et måleproblem hvis σ\sigma var fast. Det er det ikke, fordi å optimalisere det innovervendte måltallet nærer det. Press for å lukke saker raskere senker tilpasningen qq til hver lukking og øker sjansen for at det underliggende problemet kommer tilbake som feiletterspørsel, slik at neste periodes σ\sigma er høyere. La den innovervendte optimaliseringsinnsatsen være ee, oppmerksomheten avdelingen vier sine egne måltall, og la utovervendt lytting, oppmerksomheten den vier arbeidet, være ℓ\ell. En enkel justering fanger sløyfen:

σt+1=σt+α e (1−σt)−β ℓ σt,(5)\sigma_{t+1} = \sigma_{t} + \alpha\,e\,(1-\sigma_{t}) - \beta\,\ell\,\sigma_{t}, \tag{5}

Likning 5. Innovervendt optimalisering hever feilforholdet; utovervendt lytting senker det.

med α,β>0\alpha,\beta>0. Når innovervendt press dominerer (αe>βℓ\alpha e > \beta \ell) klatrer forholdet til et høyt fikspunkt: en stabil, selvopprettholdende tilstand der avdelingen er permanent opptatt av seg selv, permanent grønn på sine instrumenter, og permanent på avveie fra arbeidet. Det fikspunktet er organisatorisk solipsisme som en likevektstilstand, og den eneste parameteren som flytter avdelingen bort fra det er ℓ\ell, oppmerksomheten den vier det ytre. Hver manifestasjon i avsnitt 3 er en måte å holde ℓ\ell nær null på.

Figur 1. Solipsismesaksa. Når en avdeling vender innsatsen og oppmerksomheten sin innover, fortsetter produksjonen dens egne instrumenter måler å stige mens verdien forretningen oppnår faller. Den stiplede linjen markerer der de krysser: punktet der dashbordene ser sunnest ut og arbeidet allerede lider. Kurvene er illustrative.
Figur 1. Solipsismesaksa. Når en avdeling vender innsatsen og oppmerksomheten sin innover, fortsetter produksjonen dens egne instrumenter måler å stige mens verdien forretningen oppnår faller. Den stiplede linjen markerer der de krysser: punktet der dashbordene ser sunnest ut og arbeidet allerede lider. Kurvene er illustrative.

5. Tidlige varselindikatorer

Modellen sier at en avdeling ikke kan oppdage at den vender seg innover fra sine innovervendte måltall, per konstruksjon. Den kan oppdage det fra et annet sett indikatorer, hver som parer et innovervendt signal som ser sunt ut med den utovervendte virkeligheten det skjuler og det utovervendte målet som ville avslørt det. Tabell 2 samler dem. Indikatorene er diagnostiske, ikke bare retoriske: hver navngir et tall avdelingen kunne begynt å samle inn i morgen, og selve det å samle det inn er den første dreiningen av linsen.

Tre av dem fortjener et ord. Den første er feiletterspørsel som andel av volum: de fleste avdelinger måler sakvolum og feirer når de håndterer det, men deler det ikke, og delingen er det enkeltstående mest avslørende tallet en servicedesk kan føre, fordi en stigende andel betyr at avdelingen er stadig mer opptatt av seg selv. Den andre er skygge-IT-opptellingen: en solipsistisk avdeling behandler regnearket som holdes utenfor det sanksjonerte systemet som et etterlevelsesproblem som skal stampes ut, når det er et presist budskap om hvor det sanksjonerte systemet ikke passer arbeidet; å telle skyggesystemene og lese dem som spesifikasjoner gjør en trussel til den beste gratis researchen avdelingen noensinne vil få. Den tredje er tid-til-oppgave, ikke tid-til-sak: avdelingen måler hvor raskt den lukker sine egne opptegnelser, men brukeren måler hvor lenge hele jobben tok, inkludert delene før en sak ble opprettet og etter at den ble lukket, og bare tiden fra ende til ende er det brukeren faktisk føler.

Tabell 2. Tidlige varselindikatorer på IT-avdelingssolipsisme. Hvert innovervendt signal kan se sunt ut mens den utovervendte virkeligheten det skjuler forblir umålt; den siste kolonnen er det utovervendte tallet som avslører det.

Innovervendt signal (ser sunt ut) Utovervendt virkelighet det kan skjule Hva man bør måle i stedet
Saker lukket innenfor mål Mange lukkinger er overfladiske og kommer tilbake som nye saker Feiletterspørsel som andel av totalt volum, fulgt over tid
Høy tilgjengelighet for hvert system Oppgaven fra ende til ende tar fortsatt dager på tvers av systemer og overleveringer Tid-til-oppgave: forløpt tid for brukerens hele jobb, ikke per sak
Veikart etter plan; funksjoner levert Funksjoner ingen tok i bruk; bruk konsentrert i noen få gamle skjermer Bruks- og oppgavefullføringsrater per funksjon, med de ubrukte avviklet
Portal og selvbetjening lansert Henvendelsene falt ikke, eller steg, fordi portalen la til et trinn Faktisk oppnådd avlastning, og trinn-til-resultat før kontra etter
Skygge-IT i ferd med å elimineres Regnearkene koder reelle behov systemene ikke dekker En skygge-IT-opptelling lest som en spesifikasjon av udekte behov
Høy skåre på tilfredshetsundersøkelse Undersøkelsen spør om IT, ikke om arbeidet ble gjort Resultatspørsmål: kunne du gjøre oppgaven din, hvor lenge, hva kjempet mot deg

6. Den nederlandske situasjonen

Mønsteret er generelt, men den nederlandske konteksten gir det en uvanlig klar form, av to institusjonelle grunner og én markedsmessig.

6.1 Regieorganisatie og avstanden den bygger

Den dominerende ideen i nederlandsk IT-styring de siste femten årene har vært regieorganisatie: en bevisst atskillelse av en etterspørselsorganisasjon, som eier forholdet til forretningen og bestemmer hva som er ønsket, fra en tilbudsorganisasjon, ofte en ekstern leverandør, som bygger og drifter det. Delingen har reelle dyder, og vi er ikke imot den. Men den institusjonaliserer nettopp den avstanden som nærer vendingen innover. Etterspørselssiden kommer til å måle seg selv på styringen av leverandører, oppfylte kontrakter, rapporterte tjenestenivåer, avholdte styringsmøter, og tilbudssiden på leveringen av tjenester som spesifisert, begge innovervendte aktiviteter, mens brukerens faktiske arbeid sitter bortenfor begge, nådd bare gjennom papirarbeidet som går mellom dem. En regieorganisatie som ikke bevisst er koblet til arbeidet måler forholdet mellom to IT-organisasjoner og kaller det ytelse. Kuren i avsnitt 8 gjelder med særlig kraft her: etterspørselsorganisasjonens virkelige jobb er å bære det ytre inn, og hvis den måler seg selv på leverandørstyring, har den stilltiende blitt den tingen den var ment å forhindre.

6.2 Et tiår med offentlige gjennomganger

Den nederlandske staten har ført en uvanlig offentlig opptegnelse over innovervendt IT. Den parlamentariske granskingen av statlige IT-prosjekter (Tweede Kamer, 2014) fant et mønster av store prosjekter drevet av sitt eget momentum og sin interne logikk, utilstrekkelig forankret til problemet de var ment å løse eller til menneskene som ville bruke resultatet, og anbefalte et stående organ som skulle teste prosjekter mot virkeligheten før og under bygging. Det organet, nå Adviescollege ICT-toetsing, finnes nettopp fordi innenfra-perspektivet ikke er selvkorrigerende: en ekspert ytre kanal må bygges og finansieres, fordi avdelinger overlatt til sine egne instrumenter ikke anskaffer en. Lærdommen generaliserer utover forvaltningen. Grunnen til at kuren i denne artikkelen er institusjonell, en port, en opptelling, et mål, snarere enn en formaning om å bry seg om brukere, er at det å bry seg ikke er den knappe innsatsfaktoren; den knappe innsatsfaktoren er en kanal som bærer det ytre inn enten avdelingen vil det eller ikke.

6.3 Forholdet med administrerte tjenester

I det nederlandske mellommarkedet, der vi i Nashua arbeider, driver de fleste organisasjonene ikke en stor intern IT-avdeling i det hele tatt; de baserer seg på en leverandør av administrerte tjenester. Dette endrer formen på risikoen, men ikke dens natur. En leverandør måles på sine tjenestenivåer og sin kontrakt, som er innovervendte måltall av leverandørens verden, og en leverandør som klarer å styre etter dem alene kan rapportere et sunt forhold mens klientens ansatte kjører utenom systemene. Den utovervendte disiplinen en god leverandør skylder klienten sin er den samme som en intern avdeling skylder forretningen sin: å måle klientens oppgavefullføring og ikke bare leverandørens oppetid, å lese klientens nødløsninger som spesifikasjoner, og å telle andelen av sitt eget arbeid som er feiletterspørsel. En leverandør som gjør dette gjør avstanden i forholdet fra en belastning til en fordel, fordi den ser mange klienters arbeid og kan bære utenfra-perspektivet mellom dem. En leverandør som ikke gjør det blir en solipsistisk IT-avdeling i ett ledd, med en kontrakt i stedet for en samvittighet.

7. Et konstruert tilfelle

Det følgende tilfellet er konstruert, ikke observert. Det eksisterer for å vise manifestasjonene og modellen i én setting; tallene er illustrative. Det beskriver en mellomstor nederlandsk organisasjon med en intern IT-avdeling på omtrent førti personer som betjener omtrent tusen ansatte på tvers av drift, salg og økonomi.

På sine egne instrumenter har avdelingen sitt beste år. Tilgjengeligheten på tvers av kjernesystemene er 99.9 prosent. Servicedesken lukker åttifem prosent av sakene innenfor mål, og totalt volum er opp tolv prosent, som kvartalsrapporten framstiller som stigende produktivitet. Den flerårige plattformkonsolideringen er etter plan: tre gamle systemer avviklet, alt flyttes til den ene pakken. Den årlige IT-tilfredshetsundersøkelsen gir en respektabel skåre. Hvert lysbilde er grønt, og avdelingens ledelse, som leser instrumentene sine trofast, tror den gjør det bra.

Under hvert grønt tall ligger en ikke-grønn virkelighet instrumentene ikke bærer. Tolv-prosent-økningen i sakvolum er stort sett feiletterspørsel: den nye utgivelsen av pakken endret en skjerm salgsteamet brukte femti ganger om dagen, og den resulterende forvirringen genererer en jevn strøm av saker, hver lukket raskt og godt etter desken sine egne mål, ingen av dem berører årsaken. Tilgjengelighet måles per system, men oppgaven fra ordre til betaling krysser nå tre systemer og to overleveringer, og den forløpte tiden for oppgaven har vokst fra timer til to dager, et tall ingen dashbord viser fordi ingen dashbord måler oppgaven. Konsolideringen avviklet et gammelt rapporteringsverktøy hvis virkelige rolle, udokumentert, var en nattlig eksport som økonomiteamets måndedsavstemming avhang av; økonomi har bygd den opp igjen som et regneark vedlikeholdt av én analytiker, som avdelingen, når den merker det, logger som skygge-IT som skal elimineres. Tilfredshetsundersøkelsen skåret godt fordi den spurte om servicedesken var høflig og om systemene var tilgjengelige, og ikke om noen kunne gjøre arbeidet sitt.

Avdelingen er, etter denne artikkelens definisjon, solipsistisk, og det slående er at ingen i den gjør en dårlig jobb. Desken er genuint rask og høflig. Ingeniørene leverte genuint konsolideringen. Arkitekturen er genuint renere. Hver person optimaliserer måltallet foran seg, og hvert måltall peker innover, så summen av kompetent, velment arbeid er en avdeling som har vendt ryggen til forretningen mens den tror den vender ansiktet mot den. Modellen i avsnitt 4 navngir tilstanden presist: gjennomstrømming TT er opp, forholdet σ\sigma stiger, målt produksjon MM stiger med gjennomstrømming mens oppnådd verdi VV faller med σ\sigma, og de to instrumentene avdelingen mangler, feiletterspørsel som andel av volum og tid-til-oppgave, er nettopp de to som ville vist den det.

8. Å vende linsen utover

Kuren er ikke å bry seg mer. Menneskene i det konstruerte tilfellet bryr seg allerede, og det å bry seg kanalisert gjennom innovervendte instrumenter produserer innovervendt arbeid. Kuren er å bygge kanaler som bærer det ytre inn enten noen husker å se eller ikke, og å endre det som måles slik at avdelingens egen optimalisering trekker den mot arbeidet snarere enn bort fra det. Fem grep følger av modellen og manifestasjonene.

Mål oppgaven, ikke saken. Legg til minst ett resultatmål for hvert innovervendt: tid-til-oppgave ved siden av tid-til-løsning, oppgavefullføring ved siden av tilgjengelighet, bruk ved siden av leverte funksjoner. Poenget er ikke å forkaste de innovervendte måltallene, som er nyttige for å drive driften, men å nekte dem monopolet på oppmerksomhet som lar gapet i avsnitt 4 åpne seg usett.

Del og overvåk feiletterspørsel. Klassifiser innkommende arbeid som verdietterspørsel eller feiletterspørsel og følg forholdet σ\sigma over tid. Det er den billigste diagnosen i denne artikkelen og den mest direkte avlesningen av vendingen innover, fordi den måler hvor mye av avdelingens innsats som er en reaksjon på seg selv.

Les skygge-IT som spesifikasjon. Før en opptelling av regnearkene og de usanksjonerte verktøyene, og behandle hvert som en presis uttalelse om hvor de sanksjonerte systemene ikke passer arbeidet. Nødløsningen er forretningen som skriver krav på det eneste språket den har igjen; en avdeling som stamper den ut ødelegger sin egen beste research.

Sett en bruker i løypa før sponsorene. Endre styringsporten slik at en idé møter en virkelig bruker som gjør virkelig arbeid tidlig, mens det er billig å ta livet av den, snarere enn etter at den har klatret det interne hierarkiet og samlet sponsorer. Dette er den strukturelle løsningen for ekkokammeret: den setter en ytre kanal oppstrøms for de interne.

Gå og se på arbeidet. Før enhver konsolidering eller avvikling, send noen for å observere arbeidet på bakkenivå abstraksjonen ikke modellerer, og for å finne de manuelle avstemmingene og de bærende regnearkene. Behandle det de finner som spesifikasjonen for hva den nye plattformen ikke må ødelegge. Dette er den strukturelle løsningen for abstraksjonsfrakoblingen, og den er etnografisk før den er arkitektonisk.

Ingen av disse er dyre, og det er poenget. Organisatorisk solipsisme kureres ikke av et budsjett eller en omorganisering; den kureres av en håndfull ytre kanaler bevisst bygd og holdt åpne, fordi den naturlige tendensen til en isolert, innovervendt målt gruppe er å lukke dem.

9. Innvendinger og svar

De innovervendte måltallene betyr noe; man kan ikke drive en drift uten dem. Enig, og artikkelen sier ikke noe annet. Tilgjengelighet og løsningstid er nødvendige for å drive tjenesten. Påstanden er snevrere og skarpere: de er ikke tilstrekkelige, de beskriver avdelingens verden og ikke brukerens, og når de er de eneste instrumentene på veggen lar de gapet åpne seg usett. Botemiddelet er tillegg, ikke erstatning.

Brukere vet ikke hva de vil ha, så brukersentrering er en vei til kaos. Jobs-to-be-done-tradisjonen svarer på dette presist: brukere er dårlige til å spesifisere løsninger og utmerkede til å utvise jobbene sine. Instruksen er ikke å be brukere designe systemet, men å observere arbeidet, lese nødløsningene og måle resultatet, som ingen av delene krever at brukeren vet svaret, bare at de blir sett mens de gjør oppgaven.

Dette er bare brukersentrert design med en ny etikett. Delvis, med vilje. Bidraget er ikke en ny metode, men en diagnose av hvorfor en avdeling utstyrt med metodene likevel vender seg innover, nemlig at både målingen og styringen peker innover og forsterker hverandre, og en liten modell av hvordan det produserer et gap som er usynlig fra innsiden. Etiketten navngir feilmodusen slik at en avdeling kan gjenkjenne den i seg selv.

En leverandør av administrerte tjenester er strukturelt utenfor forretningen; dette gjelder ikke. Det gjelder med mer kraft, ikke mindre. Avstand er betingelsen som nærer vendingen innover, og en leverandør målt på sin kontrakt er like i stand til solipsisme som enhver intern avdeling, som avsnitt 6 argumenterer. Leverandørens fordel er at den ser mange klienter og kan bære utenfra-perspektivet mellom dem, men bare hvis den velger å måle klientens arbeid snarere enn sine egne tjenestenivåer.

10. Begrensninger og forskningsagenda

Dette er praktikerrettet analyse, og dens grenser bør angis. Modellen i avsnitt 4 er en skisse: dens størrelser er definert klart nok til å måles, men dens funksjonelle former er illustrative, valgt for å gjøre mekanismen synlig snarere enn estimert fra data. De fire manifestasjonene er en typologi, nyttig hvis den hjelper en avdeling å finne sin feilmodus, men ikke en inndeling bevist å være uttømmende. Den nederlandske lesningen er fortolkende. Det konstruerte tilfellet er konstruert.

Påstandene er likevel testbare, og de utovervendte indikatorene er instrumentene å teste dem med. Fire studier ville gjort det. For det første, mål solipsismeforholdet σ\sigma på tvers av et sett avdelinger og korreler det med et uavhengig mål på forretningsoppnådd verdi; modellen forutsier en negativ relasjon som de innovervendte måltallene ikke viser. For det andre, følg σ\sigma og de innovervendte måltallene gjennom en periode med press på de innovervendte måltallene; modellen forutsier at σ\sigma stiger etter hvert som de innovervendte tallene forbedres. For det tredje, instrumenter tid-til-oppgave ved siden av tid-til-løsning på tvers av en virkelig tjeneste og mål gapet mellom dem. For det fjerde, kjør styringsendringen, en bruker i løypa før sponsorene, som en kontrollert intervensjon og mål lanseringssviktraten mot den nåværende porten. Hver studie trenger bare mål artikkelen allerede navngir, og hver ville flyttet argumentet fra analyse til bevis.

11. Konklusjon

En IT-avdeling vender seg innover ikke gjennom inkompetanse eller likegyldighet, men gjennom den ordinære driften av å bli målt på sin egen aktivitet, isolert fra arbeidet av et lag av saker og kontrakter, og belønnet av et hierarki som leser de samme innovervendte instrumentene som den selv. Resultatet er en avdeling som tar sine egne systemer, måltall, veikart og arkitektur for virksomhetens sentrum og brukerne for en slutning den trekker fra saker, en organisatorisk versjon av troen på at bare ens eget sinn er sikkert å eksistere. Vi har navngitt fire manifestasjoner, sentralitetsillusjonen, det interne ekkokammeret, abstraksjonsfrakoblingen og den innovervendte linsen, og vist med en liten modell hvordan feiletterspørsel lar avdelingens målte produksjon stige mens verdien forretningen oppnår faller, slik at dashbordene ser sunnest ut akkurat der tjenesten er dårligst.

Kuren er ikke formaning, men rørlegging: en håndfull ytre kanaler bevisst bygd og holdt åpne, fordi den naturlige tendensen til en isolert, innovervendt målt gruppe er å la dem lukke seg. Mål oppgaven og ikke bare saken. Del og overvåk feiletterspørsel. Les skygge-IT som en spesifikasjon. Sett en bruker i løypa før sponsorene. Gå og se på arbeidet. Hver er billig, hver bærer et stykke av det ytre inn, og sammen vender de linsen tilbake, slik at en avdeling måler seg selv på om forretningen den betjener kan gjøre arbeidet sitt, som er det eneste målet som noensinne var virkelig.

Vedlegg A. Å måle solipsismegapet

Gapet i avsnitt 4 kan tilnærmes fra data de fleste tjenestedrifter allerede har, pluss to mål de vanligvis ikke har. Alt kan samles inn kvartalsvis uten en undersøkelse.

Feiletterspørselsandel σ\sigma. For et representativt utvalg av lukkede elementer, klassifiser hvert som verdietterspørsel (et genuint nytt behov) eller feiletterspørsel (arbeid forårsaket av en tidligere svikt i å gjøre eller å gjøre riktig), ved en kort kodingsregel anvendt ved lukking eller på et retrospektivt utvalg. Andelen feiletterspørsel er σ\sigma. Fallgruve: koding ved lukking av samme agent som lukket elementet underrapporterer den; bruk et uavhengig utvalg.

Tilpasning qq. Tilnærm tilpasning ved komplementet til gjenåpnings-og-omarbeidingsraten: andelen verdietterspørselselementer som fullføres uten et påfølgende beslektet element innenfor et definert vindu. Fallgruve: et kort vindu smigrer qq; sett det til brukerens egen syklus, ikke desken sin.

Tid-til-oppgave. For et lite sett representative brukerreiser, mål forløpt tid for hele reisen, fra øyeblikket brukeren trenger resultatet til øyeblikket de har det, på tvers av hvert system og hver overlevering, uavhengig av saksgrenser. Fallgruve: å måle fra første sak til siste lukking går glipp av delene av oppgaven som aldri ble en sak, som ofte er de lengste.

Gapet. Med MM det totale antallet behandlede elementer og V=M(1−σ)qV = M(1-\sigma)q, er solipsismegapet G=M−VG = M - V. Rapportert som et forhold G/M=1−(1−σ)qG/M = 1-(1-\sigma)q er det sammenlignbart på tvers av avdelinger og over tid, og det stiger når enten feiletterspørsel eller mistilpasning stiger, som er de to tingene de innovervendte måltallene skjuler.

Vedlegg B. En diagnostisk sjekkliste

Spørsmålene nedenfor er gruppert etter manifestasjon. Et ja er et symptom, ikke en dom; flere ja-svar i én gruppe lokaliserer feilmodusen, og den utovervendte testen i siste kolonne er målingen som ville bekreftet eller avvist den. Sjekklisten er med vilje besvarbar på en ettermiddag, fordi en diagnose som trenger et prosjekt ikke vil bli kjørt.

Tabell 3. En diagnostisk sjekkliste, etter manifestasjon. Hvert symptom er et spørsmål avdelingen kan besvare om seg selv; den utovervendte testen er målingen som avgjør det.

Manifestasjon Symptom (et ja er et tegn) Utovervendt test
Sentralitetsillusjonen Er interne verktøy bygd som destinasjoner med nyheter og dashbord? Målte trinn-til-resultat og fluktrate fra portalen
Det interne ekkokammeret Når ideer en bruker først ved lansering, etter organene? Lanseringssviktrate kontra en port med en bruker oppstrøms
Abstraksjonsfrakoblingen Ødelegger en avvikling noen gang noe ingen diagram viste? Antall bærende nødløsninger funnet ved observasjon
Den innovervendte linsen Handler alle dashbordmåltallene om IT-s egen drift? Andel av måltall som måler et brukerresultat

Referanser

Beer, S. (1979). The heart of enterprise. John Wiley & Sons. ISBN 978-0-471-27599-1.

Brynjolfsson, E. (1993). The productivity paradox of information technology. Communications of the ACM, 36(12), 66–77. https://doi.org/10.1145/163298.163309

Christensen, C. M., Hall, T., Dillon, K., & Duncan, D. S. (2016). Know your customers’ “jobs to be done.” Harvard Business Review, 94(9), 54–62. https://hbr.org/2016/09/know-your-customers-jobs-to-be-done

Ciborra, C. (2002). The labyrinths of information: Challenging the wisdom of systems. Oxford University Press. ISBN 978-0-19-924152-7.

Davis, F. D. (1989). Perceived usefulness, perceived ease of use, and user acceptance of information technology. MIS Quarterly, 13(3), 319–340. https://doi.org/10.2307/249008

DeLone, W. H., & McLean, E. R. (2003). The DeLone and McLean model of information systems success: A ten-year update. Journal of Management Information Systems, 19(4), 9–30. https://doi.org/10.1080/07421222.2003.11045748

Haag, S., & Eckhardt, A. (2017). Shadow IT. Business & Information Systems Engineering, 59(6), 469–473. https://doi.org/10.1007/s12599-017-0497-x

Henderson, J. C., & Venkatraman, N. (1999). Strategic alignment: Leveraging information technology for transforming organizations. IBM Systems Journal, 38(2&3), 472–484. https://doi.org/10.1147/sj.382.0472

Janis, I. L. (1972). Victims of groupthink: A psychological study of foreign-policy decisions and fiascoes. Houghton Mifflin.

Keen, P. G. W. (1981). Information systems and organizational change. Communications of the ACM, 24(1), 24–33. https://doi.org/10.1145/358527.358543

Lovallo, D., & Kahneman, D. (2003). Delusions of success: How optimism undermines executives’ decisions. Harvard Business Review, 81(7), 56–63. https://hbr.org/2003/07/delusions-of-success-how-optimism-undermines-executives-decisions

Markus, M. L. (1983). Power, politics, and MIS implementation. Communications of the ACM, 26(6), 430–444. https://doi.org/10.1145/358141.358148

Norman, D. A. (2013). The design of everyday things (Revised and expanded ed.). Basic Books. ISBN 978-0-465-05065-9.

Orlikowski, W. J. (2000). Using technology and constituting structures: A practice lens for studying technology in organizations. Organization Science, 11(4), 404–428. https://doi.org/10.1287/orsc.11.4.404.14600

Seddon, J. (2008). Systems thinking in the public sector: The failure of the reform regime and a manifesto for a better way. Triarchy Press.

Suchman, L. A. (1987). Plans and situated actions: The problem of human–machine communication. Cambridge University Press. ISBN 978-0-521-33739-7.

Tweede Kamer der Staten-Generaal (2014). Naar grip op ICT: Parlementair onderzoek naar ICT-projecten bij de overheid. Eindrapport van de Tijdelijke commissie ICT-projecten bij de overheid (Commissie Elias). Kamerstukken II 2014/15, 33 326, nr. 5. https://zoek.officielebekendmakingen.nl/kst-33326-5.html

Ulwick, A. W. (2005). What customers want: Using outcome-driven innovation to create breakthrough products and services. McGraw-Hill. ISBN 978-0-07-140867-7.

Vargo, S. L., & Lusch, R. F. (2004). Evolving to a new dominant logic for marketing. Journal of Marketing, 68(1), 1–17. https://doi.org/10.1509/jmkg.68.1.1.24036

von Hippel, E. (1986). Lead users: A source of novel product concepts. Management Science, 32(7), 791–805. https://doi.org/10.1287/mnsc.32.7.791

Weick, K. E. (1995). Sensemaking in organizations. Sage Publications. ISBN 978-0-8039-7177-6.