Museokävijöiden benchmarkit: miten kohteesi vertautuu?

Jossain vaiheessa museon vuosikiertoa kysymys tulee: hallituksen jäseneltä, rahoittajalta tai johtajan omasta epäilystä: ovatko nämä luvut hyviä? Kaksisataatuhatta käyntiä. Hyviä verrattuna mihin?

Benchmarkkaus on sen kurinalaisuutta, että tuohon kysymykseen annetaan reilu vastaus. Ja useimmat yritykset epäonnistuvat jo ennen alkuaan, ei datan puutteen vuoksi, vaan koska vertailu ei koskaan ollut vertailukelpoinen. Museo mittaa itseään naapuriin, joka laskee eri tavalla, kansalliseen keskiarvoon, joka sekoittaa keskenään vertailukelvottomia laitoksia, tai omaan menneisyyteensä, joka on mitattu eri menetelmällä. Tulos näyttää oivallukselta ja käyttäytyy kuin kohina.

Tämä opas kertoo, miten se tehdään kunnolla: mitkä KPI:t oikeasti siirtyvät kohteiden ja vuosien välillä, mihin verrata ja mitkä määritelmäansat ratkaisevat lopputuloksen ennen kuin kukaan katsoo kaaviota. Se, mitä opas tarkoituksella ei sisällä, on taulukko viitelukuja, ja syy siihen on osa menetelmää.

Benchmarkkaamisen arvoiset KPI:t

Kokonaiskäynnit on se, mistä jokainen benchmark alkaa, ja mihin liian moni jää. Kokonaismäärä on luku, jota rahoittajat kysyvät ja lehdistö lainaa, joten sen on oltava oikein, mutta vertailutyökaluna se on tylppä. Raa’at kokonaismäärät palkitsevat suuria rakennuksia, pitkiä kausia ja anteliaita aukioloaikoja, joista mikään ei kerro mitään siitä, miten hyvin laitos suoriutuu.

Käynnit aukiolotuntia kohden on kokonaismäärä tehtynä vertailukelpoiseksi. Kun kävijämäärä jaetaan tunneilla, jolloin kohde oli oikeasti auki, poistuvat erot, jotka tekevät raaoista kokonaismääristä harhaanjohtavia: maanantaisin suljettu museo seitsemänä päivänä avoinna olevaa vastaan, iltaukioloja pidentänyt kohde omaa lyhyemmän kauden menneisyyttään vastaan. Se on ero kysymysten “kuinka moni tuli?” ja “kuinka kovasti jokainen aukiolotunti tekee töitä?” välillä, ja se on ensimmäinen tarkistettava luku, kun vuosivertailun kokonaismäärä liikkuu aukioloaikojen muutoksen jälkeen, koska se kertoo, kasvoiko laitos vai pysyikö se vain pidempään auki.

Viipymäaika mittaa sitoutumista läpivirtauksen sijaan: kuinka kauan kävijät oikeasti viettävät rakennuksessa ja kussakin galleriassa sen sijaan, kuinka moni ohitti oven. Kahdella kohteella, joilla on sama kävijämäärä, voi olla täysin erilainen suhde kävijöihinsä: toinen pitää heidät iltapäivän, toinen käsittelee heidät neljässäkymmenessä minuutissa. Viipymäaika selitettynä kertoo, miten sitä luetaan, ja mitä viipymä paljastaa siitä, mitkä näyttelyt pitävät kävijät näyttää, miltä se näyttää nimenomaan museossa.

Uusintakäyntien osuus vastaa kysymykseen, jonka kokonaismäärä kätkee: onko kävijämäärä sama yleisö palaamassa vai kertaluonteista tavoittavuutta? Uskollisten uusintakävijöiden ajama nouseva kokonaismäärä on eri tarina (ohjelmistolle, jäsenyydelle, rahoittajille) kuin sama kokonaismäärä turistien ajamana, jotka eivät koskaan palaa. Anonyymi, aggregoitu mittaus, kävijän opt-in-suostumuksella, voi erottaa nämä kaksi tunnistamatta ketään.

Yhdessä nämä neljä muuttavat lauseen “meillä oli 212 000 käyntiä” joksikin benchmarkattavaksi: kuinka moni, millä tahdilla, kuinka sitoutuneena ja kuinka uskollisena.

Mihin verrata: kolme vertailukohtaa

Oma historiasi on kultainen standardi, eikä kilpailu ole lähelläkään. Tämän vuoden syksyn vertaaminen viime vuoden syksyyn pitää vakiona kaiken, mikä tekee ulkoisesta vertailusta petollista: rakennuksen, kaupungin, sisäänpääsymallin, laskentamääritelmän. Ainoa vaatimus on johdonmukaisuus: sama mittausmenetelmä, samat sisäänkäynnit, sama määritelmä, vuodesta toiseen. Kohde, joka vaihtoi laskentamenetelmää kesken sarjan, on rikkonut oman vertailukohtansa, minkä vuoksi menetelmän vakaus on yhtä tärkeää kuin sen tarkkuus.

Kausi ja kalenteri tulevat seuraavaksi. Museoiden kävijämäärät hengittävät koulujen lomien, turistivirtojen ja sään tahdissa, joten reilu vertailu on samanlaista samanlaiseen: samat viikot, eivät viereiset. Avaamistaan edeltäneeseen kuukauteen verrattu tilapäisnäyttely saattaa mitata vain koulujen lomien alkua. Benchmarkkaus aiempien vuosien samaan jaksoon tai kauden monivuotiseen keskiarvoon erottaa sen, mitä laitos teki, siitä, mitä kalenteri teki.

Viralliset tilastot antavat ulkoisen kehyksen. Ruotsissa Ruotsin kulttuurianalyysiviranomainen (Kulturanalys) julkaisee vuosittaiset Museer-tilastot; Englannissa Arts Council Englandin analyysi noin 1 200 akkreditoidusta museosta seuraa sektorin toipumista. Nämä luvut eivät voi kertoa, pärjääkö kohteesi hyvin (ne sekoittavat keskenään kaikenkokoisia ja -mallisia laitoksia), mutta ne vastaavat kysymykseen, johon mikään muu ei voi: liikkuiko käyräsi sektorin mukana vai sitä vastaan? Tasainen vuosi sektorin laajuisen laskun aikana on saavutus; sama tasainen vuosi sektorin laajuisen toipumisen aikana on varoitus. Vuosikatsauksemme museokävijöistä lukuina lukee tuoreimmat viralliset luvut ja sen, mitä ne tarkoittavat; tämä opas kertoo, miten niitä käytetään.

Määritelmäansat, jotka rikkovat vertailut

Jokainen benchmark lepää “käynnin” määritelmän varassa, ja määritelmät eroavat enemmän kuin useimmat vertailut myöntävät.

Mikä lasketaan käynniksi. Kulturanalys erottaa laitoskäynnit (jokainen, joka astuu mihin tahansa rakennuksen osaan, kahvila ja myymälä mukaan lukien) toimintakäynneistä, osallistumisesta ydintarjontaan, joka on osajoukko. Kaksi museota, jotka molemmat raportoivat “käyntejä”, voivat mitata eri asioita, ja laskentaperustetta vaihtava laitos voi saada tai menettää kaksinumeroisia prosentteja ilman ainuttakaan lisäkävijää. Ensimmäinen kysymys mistä tahansa luvusta, johon vertaat, on: laskettuna miten ja millä määritelmällä?

Koululuokat ja ryhmät. Yksi kehys laskee koulukäynnin kolmeksikymmeneksi käynniksi; toinen laskee varauksen; kolmas laskee osallistujat vain, jos käyntiin sisältyi opastettu ohjelma. Kohteissa, joissa koulukäynnit ovat suuri osa kävijämäärästä, tämä yksi valinta voi liikuttaa vertailua enemmän kuin mikään todellinen muutos suorituksessa.

Ilmainen sisäänpääsy vai maksullinen. Maksullinen kohde voi nojata lipputietoihin, mutta liput eivät tavoita uudelleensisääntuloja, sivusisäänkäyntejä eivätkä liputtomia tapahtumia. Ilmaisen sisäänpääsyn kohteella ei ole lippuja, joihin nojata, ja ovilaskenta sisältää jokaisen, joka tuli kahvilan takia. Nämä kaksi tuottavat lukuja, jotka näyttävät samanlaisilta ja tarkoittavat eri asioita, minkä vuoksi maksullisen kohteen benchmarkkaus ilmaista vastaan raaoilla käynneillä on lähes merkityksetöntä.

Uudelleensisääntulot ja sivuovet. Laskenta, joka kattaa yhden sisäänkäynnin miehitettyinä tunteina, on otos, ei mittaus. Sen vertaaminen jokaisen sisäänkäynnin jatkuvaan laskentaan ei ole benchmark; se on kaksi eri suuretta, joilla on sama nimi.

Kaava on joka tapauksessa sama: verrattuna mihin? osoittautuu tarkoittavan laskettuna miten?

Miksi tämä sivu ei anna sinulle benchmark-taulukkoa

Olisi helppoa julkaista sellainen (siisti rivi keskiarvoja kohdetyypeittäin), ja se olisi pahempaa kuin hyödytön. Jokainen julkaistu benchmark-luku sekoittaa keskenään laitoksia, jotka edellinen osio juuri osoitti vertailukelvottomiksi: kansallismuseoita kylämuseoihin, ilmaista maksulliseen, laitoskäyntejä toimintakäynteihin, jatkuvaa mittausta klikkerinäytteisiin. Niin tuotettu luku kertoo otoksen koostumuksesta, ei kohteestasi. Aloilla, joilla on standardoidut määritelmät, julkaistut vaihteluvälit voivat ohjata ensimmäistä lukemaa, minkä vuoksi vähittäiskaupan konversion vertailuarvomme ovat olemassa; museot eivät ole sellainen ala.

Hankkimisen arvoinen benchmark rakennetaan, ei katsota taulukosta:

1. Mittaa johdonmukaisesti: jatkuvasti, jokaisella sisäänkäynnillä, yhdellä määritelmällä, menetelmällä, joka on riittävän vakaa luotettavaksi vuodesta toiseen.
2. Normalisoi: käynnit aukiolotuntia kohden, jotta aikataulumuutokset eivät naamioidu suoritukseksi.
3. Vertaa sisäisesti: omaa historiaasi, kautta samanlaiseen kauteen.
4. Aseta kontekstiin: lue käyräsi virallisia tilastoja vasten, suuntana pikemminkin kuin tuomiona.

Laitos, joka tekee nämä neljä asiaa, voi vastata kysymykseen “ovatko nämä luvut hyviä?” näytöllä. Laitos, joka kurottaa jonkun toisen keskiarvoon, vastaa eri kysymykseen ja toivoo, ettei kukaan huomaa.

Mittaus kaiken alla

Mikään tästä ei toimi arvioiden päällä. Benchmark-sarja on vain niin hyvä kuin sen heikoin vuosi, minkä vuoksi perusta on jatkuva, tarkastettava laskenta: jokainen sisäänkäynti, jokainen aukiolotunti, kalibroituna manuaalisia kontrollilaskentoja vasten, sarja saatavilla tarkastettavaksi. Museoiden kävijäanalytiikka tarjoaa juuri tämän kerroksen, anonyymisti, Euroopan ainoalla kävijämittausmenetelmällä, jonka tietosuojaviranomainen on hyväksynyt, ja sama data, joka rakentaa sisäisen benchmarkin, syöttää ulkoista raporttia. Se, miten nämä luvut viedään ihmisille, jotka rahoittavat sinua, on oma taitolajinsa, ja oppaamme kävijäluvuista rahoittajille käsittelee sitä: benchmark kertoo, missä seisot; rahoittajaraportti on paikka, jossa jossain seisominen alkaa tuottaa.