Measuring Museum Performance: A Study of Museums in France and the United States

Odile Paulus

Odile Paulus is Associate Professor at Robert Schuman University in Strasbourg, France, where she conducts research in cultural management and corporate governance at the Laboratoire de Recherche en Gestion et Économie.

ABSTRACT  
The author presents a model, following a review of the literature, for comparing tools that evaluate museum performance on the basis of validity, reliability, feasibility, externality and synthesis. The practices of 14 museums, seven each in France and the United States, are analysed using four quantitative indicators (costs, consumer revenues, number of visitors and total revenues). These easy-to-obtain indicators neglect non-paying consumers and future generations. One possible solution is to include qualitative indicators whereby the strengths and weaknesses of each measure compensate for each other. Two evaluation indicators, efficiency scores and consumer benefits, appear to be theoretically suitable yet are rarely used. Although these indicators require data that are difficult to collect, they are appropriate for museum evaluation.
KEYWORDS 
Museum, evaluation, measurement validity, performance
RÉSUMÉ 
L’article présente un modèle de comparaison des outils pouvant éventuellement servir à Suivant un tour d’horizon de la littérature, l’auteure présente un modèle de comparaison des outils servant à mesurer le rendement d’un musée selon les critères suivants : validité, fiabilité, faisabilité, externalité et synthèse. Les pratiques observées dans quatorze musées, soit sept en France et sept aux États-Unis, sont analysées à l’aide de quatre indicateurs quantitatifs (coûts, recettes-guichet, nombre de visiteurs et revenu global). Faciles à obtenir, ceux-ci ne tiennent pas compte des visiteurs non payants ni des futures générations. Une solution envisagée serait d’inclure des indicateurs qualitatifs, de manière à ce que se compensent les forces et les faiblesses de chaque mesure. Deux indicateurs d’évaluation, les indices d’efficacité et les avantages pour le consommateur, semblent appropriés en théorie mais sont rarement utilisés. Même s’ils exigent des données difficiles à recueillir, ils conviennent à l’évaluation d’un musée.
MOTS CLÉS  
Musée, évaluation, validité de la mesure, rendement
RESUMEN  
En este artículo se propone un modelo para comparar posibles herramientas de medición del desempeño de los museos. El modelo toma en consideración la validez, confiabilidad, factibilidad, externalidad y carácter sintético de cada herramienta. Los parámetros de medición se han extraído de la literatura para luego cotejarlos con las prácticas observadas en siete museos franceses y siete estadounidenses. Los museos bajo análisis utilizan cuatro criterios cuantitativos de evaluación (costos, ingresos de boletería, cantidad de visitantes y total de ingresos). Pero estas medidas, de fácil obtención, no dan cuenta de factores tales como las visitas no pagas y las generaciones futuras. Una posible solución a esta falencia consiste en integrar la evaluación utilizando criterios cualitativos que tengan el efecto de compensar entre sí las ventajas y desventajas de cada criterio de medición. Encontramos dos criterios de evaluación teóricamente pertinentes y que sin embargo raramente se utilizan: los puntajes de eficiencia y las ventajas al consumidor. Si bien presentan la desventaja de requerir datos que son difíciles de recoger, creemos que el esfuerzo vale la pena para lograr una evaluación adecuada del museo.
PALABRAS CLAVE  
Museo, evaluación, validez de las mediciones, desempeño