Download pdf - Congrès satellite de l’IFLA à Montréal Statistiques de ...ville.montreal.qc.ca › ... › resume-conference.pdf · Congrès satellite de l’IFLA à Montréal : Statistiques

Congrès satellite de l’IFLA à Montréal Statistiques de bibliothèques pour le monde du 21e siècle : un nouveau modèle développé par l’ISU, l’IFLA et l’ISO – 18 et 19 août 2008

Résumés des conférences

Congrès satellite de l’IFLA à Montréal : eStatistiques de bibliothèques pour le monde du 21 siècle

2

Table des matières

Lundi 18 août 2008 4 13 h 00 – 14 h 45 Résultats détaillés – Interprétation : Volet 1 4

Sondage de l’UNESCO sur les statistiques globales des bibliothèques publiques et universitaires de l’Amérique latine..................................................................................... 4 Claude Akpabie en collaboration avec Simon Ellis

Présentation par certains répondants de l'Amérique latine : Volet 2 5 Analyse des essais de recherche de données statistiques sur les bibliothèques d’Argentine ........................................................................................................................ 5 Romina De Lorenzo

Expérience de collecte de données statistiques sur les bibliothèques à Trinidad et Tobago6 Diane Simeon

Vue d'ensemble pour certains pays d'Afrique : Volet 3 7 Tendances actuelles dans la collecte et l’usage de données statistiques dans les bibliothèques publiques et d’établissements d’enseignement supérieur en Afrique ........... 7 Elisa R.T. Chiware

15 h 15 – 16 h 00 8 Étalonnage sous forme d’indicateurs de rendement et de fiches d’évaluation équilibrée ... 8 Dr Roswitha Poll

16 h 00 – 17 h 00 Apport des bibliothèques au développement culturel « outcome » et de l’alphabétisation 9 Les indicateurs de maîtrise de l’information : Une nécessité pour les pays ........................ 9 Jesús Lau

Programme LAMP : un nouveau modèle international pour mesurer l’alphabétisme ........ 10 Simon Ellis

Mardi 19 août 2008 11 8 h 30 – 9 h 45 Regard critique sur la typologie, les problèmes et limites... 11

Limites du modèle des « Global statistics » et quelques exemples d'exploitation des résultats........................................................................................................................... 11 Cynthia Lisée en collaboration avec Simon Ellis

10 h 15 – 12 h 00 Session A, 1ère partie : bibliothèques publiques 12 Les bibliothèques publiques du Canada comptent! ........................................................... 12 Don Mills

Optimiser, diffuser et utiliser les statistiques des bibliothèques publiques du Québec..... 13 Benoît Allaire, Geneviève Baril et Marie-Josée Benoit

Comprendre les fondements méthodologiques des systèmes nationaux d’évaluation des bibliothèques publiques! .................................................................................................. 14 Ray Lyons

10 h 15 – 12 h 00 Session B, 1ère partie : bibliothèques universitaires 15 Base de données en statistiques de bibliothèques à l’Université nationale de La Plata (Argentine) : une expérience de coopération ................................................................... 15 Marcela Fushimi, Norma Mangiaterra, Mariana Pichinini et Gustavo Archuby


3

Statistiques en ligne des bibliothèques universitaires asiatiques : un projet pilote.......... 16 Cathie Jilovsky

LibQUAL Canada 2007 : étalonnage de la qualité du service à l’échelle nationale ............ 17 Sam Kalb

Les programmes et projets statistiques dans les bibliothèques universitaires du Canada 18 Sylvie Belzile

13 h 30 – 15 h 00 Session A, 2e partie : bibliothèques publiques 19 Présentation des indicateurs norvégiens.......................................................................... 19 Trine Kolderup-Flaten

L’évaluation de l’atteinte de normes de qualité et de résultats ciblés, déterminés en fonction des études d’étalonnage grâce à un modèle de tableau de bord pour le Réseau de bibliothèques publiques de Montréal ........................................................................... 20 Pierre Meunier

BIX – Modèle d’indices de qualité des bibliothèques : analyse par étalement sur une échelle (inter-) nationale ................................................................................................. 21 Sebastian Mundt

13 h 30 – 15 h 00 Session B, 2e partie : bibliothèques universitaires 22 Dix ans d’expérience en étalonnage pour les bibliothèques universitaires de Hollande.... 22 Dr Henk J. Voorbij

Présentation du système d'étallonage développé par SCONUL au R.-U (Statistiques de bibliothèques d'enseignement supérieur du Royaume-Uni) ............................................. 23 Claire Creaser

Approche intégrée pour l’évaluation des bibliothèques numériques : une stratégie émergente pour gérer les ressources, les capacités et les résultats................................. 24 Leonor Gaspar Pinto, Paula Ochôa, et Maria Helena Vinagre


Résumé de la conférence : Claude Akpabie en collaboration avec Simon Ellis 4

Lundi 18 août 2008

13 h 00 – 14 h 45 Résultats détaillés – Interprétation : Volet 1

Sondage de l’UNESCO sur les statistiques globales des bibliothèques publiques et universitaires de l’Amérique latine

Par :

Claude Akpabie en collaboration avec Simon Ellis

Spécialiste du programme de renforcement des capacités statistiques, et Simon Ellis, chef des statistiques en science, culture et communications à l’Institut de statistique de l’UNESCO (ISU)

Cette présentation est un résumé des résultats du sondage réalisé en 2007 auprès des bibliothèques de l’Amérique latine et des Caraïbes par l’Institut/IFLA/ISO de l’UNESCO.

L’ISU est un membre fondateur du Partenariat de mesure des technologies de l’information et des communications (TIC) pour le développement de l’organisation internationale responsable des aspects statistiques liés au suivi du Sommet mondial sur la société de l’information. À l’Institut, la priorité de l’équipe de la Culture est la révision du cadre 1986 de l’UNESCO en ce qui a trait aux statistiques culturelles; dans le secteur des communications, l’équipe travaille sur la maîtrise de l’information ainsi que sur les statistiques internationales sur l’utilisation des TIC en l’éducation.

Le sondage 2007 auprès des bibliothèques a permis de récolter des statistiques sur les bibliothèques de chacune des sous-régions d’Amérique latine – l’Amérique centrale, les Caraïbes et l’Amérique du Sud. Le questionnaire s’adressait tant aux bibliothèques publiques qu’aux bibliothèques d’enseignement supérieur, mais la plupart des réponses se rapportaient uniquement aux bibliothèques publiques. Des réponses variées ont été obtenues sur la question des « nouveaux sujets » tels que les connexions Internet, les livres électroniques et l’accès aux bases de données.

La communication abordera les leçons tirées du sondage, notamment les taux de réponse ou les définitions pouvant être améliorés ainsi que les sujets pour lesquels l’on n’a pas recueilli suffisamment de données. Le potentiel d’un sondage international sur les statistiques de bibliothèques sera réexaminé. Les exigences minimales nécessaires aux comptes rendus statistiques d’un réseau de bibliothèques national opérationnel seront aussi reconsidérées.


Résumé de la conférence : Romina De Lorenzo 5

Présentation par certains répondants de l'Amérique latine : Volet 2

Analyse des essais de recherche de données statistiques sur les bibliothèques d’Argentine

Par :

Romina De Lorenzo

Bibliothécaire du Centre de documentation, Direction générale de la statistique et du recensement du gouvernement de la municipalité de Buenos Aires.

Cette présentation offre un aperçu de l'état des statistiques de bibliothèques en Argentine, des organismes qui fournissent ces données, des difficultés à obtenir et à partager ces données et de l’absence de systématisation. Elle mentionne le répertoire de statistiques de bibliothèques pour la ville de Buenos Aires et décrit l’expérience de la recherche de données pour la conception du Questionnaire sur les statistiques de bibliothèques développé par l’Institut de statistique de l’UNESCO. Nous abordons les problèmes et les questions liés au questionnaire. Enfin, nous traitons du bien-fondé de l’amendement du questionnaire dans le but de mieux refléter les réalités des pays de l’Amérique latine et des Caraïbes. On y aborde ainsi la nécessité pour l’organisme de coordination d'encourager, dans chaque pays, une saisie de données uniforme et fiable, et une diffusion ultérieure régulière.


Résumé de la conférence : Diane Simeon 6

Expérience de collecte de données statistiques sur les bibliothèques à Trinidad et Tobago

Par :

Diane Simeon

Chef de la Division de la recherche et de la planification, Bibliothèque nationale et Système d'information, Trinidad et Tobago

Cette communication analyse la réponse de la Division de la recherche et de la planification de la National Library and Infomation System Authority (NALIS) à l’enquête pilote menée par l’Institut de la statistique de l’UNESCO. L’article décrit la méthodologie et la stratégie retenues pour remplir le questionnaire ainsi que les obstacles rencontrés au cours du processus de réponse. L’enquête portait sur des statistiques concernant les bibliothèques publiques et d’éducation supérieure dans le contexte de Trinidad et Tobago. Bien que la collecte de renseignements soit une activité centrale du fonctionnement des bibliothèques, l’enquête met en évidence des zones d’activité où la collecte de données doit être améliorée.


Résumé de la conférence : Elisa R.T. Chiware 7

Vue d'ensemble pour certains pays d'Afrique : Volet 3

Tendances actuelles dans la collecte et l’usage de données statistiques dans les bibliothèques publiques et d’établissements d’enseignement supérieur en Afrique

Par :

Elisa R.T. Chiware

Département d'études en communication et sciences de l'information, Université de Namibie et Buhel Mbambo-Thata, Directeur exécutif, Services de bibliothèques, Université de l'Afrique du Sud.

Cette communication présente les résultats d’une enquête menée en Afrique sur les tendances en matière de collecte et de déclaration de données statistiques provenant de bibliothèques d'établissements d'enseignement supérieur et de bibliothèques publiques. La littérature révèle que la collecte de données statistiques dans plusieurs universités et bibliothèques publiques en Afrique demeure peu avancée, et qu’il n’existe, à ce jour, aucune norme de collecte de données ou de déclaration de statistiques. Le sondage mené en juillet 2008 indique que les bibliothèques ont recours à des systèmes manuels et à certains systèmes automatisés pour collecter et compiler des données statistiques. L’enquête fait également apparaître le besoin pour les bibliothèques d'établissements d'enseignement supérieur et les bibliothèques publiques de s’accorder sur des normes communes de collecte de renseignements. L’article conclut sur la recommandation suivante : la section africaine de l’IFLA, en collaboration avec la section de l’IFLA sur les Statistiques et l’Évaluation, l’UNESCO, l’Association des universités africaines ainsi que les groupements nationaux de bibliothèques publiques et de bibliothèques d'établissements d'enseignement supérieur en Afrique (SCNUL) devraient jouer un rôle majeur dans le développement des capacités des bibliothèques africaines au regard de l’importance, de la collecte et de la déclaration de renseignements.


Résumé de la conférence : Dr. Roswitha Poll 8

15 h 15 – 16 h 00

Étalonnage sous forme d’indicateurs de rendement et de fiches d’évaluation équilibrée

par :

Dr Roswitha Poll

Ex-bibliothécaire en chef de la bibliothèque régionale et universitaire de Münster et chef du sous-comité 8 de l’ISO, Qualité – Statistiques et évaluation du rendement

Les instruments de mesure de la qualité, tels les indicateurs de rendement et les sondages sur la satisfaction des usagers, sont largement utilisés dans les bibliothèques et ont été décrits dans les manuels et les normes ISO. En utilisant régulièrement les mêmes instruments de mesure, les bibliothèques peuvent détecter les échecs ou les lacunes dans leur prestation de service. Dans bien des cas, il sera toutefois difficile d’interpréter les résultats du mesurage pour une bibliothèque donnée puisqu’il est impossible de les comparer avec les résultats de base d’autres bibliothèques. Pour cette raison, des regroupements de bibliothèques ont tenté de trouver un consensus sur les instruments de mesure, comme les indicateurs de rendement et les sondages menés auprès des usagers, qui serviraient pour l’étalonnage à l’échelle régionale ou nationale. De tels projets ont été entrepris au cours de la dernière décennie, tant par les bibliothèques publiques que par les bibliothèques universitaires.

Dans plusieurs de ces projets, les indicateurs de rendement sont établis en fonction d’une fiche d’évaluation équilibrée, un concept développé à l’origine pour le secteur commercial. La fiche d’évaluation équilibrée « traduit » en quelque sorte le concept de planification d’une institution (mission, vision stratégique et objectifs) en un système d’indicateurs de qualité qui couvrent toutes les facettes du rendement : finances, usagers, procédures internes, apprentissage et croissance.

Ce document présente les projets d’étalonnage et l’efficacité du concept de fiches d’évaluation équilibrée et tente, au moyen d’exemples, de démontrer l’utilité des données d’étalonnage pour la gestion de la qualité.


Résumé de la conférence : Jesús Lau 9

16 h 00 – 17 h 00 Apport des bibliothèques au développement culturel « outcome » et de l’alphabétisation

Les indicateurs de maîtrise de l’information : Une nécessité pour les pays

par :

Jesús Lau

Universidad Veracruzana/DGB/USBI VER Boca del Río, Veracruz, México et membre du comité permanent de la division Maîtrise de l’information de l’IFLA.

[email protected]

www.jesuslau.com

www.uv.mx/bvirtual

Le but de cette présentation est de discuter des données contextuelles du projet de l’UNESCO sur les indicateurs de la maîtrise de l’information, des enjeux et des perspectives que présente leur compilation à l’échelle nationale et internationale.

La maîtrise de l’information est une priorité pour les gouvernements nationaux qui souhaitent assurer un développement socio-économique durable. Cependant, il est ardu de mesurer le progrès de la maîtrise de l’information, compte tenu de l’absence de statistiques suffisantes et significatives.

La surveillance de la maîtrise de l’information dans les bibliothèques et l’Internet constitue une forme d’instrument de mesure.

La réalisation de sondages visant à analyser l’utilisation de l’information par les citoyens en est une autre plus complexe, tout comme la création, à l’échelle nationale, de tests mesurant ces habiletés. Enfin, une dernière mesure visant à déterminer le développement de la maîtrise de l’information d’un pays donné serait l’utilisation d’indicateurs nationaux liés à la création, l’organisation, la disponibilité, la promotion, la demande et l’utilisation de l’information. Cette dernière comporte toutefois certaines limites.

mailto:[email protected]

http://www.jesuslau.com/

http://www.uv.mx/bvirtual


Résumé de la conférence : Simon Ellis 10

Programme LAMP : un nouveau modèle international pour mesurer l’alphabétisme

par :

Simon Ellis

Chef de la section des statistiques en sciences, culture et communications à l’Institut de statistique de l’UNESCO (ISU)

L’alphabétisme est l’un des cinq objectifs mondiaux abordés par le programme Éducation pour tous de l’UNESCO. D’ailleurs, les statistiques sur l’alphabétisation des jeunes constituent des indicateurs de résultats dans le cadre des Objectifs du Millénaire pour le développement de l’éducation primaire pour tous.

L’alphabétisme est la seule compétence pouvant être mesurée d’une manière comparable à l’échelle internationale, et l’un des seuls indicateurs du niveau d’éducation au sein de la population adulte. L’Institut de statistique de l’UNESCO (ISU) est l’instance internationale officielle responsable de la collecte de données sur l’alphabétisme utilisées dans tous les principaux rapports de développement international.

Ce document aborde la conception changeante de l’alphabétisme, qui est passée d’une simple distinction dichotomique alphabète/analphabète à la maîtrise des capacités de lecture et d'écriture comme un ensemble d’éléments liés à un rendement précis dans diverses tâches quotidiennes.

La communication examinera les nouvelles mesures internationales pour l’alphabétisme, en particulier le Programme d’évaluation et de suivi de l’alphabétisation (LAMP) de l’ISU, qui a été spécialement adapté pour mesurer l’alphabétisme dans les milieux où ce taux est faible.

Le lien qui existe entre les bibliothèques et l’alphabétisme sera souligné, plus particulièrement en lien avec l’alphabétisation et la durabilité des compétences acquises à l’école.


Résumé de la conférence : Cynthia Lisée en collaboration avec Simon Ellis 11

Mardi 19 août 2008

8 h 30 – 9 h 45 Regard critique sur la typologie, les problèmes et limites...

Limites du modèle des « Global statistics » et quelques exemples d'exploitation des résultats

par :

Cynthia Lisée en collaboration avec Simon Ellis

Université de Montréal – École de bibliothéconomie et des sciences de l’information, EBSI

Cette présentation débute par un court historique des enquêtes de l’Unesco sur les bibliothèques jusqu’à la mise en oeuvre du projet-pilote des « Global Statistics » en contexte latino-américains.

Le modèle des « Global Statistics » sera ensuite situé brièvement dans une revue de littérature sur l’évaluation des bibliothèques au niveau des motivations de l’évaluation et des critères de constructions des indicateurs.

Au cours de la présentation des indicateurs retenus, une rapide incursion sur les indicateurs d’alphabétisation au niveau des bibliothèques sera effectuée.

Quelques résultats du projet seront exposés au niveau du lien entre l’information numérique et les bibliothèques ainsi qu’avec les taux d’alphabétisation. Le croisement d’indicateurs autour de la donnée du prêt sera également abordé.

En dernière partie, nous ferons état des retombées du projet au niveau de la norme ISO 2789 et nous examinerons les limites du modèle des « Global Statistics ».

Nous conclurons sur l’évolution d’une culture statistique au sein du milieu des bibliothèques.


Résumé de la conférence : Don Mills 12

10 h 15 – 12 h 00 Session A, 1ère partie : bibliothèques publiques

Les bibliothèques publiques du Canada comptent! Par : Don Mills

Résumé de la conférence :

CONTEXTE / RÉSUMÉº:

Le regroupement national des grandes bibliothèques publiques du Canada a mené une enquête annuelle auprès des 65 à 75 plus importants réseaux de bibliothèques publiques au pays et en a publié les statistiques. Ce regroupement, maintenant appelé le Conseil des bibliothèques urbaines du Canada (CBUC), produit son rapport annuel de statistiques tous les ans en mai. Le rapport traite des éléments statistiques usuels en plus de couvrir les données sur la valeur du soutien indirect, de l’activité technologique, des pratiques de dépenses associées au matériel et des classements en fonction des principaux indicateurs de rendement. De plus, l’enquête s’enquiert aussi des activités des bibliothèques secondaires aux fins d’étalonnage à un niveau inférieur à celui du réseau. L’enquête définit également les ressources et réussites importantes pour en faire bénéficier tous les participants.

L’enquête annuelle nécessite environ 100 heures de travail par année et est maintenant diffusée sans frais à la communauté en entier. Un outil d’enquête en ligne est utilisé pour recueillir les données en temps réel, et un logiciel de traitement de texte normal sert à distribuer et à manipuler les résultats. Les participants ont donc la possibilité d’entreprendre une analyse approfondie des résultats sans frais ni efforts. Le groupe du CBUC a profité de la plus récente enquête pour introduire les définitions des normes ISO dans le but de rendre les résultats encore plus significatifs. De plus, le groupe continue de considérer l’utilisation des résultats obtenus pour les indicateurs de rendement des bibliothèques publiques nationales dans le but éventuel de les inclure dans l’étalonnage local et dans les calculs de la fiche d’évaluation équilibrée.

APERÇU DE LA PRÉSENTATIONº:

Le document proposé traitera de l’histoire et de l’évolution de cette action bénévole annuelle qui couvre toutes les grandes bibliothèques publiques du Canada. Il mentionnera ce qui distingue l’enquête annuelle actuelle, notamment son contenu et son processus. Il décrira en détail le processus de collecte de données et de distribution des résultats, qui ne nécessite que 100 heures de travail sur deux mois.

Le document traitera de la valeur de cette action pour la communauté des bibliothèques publiques en général et pour les régions et les réseaux spécifiques en particulier. Il mettra l’accent sur le rôle notoire que cette action a joué dans le développement continu des bibliothèques publiques dans les dix provinces du pays, chacune étant organisée différemment en fonction des différents besoins et priorités historiques.

Un échantillon de l’instrument d’enquête actuel sera présenté et révisé brièvement afin de souligner les éléments distinctifs du modèle canadien. Les nombreux rapports générés sur une base annuelle à l’intention des participants de l’enquête seront également décrits et évalués.

Le document abordera les approches récentes de redéfinition des mesures de rendement de ce regroupement national, notamment la nouvelle place accordée aux définitions ISO. Il identifiera les efforts visant à développer un outil d’étalonnage national dans les domaines d’intérêt national ainsi qu’un processus et un cadre pour les données locales des fiches d’évaluation équilibrées.

Enfin, le document déterminera les besoins statistiques actuels de la communauté des bibliothèques publiques du Canada et proposera des solutions pour l’avenir, notamment en mettant l’accent sur un ensemble d’indicateurs de rendement clés nationaux pour les bibliothèques publiques, les saines pratiques d’étalonnage et l’évolution d’une approche de « fiche d’évaluation équilibrée » pour la cueillette et le partage de données à l’échelle nationale du Canada.

Des exemples de l’outil et des résultats de 2007 seront fournis.


Résumé de la conférence : Benoît Allaire, Geneviève Baril et Marie-Josée Benoit 13

Optimiser, diffuser et utiliser les statistiques des bibliothèques publiques du Québec Par : Benoît Allaire, Geneviève Baril et Marie-Josée Benoit


En 2008, une importante révision de l’Enquête annuelle sur les bibliothèques publiques (EBP) a été réalisée conjointement par le ministère de la Culture, des Communications et de la Condition féminine (MCCCF) et Bibliothèque et Archives nationales du Québec (BAnQ), avec l’appui de l’Observatoire de la culture et des communications du Québec (OCCQ).

Dans le but de répondre aux besoins et attentes de la communauté des bibliothèques du Québec, les données de l’enquête annuelle ont été révisées et normalisées conformément à la norme internationale ISO 2789 sur les statistiques de bibliothèques. L’enquête ainsi normalisée et actualisée reflète mieux les services offerts par les bibliothèques publiques du Québec, particulièrement en ce qui a trait aux services électroniques, en plus de générer des indicateurs de rendement de niveaux national et international. Elle permet également aux intervenants de maximiser l’utilisation des données en facilitant significativement l’accès à cette information et les moyens de la diffuser.

Le processus de collecte et de diffusion des statistiques s’effectue désormais à l’aide d’un système de renseignements statistiques soutenu par un entrepôt de données, une interface Internet et un générateur de rapports. Maintenant que ce système est bien en place, les directeurs de bibliothèques, les gestionnaires des politiques et programmes des bibliothèques publiques ainsi que les chercheurs intéressés bénéficient d’un accès rapide aux renseignements statistiques, qui peuvent être facilement utilisés pour entreprendre des analyses comparatives et des activités administratives.

Les trois institutions qui participent au projet assument les responsabilités, tel que convenu dans une entente officielle.

En vertu de la Loi sur le ministère de la Culture et des Communications, le Ministère est responsable de la collecte et de la publication, sur une base annuelle, des renseignements concernant les activités des bibliothèques publiques du Québec, en particulier sur l’enquête annuelle des bibliothèques publiques. L’engagement du MCCCF envers ce projet tripartite constitue l’une des responsabilités et fonctions courantes du Ministère.

Le principal engagement de BAnQ à titre de bibliothèque de soutien pour l’ensemble des bibliothèques publiques du Québec, outre sa contribution à la normalisation actuelle et future de l’enquête, est de réaliser la collecte de données à l’aide d’une application Internet qui permet la collecte, la consultation, l’extraction, la conservation et la compilation de données.

L’OCCQ a un double rôle. Le premier est de conseiller le MCCCF et BAnQ en matière de méthodologie pour la tenue de l’enquête et l’interprétation des résultats; le deuxième est de produire des analyses périodiques de la situation des bibliothèques publiques du Québec et de diffuser sur son site Web des tableaux de données globales sur les activités de ces bibliothèques.


Résumé de la conférence : Ray Lyons 14

Comprendre les fondements méthodologiques des systèmes nationaux d’évaluation des bibliothèques publiques! Par : Ray Lyons


Le Federal-State Cooperative System, récemment rebaptisé Public Library Statistics Cooperative (PLSC), est l’initiative de collaboration statistique la plus complète aux États-Unis. Le PLSC a été institué au milieu des années 1980 par la U.S. National Commission on Libraries and Information Science, les agents en chef de State Library Agencies, la American Library Association et le ministère américain de l’Éducation. Depuis 1991, le PLSC publie annuellement des statistiques nationales décrivant plus de 9 200 bibliothèques publiques.

La disponibilité d’ensembles de données statistiques aussi importants a entraîné des utilisations de plus en plus créatives de ces données, dont la plus ambitieuse est Hennen American Public Library Ratings (HAPLR). Introduit en 1999, HAPLR accorde des pointages-résumés aux bibliothèques sur la base de huit éléments statistiques du PLSC et publie des classements annuels en fonction de ces pointages. HAPLR est reconnu mondialement comme une mesure de rendement crédible, bien que simpliste, pour les bibliothèques.

Toutefois, au fur et à mesure que les bibliothèques s’instruisent sur les évaluations, les bases méthodologiques des systèmes nationaux d’évaluation comme HAPLR sont soumises à un examen plus minutieux. Puis, d’autres classements nationaux, dont le concept est possiblement amélioré, commencent à se profiler. Ce document étudie les fondements méthodologiques des systèmes nationaux d’évaluation des bibliothèques et favorise l’interprétation et l’utilisation de ces résultats d’évaluation.

Deux types de statistiques recueillies par le PLSC sont similaires aux statistiques « habilitantes » et « utiles » [apparemment] spécifiées dans le modèle statistique global de l’IFLA : les statistiques d’entrée, tels les dépenses et les volumes, et les statistiques de sortie, tels les prêts et les visites. Par définition, ces statistiques ne constituent des indicateurs que de certains aspects du rendement opérationnel des bibliothèques. Ils ne mesurent pas directement la qualité de la bibliothèque, sa valeur, son excellence, les perceptions des utilisateurs et des non-utilisateurs, les résultats et l’impact du service ou la pertinence des services pour la communauté. C’est pourquoi les mesures composites (comme HAPLR et BIX) basées sur ces types de statistiques procurent uniquement des indications de base sur le rendement des bibliothèques.

Néanmoins, les données normalisées de bibliothèques provenant d’ensembles de données nationales ou internationales peuvent être utilisées à des fins d’évaluation. Tel que le suggèrent les expériences américaine et allemande, ces données, une fois adaptées aux classements nationaux, s’avèrent grandement utiles pour la défense et la promotion des modèles de services et de pratiques.

Toutefois, le recours à des classements oblige la communauté internationale des bibliothèques à reconnaître les limites associées aux mesures composites et à reconnaître la nécessité d’entreprendre des interprétations consciencieuses et responsables des résultats de classement.

Ce document traite des défis méthodologiques clés du développement et de l’utilisation des mesures composites associées aux statistiques de bibliothèques normalisées :

• Les plus importantes quantités statistiques relatives sont toujours considérées comme indiquant un rendement plus élevé ou, dans le cas des mesures d’efficacité, plus faible.

• La concentration des statistiques de bibliothèques normales amène à présumer que les ressources et activités des bibliothèques représentées par les données sont équivalentes, faisant ainsi abstraction des différences de complexité, raffinement, pertinence, qualité, valeur, efficacité, etc.

• La comparaison massive des bibliothèques peut entraîner le regroupement de bibliothèques dissemblables que l’on qualifie indûment « d’homologues ».

• L’imprécision des données causée par les méthodes de collecte, la comptabilisation biaisée, l’interprétation erronée des définitions statistiques et autres sources peut compromettre l’exactitude et la fiabilité des données, ce qui rend suspectes les comparaisons spécifiques de bibliothèques.

• La sélection des statistiques qui entrent dans la composition d’une mesure composite peut s’avérer arbitraire, biaisée et de portée restreinte.

• L’absence de consensus sur les éléments précédents se développe sur la base que les statistiques normales sont censées refléter la réalité..


Résumé de la conférence : Marcela Fushimi, Norma Mangiaterra, Mariana Pichinini et Gustavo Archuby 15

10 h 15 – 12 h 00 Session B, 1ère partie : bibliothèques universitaires

Base de données en statistiques de bibliothèques à l’Université nationale de La Plata (Argentine) : une expérience de coopération Par : Marcela Fushimi, Norma Mangiaterra, Mariana Pichinini et Gustavo Archuby


En octobre 2001, le Groupe de travail interbibliothèque (GTI) a été créé autour des bibliothèques de l’UNLP avec l’objectif de faire progresser divers projets conjoints et de former un réseau, dont la vitrine est le portail ROBLE (www.roble.unlp.edu.ar).

Les unités d’évaluation de l’information du GTI ont été établies dans le but de développer « les indicateurs de gestion applicables à l’ensemble des bibliothèques de l’UNLP qui permettront la mesure et le diagnostic, en plus de faciliter la prise de décision et les processus d’amélioration permanente ».

Dans ce contexte, nous avons développé une enquête statistique normalisée pour les données de base des bibliothèques qui tenait compte des normes internationales existantes sur la question ainsi que des développements mis en œuvre dans divers pays pour l’obtention de statistiques de bibliothèques universitaires. Entre autres, les développements de SCONUL (R.-U.), REBIUN (Espagne), CAUL (Australie) et ASIBU (France) ont fait l’objet d’une consultation.

La forme statistique a été appliquée à toutes les bibliothèques participantes du réseau ROBLE en 2001 et 2004, et les résultats furent publiés dans le cadre de deux annuaires statistiques distincts. Dans les deux cas, les données d’enquête ont été recueillies à l’aide d’un chiffrier électronique que les bibliothèques devaient remplir et retourner au groupe de travail aux fins de traitement et d’analyse centralisés.

Bien que la méthodologie ait obtenu les résultats escomptés, les problèmes suivants ont été notés :

Le traitement manuel des données s’est révélé très encombrant et vulnérable aux erreurs humaines de typographie;

L’adaptation et la publication subséquente des annuaires statistiques ont retardé au moins deux années de travail, puisqu’on n’avait assigné aucun personnel à cette tâche exclusive;

Les données traitées n’ont pas été entrées sur un site public ou n’étaient pas faciles d’accès, ce qui a compliqué la mise en œuvre de toute étude subséquente;

En raison du délai excessif dans le traitement des données, le manque de temps nous a empêché d’établir des comparatifs ou des études approfondies sur les bibliothèques (étalonnage, indicateurs de second niveau, indicateurs d’impact, etc.).

Pour ces raisons, le financement de 2007 a été utilisé pour le développement d’une application Web qui allait nous permettre d’automatiser l’enquête statistique et de générer une base de données incluant toutes les données recueillies depuis 2001 auprès des bibliothèques de l’UNLP.

Bien que l’application demeure à l’étape de développement, la première phase (chargement des données et identification des indicateurs de rendement) est présentement utilisée sous la forme de test bêta. Dans le but d’adapter son application à d’autres bibliothèques universitaires d’Argentine, une partie de ce projet a été présentée lors de l’atelier sur les indicateurs d’évaluation des bibliothèques (Taller de Indicadores de Evaluación de Bibliotecas, http://tieb.fahce.unlp.edu.ar), qui s’est tenu à La Plata en décembre 2007.

Ce document décrit l’expérience de l’équipe de l’UNLP lors de la collecte de données statistiques normalisées, l’analyse et le traitement, la conception de l’application Web, les problèmes rencontrés et les futures lignes directrices pour la mise en œuvre du projet de base de données en statistiques de bibliothèques des bibliothèques universitaires d’Argentine.

http://www.roble.unlp.edu.ar/

http://tieb.fahce.unlp.edu.ar/


Résumé de la conférence : Cathie Jilovsky 16

Statistiques en ligne des bibliothèques universitaires asiatiques : un projet pilote

par :

Cathie Jilovsky

Résumé :

Cette communication décrit les statistiques des bibliothèques universitaires et de recherche de l’Australie et de la Nouvelle-Zélande ainsi qu’un projet pilote sur l’étalonnage des statistiques de bibliothèques au sein des bibliothèques universitaires asiatiques. La gestion du projet pilote est assurée par CAVAL Collaborative Solutions, un consortium australien de bibliothèques, sous le parrainage de iGroup, Asie.

CAVAL offre divers services à ses membres et clients, dont la collecte et la publication de statistiques de bibliothèques ainsi que la consultation et le perfectionnement professionnel dans le domaine des statistiques et de l’évaluation de bibliothèques. Depuis 1992, CAVAL gère plus particulièrement la collecte de statistiques de bibliothèques de recherche et universitaires d’Australie pour CAUL (Council of Australian Academic Libraries) Statistics. En 2004, CAVAL a exploré des options pour le développement d’un site Web de statistiques en ligne pour CAUL Statistics et un site d’essai, basé sur le site bien connu de statistiques en ligne d’ARL, a été conçu grâce au partenariat de CAVAL avec l’ARL (Association of Research Libraries). Compte tenu de l’évaluation positive du site d’essai par les bibliothèques du CAUL, son développement a été approfondi et le service a été lancé en 2005. Depuis, un certain nombre d’améliorations ont été intégrées au site de statistiques en ligne du CAUL.

Les objectifs du projet pilote en statistiques asiatiques sont d’offrir aux bibliothèques universitaires asiatiques la même fonctionnalité que le site Web de statistiques en ligne du CAUL : d’améliorer les processus de collecte pour chacune des bibliothèques et de mettre sur pied un service durable d’étalonnage statistique.

La phase 1 du projet pilote, qui se déroule sur deux années au cours desquelles les données sont recueillies, chargées et rendues disponibles pour l’étalonnage du site Web en ligne, sera complétée au début de 2008. Seize bibliothèques de quatre pays du continent – Malaisie, Singapour, Thaïlande et Hong Kong – y prennent part. La phase 2 impliquera une année supplémentaire pour la collecte de données auprès des bibliothèques participantes. Le site Web en ligne et le service seront ensuite évalués par les bibliothèques participantes : le iGroup et CAVAL.

La communication décrira la conception et la mise en œuvre des sites de statistiques en ligne pour CAUL et les bibliothèques asiatiques. Notamment, certains des défis et problèmes soulevés dans le cadre du projet pilote des bibliothèques asiatiques et le processus d’évaluation y seront abordés.


Résumé de la conférence : Sam Kalb 17

LibQUAL Canada 2007 : étalonnage de la qualité du service à l’échelle nationale Par : Sam Kalb


En 2006-2007, la communauté des bibliothèques universitaires canadiennes s’est associée pour créer le plus important consortium LibQUAL+MC au moment de mener l’enquête sur la qualité du service en bibliothèque de l’ARL. À partir d’une proposition initiale offerte à certains membres de l’Association des bibliothèques de recherche du Canada (ABRC), LibQUAL Canada est devenu un projet authentiquement national avec 54 bibliothèques universitaires, collégiales et issues du gouvernement fédéral.

La réalisation la plus apparente de ce projet fut la collecte d’un vaste ensemble de données diversifiées visant l’analyse comparative des services et des installations : un ensemble de données significatives tant pour les bibliothèques à la recherche de comparateurs canadiens appropriés que pour les analyses par région, catégorie institutionnelle, etc. Mais parmi les résultats tout aussi utiles bien que moins apparents, le projet est parvenu à impliquer un plus grand nombre de bibliothèques universitaires canadiennes dans le processus d’évaluation du service. Pour la plupart des participants du consortium, c’était la première fois qu’ils faisaient l’expérience de LibQUAL+MC ou de tout autre instrument d’évaluation comparative.

Cette séance abordera :

comment et pourquoi le projet du consortium national a vu le jour, incluant les défis liés au recrutement et à la gestion des participants; les difficultés de planifier et de mettre en œuvre LibQUAL+MC au sein d’un consortium aussi important et diversifié, dont le mandat est bilingue et composé de divers types de bibliothèques; ce qui a fait la réussite du projet et ses restrictions; ce que nous avons appris et les futures directions possibles (en fonction d’une enquête menée auprès de participants du consortium).


Résumé de la conférence : Sylvie Belzile 18

Les programmes et projets statistiques dans les bibliothèques universitaires du Canada Par : Sylvie Belzile


Les bibliothèques universitaires et de recherche du Canada collectent, partagent et publient des statistiques depuis plusieurs décennies.

Les statistiques traditionnelles, telles les dépenses et la taille de la collection ainsi que l’utilisation, les installations et les services, sont bien assimilées et aisément compilées par les gestionnaires et le personnel des bibliothèques. Toutefois, le nombre croissant des ressources électroniques s’avère exigeant en termes de statistiques.

Comment saisir le nombre d’articles et les dépenses? Comment déterminer les meilleures façons de mesurer l’utilisation des livres et des séries électroniques?

Dans l’environnement électronique, il est tout aussi important de s’entendre sur un ensemble de données statistiques communes que c’était le cas dans l’univers imprimé.

Cette présentation informera sur les projets actuels à l’échelle du Canada et du Québec.


Résumé de la conférence : Trine Kolderup-Flaten 19

13 h 30 – 15 h 00 Session A, 2e partie : bibliothèques publiques

Présentation des indicateurs norvégiens

par :

Trine Kolderup-Flaten

Directrice de bibliothèque, Bergen Offentlige Bibliotek

Pendant des décennies, les statistiques liées aux bibliothèques nationales de Norvège étaient plus ou moins détaillées et fiables.

Au cours des dernières années, l’instance nationale responsable des archives, des bibliothèques et des musées du pays a intégré des indicateurs pour cerner les ressources des bibliothèques et les services modernes de manière plus efficace.

Dans la mesure du possible, les indicateurs devraient être utilisées tant pour les bibliothèques publiques et universitaires que pour les bibliothèques spécialisées dans le but d’obtenir une vue d’ensemble de toutes les ressources dépensées pour les bibliothèques et permettre l’étalonnage.

En Norvège, comme dans les autres pays scandinaves, l’intérêt de plus en plus marqué pour l’analyse et l’évaluation vise à comprendre les tendances d’utilisation des bibliothèques et à améliorer leur gestion.

Au cours des dernières années, plusieurs recherches et autres projets ont ajouté de précieux renseignements supplémentaires aux statistiques générales.


Résumé de la conférence : Pierre Meunier 20

L’évaluation de l’atteinte de normes de qualité et de résultats ciblés, déterminés en fonction des études d’étalonnage grâce à un modèle de tableau de bord pour le Réseau de bibliothèques publiques de Montréal Par : Pierre Meunier


D’après les idées générées par le Sommet de Montréal en 2002, il était inévitable que le réseau de bibliothèques publiques soit consolidé à la suite de la fusion des 28 municipalités de l’île de Montréal. Les bibliothèques publiques sont considérées comme un « service de proximité » et sont sous la responsabilité de chaque arrondissement. La situation a fait l’objet d’une analyse (le diagnostic), qui a mené à l’élaboration d’un plan de consolidation d’une durée de 10 ans (de 2005 à 2014). Le plan de consolidation est composé d’axes stratégiques et d’objectifs spécifiques. Les seuils définis par les normes minimales de service et estimés par des indicateurs de rendement pour chacun des domaines de normalisation sont déterminés dans le but de veiller à ce que les objectifs spécifiques soient réalisés. Le plan de consolidation prévoit aussi l’atteinte de résultats cibles à différents moments tout au long du terme de 10 ans. L’investissement financier soutenant ce plan de consolidation est estimé à plus de 230 millions de dollars canadiens.

Un modèle potentiel de tableau de bord est proposé comme méthode d’évaluation progressive du processus d’établissement du plan de consolidation, qui est basé sur l’introduction de nouvelles normes minimales de service et mesures de rendement. En général, les mesures de rendement sont basées sur la norme ISO 11620, mais certaines normes et mesures de rendement originales seront adaptées pour les besoins spécifiques d’un réseau urbain de bibliothèques publiques afin d’y inclure les divergences importantes associées à Montréal. Les indicateurs statistiques sélectionnés, les normes et les mesures de rendement projetées pour le modèle de fiche d’évaluation équilibrée sont présentés.

L’objectif de cette fiche d’évaluation équilibrée à plusieurs niveaux est de décrire efficacement le rendement du réseau des bibliothèques publiques et, plus précisément, des unités centralisées – niveaux stratégique et tactique (départements de Planification et développement, Programmes et services des arrondissement, Catalogage, Classification et Traitement) et des services publics décentralisés – niveau opérationnel (succursales de bibliothèques sous la responsabilité des arrondissements) afin d’appliquer de nouvelles stratégies et orientations de services déterminées dans le nouveau Plan d’orientation stratégique. Lors de l’élaboration du plan de consolidation, il a été noté que son succès reposerait sur la priorisation des principales normes de qualité et résultats cibles, qui seront estimés et projetés par des simulations en fonction de l’analyse de corrélation, et sur les études d’étalonnage effectuées auprès des réseaux de bibliothèques publiques urbains du Canada desservant une population de plus de 500 000 habitants. Enfin, le modèle potentiel de tableau de bord facilite l’évaluation des résultats interdépendants et des dimensions des activités des bibliothèques.


Résumé de la conférence : Sebastian Mundt 21

BIX – Modèle d’indices de qualité des bibliothèques : analyse par étalement sur une échelle (inter-) nationale

par :

Sebastian Mundt

Stuttgart Media University, Hamburg

Plus de 170 bibliothèques publiques et 85 bibliothèques universitaires de quatre pays ont participé à l’itération 2008 du Bibliotheksindex (BIX), un programme stratégique bénévole d’étalonnage/classement hiérarchique organisé par la German Library Foundation.

L’étalonnage systématique des bibliothèques allemandes remonte au début de la décennie 1990; les projets préliminaires ont été menés en grande partie par la Fondation Bertelsmann.

Les conclusions de ces initiatives novatrices ont abouti à la création d’un outil d’étalonnage statistique à l’échelle nationale pour les bibliothèques publiques, lequel a été mis en application en 1999. À partir des résultats probants d’étalonnage et de classement à l’échelle internationale, un outil adapté aux bibliothèques universitaires a été créé en 2004.

Basé sur l’approche des « fiches d’évaluation équilibrées », l’Index traite actuellement les données – selon le type de bibliothèque – à partir de 15 à 17 indicateurs transmissibles et largement validés selon quatre perspectives stratégiques.

Après avoir offert un aperçu du cadre conceptuel du BIX, la présentation précisera les améliorations apportées à la série d’indicateurs, analysera la perception et la réception de cet outil parmi les bibliothèques et fera ressortir les perspectives de développement ultérieur.


Résumé de la conférence : Dr Henk J. Voorbij 22

13 h 30 – 15 h 00 Session B, 2e partie : bibliothèques universitaires

Dix ans d’expérience en étalonnage pour les bibliothèques universitaires de Hollande Par : Dr Henk J. Voorbij


En 2008, les 13 bibliothèques universitaires des Pays-Bas détiennent près de dix ans d’expérience en étalonnage. Les données brutes sur les dépenses, les ressources d’information et les installations, les activités de traitement et l’utilisation des ressources d’information sont recueillies sur une feuille de calcul Excel.

À partir de ces données brutes, 26 indicateurs sont calculés. Une analyse approfondie est élaborée à partir des 14 indicateurs les plus pertinents.

En normalisant les valeurs et en présentant les résultats à l’aide d’un diagramme à barres, chaque bibliothèque peut identifier ses propres points forts et faibles au premier coup d’œil.

En comparant les valeurs actuelles avec celles obtenues au cours des années précédentes, chaque bibliothèque peut facilement déterminer les domaines dans lesquels elle s’est améliorée.

Puis, des tendances globales peuvent être identifiées en comparant les données brutes compilées ou les valeurs médianes des indicateurs au fil des années.


Résumé de la conférence : Claire Creaser 23

Présentation du système d'étallonage développé par SCONUL au R.-U (Statistiques de bibliothèques d'enseignement supérieur du Royaume-Uni)

par :

Claire Creaser

Directrice de la Library and Information Statistics Unit (LISU), Loughborough University, Loughborough, Leicester, GB.

Les bibliothèques universitaires de Grande-BretagneB. recueillent depuis longtemps des statistiques administratives à propos de leurs opérations. Cette communication décrira le rôle de la Society of College, National and University Libraries (SCONUL), et des organismes qui l’ont précédé, dans le développement de la base de données complète qui existe aujourd’hui. Auparavant, les universités, les écoles polytechniques et collèges avaient leurs propres groupes de bibliothèques, mais au fur et à mesure que le secteur lui-même est devenu plus cohérent, la SCONUL a pris de l'expansion et a fini par représenter les bibliothèques de tous les types d’établissements d’enseignement supérieur du Royaume-Uni. Toutes les universités de même que presque tous les collèges d’enseignement supérieur en sont membres, et plus de 80 % d’entre eux soumettent leurs statistiques sur une base annuelle. Les établissements membres de la SCONUL comptent 99 % des étudiants inscrits aux études supérieures subventionnées par l’État au R.-U.

La communication abordera l'élaboration du rapport statistique de la SCONUL et les procédés par lesquels les données pertinentes recueillies, ainsi que les statistiques administratives fournies dans les publications de la SCONUL, sont supervisées et mises à jour. À l’heure actuelle, la SCONUL produit trois publications annuelles : Annual Library Statistics, UK Higher Education Library Management Statistics et SCONUL Library Statistics: Trends. Chacune d’entre elles sera décrite et des exemples sur les résultats disponibles et l’objectif global de ces derniers seront aussi fournis. La SCONUL met également à la disposition de ses membres une base de données statistiques complète élaborée à partir de 2002 et présentement maintenue par le LISU. La raison d'être et la méthodologie en faveur de cette base de données seront exposées dans cette communication, tout comme les propositions en cours visant un enrichissement futur. Les membres peuvent interroger la base de données directement sur le site Web de la SCONUL, où l’on présentera aussi une sélection d’exemples des principales analyses disponibles.

Les données de la SCONUL sont utilisées pour une grande variété objectifs, tant par les bibliothèques particulières que par la SCONUL en tant qu’organisme, et par les chercheurs. Une liste des diverses utilisations possible des données sera présentée et inclura le développement des indicateurs de rendement, des programmes d’évaluation des bibliothèques, d’une variété d’analyses d’étalonnage pour les divers services des bibliothèques et des plaidoyers, et ce tant pour les bibliothèques individuelles au sein de leur établissement qu’à l’échelle nationale.

Claire joue un rôle actif dans la promotion des bonnes pratiques statistiques en prenant part à un certain nombre de comités et de groupes de travail externes, notamment le comité du British Standards Institute, pour les statistiques de bibliothèques et de publications, et le forum des utilisateurs de statistiques de la Royal Statistical Society. Diplômée en mathématiques de l’Université du Kent, elle est une statisticienne reconnue.


Approche intégrée pour l’évaluation des bibliothèques numériques : une stratégie émergente pour gérer les ressources, les capacités et les résultats Par : Leonor Gaspar Pinto, Paula Ochôa, et Maria Helena Vinagre


L’importance croissante de l’environnement de réseau et du changement ayant résulté dans le comportement informationnel des utilisateurs a stimulé les universitaires et les professionnels des bibliothèques à élaborer des stratégies et méthodes plus adéquates afin d’évaluer le rendement des services d’information traditionnels, hybrides et numériques. Ce document vise à expliquer en détail la stratégie et la méthodologie utilisées par une équipe de recherche pour évaluer le rendement du consortium de bibliothèques numériques du Portugal.

À l’aide d’une approche globale axée sur l’utilisateur/l’intervenant, les chercheurs ont conçu un modèle d’évaluation intégré des bibliothèques numériques. Les cinq composantes de ce modèle sont :

(a) Diagnostic, (b) Groupes stratégiques et besoins d’information sur le rendement, (c) Perspectives sur l’évaluation du rendement, (d) Critères et méthodes d’évaluation et (e) Évaluation des points de vue.

Les méthodes, techniques et outils d’évaluation développés à partir de deux composantes du modèle – (c) Perspectives sur l’évaluation du rendement et (d) Critères et méthodes d’évaluation – sont abordés plus en profondeur :

La fiche d’évaluation équilibrée des bibliothèques numériques;

La matrice des perspectives et domaines de mesure stratégique ainsi que les mesures et indicateurs de rendement associés;

Le modèle de qualité du service des bibliothèques numériques et l’échelle comprenant plusieurs éléments utilisés dans le processus d’évaluation.

L’étude de cas est aussi utilisée pour explorer les interactions potentielles entre l’évaluation des cultures/environnement et l’apprentissage d’aptitudes professionnelles, tout en mettant l’accent sur l’étalonnage et autres perspectives d’intérêt pour la recherche.