Programme

Mark Robertson (Université métropolitaine de Toronto), Justine Wheeler (Université de Calgary), Tania Gottschalk (Université Thompson Rivers)

Cet atelier donne un aperçu du Cadre d’impact des bibliothèques de l’ABRC et offre des occasions pratiques d’appliquer des modèles logiques aux fins d’évaluation.

Le Cadre d’impact des bibliothèques de l’ABRC a pris l’idée des voies d’incidence et a utilisé des modèles logiques pour visualiser l’arc d’influence des programmes, des ressources et des services de nos bibliothèques.  Les modèles logiques sont principalement utilisés aux fins de la planification et de l’évaluation des programmes dans les secteurs des services sociaux, du gouvernement et des organismes sans but lucratif. Ils ont été moins utilisés dans le contexte des bibliothèques universitaires. Le cadre a l’avantage de fournir une approche structurée, de distinguer les intrants des extrants de l’impact et de nous aider à décrire les différentes formes que l’impact peut prendre.

La discussion portera sur l’utilisation potentielle des modèles logiques, ainsi que sur les limites et les défis possibles. Les participants acquerront une compréhension du Cadre d’impact des bibliothèques de l’ABRC, des modèles logiques et de la façon dont ils peuvent être appliqués aux travaux d’évaluation. Des liens vers des ressources en ligne seront également fournis.

Aucune connaissance préalable n’est nécessaire pour participer.

Activité d’apprentissage : Les animateurs travailleront avec les participants à la création d’une question d’évaluation, puis à l’élaboration d’un modèle logique. Les facilitateurs dirigeront également une discussion sur les utilisations et les défis du Cadre.

Jenny Hirst (Université de Waterloo)

La bibliothèque de l’Université de Waterloo, comme bien d’autres, a connu d’importants bouleversements sur le plan des données, de l’analyse et de l’évaluation au cours des dernières années.  En commençant par une migration du SLI à la fin de 2019, et en combinant avec la demande pour toutes les données, tout le temps, de toutes les façons possibles (rapports, visuels de données, narration) tout au long de la pandémie, tout en continuant à adapter et à faire évoluer nos services pour nos clients.  Bien que de merveilleux travaux aient été publiés pendant cette période, il y avait un inconvénient : il n’y avait pas de temps pour l’entretien, pas de temps pour la documentation, pas de temps pour une évaluation plus approfondie, et ainsi de suite.  Ce n’était tout simplement pas une approche durable pour notre bibliothèque.

Maintenant que la poussière a commencé à retomber, nous prenons le temps de créer une feuille de route analytique.  Les changements dans le paysage continuent d’exiger une meilleure compréhension de nos besoins, de nos pratiques et de nos ressources en matière de rapports et d’analyses.  Nous devons savoir où nous devons aller au cours des prochaines années, le plus tôt possible, et nous avons entrepris ce parcours pour définir notre vision en matière d’analyse et de production de rapports, les lacunes et la façon d’y arriver. Notre feuille de route se compose de trois phases : l’état actuel (ce que nous allons), l’état futur (ce que nous devrions faire) et la feuille de route elle-même (comment nous allons y arriver).

Nous avons récemment terminé la première phase de la feuille de route, qui comprenait une vérification détaillée des données dans tous les services de bibliothèque, en mettant l’accent sur la méthodologie de collecte, le stockage, l’accès, les politiques de conservation, la protection des renseignements personnels et l’objectif.  Nous avons décidé de faire une série d’entrevues et de discussions pour recueillir cette information, plutôt qu’une enquête ou une demande de données, ce que nous avons trouvé très fructueux.  Un tableau de haut niveau de cette information, avec les coordonnées du personnel clé de la bibliothèque pour accroître la transparence de notre travail d’évaluation au fil de l’année, sera hébergé sur notre wiki analytique et tenu à jour.

À partir de cette vérification des données, nous avons également été en mesure de signaler les préoccupations potentielles en matière de protection des renseignements personnels, de formuler des recommandations de niveau inférieur liées principalement aux pratiques exemplaires en matière de saisie et de stockage des données et de déterminer les thèmes clés qui aideront à cibler les phases futures de la feuille de route.

Dans cette présentation, nous aimerions profiter de l’occasion pour partager nos conclusions et présenter notre méthodologie en détail, dans l’espoir que ce travail puisse aider d’autres bibliothèques qui essaient de retrouver leurs pieds après un tourbillon de changements rapides d’évaluation.

Shelley Arvin (Cunningham Memorial Library, Indiana State University)

En réponse aux changements survenus après la pandémie et à l’économie actuelle, alors qu’un programme d’études universitaires de base a entrepris de se restructurer et de restructurer son programme, un plan d’évaluation des exigences d’apprentissage appliquées (SALRs) a été lancé. Le plan, qui comprenait la littératie de l’information, la pensée critique et la rédaction de documents de développement sous forme de SALR, a commencé avec le SALR de la littératie de l’information comme cas pilote. En se fondant sur les leçons tirées du projet pilote, l’équipe d’évaluation des études fondamentales avait l’intention de peaufiner le plan et de formuler des recommandations finales pour une évaluation complète de la SALR. Une approche à plusieurs volets a été utilisée pour l’évaluation de la littératie en matière d’information. Premièrement, le représentant des bibliothécaires au Conseil des études fondamentales a élaboré un questionnaire LibWizard qui évaluait la composition et les connaissances et les compétences en communication de la maîtrise de l’information des étudiants de première année près du début de leur carrière collégiale. Deuxièmement, les artefacts des étudiants issus des cours de composition et de communication des études de base ont été évalués en collaboration par des professeurs et des bibliothécaires à l’aide de rubriques qui comprenaient les résultats liés à la littératie de l’information. Troisièmement, on a demandé aux bibliothécaires de proposer des niveaux de compétence pour la maîtrise de l’information aux niveaux de la première année, de la deuxième année, de la première année, de la première année et de la première année, en utilisant des énoncés évaluables. Les résultats de la première et de la deuxième évaluation ont été analysés, discutés de façon critique et partagés avec les groupes et les intervenants. La troisième initiative a servi de base à de futures conversations pour un enseignement et une collaboration conviviaux avec les instructeurs.

Les participants apprendront :

• stratégies pour évaluer la maîtrise de l’information des étudiants du campus indépendamment des cours et des majors.
• sur l’utilisation de LibWizard pour collecter et analyser les données d’évaluation des étudiants.
• le niveau de connaissances et de compétences en littératie de l’information des étudiants de première année à l’université à leur entrée au collège en 2022-2023.

Giovanna Badia (Bibliothèque de l’Université McGill)

Les chiffres sont généralement recueillis pour déterminer l’utilisation de la bibliothèque, comme le nombre d’articles empruntés, les questions auxquelles on a répondu, les visites de personnes, etc. Les chiffres présentent également certaines caractéristiques qui violent les hypothèses d’utilisation de modèles de régression linéaire ou de techniques statistiques pour étudier les relations entre les variables. Par exemple, les chiffres ne peuvent pas avoir des valeurs inférieures à zéro, alors que les modèles de régression linéaire peuvent prédire des valeurs négatives. Le poisson et le binomial négatif, y compris leurs variantes tronquées et gonflées à zéro, sont des modèles de régression qui tiennent compte des propriétés des données de comptage. Cet atelier fournira un aperçu de ces modèles de régression de comptage, y compris ce qu’ils sont, comment ils diffèrent de la régression linéaire, et comment ils peuvent être utilisés pour analyser les données d’utilisation de la bibliothèque. Des critères permettant de comparer les modèles statistiques afin d’identifier celui qui répond le mieux à la question étudiée seront également présentés. Le code R et Stata pour exécuter les modèles de régression de comptage sera partagé avec les participants à l’atelier.

Activités d’apprentissage – Les participants seront invités à :

• Identifiez les cas où il serait pertinent d’utiliser des modèles de régression de comptage à partir d’une liste de scénarios multiples.
• Sélectionnez le meilleur modèle statistique qui répond à une question donnée en appliquant les critères de comparaison fournis.
• Expliquer les résultats d’un modèle de régression des comptes à un administrateur principal de bibliothèque.

Objectifs d’apprentissage – Les participants pourront :

• Décrivez les cas où il serait approprié d’utiliser des modèles de régression du dénombrement.
• Décrivez comment comparer différents modèles statistiques pour choisir le meilleur pour répondre à la question explorée.
• Interpréter les résultats des modèles de régression de comptage.

Cet atelier suppose que les participants ont utilisé la régression linéaire ou ont une compréhension générale de ce qu’elle fait.

Andrea McLellan, Jo-Anne Petropoulos, Stephanie Sanger et Wei Zhang (Université McMaster)

À l’automne 2022, l’Université McMaster a signé une entente pour participer au programme PLoS Community Action Publishing (CAP). En signant cette entente, les bibliothèques visaient à accroître la production de publications de recherche de l’Université McMaster, en particulier pour les chercheurs et les étudiants des cycles supérieurs dans les domaines de la recherche non financée, en soutenant davantage les frais de traitement d’articles. L’accord PLoS était attrayant parce que les revues sont en libre accès et ont le potentiel d’augmenter l’impact de la recherche institutionnelle. Notre groupe d’intérêt sur l’évaluation du libre accès a choisi PLoS comme exemple pour l’élaboration d’un cadre d’évaluation de l’impact des accords de publication en libre accès sur le budget d’acquisition, les coûts des frais de traitement d’articles, les publications institutionnelles et l’impact de la recherche. Le groupe a procédé à une évaluation préalable à l’accord de l’entente de prêt pour déterminer les avantages potentiels pour l’institution. Nous avons combiné les données sur les tendances institutionnelles avec les données sur les frais de traitement d’articles, et avec notre connaissance du paysage de la recherche à l’Université McMaster, pour rédiger un cadre d’évaluation qui guidera nos prochaines évaluations de la publication en libre accès. Les participants à cette séance comprendront comment utiliser Incites et d’autres outils pour produire des rapports sur les tendances de l’édition institutionnelle. Ils auront également l’occasion de réfléchir à la façon dont les objectifs stratégiques institutionnels peuvent guider les cadres d’évaluation. Les participants quitteront cette session avec des conseils concrets sur la façon de sélectionner et de hiérarchiser les données à surveiller pour l’évaluation à long terme des accords de publication en libre accès.

Sabina Pagotto (Scholars Portal/Conseil des bibliothèques universitaires de l’Ontario)

Nous savons que la commodité est essentielle au comportement de recherche d’information.  Cela est particulièrement vrai dans les bibliothèques universitaires, où il est peu probable que les étudiants de premier cycle fassent des pieds et des mains pour accéder à une ressource électronique particulière, lorsqu’il est plus facile d’accéder à une autre ressource « suffisante ». (voir, par exemple, Lynn Sillipigni Connaway, Timothy J. Dickey et Marie L. Radford, « If it is too inconvenient I’m not going after it : Convenience as a critical factor in information-seeking behaviors », Library & Information Research 33, no 3, 2011, p. 179-190). En pratique, cela signifie que les changements apportés à la façon dont un utilisateur interagit avec une plateforme de ressources électroniques, ou même un outil de découverte, peuvent avoir un impact sur COUNTER et d’autres statistiques d’utilisation. Ce n’est pas que le contenu lui-même soit plus (ou moins) utile; c’est que l’accès est devenu plus (ou moins) pratique.

Dans cette brève séance, je présenterai les résultats de deux études de cas où l’évolution des interfaces a entraîné des changements dans les habitudes d’utilisation, et donc les statistiques d’utilisation : un changement à la plateforme Scholars Portal Books qui a rendu DRM-des livres protégés plus faciles à lire et, par conséquent, une augmentation de leur utilisation, ainsi qu’un changement dans les méthodes de résolution de liens des bibliothèques abonnées qui ont eu une incidence sur leur utilisation de la plateforme Scholars Portal Journals.

Les participants apprendront à :

• Adopter une approche critique des statistiques d’utilisation comme indicateur de l’utilité des ressources électroniques
• Comprendre l’importance de l’expérience utilisateur pour l’évaluation de la collecte
• Tenir compte de l’incidence de la conception et de la refonte des interfaces sur les utilisateurs et sur les statistiques

J’espère surtout que les participants comprendront que les statistiques sur l’utilisation des ressources électroniques ne concernent pas seulement l’évaluation de la collecte, mais aussi l’expérience utilisateur.

Ze’ev Schneider (Université d’Ottawa)

Cette présentation portera sur divers aspects d’un projet d’évaluation des collections entrepris par l’équipe de la Stratégie de gestion des collections de la Bibliothèque de l’Université d’Ottawa dans le cadre d’une initiative de gestion du cycle de vie des collections.

Le projet, qui a débuté à l’hiver 2023 (l’analyse est maintenant terminée; mise en œuvre en cours) a été une évaluation de la valeur des fonds de journaux imprimés locaux ayant également une couverture en texte intégral dans les collections JSTOR appartenant à la bibliothèque. Environ 600 titres de la collection locale ont été identifiés dans l’analyse du chevauchement. Alors que la majorité des titres ont été sélectionnés pour la cession après l’évaluation, Environ 40 titres ont été retenus pour la conservation dans la version imprimée en fonction de la pertinence du sujet pour la collection locale et des résultats de la comparaison du contenu imprimé avec les versions numérisées du RTCE dans des cas précis.

Le projet comprend également une composante de collaboration avec le Center for Research Libraries (CRL), dans le but de compléter les archives imprimées CRL JSTOR (disponibles pour toutes les bibliothèques membres) par le don des volumes manquants de cette archive et sélectionnés pour la mise en vente de la collection locale.

Cette séance portera sur l’approche d’équipe de l’évaluation et un aperçu du processus décisionnel. examiner divers points de données considérés, y compris la densité des images et des comparaisons d’échantillons de l’imprimé avec les versions numérisées des revues; examiner certains aspects techniques; et noter certains des défis pratiques liés à la mise en œuvre de ce travail de projet interfonctionnel.

Objectifs d’apprentissage pratiques :

• Utilisation des analyses d’Alma pour créer des profils de collection et une analyse du chevauchement des imprimés électroniques (la majorité des bibliothèques du CBUO utilisent cette plateforme)
• Travailler avec les programmes d’impression partagés et les données disponibles par le biais du Registre de préservation des archives imprimées (PAPR)
• Nettoyage et appariement de l’ISSN dans Excel
• Utilisation des rapports d’analyse Alma pour préparer des listes d’éléments pour le flux de travail de désactivation

Cam Laforest (Université de l’Alberta)

La bibliothèque de l’Université de l’Alberta est une grande bibliothèque de recherche et membre du RCDR. En 2020, le RCDR s’est abonné à Unsub, un outil d’analyse des collections conçu pour aider les bibliothécaires à évaluer la valeur des trousses de revues « méga-ententes ». Cette présentation décrira comment l’outil Unsub combine les données de prix, d’utilisation, de citation et de publication, produire un modèle qui permet aux utilisateurs de prévoir les économies probables ainsi que la perte d’accès résultant de l’annulation d’un ensemble de revues « big deal » en faveur des abonnements individuels.

Cette présentation portera sur la façon dont les bibliothécaires des stratégies de collecte de l’Université de l’Alberta ont utilisé Unsub en 2021 et 2022 pour évaluer plusieurs trousses d’abonnement à des revues de grande envergure. Plusieurs scénarios utilisant des données de l’Université de l’Alberta seront partagés et discutés en détail, comme moyen de démontrer l’utilité du modèle Unsub comme outil d’évaluation.

Cette présentation se terminera par une discussion sur les observations au sujet des abonnements à des revues « méga-ententes » à l’Université de l’Alberta, qui sont facilitées par l’outil Unsub. et une discussion sur les avantages et les limites de l’utilisation de Unsub pour l’évaluation des paquets de revues plus généralement.

Les participants apprendront :

• Qu’est-ce que le suspect et comment il peut être utilisé pour évaluer les trousses de journal des méga-ententes?
• Comment les bibliothécaires des stratégies de collecte de l’Université de l’Alberta ont utilisé cet outil pour évaluer plusieurs de leurs trousses de revues.
• Observations faites par les bibliothécaires des stratégies de collecte de l’Université de l’Alberta au sujet de leurs abonnements à la trousse de revues « méga-ententes ».
• Les avantages et les limites de l’utilisation de Unsub pour l’évaluation des paquets de revues.

Jack Young (Université McMaster)

Cette session introduira une nouvelle approche de l’analyse bibliométrique pour découvrir les caractéristiques distinctives de la recherche fortement citée pour l’usage dans l’évaluation des collections de bibliothèque.  À l’aide d’outils populaires fondés sur des citations (Web of Science et InCites), la présentation explorera comment des facteurs tels que la source de publication, les données de collaboration et les sujets de recherche peuvent être analysés pour évaluer l’impact des collections actuelles des bibliothèques et produire des preuves. . .décisions éclairées concernant l’élaboration de la collection.

Ce type d’analyse répond aux besoins des intervenants de l’ensemble de l’institution.  En plus de soutenir les activités de développement des collections au sein de la bibliothèque, ces données ont soutenu le travail de Marketing et relations publiques, Avancement universitaire et des groupes de recherche individuels à l’établissement d’origine du présentateur.  En s’engageant dans ce type d’évaluation, les bibliothèques se positionnent au centre du domaine croissant de la stratégie de recherche axée sur les données, ouvrant de nouvelles possibilités de collaboration et augmentant leur valeur pour l’institution.

En plus de fournir des connaissances de base sur les concepts clés qui sous-tendent l’évaluation d’impact de la recherche, cette séance sera axée sur l’élaboration de rapports exploitables à diverses fins d’évaluation.

Les participants apprendront à :

• Comprendre et exprimer l’importance des indicateurs de référence normalisés pour l’évaluation des collections de bibliothèques.
• Exécutez une analyse de citation sur un ensemble d’articles pour déterminer les caractéristiques du contenu à fort impact au sein de la collection de la bibliothèque.
• Créez des visualisations et des rapports qui communiquent efficacement les données sur l’impact de la collecte aux responsables de bibliothèque et aux décideurs.

Shawn Mitchell (Bibliothèque publique de Toronto)

Joignez-vous à nous pour une séance d’ouverture inspirante et éclairante alors que nous explorons le domaine de la réinvention de la valeur et de l’évaluation de l’impact des bibliothèques publiques. À une époque marquée par les progrès technologiques rapides et l’évolution des besoins de la collectivité, les méthodes traditionnelles de mesure du succès des bibliothèques ne suffisent plus. Cette séance mettra en lumière les progrès révolutionnaires réalisés par la Bibliothèque publique de Toronto, montrant comment les bibliothèques publiques peuvent tirer parti de nouvelles approches et d’outils novateurs pour déterminer, mesurer et communiquer efficacement leur valeur.

Klara Maidenberg et Naz Torabi (bibliothèques de l’Université de Toronto)

À l’été 2020, les bibliothèques de l’Université de Toronto ont lancé le processus de création d’un cadre d’évaluation pour saisir et suivre les efforts de l’organisation pour faire progresser les objectifs énoncés dans son plan stratégique 2020-2025.

L’objectif de ce projet était de créer un cadre global et général qui engloberait tous les domaines d’activité des bibliothèques couverts par le plan stratégique. Le projet visait également à intégrer l’évaluation comme élément officiel du processus annuel de planification du travail que les ministères et les comités effectuent et, par conséquent, à améliorer davantage la culture d’évaluation des bibliothèques.

Après avoir examiné les pratiques exemplaires et la documentation existantes dans ce domaine, nous avons élaboré notre propre approche pour créer ce cadre. visant à créer une structure qui survivrait à la durée de vie du plan stratégique actuel et qui demeurerait une partie viable des pratiques organisationnelles à l’avenir.

Cette présentation résumera notre cheminement vers l’établissement et la mise en œuvre du cadre au cours des trois dernières années.

Les participants doivent s’attendre à apprendre ce qui suit :

• comment élaborer un cadre d’évaluation du plan stratégique;
• les principales composantes d’un cadre d’évaluation du plan stratégique;
• certaines des stratégies de mise en œuvre visant à accroître l’adhésion à un tel travail; et
• comment un cadre pourrait mener à une plus grande responsabilisation et à une plus grande concentration sur les priorités stratégiques à l’échelle de l’organisation.

Greg Davis (Iowa State University)

Cette séance donnera un aperçu de l’initiative du Cadre d’impact des bibliothèques de recherche (CIBR) et des 18 projets qui ont été inclus. La séance comprendra une présentation de l’équipe des bibliothèques de l’Ouest qui discutera de leur projet de CIBR, y compris leurs conclusions et les prochaines étapes, ainsi que du temps pour les questions et réponses.

Cette activité sera suivie d’une activité d’apprentissage visant à diffuser de l’information provenant du projet du CIBR afin d’aider les participants à déterminer les domaines de recherche potentiels de leur bibliothèque qui s’appuieraient sur les travaux de l’ARL.

Voici les objectifs de la séance :

• Informer les participants des travaux du CIBR de l’ARL
• Recueillir de l’information sur l’intérêt continu des participants à l’égard des sujets du CIBR et déterminer d’autres sujets et thèmes de recherche que les participants envisagent actuellement dans leurs propres bibliothèques
• Sensibiliser les participants à leurs intérêts communs en matière de recherche dans les bibliothèques universitaires.

Shahira Khair et Samantha Macfarlane (Université de Victoria)

Pendant la pandémie de COVID-19 et la fermeture du campus de l’Université de Victoria qui en a résulté, notre corps étudiant a vivement ressenti la perte de nos espaces de bibliothèque physiques. Bien que nous ayons reçu des commentaires positifs de la communauté sur la façon dont les bibliothèques se sont adaptées pour fournir des services à nos utilisateurs qui travaillent à distance (p. ex., collecte en bordure de rue de documents imprimés, ateliers virtuels et références, etc.), nous avons également entendu que les utilisateurs, et les étudiants en particulier, ont manqué les lieux eux-mêmes, pas seulement les services offerts en leur sein.

Inspirés par ces histoires de liens personnels entre les étudiants et la bibliothèque en tant que lieu important, nous avons cherché à mener une étude de recherche pour saisir dans leurs propres mots comment les étudiants perçoivent et se rapportent aux espaces physiques des bibliothèques de l’Université de Victoria.

Cette présentation résume le processus et les conclusions de notre étude qualitative sur la relation entre les étudiants et les espaces physiques des bibliothèques de l’Université de Victoria. Les récits des utilisateurs sur leurs perceptions et leurs relations avec la bibliothèque physique ont été capturés à partir de 42 entretiens avec les utilisateurs. Les sons ambiants de la vie de bibliothèque autour de notre environnement physique ont également été enregistrés. L’analyse thématique de l’ensemble de données qui en résulte est en cours et nous nous attendons à ce qu’elle éclaire une compréhension plus personnelle de la gamme d’utilisateurs des bibliothèques et des besoins que l’espace physique comble, qui vont au-delà de nos mesures plus standard. Les bibliothèques universitaires sont des espaces physiques clés qui soutiennent l’apprentissage et la recherche, mais aussi la détente, les loisirs et la socialisation. Tout au long de leur expérience universitaire, les étudiants avec qui nous nous sommes entretenus avaient établi des relations très personnelles et uniques avec les bibliothèques et décrivaient un sentiment d’appartenance à des espaces particuliers où ils aiment passer du temps. Le rôle des bibliothèques dans le renforcement de la communauté est très fort, de nombreuses personnes interrogées décrivant des amitiés et des réseaux de soutien encouragés et entretenus par les espaces.

Avec ces données, nous avons l’intention de construire des expositions auditives en ligne et en personne pour illustrer la valeur et l’impact des espaces physiques des bibliothèques et pour inspirer notre communauté de son potentiel de connexion, d’inclusion et de créativité. Ces connaissances seront également mises à profit dans de futures initiatives visant à améliorer les services et à offrir des espaces physiques plus accueillants et inclusifs aux utilisateurs. Alors que les bibliothèques sont aux prises avec la planification de l’espace et des services dans un environnement d’apprentissage hybride, les idées que nous partagerons dans cette présentation peuvent aider à éclairer une compréhension plus globale de l’impact des espaces de bibliothèque sur l’expérience des étudiants dans un monde post-COVID.

Résultats d’apprentissage :

• Considérations pour l’exécution d’une étude qualitative à grande échelle dans votre bibliothèque
• Thèmes transversaux liés à l’impact des espaces de bibliothèque sur l’expérience étudiante
• Possibilités de tirer parti des données qualitatives sur l’expérience utilisateur pour démontrer l’importance des espaces physiques des bibliothèques pour les administrateurs universitaires et les collectivités de donateurs éventuels

Kathy Ball et Leeanne Romane (Université McMaster)

Dans le cadre de nos fonctions, où nous recueillons et communiquons des statistiques sur les instructions, nous avons constaté des écarts et des incohérences dans la compréhension et le suivi des statistiques sur les instructions pour l’Enquête statistique de l’ABRC. Ces incohérences internes nous ont amenés à examiner nos propres pratiques et à explorer celles d’autres bibliothèques universitaires canadiennes. Grâce à l’utilisation de deux courts sondages auprès du personnel des bibliothèques responsable des statistiques sur l’enseignement, comme il est indiqué sur leurs sites Web, nous avons examiné les mesures et les méthodes utilisées par les bibliothèques universitaires canadiennes pour suivre les activités d’enseignement des bibliothèques qui est traditionnellement basée sur deux métriques : le nombre de sessions et le nombre de participants.  Nous avons également mené des entrevues avec les participants intéressés afin d’explorer davantage ce sujet, y compris les obstacles et les défis à la tenue de statistiques et l’utilisation de statistiques comme facteurs d’impact ou de succès. Nous nous sommes également intéressés à savoir comment ou dans quelle mesure ces statistiques sont utilisées dans la bibliothèque à des fins de planification et d’évaluation.   Cette présentation présentera un résumé de nos conclusions et des recommandations que nous faisons pour améliorer notre processus à la Bibliothèque McMaster.

Résultats d’apprentissage : Les participants apprendront les défis du suivi des statistiques d’enseignement et les approches et méthodes possibles pour améliorer le processus.

Robin Bergart, Juliene McLaughlin et Ron Ward (Université de Guelph)

Venez avec nous dans un voyage alors que nous essayons d’évaluer les vingt dernières années de stratégie d’évaluation et de fonctionnement à notre bibliothèque. Pendant cette période, il y a eu de nombreux comités d’évaluation locaux, des mandats, des cadres, des feuilles de route, des plans et des priorités dirigés par la haute direction, ainsi que des efforts individuels. Nous avons testé des modèles logiques, introduit l’UX dans le mix et configuré trois versions d’une équipe d’évaluation à l’échelle de la bibliothèque. Comment toutes ces expériences et itérations racontent-elles la place de l’évaluation dans notre bibliothèque ? Reflètent-ils les tendances de l’évolution de l’évaluation dans les bibliothèques canadiennes à plus grande échelle? Nous examinerons s’il y a un « meilleur endroit » pour l’évaluation au sein de notre organisation, qui devrait établir l’orientation et la portée, qui est responsable du travail et, en fin de compte, l’évaluation est-elle importante et pour qui?

Nous espérons qu’en réfléchissant à ce voyage et en partageant ces réflexions, nous vous inciterons également à réfléchir à l’endroit où se trouve l’évaluation dans votre propre bibliothèque. Nous voulons entendre d’autres histoires sur le chemin de la recherche d’une maison pour l’évaluation. Y a-t-il un meilleur endroit pour situer l’évaluation, ou est-ce en fonction de l’environnement organisationnel particulier?

Fred Chan (Bibliothèque de l’Université Mount Royal)

Les praticiens des bibliothèques traitent les données quotidiennement. Dans bien des cas, nous présentons des statistiques descriptives comme des totaux, des pourcentages et des moyens de résumer nos données. Les statistiques inférentielles, qui sont un ensemble de méthodes qui nous permettent de faire des estimations et de tirer des conclusions sur une population à partir d’un échantillon de données, sont moins couramment appliquées. Les techniques de statistiques inférentielles pourraient nous permettre de tirer plus d’informations de nos données pour améliorer la prise de décision, améliorer les flux de travail et allouer des ressources. Cet atelier offre aux bibliothécaires un moyen pratique et simple (c.-à-d. aucune formule complexe) d’en apprendre davantage sur les applications des statistiques inférentielles. Il couvre trois formes d’analyses : les proportions, les moyens et les associations, qui offrent de nombreuses possibilités d’obtenir des informations à partir des données des bibliothèques, telles que :

• Y a-t-il un lien entre les groupes d’utilisateurs et le point de départ de leur recherche? (tableaux croisés et carrés)
• Y a-t-il des différences dans l’utilisation des installations de discussion entre les étudiants de différentes facultés? (ANOVA)
• Quels facteurs contribuent à la satisfaction des utilisateurs? (Régression)

L’atelier utilisera jamovi, un logiciel open source basé sur R, qui offre une interface utilisateur graphique conviviale, une variété d’analyses statistiques, des capacités de visualisation de données et des plugins puissants. En intégrant des statistiques inférentielles dans leur boîte à outils d’analyse, les praticiens peuvent découvrir des informations précieuses sur les comportements, les préférences et les perceptions des utilisateurs. Grâce à une expérience pratique avec un ensemble de données réel lié à la bibliothèque, les participants peuvent appliquer davantage leurs apprentissages et prendre des décisions axées sur les données dans leur travail.

À la fin de cet atelier, les participants pourront :

• Importer des jeux de données et manipuler des données dans jamovi.
• Utiliser jamovi pour effectuer des tableaux croisés et des tests de chi carré pour comprendre les relations entre les variables catégorielles.
• Effectuez des ANOVAs dans jamovi pour comparer les moyennes entre différents groupes.
• Effectuer une analyse de corrélation dans jamovi pour explorer les associations entre les variables numériques.
• Appliquer une régression multiple pour expliquer/prédire les résultats en fonction de multiples variables indépendantes.
• Interpréter et communiquer les résultats de ces analyses dans le contexte d’un ensemble de données réel lié à la bibliothèque pour obtenir des renseignements.

Le matériel de cours, y compris des mises à jour sur les statistiques descriptives de base, sera mis à la disposition des participants avant l’atelier. Pour maximiser les résultats d’apprentissage, les participants sont encouragés à examiner le matériel avant l’atelier.

Katherine McColgan (Association des bibliothèques de recherche du Canada)

La collection annuelle de statistiques des bibliothèques canadiennes est un processus essentiel pour comprendre l’état des bibliothèques et leur impact sur la société. Pour assurer la pertinence continue de ces statistiques, il est important d’examiner et de mettre à jour régulièrement l’enquête. Cette présentation décrira les changements apportés à la collection annuelle de l’enquête sur les statistiques des bibliothèques, à l’interface de collecte et discutera des répercussions de ces changements.

La présentation de l’atelier et les discussions porteront sur :

• Ajout de nouveaux points de données : À mesure que les bibliothèques évoluent, il est important de recueillir des données sur les nouveaux services et programmes offerts. Cette séance portera sur les résultats attendus de ces points de données.
• Révision des définitions mises à jour pour assurer l’uniformité des rapports entre les bibliothèques.
• Simplification de la conception de l’enquête : Examiner l’interface de collecte remaniée afin d’améliorer la convivialité et l’accessibilité et de fournir de la rétroaction pour d’autres améliorations.
• Amélioration de la visualisation des données : Élaboration d’outils afin que les résultats du sondage puissent être présentés dans un format plus intuitif et visuellement attrayant pour faciliter l’analyse et l’interprétation.

Activité d’apprentissage : Les participants auront l’occasion de faire part de leur expérience en remplissant le nouveau questionnaire de statistiques, de participer à des discussions sur les flux de travail et le calendrier de la collecte des données, et de mieux définir et élargir les définitions pour une plus grande uniformité dans les rapports.

Joshua J. Herter (Université de Winnipeg)

Les méthodes de rapport annuel peuvent être frustrantes.  Même une fois que vous décidez quoi inclure ou produire, ils nécessitent souvent une quantité de travail douteuse étant donné leur courte durée de vie, leur portée limitée et leur impact impénétrable. Transmettre nos contributions à l’enseignement et à la recherche est une tâche importante, mais la production d’un package marketing organisé constitue-t-elle vraiment un engagement avec les parties prenantes du campus? Est-ce que quelqu’un lit réellement votre tableau de bord de données? S’ils le font, vaut-il la peine qu’ils interprètent mal l’information?

C’est l’histoire de la lutte d’un bibliothécaire d’évaluation pour développer des outils de reporting significatifs et authentiques qui résonnent avec les cas d’utilisation de l’équipe administrative. Après des années de tentatives infructueuses, nous avons accidentellement adopté une stratégie qui fonctionne : les histoires de données de bibliothèque. Plutôt que de produire un artefact statique – que peu de gens lisent jamais – nous nous concentrons sur le maintien de récits concis qui encadrent ce que nous faisons plutôt que ce que nous avons fait.

Basés sur une question, un projet ou une ressource ciblée, ces récits sont régulièrement mis à jour et évoluent au fil du temps. Ils remplissent deux fonctions principales : 1) Garder l’administration de la bibliothèque équipée de données en direct et exploitables pour mieux comprendre la trajectoire de nos activités, et 2) Maintenir un ensemble fiable de ressources narratives « prêtes à l’emploi ». Nous constatons que cette méthode facilite le transfert de connaissances entre les chefs de département de bibliothèque, l’administration de bibliothèque et les intervenants du campus, et positionne mieux la bibliothèque en tant que membre actif de la communauté du campus.

Objectifs d’apprentissage :

• Discuter des problèmes et des limites des méthodes traditionnelles de déclaration annuelle.
• Présentez les avantages de créer des outils de narration de données itératives au lieu de rapports statiques.
• Découvrez notre processus de collecte, de structure, de présentation et de communication des données.

Tara Stephens-Kyte (Université de la Colombie-Britannique)

La façon dont un dépôt institutionnel communique sa valeur aux principaux intervenants devrait correspondre aux intérêts et aux objectifs de leur public cible. Mais à quoi cela ressemble-t-il dans la pratique? Et si le public n’est pas vraiment intéressé ? S’appuyant sur l’expérience de cIRcle, le dépôt institutionnel de l’Université de la Colombie-Britannique, Je décomposerai les éléments de notre rapport annuel sur l’impact et les mesures clés pour montrer comment nous combinons des données quantitatives et qualitatives pour façonner les récits sur nos contributions à l’enseignement et à la recherche à l’UBC et notre rôle dans l’augmentation de sa visibilité. Je discuterai de la valeur de la réflexion, de la célébration et du partage ouvert de nos réussites et de nos partenariats clés dans un paysage culturel et savant en évolution rapide, malgré le fait que nous n’ayons reçu aucune rétroaction directe ou engagement mesurable de la part de nos publics cibles du corps professoral. étudiants et bibliothécaires. Je donnerai un aperçu des outils familiers que nous utilisons (comme Google Analytics et Tableau) et discuterai de la façon dont la portée et l’orientation du rapport changent continuellement à mesure que nous définissons et redéfinissons les indicateurs de rendement internes, les points de repère et les mesures du succès. Dans l’esprit de la citation de H.G. Parry, « Quelque chose doit être entendu pour être ignoré », je place le rapport cIRcle dans le contexte plus large des objectifs de plaidoyer à long terme dans la transition continue vers une bourse ouverte.

Les participants quitteront la séance avec des exemples d’approches adaptables pour conceptualiser et articuler la valeur d’un RI et des stratégies pratiques pour harmoniser les pratiques de rapport d’évaluation avec les objectifs de sensibilisation, de plaidoyer et de planification stratégique.

Amy McLay Paterson (Thompson Rivers University)

Une carte de processus est un flux de travail schématisé créé en collaboration, généralement par tous les membres d’une équipe impliquée dans le processus. Ornat et Moorefield (2018) affirment qu’en « décrivant un processus complexe (y compris ses acteurs et parties prenantes), les cartes peuvent aider à transmettre, partager ou communiquer les connaissances institutionnelles. Ils sont particulièrement utiles pour favoriser la collaboration interfonctionnelle entre les différents services ou unités de la bibliothèque. » Avantages de la cartographie des processus :

• Codification des flux de travail actuels
• Faciliter la pratique réflexive
• Éliminer les malentendus et les flux de travail non standard parmi les membres de l’équipe
• Résolution des questions
• Identifier ensemble les opportunités d’amélioration
• Créer des occasions de préconiser un changement collégial

Cet atelier offrira une introduction à la cartographie des processus, y compris ce qu’est la cartographie des processus, les avantages potentiels pour les participants et leur bibliothèque, et où la cartographie des processus pourrait être utilisée. L’atelier comprendra du temps pour que les participants s’essaient à participer à une séance de cartographie des processus. On s’attend à ce que les participants soient nouveaux à la cartographie des processus sans expérience préalable.

Objectifs d’apprentissage : Les participants à cette séance pourront :

• Expliquer les avantages de la cartographie des processus
• Identifier les opportunités de cartographie des processus dans leurs propres bibliothèques
• Animer ou participer à une session de cartographie de processus
• Créer une carte de processus rudimentaire en utilisant des outils et des symboles définis

Description de l’activité d’apprentissage : Les participants se diviseront en petits groupes, et chaque groupe recevra un processus simple présumé commun à toutes les bibliothèques (p. ex., la lecture d’un livre). Une personne dans chaque groupe jouera le rôle d’animateur. Bien que dans une situation réelle, tous les participants seront membres de la même bibliothèque, il sera habituel, même au sein de la même équipe, que les membres aient une compréhension légèrement différente des étapes et de l’ordre des processus simples. Aux fins de l’activité, chaque participant aura un rôle à jouer (p. ex., bibliothécaire, technicien de bibliothèque), ainsi qu’une brève description de l’aspect de ce processus du point de vue de son rôle.  L’objectif de l’activité sera que tous les participants de l’équipe travaillent ensemble pour créer une carte du processus en intégrant les points de vue et les rôles de tous les membres de l’équipe participants. Cela comprend le respect de la portée du processus, la détermination du début et de la fin du processus, la définition de toute façon dont le processus pourrait se ramifier et la correction de tout malentendu entre les membres de l’équipe.

À la fin de l’activité, les équipes seront invitées à partager les cartes qu’elles ont faites avec le groupe élargi et à discuter des succès ou des défis importants vécus pendant l’activité.

Gordon Coleman (Bibliothèque de l’Université Simon Fraser)

Cette présentation portera sur un projet de réévaluation des activités d’évaluation à la Division de l’acquisition, de la gestion et des métadonnées des ressources (RAMM), l’unité des services techniques de la bibliothèque de l’Université Simon Fraser. Le “rapport mensuel” standard des statistiques n’avait pas été mis à jour depuis de nombreuses années. Il était clair que le rapport comptait des fonctions qui n’étaient plus importantes et ignorait les nouvelles catégories d’activités importantes. Cette séance explorera le processus par lequel l’évaluation a été repensée. Les étapes comprenaient l’identification des objectifs, des avantages et des principes, la conception de nouveaux rapports via Alma Analytics et d’autres outils, la mobilisation itérative des parties prenantes pour confirmer que leurs besoins étaient satisfaits et la conception de nouveaux outils de communication pour partager les résultats des travaux d’évaluation.

Tout au long de la séance, les participants seront mis au défi de considérer de nombreux problèmes d’évaluation typiques tels qu’ils se manifestent dans le contexte des services techniques. Quel est le bon équilibre entre les mesures quantitatives et narratives et les mesures qualitatives? Entre les statistiques courantes et l’évaluation ponctuelle du projet? Est-il vrai que “si vous ne comptez pas, cela ne compte pas?” Comment passer de la collecte de statistiques à l’évaluation de la façon dont notre travail appuie les objectifs de l’unité et de la bibliothèque? Comment l’évaluation peut-elle être un moteur du changement? Le but ultime du projet est de s’assurer que nous pouvons transmettre la valeur du travail des services techniques à nos collègues de la bibliothèque, mettre en lumière le travail caché et soutenir le plaidoyer pour plus de ressources et d’outils.