Journée RESAPATH – 17 novembre 2010 Outils d’amélioration du réseau Myriam CHAZEL – Anses Lyon

Journée RESAPATH – 17 novembre 2010

Outils d’amélioration du réseauMyriam CHAZEL – Anses Lyon

• Journées RESAPATH annuelles

• Essais interlaboratoires annuels

• Boîte e-mail [email protected]

• Données collectées de plus en plus par voie informatique

Depuis plusieurs années…

2 Journée RESAPATH 17/11/10 – Myriam CHAZEL

Site internet


Actualités

Accessibilité à tousoumembres uniquement

Espace membrePour vous identifier

Site internet


RESAPATHAccessible à tous

DOCUMENTSAccessibles à tousoumembres uniquement

LIENS UTILESAccessibles à tous

Site internet


Possibilité de sélectionnerPar thématiqueTous, Gram +, Entérobactéries..

FAQ

membres uniquement

Poser une question

6

Site internet

Exemple de FAQ

Site internet


Poser une question dont la réponse n’est pas dans la FAQ

Possibilité de joindre une pièce

A utiliser en remplacement de la boîte mail resapath

8

Site internet à venir la Newsletter

Outils quantitatifs de pilotage et de vérification du bon fonctionnement du réseau

Outils internes de pilotage du réseau

Nombre limité d’indicateurs retenus pour leur pertinence

Valeur attendue pour leur réalisation

Indicateurs de Performance


14 indicateurs retenus mesurent

o le fonctionnement du réseauNb d’antibiogrammes collectés, Nb de laboratoires participants…

o la récupération des fiches et souches d’intérêt demandées par le RESAPATHTaux de fiches saisies dans les 4 mois, taux de souches demandées et reçues..

o l’animation du réseau et le retour d’information aux partenairesTaux de publication des rapports RESAPATH, taux de mise à jour du site…

o l’appui scientifique et technique aux laboratoires partenaires Taux de réalisation des journées, taux de participation des laboratoires à ces journées…

Calculés annuellement calcul rétrospectif depuis 2006



En plus• indicateurs de vie du réseau

Pas de valeur attendue

Nombre de questions des laboratoires, nombre de projets avec les laboratoires…

Calculés annuellement

• Indicateurs ponctuelsIndicateurs d’intérêt mais pas calculables aisément

Taux de satisfaction globale des laboratoires concernant les réponses techniques apportées par l’équipe…

Calculés suites à enquêtes ponctuelles





Indicateur Mode de calcul Valeur

attendue 2006 2007 2008 2009 Commentaires

Nombre d’antibiogrammes collectés Nombre d’antibiogrammes reçus Constance ou augmentation 9 511 12 643 18 058 23 808

Progression constante du nombre de laboratoires participants et du nombre d’antibiogrammes collectés. Le nombre croissant de données collectées améliore la représentativité des résultats par rapport à la situation de terrain

Nombre de laboratoires inscrits au RESAPATH

Nombre de laboratoires adhérents Constance ou augmentation 49 51 59 60

Taux de laboratoires participant à l’envoi de données

Nombre de laboratoires ayant envoyé des données dans l’année / Nombre de laboratoires inscrits au RESAPATH

90 % 82 %

(10/49) 82 %

(42/51) 92 %

(54/59) 95 %

(57/60)

Taux de souches demandées par l’Anses effectivement reçues (hors mode projet de recherche)

Nombre de souches reçues par l’Afssa hors mode « projet » / Nombre de souches demandées par l’Afssa hors mode « projet »

80 % 56 %

(316/566) 61 %

870/1 423) 50 %

(795/1 599) 35 %

(532/1 517)

Cet indicateur est faible mais son résultat n’est pas fiable et sans doute très fortement sous-estimé car la base de données ne permettait pas de le suivre en rétroactif. La base a été corrigée courant 2010 pour pouvoir calculer cet IP

Taux de fiches reçues à l’Anses et saisies (ou intégrées) dans la base dans les 4 mois après analyse du prélèvement

Nombre de fiches reçues et saisies dans les 4 mois suivant l’analyse / Nombre total de fiches reçues et saisies

70 % 59 %

(2 906/ 4 926) 45 %

(3 278/7 207) 50 %

(4 898/9 786) 43 %

(5 925/13 735)

Cet indicateur est suivi afin de disposer des données des laboratoires suffisamment précocement pour pouvoir demander les souches d’intérêt dans des délais compatibles avec les capacités de conservation des laboratoires. La demande d’envoi des données est faite régulièrement aux laboratoires et l’équipe va continuer sa sensibilisation. La non-tenue de ce délai ne remet nullement en cause, cependant, la fiabilité des données recueillies. Ce délai est perfectible puisque, pour 2009, 81 % des fiches sont reçues par voie informatique (19 334/23 808). Aussi une transmission plus régulière des extractions informatiques peut-elle être obtenue.

Taux de souches reçues dans les 31 jours suivant la demande par l’Anses

Nombre de souches reçues dans les 31 jours suivant la demande / Nombre total de souches reçues

90 % 76 %

(240/316) 64 %

(553/870) 67 %

(531/795) 78 %

(415/532)

Cet indicateur est faible, mais comme l’IP2, il est sans doute très sous-estimé pour les mêmes raisons. La base de données a été corrigée courant 2010 afin de pouvoir le suivre.

Taux de publication de rapports de synthèse de l’exercice du réseau

Nombre de rapports de l’exercice de l’année publiés / Nombre de rapports de synthèse attendus (=1)

100 % 100 % (1/1)

100 % (1/1)

100 % (1/1)

100 % (1/1)

La diffusion régulière des données du réseau est assurée annuellement.

Taux de réalisation des journées de restitution, de formation et d’échanges RESAPATH

Nombre de sessions « journées RESAPATH » organisées / Nombre de sessions « journées » attendues (=1 par an)

100 % 100 % (1/1)

100 % (1/1)

100 % (1/1)

100 % (1/1)

L’appui technique aux partenaires du réseau est systématiquement fait annuellement.

Taux de participation des laboratoires aux journées de restitution, de formation et d’échanges RESAPATH

Nombre de laboratoires inscrits dont 1 ou plusieurs membres ont participé aux journées RESAPATH de l’année / Nombre de laboratoires inscrits pendant cette année

67 % 69 %

(34/49) 67 %

(34/51) 68 %

(40/59) 58 %

(35/60)

Afin de suivre la réalité de l’appui technique au réseau des journées RESAPATH et l’intérêt de celles-ci, cet indicateur à une valeur attendue mise à 2/3. 2009 a vu une participation du nombre de laboratoires inférieure aux autres années, sans qu’il ne soit sorti aux questionnaires de satisfaction des retours de désintérêt vis-à-vis d’elles. La participation de plus de la moitié des laboratoires reste en valeur absolue une très belle participation

Taux d’envoi de newsletters du site web

Nombre de newsletters envoyées effectivement / Nombre de newsletters attendues

A définir à la mise en ligne

du site Indicateurs sans objet – Mise en ligne du site attendue fin 2010

Fréquence de mise à jour du site web Délai moyen entre 2 mises à jour du site web / Délai attendu (3 mois)

100 %

Taux de réponses données dans les 15 jours après la réception de la question des laboratoires collecteurs de données dans la Foire aux questions (FAQ)

Nombre de réponses données dans les 15 jours après l’arrivée de la question dans la FAQ / Nombre total de questions dans la FAQ

90 % non calculable 78 %

(42/54) 74 %

(37/50) 71 %

(24/34)

Cet indicateur mesure la rapidité de réponse de l’équipe RESAPATH aux questions techniques soumises par les laboratoires. La valeur attendue n’est pas atteinte. Cependant pour 2009 94 % (32/34) des réponses sont fournies dans les 30 jours. Il est à noter que ce délai de 15 jours n’est pas toujours possible à tenir selon les questions, puisque certaines très techniques ou non encore documentées demandent à ce que l’équipe procède à une recherche bibliographique pour y répondre. La valeur attendue de l’indicateur est donc peut-être un peu ambitieuse.

Résultats

Plus de détails dans le Rapport

RESAPATH 2009

• Depuis 2005, le nombre de données collectées ne cesse d’augmenter



0

5000

10000

15000

20000

25000

2005 2006 2007 2008 2009

Poissons

lapins

volailles

porcs

autres

chevaux

chats

chiens

caprins

ovins

bovins

Résultats

• Depuis 2005, le nombre de données collectées ne cesse d’augmenter

• Collecte des souches : indicateurs non atteints mais fortement sous-estimés jusqu’en 2009

• Indicateurs d’animation et de retour d’information atteints

• Indicateurs de l’appui scientifique globalement atteints



Les indicateurs font ressortir que le réseau fonctionne de manière efficace en interaction constante

Résultats

Outil d’Analyse des Systèmes d’Information en Santé

Principe de l’outil• Questionnaire approfondi de la description du fonctionnement

et de la qualité du réseau• Plusieurs rubriques (Objectifs, organisation centrale, de terrain…)

Notation • Des notes sont attribuées pour chaque rubrique

• L’ensemble de ces notes sont regroupées selon différents angles de vue

Evaluation OASIS du réseau


Evaluation OASIS – exemple de sortie


Section 1 : Objectifs et champ de la surveillance

Section 2 : Organisation institutionnelle centrale

Section 3 : Organisation institutionnelle de terrain

Section 4 : Laboratoire

Section 5 : Outils de surveillance

Section 6 : Modalités de surveillance

Section 7 : Gestion des données

Section 8 : Formation

Section 9 : Communication

Section 10 : Evaluation

Exemples

Cet outil est en cours pour RESAPATH

Résultats pour le Bilan 2010

Evaluation OASIS du réseau


• De nombreux outils sont en place ou à venir pour s’assurer du fonctionnement correct du réseau

• Les données qu’il fournit sont d’autant plus fiables

• Vos suggestions pour leurs améliorations, celles du site… sont les bienvenues

Conclusion


Documents

Journée RESAPATH – 17 novembre 2010 Outils d’amélioration du réseau Myriam CHAZEL – Anses Lyon