Merci d'avoir gardé le forum ouvert plus longtemps que prévu. J'ai lu tous les commentaires avec beaucoup d'intérêt, sans oser contribuer, à la fois parce que je suis nouvelle dans la communauté EvalForward et parce que je ne suis pas une évaluatrice expérimentée, en particulier dans le domaine scientifique, mais plutôt une praticienne générale du S&E / MEL au niveau du projet.
Je ne poste quelque chose que maintenant, à la dernière minute, en réponse à la question 3 sur les pratiques de MEL, et plus particulièrement en ce qui concerne la mesure de l'impact (qui a beaucoup été abordée dans d'autres messages, merci à Claudio Proietti d'avoir présenté ImpresS), où les indicateurs qualitatifs sont souvent basés sur des entretiens ou des rapports, et il n'est pas facile de donner un sens à la narration.
Je ne sais pas si, en termes de pratiques, les outils informatiques sont intéressants, mais je pense que dans ce type de mesure, certains outils informatiques peuvent être d'une grande aide. Bien sûr, la qualité de l'évaluation dépend de la façon dont les questions narratives sont conçues et du type d'analyse prévu (classifications, mots-clés, structure de l'histoire, métadonnées), mais une fois la conception faite, il est très pratique d'utiliser des outils qui vous permettent de classifier (parfois automatiquement) par rapport à des concepts sélectionnés, d'identifier des modèles, la fréquence des mots/concepts, des groupes de concepts, etc. en utilisant des techniques d'exploration de texte et d'apprentissage automatique, dans certains cas même en partant directement de fichiers vidéo et audio.
Quelques outils d'analyse narrative que je suis en train d'examiner sont : ATLAS.ti, MAXQDA, NVivo. D'autres outils que je vérifie, qui font une analyse narrative moins puissante mais qui ont aussi des fonctionnalités de conception et de collecte, sont Cynefin Sensemaker et Sprockler. Un outil intéressant, avec des fonctionnalités plus basiques mais une forte colonne vertébrale conceptuelle, qui aide à la conception de l'enquête narrative et soutient un processus d'analyse participatif, est NarraFirma.
(O.T. : Je serais en fait intéressée par un échange de vues sur ces outils avec d'autres membres de la communauté qui les ont utilisés).
RE: How to evaluate science, technology and innovation in a development context?
Merci d'avoir gardé le forum ouvert plus longtemps que prévu. J'ai lu tous les commentaires avec beaucoup d'intérêt, sans oser contribuer, à la fois parce que je suis nouvelle dans la communauté EvalForward et parce que je ne suis pas une évaluatrice expérimentée, en particulier dans le domaine scientifique, mais plutôt une praticienne générale du S&E / MEL au niveau du projet.
Je ne poste quelque chose que maintenant, à la dernière minute, en réponse à la question 3 sur les pratiques de MEL, et plus particulièrement en ce qui concerne la mesure de l'impact (qui a beaucoup été abordée dans d'autres messages, merci à Claudio Proietti d'avoir présenté ImpresS), où les indicateurs qualitatifs sont souvent basés sur des entretiens ou des rapports, et il n'est pas facile de donner un sens à la narration.
Je ne sais pas si, en termes de pratiques, les outils informatiques sont intéressants, mais je pense que dans ce type de mesure, certains outils informatiques peuvent être d'une grande aide. Bien sûr, la qualité de l'évaluation dépend de la façon dont les questions narratives sont conçues et du type d'analyse prévu (classifications, mots-clés, structure de l'histoire, métadonnées), mais une fois la conception faite, il est très pratique d'utiliser des outils qui vous permettent de classifier (parfois automatiquement) par rapport à des concepts sélectionnés, d'identifier des modèles, la fréquence des mots/concepts, des groupes de concepts, etc. en utilisant des techniques d'exploration de texte et d'apprentissage automatique, dans certains cas même en partant directement de fichiers vidéo et audio.
Quelques outils d'analyse narrative que je suis en train d'examiner sont : ATLAS.ti, MAXQDA, NVivo. D'autres outils que je vérifie, qui font une analyse narrative moins puissante mais qui ont aussi des fonctionnalités de conception et de collecte, sont Cynefin Sensemaker et Sprockler. Un outil intéressant, avec des fonctionnalités plus basiques mais une forte colonne vertébrale conceptuelle, qui aide à la conception de l'enquête narrative et soutient un processus d'analyse participatif, est NarraFirma.
(O.T. : Je serais en fait intéressée par un échange de vues sur ces outils avec d'autres membres de la communauté qui les ont utilisés).