Aller au contenu principal
Cristian Maneiro

Uruguay

Cristian Maneiro Member since 16/09/2022

Maestral International, PLAN Eval

Senior Consultant
Website
Evaluation specialist with over ten years of experience, both conducting and commissioning evaluations for UN Agencies and International Organizations. Regional work experience in Latin American and African countries. MA degree in Sociology and post graduate diploma in Public Policy and Evaluation, along with several short courses taken in development economics, research methods and softwares. Spanish native speaker, fluent in English and Portuguese with working knowledge of French.

My contributions

    • Cristian Maneiro

      Uruguay

      Cristian Maneiro

      Senior Consultant

      Maestral International, PLAN Eval

      Posté le 09/05/2024

      Bonjour chers collègues,

      Salutations de l'Uruguay !

      Merci, Ibtissem, d'avoir abordé ce sujet passionnant. Ayant connu les deux côtés du processus d'évaluation (en commissionnant des évaluations pour le PAM et en menant des évaluations en tant que consultant indépendant pour l'UNICEF et l'UNFPA), je suis tout à fait d'accord sur le fait que le responsable de l'évaluation joue un rôle central et porte une responsabilité importante pour assurer la qualité des résultats de l'évaluation, ce qui détermine en fin de compte leur utilité.

      En m'appuyant sur ce que d'autres collègues ont déjà mentionné, j'aimerais proposer quelques points supplémentaires qui n'ont pas encore été soulevés concernant le soutien du responsable de l'évaluation et son rôle dans l'évaluation :

      Idéalement, le responsable de l'évaluation ne devrait pas porter tout le fardeau seul. Il est préférable qu'il soit soutenu par au moins un analyste de l'évaluation. Cette composition d'équipe imite la structure d'une équipe d'évaluation externe et facilite la communication et la coordination. Les analystes d'évaluation peuvent s'occuper des réunions bilatérales avec les analystes de données ou d'autres membres de l'équipe d'évaluation externe, ce qui permet au responsable de l'évaluation de se concentrer sur la supervision du calendrier, le respect des délais et la prise de décisions de haut niveau en consultation avec le chef d'équipe.

      En outre, il est important de reconnaître que lorsque l'on parle d'indépendance de l'évaluation, on suppose souvent que l'on se réfère à des évaluations externes. Cependant, certaines approches d'évaluation (par exemple l'évaluation du développement) mettent l'accent sur une approche plus formative. Dans ce cas, l'implication du responsable de l'évaluation en tant que partie intégrante du programme évalué est essentielle. Cette approche favorise une plus grande appropriation et encourage l'apprentissage interne au sein de l'organisation.


      Salutations distinguées,

       

    • Cristian Maneiro

      Uruguay

      Cristian Maneiro

      Senior Consultant

      Maestral International, PLAN Eval

      Posté le 19/02/2024

      Salutations, chers collègues,

      Je vous remercie, Muriel, d'avoir abordé ce sujet et j'apprécie toutes les contributions. Je pense que l'IA présente des aspects prometteurs pour les évaluateurs, et il est essentiel que nous en soyons conscients. Personnellement, la perspective d'effectuer des analyses quantitatives rapides et interactives sans avoir besoin d'une expertise dans un logiciel de codage (par exemple, R ou Python) changerait la donne pour des professionnels comme moi qui ont une formation en sciences humaines.

      En outre, la possibilité de résumer des textes bruts volumineux, tels que des entretiens ou des transcriptions de discussions de groupe, et de faciliter l'analyse précise des points clés, pourrait permettre de gagner un temps considérable. Toutefois, il est essentiel de souligner que l'expérience de l'évaluateur, sa connaissance préalable du domaine, les points de vue des parties prenantes et le sens de la finalité de l'évaluation continueront d'être cruciaux et appréciés.

      En outre, les dilemmes éthiques et les décisions relatives à la présentation des résultats ne seront pas résolus par l'IA, quelle que soit sa puissance.

      J'aimerais beaucoup voir des exemples d'IA utilisée dans des approches quantitatives et qualitatives.

    • Cristian Maneiro

      Uruguay

      Cristian Maneiro

      Senior Consultant

      Maestral International, PLAN Eval

      Posté le 22/09/2023

      Chers collègues :

      Je vous salue depuis l'Uruguay !

      Je pense que la discussion lancée par Jean est très pertinente. Les méthodes mixtes sont sans aucun doute une stratégie puissante pour aborder un objet d'évaluation sous différents angles, et c'est presque une pratique standard dans la plupart des termes de référence d'évaluation (TDR) que l'on voit actuellement, que ce soit pour les agences des Nations Unies ou d'autres.

      Cependant, je reconnais que le terme devient parfois un cliché et qu'il est utilisé sans se demander si une stratégie de méthodes mixtes est réellement la plus appropriée. On part du principe que différentes techniques (généralement des entretiens avec des informateurs clés et des enquêtes) fourniront des informations complémentaires, mais les commanditaires n'ont souvent pas d'idée claire sur la manière dont ces informations seront intégrées et triangulées. À mon avis, les cas réussis sont ceux où le processus d'intégration est bien défini ou lorsque les méthodes sont appliquées de manière séquentielle (par exemple, en organisant des groupes de discussion pour définir les questions de l'enquête ou en sélectionnant des cas basés sur une enquête pour des entretiens approfondis).

      En outre, je comprends qu'avec les développements technologiques actuels, les méthodes mixtes ont de nouvelles potentialités. Il ne s'agit plus seulement de la combinaison typique d'entretiens avec des informateurs clés et de discussions avec des groupes cibles avec des enquêtes ; au lieu de cela, il peut s'agir d'une analyse de big data utilisant l'apprentissage automatique, l'analyse des sentiments, et bien d'autres choses encore.