Surveiller & Évaluer
Le suivi des indicateurs d'impact de votre campagne vous aidera à suivre ses progrès. Tous les ajustements que vous apportez au contenu ou aux tactiques de la campagne, en fonction du suivi, doivent être enregistrés et expliqués. Les connaissances acquises grâce à ce processus itératif peuvent aider à maintenir la progression de votre campagne et à informer les travaux futurs que vous ou d'autres responsables de campagne pourriez effectuer. Il sera également précieux pour les bailleurs de fonds potentiels de voir que vous disposez d'un processus intégré pour réinjecter les informations continues de la campagne dans la mise en œuvre.
Vos objectifs sont les cibles par rapport auxquelles vous évaluerez votre campagne une fois qu'elle sera terminée. Si vous avez réussi à atteindre vos objectifs, vous devriez pouvoir l'illustrer en expliquant comment les tactiques que vous avez utilisées ont été efficaces (sur la base du suivi continu des indicateurs d'impact) et comment ces tactiques ont ensuite contribué logiquement à vos objectifs.
Évitez les métriques de vanité et préservez votre intégrité ! Certaines campagnes présentent des métriques de succès qui ne reflètent pas véritablement l'impact. Cela peut être dû soit à un manque de compréhension de ce qui constitue un impact, soit à une tentative délibérée de faire paraître la campagne plus réussie qu'elle ne l'était. Il existe de nombreux exemples d'organisations affirmant avoir atteint des millions de personnes avec leurs campagnes, mais ne parvenant pas à prouver si ces personnes faisaient partie du public cible et ne montrant aucune preuve d'engagement ou d'impact réel. Il est si important d'être honnête et précis dans votre évaluation et présentation de l'impact.
Veuillez noter :De nombreuses campagnes, en ligne et hors ligne, ne reconnaissent pas l'importance de ces deux étapes. En conséquence, il reste une lacune dans la compréhension des moyens les plus efficaces d'influencer le comportement de certains publics. La mesure de votre campagne ne doit pas être aussi complexe ou difficile qu'on pourrait le supposer, et même des efforts simples de suivi et d'évaluation peuvent produire des informations utiles et significatives.
Pourquoi devons-nous surveiller & évaluer ?
- Bien que de nombreuses organisations dans le monde mènent des campagnes pour répondre aux défis créés par les groupes terroristes et extrémistes violents, celles qui appliquent des pratiques efficaces de suivi et d'évaluation restent limitées. Malheureusement, de nombreux responsables de campagne n'évaluent pas leurs campagnes ou effectuent une évaluation limitée et superficielle après leur campagne, au lieu de la considérer tout au long des phases de conception et de mise en œuvre.
- De nombreux facteurs peuvent dissuader les responsables de campagne d'entreprendre des évaluations efficaces, des délais de mise en œuvre serrés et d'un manque d'expertise ou de confiance en matière d'évaluation, à un soutien ou un financement insuffisant du secteur public ou privé.
- Le manque de suivi et d'évaluation efficaces signifie qu'il existe des connaissances limitées sur l'efficacité de nombreuses campagnes, en particulier celles qui luttent contre les messages et les récits extrémistes violents. Cela signifie également que de nombreuses campagnes puissantes ne reçoivent pas toujours le financement ou le soutien à long terme nécessaire et mérité.
- Il est important de planifier comment vous allez surveiller et évaluer votre campagne dès le départ, et de ne pas attendre la fin de la campagne. Cela garantira que votre collecte de données et vos rapports restent mesurables, adaptatifs et liés aux objectifs de la campagne. Avant de lancer la campagne, identifiez quelles données de suivi et d'évaluation devront être collectées, à quelle fréquence, qui les collectera, quels outils seront utilisés et dans quel format les informations seront partagées et rapportées. Cela vous mettra également dans la position la plus forte lors de la demande de financement auprès des gouvernements, des fondations ou du secteur privé.
Les activistes engagés dans des campagnes en ligne ne peuvent ignorer les implications possibles en matière de confidentialité et de sécurité du suivi et de l'évaluation en ligne. Bien qu'il soit important d'évaluer l'efficacité d'une campagne, les outils de suivi et d'évaluation peuvent présenter des risques pour les informations personnelles.
Les préoccupations en matière de confidentialité surviennent lorsque des informations personnelles - telles que les noms, les coordonnées ou les activités en ligne - sont collectées, stockées ou analysées sans consentement ou garanties appropriés. Les activistes peuvent être confrontés à des risques d'exposition, de harcèlement ou de surveillance par des acteurs non autorisés ou des autorités qui accèdent aux données surveillées. De plus, l'agrégation et l'analyse des données collectées par le biais du suivi peuvent potentiellement conduire à un profilage, à une discrimination ou à une violation des droits individuels. Au-delà des différents cadres juridiques sur la protection des données applicables à chaque juridiction, il est important de noter que les activistes devraient envisager d'adopter une approche préservant la vie privée dans la mesure du possible.
- Manipulez les informations personnelles avec soin . Les informations personnellement identifiables (PII) font référence à toute donnée pouvant être utilisée pour identifier un individu, telle qu'un nom, une adresse e-mail, un numéro de téléphone, une adresse IP, etc. Traitez toute information pouvant révéler l'identité d'une personne comme hautement sensible.
- Ne collectez que ce dont vous avez besoin. Rassemblez la quantité minimale d'informations nécessaires pour mesurer les objectifs de votre campagne et évitez de collecter des données personnelles inutiles.
- Soyez transparent et obtenez le consentement. Lors de la collecte de commentaires ou de réponses à des enquêtes, expliquez clairement quelles données sont collectées, comment elles seront utilisées et pendant combien de temps elles seront stockées.
- Stockez et partagez les données en toute sécurité. Utilisez la protection par mot de passe, le chiffrement et l'authentification multifactorielle pour les systèmes internes qui stockent des données de campagne sensibles. Limitez l'accès uniquement au personnel qui a besoin des données pour le suivi ou l'évaluation.
- Établissez un plan de suppression. Établissez des calendriers clairs pour la suppression ou l'archivage des données de campagne lorsqu'elles ne sont plus nécessaires, c'est-à-dire une certaine période après la fin de la campagne et après la soumission de tous les rapports.
- Utilisez les analyses de médias sociaux pour comprendre les publics atteints par la publicité ciblée.
- Une analyse qualitative des commentaires et des messages que vous recevez.
- Enquêtes avant et après l'événement pour les participants à un événement de réseautage interactif.
Pendant le déroulement de votre campagne, le suivi continu des indicateurs d'impact vous permettra de savoir si vous devez modifier quelque chose dans votre campagne. Par exemple :
Par exemple :
Votre public regarde-t-il vos vidéos suffisamment longtemps, ou doivent-elles être modifiées ? Votre public s'engage-t-il avec votre message, ou devez-vous changer ou adapter le message ? Les gens réagissent-ils positivement à vos événements, ou devez-vous changer le format ?
- Visez-vous une réaction rapide ou une réaction par rapport à l'ordinaire ?
- Avez-vous changé l'attitude, les connaissances et le comportement ?
- À quel point les données sont-elles détaillées et qu'expriment-elles au-delà de la portée ?
- Avez-vous capturé le sentiment, la réflexion, l'acceptation et l'attachement ?
- Visez-vous une réaction rapide ou une réaction par rapport à l'ordinaire ?
- Avez-vous changé l'attitude, les connaissances et le comportement ?
- À quel point les données sont-elles détaillées et qu'expriment-elles au-delà de la portée ?
- Avez-vous capturé le sentiment, la réflexion, l'acceptation et l'attachement ?
- Mesurer et évaluer l'impact des campagnes en ligne est crucial pour leur succès. Cependant, se fier simplement aux métriques de vanité (likes, partages, impressions, etc.) peut ne pas donner aux responsables de campagne une image complète de l'impact qu'ils ont. Pour mener une campagne réussie, les activistes doivent aller au-delà de ces métriques et capturer les aspects qualitatifs et quantitatifs des efforts de changement de comportement, tels que le sentiment, l'impact longitudinal et le rôle d'autres interlocuteurs.
- Dans le contexte de la haine et de l'extrémisme violent, capturer des données et des résultats significatifs pour des questions hautement subjectives et ouvertes telles que la radicalisation, la déradicalisation, le désengagement et la cessation est difficile. Par conséquent, les activistes doivent prioriser les phases de planification et d'analyse pour s'assurer que le ciblage du public, la mesure du projet et les résultats de performance sont alignés avec leurs résultats souhaités. Pour mesurer l'efficacité d'une campagne, des besoins d'évaluation clairs doivent être établis. Les évaluations ne doivent pas s'appuyer uniquement sur des idées subjectives et contestées, telles que les valeurs et les définitions de l'extrémisme violent. Les activistes doivent s'efforcer de produire des données et des résultats fiables qui reflètent l'impact de leurs campagnes.
- Élaborer une stratégie efficace est essentiel pour gérer les questions et considérations relatives à l'impact et à la portée, en assurant l'alignement avec les objectifs des responsables de campagne et les besoins de leur public cible.
- Pour éviter une dépendance excessive aux données génériques, les activistes et les responsables de campagne doivent utiliser un cadre d'effets pour identifier et mesurer l'impact des tactiques clés, du contenu ou des messages déployés dans leurs campagnes. Les résultats du cadre d'effets doivent être liés à l'intention stratégique, aux objectifs et à l'impact, et inclure des objectifs tels que « réduire l'impact » ou « saper le récit » d'un groupe terroriste ou extrémiste violent ou d'une idéologie.
- Les activistes doivent aller au-delà des statistiques de portée seules et développer des mesures d'impact et d'effets plus nuancées. Une stratégie de campagne bien planifiée peut être un outil puissant pour les activistes pour atteindre leurs objectifs et créer un changement significatif.
- Un cadre clair
- Une proposition
- La justification exprimant :
- Que faut-il faire ?
- Pourquoi faut-il le faire ?
- Comment les objectifs seront-ils atteints ?
Se fier uniquement aux données de portée en ligne peut créer des notions biaisées des publics et de leurs besoins. L'engagement en ligne, tel que les likes et les partages, peut ne pas refléter avec précision les valeurs, les préférences ou la position d'un individu sur un sujet. Par conséquent, il est important d'aller au-delà de la portée et de se concentrer sur une communication active qui suscite une réponse au-delà de l'appui sur « j'aime ». Dans l'espace du terrorisme et de l'extrémisme violent, les interventions basées sur le pré-démystification deviennent de plus en plus populaires.
- Le pré-démystification adopte une approche de théorie de l'inoculation et se concentre sur la prévention plutôt que sur la guérison. Il vise à construire une armure mentale en préparant les individus à identifier, évaluer et faire des choix éclairés lorsque du contenu extrémiste violent apparaît sur leur écran ou leur fil de médias sociaux.
- Les efforts basés sur la démystification peuvent avoir du mal à égaler la quantité et la propension du contenu extrémiste violent, c'est pourquoi le pré-démystification est considéré comme une méthode plus efficace dans les espaces préventifs. En montrant aux individus suffisamment d'exemples de contenu basé sur l'extrémisme violent grâce aux tactiques de pré-démystification, ils deviennent mieux équipés pour l'identifier et le questionner.
- Les activistes doivent se concentrer sur le renforcement de la résilience et la promotion de la communication active plutôt que de se fier uniquement aux métriques de portée.
- Quel est l'ensemble de problèmes ?
- Que doit accomplir la campagne/le projet ?
- Comment cela sera-t-il réalisé et par quelles tactiques/approches ?
- Quels types d'intention, d'action et d'engagement feront fonctionner ces tactiques ?
- Comment ces tactiques et effets seront-ils mesurés afin de créer des résultats ?
- Quel est l'ensemble de problèmes ?
- Que doit accomplir la campagne/le projet ?
- Comment cela sera-t-il réalisé et par quelles tactiques/approches ?
- Quels types d'intention, d'action et d'engagement feront fonctionner ces tactiques ?
- Comment ces tactiques et effets seront-ils mesurés afin de créer des résultats ?
Pour améliorer les indicateurs de résultats dans une campagne, un cadre d'évaluation doit comporter deux éléments d'information essentiels : la compréhension de base du sentiment du public visé à l'égard de la question abordée et l'état final souhaité.
- L'évaluation de base est une évaluation initiale du niveau de soutien, du sentiment, des griefs, de l'espoir, de la peur ou d'autres facteurs pertinents du public liés à la question abordée. Elle permet aux responsables de campagne d'établir un point de départ pour mesurer tout changement ou mouvement dans les attitudes ou les comportements du public au cours d'une campagne.
- L'état final souhaité fait référence au résultat ou à l'objectif spécifique qu'une campagne vise à atteindre. Il est important de définir clairement l'état final souhaité pour mesurer efficacement les progrès et le succès.
Une étape importante vers la création d'une campagne réussie est la phase de test ou pilote visant à identifier les forces, les faiblesses, les défis et les nuances. Cette phase peut impliquer des discussions de groupes de discussion et des tests A/B, qui présentent différentes versions du même contenu à des publics similaires pour tester les réactions. Une approche itérative ouverte aux commentaires du public échantillon peut également fournir des résultats nuancés.
Les activistes qui tentent de lutter contre l'extrémisme violent ou de promouvoir un changement positif peuvent mesurer l'efficacité de leurs efforts de communication via l'analyse des sentiments.
L'analyse des sentiments peut aider les activistes à identifier les émotions et les intentions positives ou négatives véhiculées dans le texte. Il est important de reconnaître que le sentiment et l'efficacité ne sont pas toujours synonymes, ce qui signifie que mesurer comment les gens se sentent à propos d'une intervention n'est pas nécessairement une preuve que la campagne fonctionne. Les activistes doivent se concentrer sur la compréhension des émotions spécifiques que les participants éprouvent et de leurs tendances d'action associées.
Les sentiments et les émotions peuvent être mesurés via des exercices de liste de pensées ou des enquêtes traditionnelles. Lors de la conception d'enquêtes, il est important de les adapter à l'intervention spécifique et de poser aux participants des questions sur les croyances, attitudes et sentiments pertinents liés à cette intervention.
