NotebookLM est un assistant d’analyse et de synthèse documentaire. Il permet de transformer une masse de documents bruts (rapports, entretiens, données, etc.) en une base de connaissances interactive. NotebookLM permet de centraliser au même endroit, termes de références, rapports annuels, modélisations, cadre logique, transcription d’entretiens, tableau de suivi des indicateurs. Ensuite de poser les questions évaluatives, identifier des thèmes récurrents, détecter des signaux faibles.
Google AI Studio est un espace de création en ligne afin de « briefer » et « entraîner » l’intelligence artificielle pour qu’elle devienne un assistant spécialisé dans les tâches précises comme la préparation, la conceptualisation et l’amélioration de le démarche d’évaluation. Il permet d’automatiser des tâches récurrentes et d’amplifier ses propres capacités d’analyse.
Par exemple affûter des questions de recherche, explorer des hypothèses, déconstruire les discours officiels et renforcer le dialogue entre leurs observations empiriques et les cadres théoriques de la sociologie politique.
MISTRAL AI représente une opportunité stratégique en évaluation , en particulier dans le secteur public ou pour toute évaluation manipulant des données sensibles. Les gouvernements (français et européens) et les institutions publiques cherchent par ailleurs activement à adopter des solutions d’IA souveraines. En tant qu’entreprise européenne, Mistral offre une garantie de conformité avec le RGPD et une réponse au besoin de souveraineté numérique. Mais aussi, les modèles Mistral ont montré d’excellentes performances natives dans plusieurs langues européennes, dont le français, sans nécessiter de traduction préalable. Cela confère une capacité d’analyser des corpus de données en français (ou autres langues européennes) avec une finesse et une compréhension contextuelle supérieures à celles de modèles principalement entraînés sur l’anglais. Le risque est que les modèles concurrents deviennent si performants ou si bien intégrés dans les outils bureautiques que les avantages de Mistral ne suffisent plus à faire la différence.
Mistral AI a été fondé par un trio de chercheurs français issus de Meta et Google DeepMind. Leur stratégie consiste à utiliser l’open source comme une arme pour bâtir rapidement une communauté et une réputation.
LM Arena, souvent appelée simplement Chatbot Arena, est une plateforme en ligne dédiée à l’évaluation et à la comparaison des performances des grands modèles de langage (LLM) et des chatbots d’intelligence artificielle. Les utilisateurs peuvent discuter avec deux chatbots IA différents, dont les identités sont masquées, côte à côte. Après avoir interagi avec les deux modèles (en posant des questions, en leur demandant de générer du texte, etc.), les utilisateurs votent pour celui qu’ils estiment avoir donné la meilleure réponse ou avoir été le plus utile. Ces votes humains sont ensuite utilisés pour calculer un classement qui détermine la performance relative de chaque modèle.
À l’origine, Chatbot Arena était un projet de recherche académique issu du Sky Computing Lab de l’Université de Californie à Berkeley.
Outils spécialisés
AIDA (Artificial Intelligence for Development Analytics) est une initiative du Bureau Indépendant d’Évaluation (IEO) du PNUD qui utilise l’intelligence artificielle pour analyser automatiquement le contenu de sa vaste bibliothèque de milliers de rapports d’évaluation. AIDA utilise des techniques de Traitement Automatique du Langage Naturel (NLP), une branche de l’intelligence artificielle. L’outil lit et numérise le texte de tous les rapports d’évaluation de la base de données et ne se contente pas de chercher des mots, il essaie de comprendre le sens.
Les possibilités sont vertigineuses par exemple, une synthèse de recommandations, l’identification de facteurs de succès, une analyse de tendances, une détection d’initiatives innovantes, etc.