81

RésuméÀ partir de l’étude approfondie d’un cas d’évaluation randomisée de deux programmes d’accompagnement renforcé de demandeurs d’emploi, cet article interroge l’objectivité de cette méthodologie d’évaluation et ses effets sur la conduite de l’action publique. Nous étudions les différentes phases de cette évaluation (de son élaboration à l’usage des résultats en passant par leur production) en les analysant au regard des logiques institutionnelles à l’œuvre au moment où les dispositifs évalués se déploient. Parce que ces résultats d’évaluation ne sont pas une mesure mais le produit de conventions et parce qu’en réagissant à l’évaluation les acteurs transforment l’objet observé, ceci conduit à relativiser l’objectivité de la randomisation. L’analyse de l’usage partiel et partial des résultats permet de documenter les ressorts de la légitimation de l’action publique par les chiffres.

Objectivity under scrutiny: Analysis of a randomized controlled trial of job-seeker support programs in FranceThis article examines the objectivity of this method of evaluation and its effects on public policy management. I study the different phases of the trial (from its design to the results it produced and how these were used) and analyze them in light of the institutional logics at play when the programs were implemented. Given that these results are not a measure but a product of conventions and given that, as they react to the evaluation, the actors involved transform the object being observed, the objectivity of randomization is in fact shown to be relative. Analyzing how the results were used partially, in both senses of the term, offers evidence of the ways in which quantitative data are used to legitimate public policy.

ResumenEste artículo se basa en el estudio pormenorizado de un caso de evaluación aleatoria de dos programas de acompañamiento reforzado a desempleados. Interrogamos la objetividad de esa metodología de evaluación y sus efectos sobre la manera de llevar la acción pública. Observamos las distintas fases de dicha evaluación desde su elaboración hasta el uso de sus resultados, pasando por la producción de éstos, analizándolos a la luz de las lógicas institucionales vigentes en el momento en que los dispositivos evaluados se despliegan. En efecto, por una parte, los resultados de evaluación no son una medida sino el fruto de convenciones; por otra parte, al reaccionar ante la evaluación, los actores transforman el objeto observado; por consiguiente es necesario relativizar la objetividad de un muestreo aleatorio. El análisis del uso parcial (en ambos sentidos) de los resultados permite documentar los resortes de la legitimación de la acción pública por los números.

ZusammenfassungAusgehend von der Tiefenuntersuchung am Falle einer Zufallsbewertung von zwei verstärkten Begleitprogrammen für Stellenbewerber, prüft dieser Artikel die Objektivität dieser Bewertungsmethodologie und deren Auswirkungen auf die Durchführung der öffentlichen Aktion. Wir untersuchen die verschiedenen Schritte dieser Bewertung (von ihrer Ausarbeitung, über ihre Produktion, bis zur Übernahme der Ergebnisse) und prüfen in Anbetracht der institutionellen Logiken, die eingreifen, wenn die bewerteten Maßnahmen in Bewegung gesetzt werden. Da diese Bewertungsergebnisse keine Messung sind, sondern das Produkt von Vereinbarungen, und da die Aktoren in Reaktion zur Bewertung das beobachtete Objekt verändern, muss die Objektivität der Randomisierung relativiert werden. Die Analyse der teilweisen und parteiischen Verwendung der Ergebnisse gestattet, die Beweggründe zur Legitimierung der öffentlichen Aktion durch Zahlen zu dokumentieren.