Qualitative comparative analysis as a method for evaluating complex cases: An overview of literature and a stepwise guide with empirical application

The complexity of many cases, such as public projects and programs, requires evaluation methods that acknowledge this complexity in order to facilitate learning. On the one hand, the complexity of the cases derives from their uniqueness and nested nature. On the other hand, there is a need to compare cases in such a way that lessons can be transferred to other (future) cases in a coherent and non-anecdotal way.
One method that is making headway as a complexity-sensitive, comparative method is Qualitative Comparative Analysis (QCA). This contribution aims to explain to what extent QCA is complexity-informed, to show how it can be deployed as such, and to identify its strengths and weaknesses as an evaluation method. We will discuss the properties of complexity, provide an overview of evaluation literature about QCA, and present a simplified step-wise guide for utilizing QCA in evaluation studies.

Die Komplexität vieler Prozesse, wie z.B. öffentlicher Projekte und Programme, erfordert Evaluationsmethoden, die diese Komplexität anerkennen, damit Lernen ermöglicht werden kann. Einerseits leitet sich die Komplexität der Fälle aus deren Einzigartigkeit und verschachteltem Charakter ab. Andererseits besteht aber die Notwendigkeit, Fälle so zu vergleichen, dass Gelerntes kohärent und nicht anekdotisch auf andere (zukünftige) Fälle übertragen werden kann.
Eine Methode, die als komplexitätssensitive, vergleichende Methode Fortschritte macht, ist die Qualitative Comparative Analysis (QCA). Dieser Beitrag möchte erklären, inwieweit QCA eine komplexitätskundige Methode darstellt, und zeigen, wie sie als solche eingesetzt werden kann sowie ihre Stärken und Schwächen als Evaluationsmethode identifi zieren. Wir werden die Eigenschaften von Komplexität diskutieren, einen Überblick der Evaluationsliteratur über QCA bereitstellen und eine vereinfachte, stufenweise Anleitung für die Nutzung von QCA in Evaluationsstudien geben.