Skip to main content
Top

2017 | OriginalPaper | Hoofdstuk

21. Evaluatie van implementatieprojecten: observationele evaluaties

Auteurs : Prof. dr. Michel Wensing, Prof. dr. Richard Grol

Gepubliceerd in: Implementatie

Uitgeverij: Bohn Stafleu van Loghum

share
DELEN

Deel dit onderdeel of sectie (kopieer de link)

  • Optie A:
    Klik op de rechtermuisknop op de link en selecteer de optie “linkadres kopiëren”
  • Optie B:
    Deel de link per e-mail

Samenvatting

Observationele evaluaties onderzoeken de natuurlijke variatie tussen deelnemers aan een studie om de invloed van interventies op de uitkomsten te bepalen alsmede de invloed van beïnvloedende factoren. De onderzoeker heeft in deze evaluaties weinig of geen controle over de omstandigheden, vooral niet over de verdeling van deelnemers over onderzoeksgroepen. Er is geen absolute grens tussen experimenteel en observationeel onderzoek; eerder is sprake van een continuüm dat loopt van het ‘zuivere’ gerandomiseerde experiment tot een kwalitatieve gevalsstudie. Als verbeterprogramma’s gericht zijn op grotere gemeenschappen is het soms mogelijk om verschillende gemeenschappen te vergelijken ten aanzien van relevante uitkomsten. De interventie is in zo’n geval meestal complex en het aantal clusters is gewoonlijk klein, terwijl binnen elk cluster meestal veel variatie bestaat. Een cohortstudie is een observationele studie in een studiepopulatie waarin gedurende een bepaalde tijdsperiode metingen zijn gedaan. Men kan teruggaan in de tijd (retrospectieve cohortstudie) of een populatie een bepaalde periode volgen (prospectieve cohortstudie). Idealiter wordt een referentiegroep gezocht die goed vergelijkbaar is met het onderzochte cohort, zodat de invloed van verstorende factoren (bijvoorbeeld natuurlijk beloop) kan worden onderscheiden van de invloed van de implementatiestrategieën. Cohortstudies zonder referentiegroep zijn observationele studies met één studiepopulatie en herhaalde metingen in de onderzochte populatie. In kwaliteitsprojecten wordt ook wel gesproken van monitoring. Als alleen een meting voor en een meting na toepassing van een interventie zijn gedaan, kan ook worden gesproken van een (ongecontroleerde) voor-navergelijking. Gegevens worden geanalyseerd met behulp van technieken voor tijdreeksanalyse. Dwarsdoorsnedestudies zijn observationele studies met een meting in een studiepopulatie op één moment in de tijd. De meting kan voorafgaand, tijdens of na toepassing van een interventie zijn gedaan. Toetsingsstudies (audits) vallen meestal in deze categorie. Gevalstudies beogen gedetailleerd inzicht te bieden in bepaalde projecten voor wat betreft de interventies en activiteiten, de opvattingen van professionals, patiënten en anderen, veranderingen in de zorgverlening en contextuele factoren die hierop van invloed zouden kunnen zijn. Gevalstudies worden gekenmerkt door een groot aantal variabelen in verhouding tot het aantal ‘gevallen’. Een evaluatie kan ook tot doel hebben een lopend verbeteringsproject te ondersteunen door middel van feedback en advies aan het projectteam. Ontwikkelingsonderzoek of ‘actieonderzoek’ is onderzoek dat de onderzochten actief betrekt bij het onderzoek en niet alleen verandering evalueert, maar ook expliciet tot doel heeft verandering te bevorderen. Data-analyse in observationele studies is vaak complex. In sommige evaluaties moeten gegevens uit verschillende bronnen met elkaar worden gecombineerd. In veel kwantitatieve studies wordt een vorm van regressieanalyse toegepast, waarbij de indicator voor goede zorgverlening of gewenste patiëntuitkomst fungeert als afhankelijke variabele.
Literatuur
go back to reference Ansari W El, Phillips CJ, Zwi AB. Collaboration and partnerships: developing the evidence base. Health Soc Care Commun. 2001;9:215–27. Ansari W El, Phillips CJ, Zwi AB. Collaboration and partnerships: developing the evidence base. Health Soc Care Commun. 2001;9:215–27.
go back to reference Argyris C. On organisational learning. Cambridge Mass: Blackwell Business; 1992. Argyris C. On organisational learning. Cambridge Mass: Blackwell Business; 1992.
go back to reference Benneyan JC, Lloyd RC, Plesk PE. Statistical process control as a tool for research and health care improvement. In: Grol R, Baker R, Moss F (eds). Quality improvement research. Understanding the science of change in health care. London: BMJ Books. 2003.CrossRef Benneyan JC, Lloyd RC, Plesk PE. Statistical process control as a tool for research and health care improvement. In: Grol R, Baker R, Moss F (eds). Quality improvement research. Understanding the science of change in health care. London: BMJ Books. 2003.CrossRef
go back to reference Bhutta A, Gilliam C, Honeycutt M, et al. Reduction of bloodstream infections associated with catheters in paediatric intensive care unit: stepwise approach. BMJ. 2007;334:362–5.CrossRef Bhutta A, Gilliam C, Honeycutt M, et al. Reduction of bloodstream infections associated with catheters in paediatric intensive care unit: stepwise approach. BMJ. 2007;334:362–5.CrossRef
go back to reference Black N. Why we need observational studies to evaluate the effectiveness of health care. BMJ. 1996;312:1215–8.CrossRef Black N. Why we need observational studies to evaluate the effectiveness of health care. BMJ. 1996;312:1215–8.CrossRef
go back to reference Claxton K, Neuman PJ, Araki SS, Weinstein MC. The value of information: an application to a policy model of Alzheimer’s disease. Int J Technol Assess Health Care. 2001;17:38–55.CrossRef Claxton K, Neuman PJ, Araki SS, Weinstein MC. The value of information: an application to a policy model of Alzheimer’s disease. Int J Technol Assess Health Care. 2001;17:38–55.CrossRef
go back to reference Cook TD, Campbell DT. Quasi-experimentation: design and analysis issues for field settings. Chicago: Rand McNally; 1979. Cook TD, Campbell DT. Quasi-experimentation: design and analysis issues for field settings. Chicago: Rand McNally; 1979.
go back to reference Deeks JJ, Dinnes J, D’Amico R, et al. Evaluating non-randomised intervention studies. Health Technol Assess. 2003;7(27):iii–x. Deeks JJ, Dinnes J, D’Amico R, et al. Evaluating non-randomised intervention studies. Health Technol Assess. 2003;7(27):iii–x.
go back to reference Eccles M, Deverill M, McColl E, Richardson H. A national survey of audit activity across the primary-secondary care interface. Qual Health Care. 1996;5:193–200.CrossRef Eccles M, Deverill M, McColl E, Richardson H. A national survey of audit activity across the primary-secondary care interface. Qual Health Care. 1996;5:193–200.CrossRef
go back to reference Groenwold RHH. Propensity scores in observationeel onderzoek. Ned Tijdschr Geneeskd. 2013;157:A6179.PubMed Groenwold RHH. Propensity scores in observationeel onderzoek. Ned Tijdschr Geneeskd. 2013;157:A6179.PubMed
go back to reference Harvey G, Wensing M. Methods for evaluation of small-scale improvement projects. Qual Saf Health Care. 2003;12:210–4.CrossRef Harvey G, Wensing M. Methods for evaluation of small-scale improvement projects. Qual Saf Health Care. 2003;12:210–4.CrossRef
go back to reference Hermens PMG, Tacken MAJB, Hulscher MEJL, et al. Attendance to cervical cancer screening in general practices in the Netherlands. Prev Med. 2000;31:35–42.CrossRef Hermens PMG, Tacken MAJB, Hulscher MEJL, et al. Attendance to cervical cancer screening in general practices in the Netherlands. Prev Med. 2000;31:35–42.CrossRef
go back to reference Horwitz LL, Kosiborod M, Lin Z, Krumholz HM. Changes in outcomes for internal medicine inpatients after work-hour regulations. Ann Intern Med. 2007;147:97–103.CrossRef Horwitz LL, Kosiborod M, Lin Z, Krumholz HM. Changes in outcomes for internal medicine inpatients after work-hour regulations. Ann Intern Med. 2007;147:97–103.CrossRef
go back to reference Hulscher MEJL, Drenth BB van, Wouden JC van der, et al. Changing preventive practice: a controlled trial on the effects of outreach visits to organize prevention of cardiovascular disease. Qual Health Care. 1997;6:19–24.CrossRef Hulscher MEJL, Drenth BB van, Wouden JC van der, et al. Changing preventive practice: a controlled trial on the effects of outreach visits to organize prevention of cardiovascular disease. Qual Health Care. 1997;6:19–24.CrossRef
go back to reference Johnston G, Crombie IK, Alder, et al. Reviewing audit: barriers and facilitating factors for effective clinical audit. Qual Health Care. 2000;9:23–36.CrossRef Johnston G, Crombie IK, Alder, et al. Reviewing audit: barriers and facilitating factors for effective clinical audit. Qual Health Care. 2000;9:23–36.CrossRef
go back to reference Laurant M, Harmsen M, Wensing M. Implementatie van beweegprogramma’s voor ouderen. Belemmerende en bevorderende factoren voor succesvolle implementatie. WOK: Nijmegen; 2003. Laurant M, Harmsen M, Wensing M. Implementatie van beweegprogramma’s voor ouderen. Belemmerende en bevorderende factoren voor succesvolle implementatie. WOK: Nijmegen; 2003.
go back to reference Murray DM. Design and analysis of community trials: Lessons from the Minnesota Heart Health Program. Am J Epidemiol. 1995;142:569–75.CrossRef Murray DM. Design and analysis of community trials: Lessons from the Minnesota Heart Health Program. Am J Epidemiol. 1995;142:569–75.CrossRef
go back to reference Nutbeam D. Evaluating health promotion: Progress, problems and solutations. Geneva: World Health Organization; 1997. Nutbeam D. Evaluating health promotion: Progress, problems and solutations. Geneva: World Health Organization; 1997.
go back to reference Øvretveit J, Gustafson D. Evaluation of quality improvement programmes. Qual Saf Health Care. 2002;11:270–5.CrossRef Øvretveit J, Gustafson D. Evaluation of quality improvement programmes. Qual Saf Health Care. 2002;11:270–5.CrossRef
go back to reference Robb E, Jarman J, Suntharalingam G, et al. Using care bundles to reduce in-hospital mortality: quantitative survey. BMJ. 2010;340:861–3.CrossRef Robb E, Jarman J, Suntharalingam G, et al. Using care bundles to reduce in-hospital mortality: quantitative survey. BMJ. 2010;340:861–3.CrossRef
go back to reference Russell IT, Russell D. Statistical issues in medical audit. In: Marinker M, Editor. Medical Audit and General Practice. London: MSD Foundation; 1990. Russell IT, Russell D. Statistical issues in medical audit. In: Marinker M, Editor. Medical Audit and General Practice. London: MSD Foundation; 1990.
go back to reference Schon DA. Educating the reflective practitioner. London: Jossey Brass; 1988. Schon DA. Educating the reflective practitioner. London: Jossey Brass; 1988.
go back to reference Schouten LMT, Verhoeven MAWM, Hoeven JG van der, Schellekens W. Intensive care aanzienlijk verbeterd. Med Contact. 2002;57:91. Schouten LMT, Verhoeven MAWM, Hoeven JG van der, Schellekens W. Intensive care aanzienlijk verbeterd. Med Contact. 2002;57:91.
go back to reference Spiegelhalter D, Grigg O, Kinsman R, Treasure T. Risk-adjusted sequential probability ratio tests: applications to Bristol, Shipman and adult cardiac surgey. Int J Qual Health Care. 2003;15:7–13.CrossRef Spiegelhalter D, Grigg O, Kinsman R, Treasure T. Risk-adjusted sequential probability ratio tests: applications to Bristol, Shipman and adult cardiac surgey. Int J Qual Health Care. 2003;15:7–13.CrossRef
go back to reference Taljaard M, McKenzie JE, Ramsay CR, Grimshaw JM. The use of segmented regression in analysing interrupted time series studies: an example of in pre-hospital ambulance care. Implement Sci. 2014;9:77.CrossRef Taljaard M, McKenzie JE, Ramsay CR, Grimshaw JM. The use of segmented regression in analysing interrupted time series studies: an example of in pre-hospital ambulance care. Implement Sci. 2014;9:77.CrossRef
go back to reference Vos L, Dückers MLA, Wagner C, van Merode GG. Applying the quality improvement collaborative method to process redesign: a multiple case study. Implement Sci. 2010;5:19. Vos L, Dückers MLA, Wagner C, van Merode GG. Applying the quality improvement collaborative method to process redesign: a multiple case study. Implement Sci. 2010;5:19.
go back to reference Waterman H, Tillen D, Dickson R, et al. Action research: a systematic review and guidance for assessment. Health Technol Assess. 2001;5:111–57.CrossRef Waterman H, Tillen D, Dickson R, et al. Action research: a systematic review and guidance for assessment. Health Technol Assess. 2001;5:111–57.CrossRef
go back to reference Yin RK. Case study research: design and methods. London: Sage; 1989. Yin RK. Case study research: design and methods. London: Sage; 1989.
Metagegevens
Titel
Evaluatie van implementatieprojecten: observationele evaluaties
Auteurs
Prof. dr. Michel Wensing
Prof. dr. Richard Grol
Copyright
2017
Uitgeverij
Bohn Stafleu van Loghum
DOI
https://doi.org/10.1007/978-90-368-1732-5_21