Validating an administrative data-based case definition for identifying children and youth with autism spectrum disorder for surveillance purposes

Abstract

OBJECTIVES: To evaluate the sensitivity and positive predictive value (PPV) of administrative health and education data for identifying cases of autism spectrum disorder (ASD) in Manitoba, and to recommend a surveillance case definition.

METHODS: Four service providers abstracted information on children who had been clinically diagnosed with ASD (“sensitivity cohort”). That information was linked to Manitoba’s administrative health and education data and records were extracted into the study dataset. Records were also included for children who had an administrative diagnosis of ASD but who were not part of the sensitivity cohort. Study packages were mailed to the parents of the latter group in order to verify their diagnostic status. The sensitivity and PPV of various case definitions were calculated.

RESULTS: Among the 1728 service provider-reported cases, 1532 had an administrative diagnosis of ASD. A total of 2414 children had an administrative diagnosis, of whom 882 were not part of the sensitivity cohort. The response to the mail-out was very poor (<3%). Accordingly, we calculated minimum PPVs. Our recommended surveillance case definitions are ≥1 physician claim (ICD-9-CM 299) or ≥1 “ASD” special education record (2–5 years of age), and ≥2 physician claims or ≥1 “ASD” special education record (6–14 years of age). The sensitivity ranged from 80% (95% CI: 77–83) to 88% (95% CI: 83–91) and the minimum PPV from 70% (95% CI: 67–73) to 78% (95% CI: 75–81) for these definitions.

CONCLUSION: This work advances the goal of establishing a cost-effective national surveillance system for ASD.

Résumé

OBJECTIFS: Évaluer la sensibilité et la valeur prédictive positive (VPP) des données administratives dans le domaine de la santé et de l’éducation pour déceler les cas de troubles du spectre autistique (TSA) au Manitoba et recommander une définition de cas sous surveillance.

MÉTHODE: Quatre dispensateurs de services ont résumé les renseignements d’enfants ayant reçu un diagnostic clinique de TSA («cohorte de sensibilité»). Ces renseignements ont été maillés avec les données administratives du Manitoba dans le domaine de la santé et de l’éducation, et les dossiers ont été extraits vers le jeu de données de l’étude. Ont aussi été inclus les dossiers des enfants ayant un diagnostic administratif de TSA, mais ne faisant pas partie de la cohorte de sensibilité. La trousse de l’information de l’étude a été envoyée par la poste aux parents de ce dernier groupe pour confirmer le diagnostic des enfants. La sensibilité et la VPP de diverses définitions de cas ont été calculées.

RÉSULTATS: Sur les 1 728 cas déclarés par les dispensateurs de services, 1 532 avaient un diagnostic administratif de TSA. Au total, 2 414 enfants avaient un diagnostic administratif, dont 882 ne faisant pas partie de la cohorte de sensibilité. La réponse à l’envoi postal a été nettement insuffisante (<3 %). Par conséquent, nous avons calculé des VPP minimales. Nos définitions de cas sous surveillance recommandées sont ≥1 demande(s) de paiement de médecin(s) (CIM-9-MC 299) ou ≥1 dossier(s) d’éducation spécialisée «TSA» (2–5 ans), et ≥2 demandes de paiement de médecins ou ≥1 dossier(s) d’éducation spécialisée «TSA» (6–14 ans). La sensibilité variait de 80 % (IC de 95 %: 77–83) à 88 % (IC de 95 %: 83–91 ) et la VPP minimale de 70 % (IC de 95 %: 67–73) à 78 % (IC de 95 %: 75–81) pour ces définitions.

CONCLUSION: Ce travail nous rapproche de l’objectif d’établir un système de surveillance national économiquement efficace pour les TSA.