Internal and external validation of a model to predict adverse outcomes in patients with left-sided infective endocarditis

Abstract

Introduction Early identification of prognostic factors is essential to improve the grim prognosis associated with left-sided infective endocarditis. This group identified three independent risk factors obtained within 72 h of admission, (Staphylococcus aureus, heart failure and periannular complications) for inhospital mortality or urgent surgery in a series of 317 patients diagnosed at five tertiary centres (derivation sample). A stratification score was constructed for the test cohort by a simple arithmetic sum of the number of variables present. The goal was to validate this model internally and externally in a prospective manner with two different cohorts of patients.

Methods The appropriateness of the model was tested prospectively on predicting events in two cohorts of patients with left-sided endocarditis: internally with the 263 consecutive patients diagnosed at the same centres where the model was derived (internal validation sample), and externally with 264 patients admitted at another hospital (external validation sample).

Results The discriminatory power of the model, expressed as the area under the receiver operating characteristic curve was similar between derivation and both validation samples (internal 0.67 vs 0.68, p=0.79; external 0.67 vs p=0.74, p=0.09). There was a progressive, significant pattern of increasing event rates as the risk stratification score increased in both validation cohorts (p<0.001 by χ2 for trend).

Conclusions The early risk stratification model derived, based on variables obtained within 72 h of admission, is applicable to different populations with left-sided endocarditis. A simple bedside assessment tool is provided to clinicians that identifies patients at high risk of having an adverse event.Introducción: La identificación temprana de factores pronósticos es esencial para mejorar el sombrío pronóstico asociado con la endocarditis infecciosa izquierda. Este grupo identificó tres factores de riesgo independientes obtenidos dentro de las 72 h del ingreso (Staphylococcus aureus, insuficiencia cardíaca y complicaciones perianulares) para mortalidad hospitalaria o cirugía urgente en una serie de 317 pacientes diagnosticados en cinco centros terciarios (muestra de derivación). Se construyó una puntuación de estratificación para la cohorte de prueba mediante una simple suma aritmética del número de variables presentes. El objetivo fue validar este modelo interna y externamente de manera prospectiva con dos cohortes diferentes de pacientes. Métodos: La idoneidad del modelo para predecir eventos se probó prospectivamente en dos cohortes de pacientes con endocarditis izquierda: internamente con los 263 pacientes consecutivos diagnosticados en los mismos centros donde se derivó el modelo (muestra de validación interna), y externamente con 264 pacientes ingresados en otro hospital (muestra de validación externa). Resultados: El poder discriminatorio del modelo, expresado como el área bajo la curva ROC, fue similar entre la muestra de derivación y ambas muestras de validación (interna 0,67 frente a 0,68, p = 0,79; externa 0,67 frente a p = 0,74, p = 0,09). Se observó un patrón progresivo y significativo de aumento de las tasas de eventos a medida que aumentaba la puntuación de estratificación de riesgo en ambas cohortes de validación (p < 0,001 por χ2 para la tendencia). Conclusiones: El modelo de estratificación de riesgo temprano derivado, basado en variables obtenidas dentro de las 72 h posteriores al ingreso, es aplicable a diferentes poblaciones con endocarditis izquierda. Se proporciona a los médicos una herramienta sencilla de evaluación en la cama del paciente que identifica a los pacientes con alto riesgo de sufrir un evento adverso.