Q-Coh A tool to assess the methodological quality of cohort studies

Durante décadas ha habido una necesidad de revisiones de la literatura que resuma el conocimiento que produce la comunidad científica. Inicialmente, expertos en las correspondientes áreas de conocimiento recopilaban y resumían los estudios publicados sobre ciertos temas siguiendo métodos más bien su...

Descripción completa

Detalles Bibliográficos
Autor: Jarde, Alexander
Tipo de recurso: tesis doctoral
Estado:Versión publicada
Fecha de publicación:2013
País:España
Institución:CBUC, CESCA
Repositorio:TDR. Tesis Doctorales en Red
OAI Identifier:oai:www.tdx.cat:10803/116205
Acceso en línea:http://hdl.handle.net/10803/116205
Access Level:acceso abierto
Palabra clave:Ciències de la Salut
159.9
id ES_1e29f2682ca2ff25f9cbb77960a459f2
oai_identifier_str oai:www.tdx.cat:10803/116205
network_acronym_str ES
network_name_str España
repository_id_str
dc.title.none.fl_str_mv Q-Coh A tool to assess the methodological quality of cohort studies
title Q-Coh A tool to assess the methodological quality of cohort studies
spellingShingle Q-Coh A tool to assess the methodological quality of cohort studies
Jarde, Alexander
Ciències de la Salut
159.9
title_short Q-Coh A tool to assess the methodological quality of cohort studies
title_full Q-Coh A tool to assess the methodological quality of cohort studies
title_fullStr Q-Coh A tool to assess the methodological quality of cohort studies
title_full_unstemmed Q-Coh A tool to assess the methodological quality of cohort studies
title_sort Q-Coh A tool to assess the methodological quality of cohort studies
dc.creator.none.fl_str_mv Jarde, Alexander
author Jarde, Alexander
author_facet Jarde, Alexander
author_role author
dc.contributor.none.fl_str_mv Losilla Vidal, Josep Maria
Vives Brosa, Jaume
Universitat Autònoma de Barcelona. Departament de Psicobiologia i de Metodologia de les Ciències de la Salut
dc.subject.none.fl_str_mv Ciències de la Salut
159.9
topic Ciències de la Salut
159.9
description Durante décadas ha habido una necesidad de revisiones de la literatura que resuma el conocimiento que produce la comunidad científica. Inicialmente, expertos en las correspondientes áreas de conocimiento recopilaban y resumían los estudios publicados sobre ciertos temas siguiendo métodos más bien subjetivos y opacos. Eran las llamadas revisiones narrativas. Sin embargo, la necesidad de una metodología más objetiva y transparente dio lugar a revisiones sistemáticas y meta‐análisis, que pusieron al alcance de clínicos, investigadores, políticos y pacientes estudios que sintetizan un número de manuscritos inmanejable y exponencialmente creciente, relacionando enormes cantidades de información con la identificación de intervenciones beneficiosas y dañinas. Sin embargo, estas metodologías aún tienen algunas limitaciones, como es el caso de la calidad de los estudios primarios que son revisados. Pese a que la inclusión de ensayos clínicos aleatorizados en revisiones sistemáticas está ampliamente aceptada, la inclusión de estudios observacionales (en los que el investigador no interviene en la asignación del valor de la variable de exposición) aún es objeto de debate. Sin embargo, gran parte del conocimiento clínico y de salud se obtiene a partir de estudios observacionales. Un motivo dado habitualmente es que los estudios observacionales, en gran medida debido a la ausencia de un procedimiento de asignación aleatoria, son más susceptibles de estar sesgados. Es cierto que los ensayos clínicos aleatorizados son menos susceptibles al sesgo, pero es difícil justificar que la evidencia aportada por estudios observacionales de alta calidad es menos válida que la ‘evidencia’ aportada por ensayos clínicos aleatorizados de baja calidad únicamente en base a la etiqueta de su diseño. Por lo tanto, es de gran importancia ser capaces de valorar la calidad de estudios observacionales de manera válida y fiable. Tal y como se muestra en esta tesis doctoral, a día de hoy se han publicado docenas de herramientas de evaluación de calidad para estudios observacionales, pero muy pocas cumplen los criterios que se esperarían de un instrumento de medida, especialmente cuando se trata de estudios de cohortes. Una vez confirmado este vacío se desarrolló una nueva herramienta de evaluación de calidad para estudios de cohortes siguiendo los criterios de desarrollo establecidos por la American Psychological Association, el National Council on Measurement in Education y la American Educational Research Association: se definieron claramente el propósito del test y el constructo a medir, se describieron las especificaciones del test, se desarrollaron, probaron y evaluaron los ítems, y finalmente se integró todo en una hoja de cálculo interactiva. Para medir las propiedades psicométricas de esta nueva herramienta de evaluación de la calidad, que se denominó ‘Q‐Coh’, fue aplicada por tres evaluadores a 21 estudios de cohortes de diversas temáticas y diversos niveles de calidad. Además, pese a que no hay ningún gold standard para la calidad metodológica, se analizó la validez de la herramienta Q‐Coh usando diferentes estrategias. Los resultados muestran que la proporción de acuerdo entre pares de evaluadores fue superior al 80% en todos los casos, con valores de kappa no sólo buenas a muy buenas, sino también estadísticamente significativas en la mayoría de las inferencias. Esto es muy positivo, especialmente considerando las dificultades existentes en el desarrollo de una herramienta de evaluación de la calidad con índices de fiabilidad aceptables. También los resultados referidos a la validez de Q‐Coh apuntan en la buena dirección. Las revisiones de la literatura llevan décadas evolucionando y, a medida que su relevancia aumentaba, también lo hizo la necesidad de procedimientos más objetivos, precisos y fiables. En este contexto de constante mejora, Q‐Coh trata de ayudar a llenar un importante vacío aportando su granito de arena.
publishDate 2013
dc.date.none.fl_str_mv 2013
2013
2013
dc.type.none.fl_str_mv info:eu-repo/semantics/doctoralThesis
info:eu-repo/semantics/publishedVersion
format doctoralThesis
status_str publishedVersion
dc.identifier.none.fl_str_mv http://hdl.handle.net/10803/116205
url http://hdl.handle.net/10803/116205
dc.language.none.fl_str_mv Inglés
language_invalid_str_mv Inglés
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 147 p.
application/pdf
application/pdf
dc.publisher.none.fl_str_mv Universitat Autònoma de Barcelona
publisher.none.fl_str_mv Universitat Autònoma de Barcelona
dc.source.none.fl_str_mv TDX (Tesis Doctorals en Xarxa)
reponame:TDR. Tesis Doctorales en Red
instname:CBUC, CESCA
instname_str CBUC, CESCA
reponame_str TDR. Tesis Doctorales en Red
collection TDR. Tesis Doctorales en Red
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869404320717340672
spelling Q-Coh A tool to assess the methodological quality of cohort studiesJarde, AlexanderCiències de la Salut159.9Durante décadas ha habido una necesidad de revisiones de la literatura que resuma el conocimiento que produce la comunidad científica. Inicialmente, expertos en las correspondientes áreas de conocimiento recopilaban y resumían los estudios publicados sobre ciertos temas siguiendo métodos más bien subjetivos y opacos. Eran las llamadas revisiones narrativas. Sin embargo, la necesidad de una metodología más objetiva y transparente dio lugar a revisiones sistemáticas y meta‐análisis, que pusieron al alcance de clínicos, investigadores, políticos y pacientes estudios que sintetizan un número de manuscritos inmanejable y exponencialmente creciente, relacionando enormes cantidades de información con la identificación de intervenciones beneficiosas y dañinas. Sin embargo, estas metodologías aún tienen algunas limitaciones, como es el caso de la calidad de los estudios primarios que son revisados. Pese a que la inclusión de ensayos clínicos aleatorizados en revisiones sistemáticas está ampliamente aceptada, la inclusión de estudios observacionales (en los que el investigador no interviene en la asignación del valor de la variable de exposición) aún es objeto de debate. Sin embargo, gran parte del conocimiento clínico y de salud se obtiene a partir de estudios observacionales. Un motivo dado habitualmente es que los estudios observacionales, en gran medida debido a la ausencia de un procedimiento de asignación aleatoria, son más susceptibles de estar sesgados. Es cierto que los ensayos clínicos aleatorizados son menos susceptibles al sesgo, pero es difícil justificar que la evidencia aportada por estudios observacionales de alta calidad es menos válida que la ‘evidencia’ aportada por ensayos clínicos aleatorizados de baja calidad únicamente en base a la etiqueta de su diseño. Por lo tanto, es de gran importancia ser capaces de valorar la calidad de estudios observacionales de manera válida y fiable. Tal y como se muestra en esta tesis doctoral, a día de hoy se han publicado docenas de herramientas de evaluación de calidad para estudios observacionales, pero muy pocas cumplen los criterios que se esperarían de un instrumento de medida, especialmente cuando se trata de estudios de cohortes. Una vez confirmado este vacío se desarrolló una nueva herramienta de evaluación de calidad para estudios de cohortes siguiendo los criterios de desarrollo establecidos por la American Psychological Association, el National Council on Measurement in Education y la American Educational Research Association: se definieron claramente el propósito del test y el constructo a medir, se describieron las especificaciones del test, se desarrollaron, probaron y evaluaron los ítems, y finalmente se integró todo en una hoja de cálculo interactiva. Para medir las propiedades psicométricas de esta nueva herramienta de evaluación de la calidad, que se denominó ‘Q‐Coh’, fue aplicada por tres evaluadores a 21 estudios de cohortes de diversas temáticas y diversos niveles de calidad. Además, pese a que no hay ningún gold standard para la calidad metodológica, se analizó la validez de la herramienta Q‐Coh usando diferentes estrategias. Los resultados muestran que la proporción de acuerdo entre pares de evaluadores fue superior al 80% en todos los casos, con valores de kappa no sólo buenas a muy buenas, sino también estadísticamente significativas en la mayoría de las inferencias. Esto es muy positivo, especialmente considerando las dificultades existentes en el desarrollo de una herramienta de evaluación de la calidad con índices de fiabilidad aceptables. También los resultados referidos a la validez de Q‐Coh apuntan en la buena dirección. Las revisiones de la literatura llevan décadas evolucionando y, a medida que su relevancia aumentaba, también lo hizo la necesidad de procedimientos más objetivos, precisos y fiables. En este contexto de constante mejora, Q‐Coh trata de ayudar a llenar un importante vacío aportando su granito de arena.For decades there has been a need for reviews of the literature to summarize the knowledge that the scientific community produces. Initially, experts in the correspondent areas collected and summarized the published studies on certain topics following rather subjective and opaque methods. These were the so‐called narrative reviews. However, the need for a more objective and transparent methodology gave rise to systematic reviews and meta‐analysis, which provided clinicians, researchers, policy‐makers, and patients with a synthesis of an unmanageable and exponentially increasing number of manuscripts by linking and correlating huge amounts of information with identification of beneficial or harmful interventions. However, these methodologies still have some limitations to overcome, as is the case of the quality of the primary studies that are reviewed. Although the inclusion of experiments in systematic reviews is well established, the inclusion of observational studies is still under debate. However, much of clinical and public health knowledge is provided by observational studies, and the area of psychology is not an exception. A usual reason given for this is that observational studies, mainly because of their lack of randomized allocation procedure, are more susceptible to bias. It is true that randomized controlled studies are less prone to bias, but it is difficult to justify that evidence given by high quality observational studies is more valid than ‘evidence’ given by low quality randomized controlled trials only because of their design label. Therefore, it is of high importance to be able to validly and reliably assess the quality of observational studies. As shown in this doctoral thesis, dozens of quality assessment tools for observational studies have been developed so far, but very few meet the criteria that should be expected from an assessment instrument, especially when cohort studies are on focus. Once this gap was confirmed, a new quality assessment tool for cohort studies was developed following the standardized development criteria established by the American Psychological Association, the National Council on Measurement in Education, and the American Educational Research Association: the purpose of the test and construct to be measured were clearly defined, the test specifications were delineated, items were developed, tested and evaluated, and finally the test was assembled into an interactive spreadsheet. In order to assess the psychometric properties of this new quality assessment tool, which was named ‘Q‐Coh’, it was applied by three different raters to 21 cohort studies of diverse topics with a wide range of quality levels. Additionally, despite there is no gold standard for the methodological quality, the validity of the Q‐Coh was also studied using different approaches. The results showed that the proportion of agreement between pairs of raters was over 80% in all cases, with not only good to very good kappa values, but also being statistically significant in most inferences. This is very positive, especially considering the existing difficulties in developing a quality assessment tool with acceptable reliability scores. Also regarding the QCoh’s validity the results point to the good direction. Literature reviews have been evolving for decades, and as their relevance grew, so did the demands for more objective, precise, and reliable procedures. In this context of constant refinement, the Q‐Coh tries to help filling an important gap contributing in its small way.Universitat Autònoma de BarcelonaLosilla Vidal, Josep MariaVives Brosa, JaumeUniversitat Autònoma de Barcelona. Departament de Psicobiologia i de Metodologia de les Ciències de la Salut201320132013info:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/publishedVersion147 p.application/pdfapplication/pdfhttp://hdl.handle.net/10803/116205TDX (Tesis Doctorals en Xarxa)reponame:TDR. Tesis Doctorales en Redinstname:CBUC, CESCAInglésADVERTIMENT. L'accés als continguts d'aquesta tesi doctoral i la seva utilització ha de respectar els drets de la persona autora. Pot ser utilitzada per a consulta o estudi personal, així com en activitats o materials d'investigació i docència en els termes establerts a l'art. 32 del Text Refós de la Llei de Propietat Intel·lectual (RDL 1/1996). Per altres utilitzacions es requereix l'autorització prèvia i expressa de la persona autora. En qualsevol cas, en la utilització dels seus continguts caldrà indicar de forma clara el nom i cognoms de la persona autora i el títol de la tesi doctoral. No s'autoritza la seva reproducció o altres formes d'explotació efectuades amb finalitats de lucre ni la seva comunicació pública des d'un lloc aliè al servei TDX. Tampoc s'autoritza la presentació del seu contingut en una finestra o marc aliè a TDX (framing). Aquesta reserva de drets afecta tant als continguts de la tesi com als seus resums i índexs.info:eu-repo/semantics/openAccessoai:www.tdx.cat:10803/1162052026-06-14T12:46:07Z
score 15,300719