S
The methodological rigor of 39 studies of phonological awareness intervention was evaluated based on internal and external validity criteria. The internal validity criteria encompassed general design characteristics, measurement, and statistical treatment, while the external validity criteria included research hypotheses, participant selection and description, and generalization and maintenance measures. The most serious methodological flaws observed in many of the studies were (a) nonrandom assignment of participants to conditions; (b) failure to control for Hawthorne effects by providing alternate interventions to control groups; (c) insufficient or nonexistent assurance of fidelity of treatment; (d) poor measurement sensitivity; and (e) inadequately described samples. Only seven studies met two thirds or more of all the evaluative criteria, although all of these investigations demonstrated at least one fatal flaw. The reported findings are compared with those of two similar methodological reviews. Suggestions for improvement of future intervention research are provided.
El rigor metodológico de 39 estudios de intervención en conciencia fonológica fue evaluado sobre la base de criterios de validez interna y externa. Los criterios de validez interna comprendieron características generales de diseño, mediciones y tratamiento estadístico, en tanto que los criterios de validez externa incluyeron las hipótesis de la investigación, la selección y descripción de los participantes y la generalización y mantenimiento del efecto fuera de la situación experimental. Las fallas metodológicas más serias observadas en muchos de los estudios fueron (a) no asignar al azar a los participantes a las distintas condiciones; (b) ausencia de control de los efectos Hawthorne, al proveer intervenciones alternativas a los grupos de control; (c) insuficiencia o ausencia de certeza en la exactitud del tratamiento; (d) escasa sensibilidad de las mediciones y (e) muestras descriptas inadecuadamente. Sólo siete estudios reunieron dos tercios o más de todos los criterios de evaluación, aunque todas estas investigaciones demostraron al menos una falla fatal. Los hallazgos reportados se comparan con los de dos revisiones metodológicas similares. Se hacen sugerencias para mejorar las futuras investigaciones de intervención.
Die methodologische Rigorosität von 39 Studien phonologischer Eingriffe zur Bewußheitsförderung wurde aufgrund intern und extern gültiger Kriterien bewertet. Die intern angewandten Bewertungskriterien schließen generelle Auslegungscharakteristiken, Bemessung und statistische Behandlung bzw. Auswertung ein, während die extern gültigen Kriterien Forschungshypothesen, Teilnehmerauswahl und Beschreibung, sowie Allgemein‐ und Aufrechterhaltungsmaßnahmen einschließen. Der schwerwiegendste methodologische Tadel an beobachteten Fehlern bei vielen der Studien lag in (a) nicht‐wahllose Bestimmung der den Bedingungen unterworfenen Teilnehmer; (b) Versäumen von Kontrollen gemäß den Hawthorne Effekten durch Einfügen alternativer...
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.