Falacias sobre el valor p compartidas por profesores y estudiantes universitarios / Fallacies about p-Value Shared by Professors and University Students

Resumen La "Práctica Basada en la Evidencia" requiere a los profesionales valorar de forma crítica los resultados de las investigaciones psicológicas. Sin embargo, las interpretaciones incorrectas de los valores p de probabilidad son abundantes y repetitivas. Estas interpretaciones incorrectas pueden afectar las decisiones profesionales y poner en riesgo la calidad de las intervenciones y la acumulación de un conocimiento científico válido. Por lo tanto, identificar el tipo de falacia que subyace a las decisiones estadísticas es fundamental para abordar y planificar estrategias de educación estadística dirigidas a intervenir sobre las interpretaciones incorrectas. En consecuencia, el objetivo de este estudio es analizar la interpretación del valor p en estudiantes y profesores universitarios de psicología. La muestra estuvo formada por 161 participantes (43 profesores y 118 estudiantes). La antigüedad media como profesor fue de 16.7 años (DE = 10.07). La edad media de los estudiantes fue de 21.59 (DE = 1.3). Los hallazgos sugieren que los estudiantes y profesores universitarios no conocen la interpretación correcta del valor p. La falacia de la probabilidad inversa presentó mayores problemas de comprensión. Además, se confundieron la significación estadística y la significación práctica o clínica. Estos resultados destacan la necesidad de la educación estadística y reeducación estadística.

Abstract The "Evidence Based Practice" requires professionals to critically assess the results of psychological research. However, incorrect interpretations of p values of probability are abundant and repetitive. These misconceptions may affect professional decisions and compromise the quality of interventions and the accumulation of a valid scientific knowledge. Therefore, identifying the types of fallacies that underlying statistical decisions is fundamental for approaching and planning statistical education strategies designed to intervene in incorrect interpretations. Consequently, the aim of this study is to analyze the interpretation of p value among university students of psychology and academic psychologists. The sample was composed of 161 participants (43 academics and 118 students). The mean number of years as academic was 16.7 (SD = 10.07). The mean age of university students was 21.59 years (SD = 1.3). The findings suggest that college students and academics do not know the correct interpretation of p values. The inverse probability fallacy presented major problems of comprehension. In addition, the participants confused statistical significance and practical significance or clinical or the findings. There is a need for statistical education and statistical re-education.

La información situacional probabilística en el deporte: un metaanálisis / Situational probability information in sport: A meta-analysis

Resumen El objetivo del estudio es cuantificar el efecto de la información situacional probabilística (ISP) sobre el rendimiento deportivo y en concreto sobre el inicio en el tiempo de respuesta y la precisión de los deportistas. Existe evidencia científica de que los deportistas de mayor nivel deportivo desarrollan la habilidad perceptiva para usar la ISP, realizando comportamientos anticipatorios, si bien se desconoce la magnitud de dicho efecto. Se realiza un metaanálisis de efectos aleatorios para cuantificar el tamaño del efecto (TE) de la ISP en el comportamiento motor de los deportistas. Los resultados muestran un TE medio final grande de 1.29 para el tiempo de respuesta (en 7 estudios y 252 participantes) y de 1.31 para la precisión (en nueve investigaciones y 292 participantes), seleccionados de acuerdo con los criterios establecidos. Con la limitación del reducido número de estudios analizados (n = 9), los resultados indican que los deportistas expertos anticipan más respuestas y con más precisión que los noveles debido al uso de la ISP. Se recomienda entrenar perceptivamente la identificación y el uso de la ISP a nivel deportivo, ya que aquellos deportistas que hagan un mejor uso de esta información contextual podrán anticipar sus respuestas con precisión.

Abstract The aim of the study is to quantify the effect of Situational Probability Information (SPI) on athletic performance, specifically on the onset of the response time and the accuracy of athletes. There is scientific evidence that shows that higher sport level athletes develop the perceptive skills to use SPI, thereby performing anticipatory behaviors. However, the magnitude of this effect remains unknown. A meta-analysis of random effects was carried out to quantify the effect size (ES) of SPI on the motor behavior of athletes. The results showed an overall final mean ES of 1.29 for the response time (in 7 studies and 252 participants), and 1.31 for accuracy (in 9 studies and 292 participants), according to the criteria established. With the limitation of the low number of studies analyzed (n = 9), the results suggest that expert athletes anticipate more frequently and with higher accuracy than beginners, due to the use of SPI. It is recommended to train in the identification and use of the SPI in the sports domain, as athletes who use this contextual information more effectively could anticipate the responses with precision.

Cliff´s Delta Calculator: un programa para calcular el tamaño del efecto no paramétrico al comparar dos grupos de observaciones / Cliff´s Delta Calculator: a non-parametric effect size program for two groups of observations

El estadístico Delta de Cliff permite cuantificar la magnitud de la diferencia entre dos grupos de observaciones que resultan incompatibles con el presupuesto de normalidad. El análisis de esta cuantificación complementa la interpretación del p-valor asociado a la correspondiente prueba de hipótesis. La aplicación de medidas del tamaño del efecto ha sido promovida durante las últimas décadas tanto por metodólogos, como por instituciones líderes en las ciencias del comportamiento. El propósito de la presente contribución es presentar un programa denominado Cliff's Delta Calculator que es capaz de calcular y graficar el valor del tamaño del efecto no paramétrico para dos grupos de observaciones. Se ofrece una comparación de este programa con otras calculadoras comerciales y no comerciales actualmente disponibles. Se describe su funcionamiento, sus fundamentos matemáticos y se presentan y discuten dos ejemplos de aplicación en la investigación psicológica. Se concluye que este programa presenta algunas ventajas en comparación con otras calculadoras comerciales disponibles.

The Cliff’s Delta statistic is a non-parametric effect size measure that quantifies the amount of difference between two groups of observations beyond p-values interpretation. This measure can be understood as a useful complementary analysis for the corresponding hypothesis testing. During the last two decades the use of effect size measures has been strongly encouraged by methodologists and leading institutions of behavioral sciences. The aim of this contribution is to introduce the Cliff’s Delta Calculator software that performs such analysis and offers some interpretation tips. Differences and similarities with the parametric case are analysed and illustrated. The implementation of this free program is fully described and compared with other calculators. Alternative algorithmic approaches are mathematically analysed and a basic linear algebra proof of its equivalence is formally presented. Two worked examples in cognitive psychology are commented. A visual interpretation of Cliff’s Delta is suggested. Availability, installation and applications of the program are presented and discussed.