4 ramificaciones a considerar sobre los experimentos psicológicos

texto alt

T

omar en cuenta o no los constantes y rápidos estudios psicológicos que se le ofrecen al gerente es una difícil decisión.

Aquí le mostramos qué elementos debe tomar en cuenta para decidir en uno u otro sentido.

TIEMPO DE LECTURA

texto alt

¿Cómo se calcula?

Descarga este Artículo

El campo de la psicología experimental está en un estado de crisis. Durante los últimos años varios prominentes y prolíficos investigadores psicológicos han admitido la falsificación de datos, llevando a docenas de retracciones y dudas generales en cuanto a campos enteros de investigación.

Los estudios muestran que prácticas cuestionables de recolección y análisis de información, para incrementar las posibilidades de resultados sorprendentes, están ampliamente extendidas en el campo, proyectando una duda sobre qué tan válidos son los resultados reportados. Recientemente, un intento a gran escala, realizado por cientos de investigadores para replicar estudios publicados en prominentes publicaciones de psicología, resultó en conclusiones aleccionadoras: de los 100 estudios analizados, sólo 39 pudieran ser replicados exitosamente. (Aunque es importante señalar que esto no significa que los otros equipos de investigación cometieran fraude.)

¿Qué significan para los gerentes esas controversias psicológicas? Demuestra la necesidad de ser escéptico y estar alerta. También sugieren que es importante revisar las estadísticas básicas para evaluar los hallazgos reportados. Las ramificaciones pueden ser condensadas en cuatro puntos:

— Sea escéptico de hallazgos sensacionales y narrativas intrincadas. Desde hace décadas hay una tendencia dentro de la psicología experimental para desarrollar explicaciones complicadas acerca de cuándo y por qué ocurren ciertos efectos. De hecho, la complejidad es la medida a través de la cual muchos editores y revisores de journals determinan si la investigación es publicable. Sin embargo, ese complejo tejido narrativo tiene un precio. Sus explicaciones no pueden aplicarse más allá de su contexto específico. Lo mismo es cierto para muchos hallazgos que ganan titulares. Como muestran los casos de fraude académico, si algo suena demasiado sorprendente, probablemente amerita una mirada más de cerca.

— Ponga atención a efectos robustos, que funcionan a lo largo de varios contextos. Los efectos claros son más valiosos para los gerentes que las narrativas tortuosas. En la mayoría de los casos, los gerentes ni siquiera necesitan saber por qué sucede un cierto efecto psicológico. Por ejemplo, en más de 15 años de estudiar los efectos de las encuestas de mercadeo, yo (junto con mis coautores) he descubierto consistentemente que cuando los consumidores participan en encuestas, dicha participación incrementa su lealtad en el largo plazo. Hasta la fecha, no puedo decirle exactamente por qué sucede este efecto. Sin embargo, ¿eso importa? Se ha mostrado que este efecto sucede en muchas industrias y sin importar que los consumidores sean encuestados en línea o por teléfono.

— Repase los conceptos estadísticos relevantes. Cuando usted está evaluando un estudio o reporte de investigación, especialmente cuando considera su aplicación, los detalles son esenciales. El campo de la psicología está en medio de un cambio hacia una consideración más matizada de la información y el reporte de resultados con base en intervalos de confianza y tamaño del efecto. Ahora es un tiempo particularmente bueno para que los gerentes repasen estos conceptos y comprendan los elementos básicos del diseño de experimentos empresariales. Este esfuerzo vale la pena. Hará que usted sea un consumidor más agudo y un usuario más efectivo de la investigación psicológica.

— Respalde los esfuerzos de replicación y comparta los hallazgos cada vez que pueda. Para los investigadores académicos, los incentivos no favorecen la réplica de efectos conocidos. Después de todo, si un resultado particular ya ha sido publicado, ¿por qué un journal querría desperdiciar su precioso espacio reportando el mismo descubrimiento otra vez? Sin embargo, para las aplicaciones de negocios, el cálculo es diferente. El éxito de un efecto particular depende de su contexto. Por ejemplo, si la participación en encuestas lleva a una mayor lealtad de los consumidores, una encuesta móvil podría o no producir resultados similares. Es importante descubrirlo. Pruebe el efecto bajo diferentes condiciones y, cuando sea apropiado, haga que los resultados estén públicamente disponibles.

A pesar de la crisis actual, la gran mayoría de los investigadores psicológicos son personas diligentes y honestas. El embrollo en que se encuentra la psicología ha sido impulsado en buena parte por editores de journals, revisores, medios de comunicación y consumidores. También es apoyado por comités académicos en universidades de investigación, que se enfocan en la cantidad de publicaciones al evaluar el desempeño. Estas dinámicas, a su vez, alimentan prácticas cuestionables de investigación y resultados frágiles.

Los gerentes necesitan apoyar la investigación psicológica que, incluso cuando no es glamorosa, ofrece descubrimientos útiles, válidos y transferibles para la toma de decisiones en los negocios. Deberían ser consumidores escépticos de la investigación, pero también patrocinadores y colaboradores que apoyen el nuevo paradigma que le dará forma a la investigación psicológica en los años por venir.

Si algo suena demasiado sorprendente, probablemente amerita una mirada más de cerca”.

Cuando usted está evaluando un estudio o reporte de investigación, especialmente cuando considera su aplicación, los detalles y conceptos son esenciales”.

Pruebe el efecto de una investigación bajo diferentes condiciones y, cuando sea apropiado, haga que los resultados estén públicamente disponibles”.

¿Qué significan para los gerentes las controversias psicológicas? Demuestran la necesidad de ser escéptico y estar alerta.

Las ramificaciones pueden ser condensadas en cuatro puntos:

  • Sea escéptico de hallazgos sensacionales y narrativas intrincadas. Especialmente respecto de la tendencia dentro de la psicología experimental para desarrollar explicaciones complicadas acerca de cuándo y por qué ocurren ciertos efectos.
  • Ponga atención a efectos robustos, que funcionan a lo largo de varios contextos. Los efectos claros son más valiosos para los gerentes que las narrativas tortuosas.
  • Repase los conceptos estadísticos relevantes. Cuando usted está evaluando un estudio o reporte de investigación, los detalles son esenciales.
  • Respalde los esfuerzos de replicación y comparta los hallazgos cada vez que pueda. El éxito de un efecto particular depende de su contexto. Pruebe el efecto bajo diferentes condiciones y, cuando sea apropiado, haga que los resultados estén públicamente disponibles

A pesar de la crisis actual, la gran mayoría de los investigadores psicológicos son personas diligentes y honestas.

Los gerentes necesitan apoyar la investigación psicológica que, incluso cuando no es glamorosa, ofrece descubrimientos útiles, válidos y transferibles para la toma de decisiones en los negocios.

© 2017Harvard Business School Publishing Corp.

De: hbr.org

Distribuido por: The New York Times Syndicate.

How Managers Should Judge Psychology Experiments
The field of experimental psychology is in a state of crisis. Within the past few years, a number of prominent and prolific psychology researchers have admitted to falsifying data, leading to dozens of retractions and general doubts regarding entire fields of research.

Studies show that questionable practices of collecting and analyzing data to increase the chances of eyebrow-raising results are widespread throughout the field, casting doubt on how valid the reported results are. Recently, a large-scale attempt by hundreds of researchers to replicate published studies in prominent psychology journals yielded sobering conclusions: Of the 100 studies tested, only 39 could be replicated successfully. (Although, importantly, that doesn’t mean the other research teams committed fraud.)

What do these psychology controversies mean for managers? They demonstrate the need to be skeptical and vigilant and suggest that it is important to brush up on basic statistics to evaluate reported findings. The ramifications can be condensed to four points:

— Be skeptical of sensational findings and intricate narratives. There has been a decades-long trend in experimental psychology to develop convoluted explanations about when and why certain effects occur. In fact, intricacy is the yardstick by which many journal editors and reviewers determine whether research is publishable. But such complex story-weaving comes at a price. These explanations fail to apply beyond their specific context. The same is true of many headline-generating findings. As the cases of academic fraud show, if something sounds too amazing, it probably merits a closer look.

— Pay attention to robust effects that work across contexts. Straightforward effects are more valuable to managers than tortuous narratives. In most cases, managers do not even need to know why a certain psychological effect occurs. For instance, in over 15 years of studying the effects of marketing surveys, I (along with co-authors) have consistently found that when customers participate in surveys, such participation increases their loyalty over the long term. To this day, I cannot tell you exactly why this effect occurs. But does that matter? This effect has been shown to occur in many industries and regardless of whether customers are surveyed online or by telephone.

— Brush up on relevant statistical concepts. When you’re evaluating a research report or study, especially when considering its application, the details are essential. The field of psychology is in the midst of shifting to a more nuanced consideration of data and reporting of results based on confidence intervals and effect sizes. Now is a particularly good time for managers to brush up on these concepts and grasp the basics of designing business experiments. This effort is worthwhile. It will make you a more discerning consumer and a more effective user of psychological research.

— Support replication efforts and share findings however you can. For academic researchers, the incentives don’t favor replicating known effects. After all, if a particular result has already been published, why would a journal want to waste its precious space reporting the same finding again? For business applications, however, the calculus is different. The success of a particular effect is dependent on its context. If survey participation leads to greater customer loyalty, for example, a mobile survey might or might not produce similar results. It is important to find out. Test the effect under different conditions and, where appropriate, make the results publicly available.

Despite the current crisis, a vast majority of psychology researchers are diligent, honest people. The quagmire that psychology finds itself in has been propelled in large part by journal editors, reviewers, the media and consumers. It is also supported by tenure committees at research universities that focus on publication counts in evaluating performance. These dynamics, in turn, fuel questionable research practices and fragile results.

Managers need to support psychological research that, even if not glamorous, provides useful, valid and transferable findings for business decision-making. They should be skeptical consumers of research, yet supportive patrons and collaborators of the new paradigm that will shape psychological research in the coming years.

¿Qué te ha parecido?

Si encontró algún error gramatical en este artículo, por favor notifíquelo a nuestros editores seleccionando el texto y presionando:“Ctrl + Enter”.