Comparación de resultados de investigación entre papel/lápiz y encuestas en línea
Página de inicio ECM actuales Compartir ECM



Agradezco la paciencia de todos en la publicación tardía de este artículo. Nuestra casa resultó tan dañada por el huracán Ida que la compañía de seguros la declaró inhabitable. Esto resultó en una enorme cantidad de tiempo urgente y atención a la casa y su contenido. Esta sección es un trabajo en progreso y se actualizará con el tiempo.

Para las encuestas de estudio, no existe una metodología perfecta. Es necesario acceder de alguna manera a una muestra de la población de estudio. Por ejemplo, algunas encuestas previas de investigación de experiencias cercanas a la muerte (NDE, por sus siglas en inglés) han accedido a personas que han tenido experiencias cercanas a la muerte (NDE, por sus siglas en inglés) mediante el envío de encuestas a personas que han tenido experiencias cercanas a la muerte (NDE, por sus siglas en inglés) que son miembros de organizaciones (especialmente IANDS, la Asociación Internacional para Estudios Cercanos a la Muerte) o encuestados en una encuesta. consulta dada durante un programa de televisión sobre ECM. Los investigadores experimentados reconocerán de inmediato que tales métodos para acceder a las ECM para una encuesta pueden ser subóptimos. Afortunadamente, considerando la investigación de NDE a nivel mundial, la consistencia de los resultados de las encuestas de NDE es impresionante. Parece que, sin embargo, se accede a las ECM para la investigación de encuestas retrospectivas, los resultados de la investigación son mucho más consistentes que inconsistentes. Esto probablemente se deba a la conocida observación de que las ECM tienen un contenido muy consistente, independientemente de los antecedentes demográficos de las ECM.

Una revisión de artículos relevantes en PubMed con respecto a la confiabilidad de las encuestas en Internet muestra un consenso general, aunque no unánime, de que las encuestas en Internet son tan confiables como las encuestas tradicionales de 'lápiz y papel'. Esto se ilustra en los artículos de una búsqueda en PubMed que cruzan los términos de búsqueda: "Internet"[MeSH] y "Surveys and Questionnaires"[MeSH] y "reliability". El resultado de esta búsqueda en PubMed está aquí: https://pubmed.ncbi.nlm.nih. gobierno La aceptación de la investigación basada en Internet está muy extendida. Los artículos de investigación contemporáneos de encuestas basadas en Internet generalmente no sienten la necesidad de justificar la confiabilidad de sus encuestas basadas en Internet en sus artículos.

A continuación se muestran artículos de investigación ilustrativos de PubMed que demuestran la confiabilidad equivalente de las encuestas en Internet y las encuestas de 'lápiz y papel'.

The Handbook of Near-Death Experiences: Thirty Years of Investigation, fue una compilación de 30 años de investigación sobre ECM con aportes de muchos investigadores de ECM. En la sección de este libro titulada “RECOMENDACIONES PARA INVESTIGACIÓN ADICIONAL”, la primera recomendación enumerada establece “Estudios retrospectivos con muestras más grandes y muestras que representan diversidad de características de NDEr, quizás utilizando Internet”. Ver: Holden J, Long J, MacLurg J. Características de los experimentadores occidentales cercanos a la muerte. En: Holden J, Greyson B, James D, eds. El manual de experiencias cercanas a la muerte: treinta años de investigación. Westport, CT: Praeger Publishers; 2009; 132. Los estudios NDERF basados en Internet permiten tamaños de muestra mucho más grandes y acceso global a NDErs para encuestas.

Otra ventaja importante de la metodología de encuestas NDERF basada en Internet es la capacidad de llegar a las ECM que pueden ser reacias a compartir sus ECM en persona con los investigadores. Esto se ilustra en una pregunta de la encuesta NDERF en la que el 6,8% de los encuestados indicaron que nunca compartieron su ECM con otra persona:

¿Alguna vez ha compartido esta experiencia con otros?

768 92,1%
Incierto 9 1,1%
No 57 6,8%
Total 834 100%

Una ventaja importante de la encuesta basada en Internet NDERF es que los NDErs comparten sus ECM y las respuestas a las preguntas de la encuesta por su cuenta y en su propio idioma. Dadas las características a menudo extraterrestres de las ECM, esto parecería ser una ventaja al permitir que las ECM transmitan sus respuestas a las preguntas de la encuesta con la mayor precisión posible.

Una ventaja única de la investigación de la encuesta NDERF es su transparencia. Aproximadamente el 98% de las NDE que comparten con NDERF han autorizado que se publique (anónimamente) un texto completo de sus NDE en el sitio web de NDERF. Por lo tanto, la fuente original de prácticamente toda la investigación de la encuesta NDERF está disponible para que cualquier persona la revise en el sitio web de NDERF.

A medida que pasa el tiempo, más personas tienen acceso a Internet y encuestas basadas en Internet. Actualmente, alrededor del 60 % de la población mundial tiene acceso a Internet, y este porcentaje crece cada año (consulte: https://www.statista.com/statistics/617136/digital-poblation-worldwide/ )

La encuesta de Internet NDERF ha sido traducida a más de 30 idiomas diferentes. Esto permite que personas de todo el mundo realicen la encuesta NDE, incluidas muchas personas a las que sería difícil o imposible acceder de otra manera para una encuesta. Esto permite el estudio transcultural más completo de NDE que jamás haya sido posible.

Quizás lo más importante es que las ECM publicadas en NDERF son consistentes en contenido con las ECM en artículos publicados, libros y otras colecciones confiables de ECM en Internet. Esta observación por sí sola valida la confiabilidad de las ECM compartidas con NDERF para la investigación.

Artículos de investigación seleccionados que comparan encuestas basadas en Internet y encuestas basadas en 'lápiz y papel':

Fiabilidad de forma abreviada-36 en una versión de Internet y de lápiz y papel. Basnov M, Kongsved SM, Bech P, Hjollund NH. Informar a Health Soc Care. 2009 enero; 34 (1): 53-8.

Encontramos poca o ninguna evidencia de una diferencia en la confiabilidad test-retest y la consistencia interna cuando comparamos una versión de SF-36 en Internet y en lápiz y papel.

Desarrollo de la encuesta en línea. Gordon JS, McNew R. Nurs Clin North Am. 2008 diciembre;43(4):605-19, vii. Revisar.

La investigación muestra que el tipo y la calidad de las respuestas que uno recibe con las encuestas en línea son comparables con las que recibe en las encuestas en papel.

Una versión de Internet del Programa de Entrevista de Diagnóstico para Niños (DISC-IV): correspondencia de la sección de TDAH con la versión en papel y lápiz. Steenhuis MP, Serra M, Minderaa RB, Hartman CA. Evaluación Psicológica. 2009 junio; 21 (2): 231-4.

La correspondencia entre las versiones de Internet y las entrevistas a nivel de las puntuaciones de los síntomas fue excelente, y la correspondencia con respecto a la presencia/ausencia de TDAH fue buena. Aunque se encontraron resultados de diagnóstico altamente comparables entre la autoadministración a través de Internet y la administración del entrevistador, se requieren más estudios utilizando otros módulos DISC-IV.

Autoevaluaciones de pacientes a través de Tablet PC en la atención de rutina del paciente: comparación con cuestionarios estandarizados en papel. Richter JG, Becker A, Koch T, Nixdorf M, Willers R, Monser R, Schacher B, Alten R, Specker C, Schneider M. Ann Rheum Dis. 2008 diciembre;67(12):1739-41. Epub 22 de julio de 2008.

RESULTADOS: Las puntuaciones obtenidas mediante el ingreso directo de datos en la Tablet PC no difirieron de las puntuaciones obtenidas mediante los cuestionarios de papel y lápiz en el grupo completo y los subgrupos de enfermedad. No se presentaron mayores dificultades al usar la Tablet PC. El 62,1% prefirió la entrada remota de datos en el futuro. Siete (4,6%) pacientes se sintieron incómodos con el Tablet PC debido a su enfermedad reumática. CONCLUSIONES: Los cuestionarios autoadministrados a través de Tablet PC son una opción fácil y capaz en pacientes con enfermedades reumáticas para monitorear continuamente la actividad de la enfermedad, las evaluaciones de eficacia y seguridad. Las aplicaciones de Tablet PC ofrecen datos directamente disponibles para la toma de decisiones clínicas. Mejoran la calidad de la atención mediante un control eficaz del paciente.

Administración de Internet de la Escala de Depresión de Edimburgo. Spek V, Nykl'cek I, Cuijpers P, Pop V. J Affect Disord. 2008 marzo; 106 (3): 301-5. Epub 2007 Aug 8.

CONCLUSIÓN: Las propiedades psicométricas del EDS administrado por Internet son comparables a las del EDS de papel y lápiz.

Comparación entre la administración vía Internet y la administración en papel y lápiz de dos instrumentos clínicos: SCL-90-R y GHQ-28. Vallejo MA, Ma'anes G, Isabel Comeche MA, D'az MI. J Behav Ther Exp Psiquiatría. 2008 de septiembre; 39 (3): 201-8. Epub 2007 17 de mayo.

El objetivo de este estudio es comparar los resultados del Symptom Check List (SCL)-90-R y el General Health Questionnaire (GHQ)-28 administrados en papel con los resultados de la administración vía Internet. Se pidió a cuarenta estudiantes universitarios que respondieran a los dos cuestionarios, primero en un formato (Internet o en papel), y 1 semana después en el otro formato. Para el GHQ-28 no se encontraron diferencias estadísticamente significativas entre las dos formas de presentación, Internet o papel, excepto en la subescala de disfunción social. En el caso del SCL-90-R, hubo diferencias en el Índice de Síntomas Positivos de Angustia (PSDI) y en las subescalas de somatización y obsesión-compulsión. También se analizó el efecto de usar los dos formatos en combinación. La consistencia interna de los instrumentos es alta para ambos tipos de presentación (alfa=0,91 en GHQ-28; alfa=0,97 en SCL-90-R). La correlación entre los dos formatos también es alta, con valores que oscilan entre 0,76 y 0,92, p<0,001, excepto en la subescala de disfunción social. Finalmente, la correlación entre el GHQ-28 y el SCL-90-R también es alta, tanto para los resultados en papel como en Internet (r=0,88, p<0,01 en papel y r=0,83, p<0,01 a través de Internet). Las diferencias encontradas deberán comprobarse en futuras investigaciones con otro tipo de muestra. alfa=0,97 en SCL-90-R). La correlación entre los dos formatos también es alta, con valores que oscilan entre 0,76 y 0,92, p<0,001, excepto en la subescala de disfunción social. Finalmente, la correlación entre el GHQ-28 y el SCL-90-R también es alta, tanto para los resultados en papel como en Internet (r=0,88, p<0,01 en papel y r=0,83, p<0,01 a través de Internet). Las diferencias encontradas deberán comprobarse en futuras investigaciones con otro tipo de muestra. alfa=0,97 en SCL-90-R). La correlación entre los dos formatos también es alta, con valores que oscilan entre 0,76 y 0,92, p<0,001, excepto en la subescala de disfunción social. Finalmente, la correlación entre el GHQ-28 y el SCL-90-R también es alta, tanto para los resultados en papel como en Internet (r=0,88, p<0,01 en papel y r=0,83, p<0,01 a través de Internet). Las diferencias encontradas deberán comprobarse en futuras investigaciones con otro tipo de muestra. 01 en papel y r=0,83, p<0,01 vía Internet). Las diferencias encontradas deberán comprobarse en futuras investigaciones con otro tipo de muestra. 01 en papel y r=0,83, p<0,01 vía Internet). Las diferencias encontradas deberán comprobarse en futuras investigaciones con otro tipo de muestra.

Evaluación psicológica a través de Internet: un estudio de confiabilidad y validez de las versiones en línea (vs papel y lápiz) del Cuestionario de Salud General-28 (GHQ-28) y la Lista de Verificación de Síntomas-90-Revisada (SCL-90-R) ). Vallejo MA, Jord'n CM, D'az MI, Comeche MI, Ortega J. J Med Internet Res. 31 de enero de 2007;9(1):e2.

ANTECEDENTES: Los servicios de psicología en Internet están aumentando rápidamente y eso implica una evaluación en línea. Para garantizar los resultados de estos nuevos procedimientos de evaluación en línea, es necesario contar con herramientas de evaluación confiables y válidas. OBJETIVO: En este trabajo analizamos las versiones en línea de dos populares cuestionarios de detección de psicopatología: el Cuestionario de Salud General-28 (GHQ-28) y la Lista de Verificación de Síntomas-90-Revisada (SCL-90-R). MÉTODOS: Un total de 185 estudiantes de psicología fueron reclutados de dos universidades en Madrid, España. Todos ellos tenían acceso a Internet en casa. Se utilizó una situación test-retest y un análisis factorial para generar datos de confiabilidad y validez. Tanto los cuestionarios de papel y lápiz (prueba) como sus versiones en línea (nueva prueba) fueron completados por 100 participantes (brecha mediana = 17 días). RESULTADOS: Los resultados sugieren que ambos cuestionarios en línea fueron bastante equivalentes a sus versiones de papel y lápiz, con valores de confiabilidad más altos para el SCL-90-R. El análisis factorial tendió a reproducir la estructura mostrada en investigaciones anteriores de ambos cuestionarios, replicando la estructura de cuatro factores del GHQ-28 pero no logrando hacerlo con la estructura de nueve factores del SCL-90-R. En cambio, apareció un gran factor sin rotar. CONCLUSIONES: Se deben realizar más investigaciones para confirmar estos datos, pero nuestro trabajo respalda el uso en línea de ambas herramientas de evaluación. Las propiedades psicométricas de la versión en línea de GHQ-28 son similares a las de papel y lápiz y podemos recomendar su utilización en un entorno web. Por el contrario, SCL-90-R solo puede recomendarse como un índice global de malestar psicológico, utilizando el Índice de gravedad global (GSI), no necesariamente sus subescalas; y hay que considerar que las puntuaciones en línea fueron inferiores a las de la versión en papel y lápiz.

Evaluación de cogniciones y síntomas obsesivo-compulsivos en Internet: evidencia de la comparabilidad de la administración en papel e Internet. Coles ME, Cook LM, Blake TR. Behav Res Ther. 2007 de septiembre; 45 (9): 2232-40. Epub 2007 Jan 12.

Los resultados del estudio respaldan la equivalencia de estas medidas de síntomas y creencias del trastorno obsesivo compulsivo (TOC) independientemente del método de administración (papel versus sitio web seguro del proyecto). Estos hallazgos crean nuevas oportunidades para realizar investigaciones en línea relacionadas con el TOC.

Replicación y examen de datos de investigación sobre el estrés laboral y el apoyo social de los compañeros de trabajo con Internet y muestras tradicionales. AbuAlRub RF. Beca J Nurs. 2006;38(2):200-4.

RESULTADOS: Las muestras estadounidenses y jordanas diferían significativamente en todas las variables demográficas. Sin embargo, tenían patrones similares de respuestas con respecto a la asociación entre el estrés laboral y el apoyo social de los compañeros de trabajo. CONCLUSIONES: La comparabilidad prevista de los resultados con diferentes métodos y muestras da crédito a la fiabilidad y validez de la investigación basada en Internet.

Cuestionarios de salud para adolescentes administrados por Internet en comparación con una versión en papel en un estudio aleatorio. Mangunkusumo RT, Moorman PW, Van Den Berg-de Ruiter AE, Van Der Lei J, De Koning HJ, Raat H. J Adolesc Health. 2005 enero; 36 (1): 70.e1-6.

CONCLUSIONES: Los cuestionarios de salud a través de Internet se evaluaron positivamente y, en general, dieron como resultado puntuaciones iguales de estado de salud/comportamiento de salud en comparación con el modo P&P. Recomendamos más investigación con otros cuestionarios, y también en otros entornos con respecto a la equivalencia de puntuación entre los cuestionarios basados en la web y los administrados por P&P.

Internet versus cuestionarios enviados por correo: una comparación aleatoria. Ritter P, Lorig K, Laurent D, Matthews K. J Med Internet Res. 15 de septiembre de 2004;6(3):e29.

CONCLUSIONES: Entre una muestra de conveniencia reclutada a través de Internet, los resultados de los asignados aleatoriamente a la participación en Internet fueron al menos tan buenos, si no mejores, que entre los asignados a cuestionarios enviados por correo, con menos esfuerzo de reclutamiento requerido. Los instrumentos administrados a través de Internet parecen ser confiables y se responden de manera similar a cuando se administran a través de cuestionarios tradicionales en papel enviados por correo.

¿Deberíamos confiar en los estudios basados en la web? Un análisis comparativo de seis ideas preconcebidas sobre los cuestionarios de Internet. Gosling SD, Vazire S, Srivastava S, John OP. Soy psicol. 2004 febrero-marzo;59(2):93-104.

El rápido crecimiento de Internet ofrece una gran cantidad de nuevas oportunidades de investigación para los psicólogos. Los métodos de recopilación de datos de Internet, con un enfoque en los cuestionarios de autoinforme de muestras autoseleccionadas, se evalúan y comparan con los métodos tradicionales de papel y lápiz. Se evalúan seis ideas preconcebidas sobre las muestras de Internet y la calidad de los datos comparando una nueva muestra grande de Internet (N = 361 703) con un conjunto de 510 muestras tradicionales publicadas. Se muestra que las muestras de Internet son relativamente diversas con respecto al género, el nivel socioeconómico, la región geográfica y la edad. Además, los hallazgos de Internet se generalizan en todos los formatos de presentación, no se ven afectados negativamente por respondedores no serios o repetidos, y son consistentes con los hallazgos de los métodos tradicionales. Se concluye que los métodos de Internet pueden contribuir a muchas áreas de la psicología.

Investigación de la personalidad en Internet: una comparación de instrumentos basados en la Web y tradicionales en entornos para llevar a casa y en clase. Cronk BC, West JL. Behav Res Métodos Instrum Comput. 2002 mayo;34(2):177-80.

Los estudiantes, profesores e investigadores se sienten cada vez más cómodos con Internet y muchos de ellos están interesados en usar la Web para recopilar datos. Pocos estudios publicados han investigado las diferencias entre los datos basados en la Web y los datos recopilados con métodos más tradicionales. Para investigar estas diferencias potenciales, se cruzaron dos factores importantes en este estudio: si los datos se recopilaron en línea o no y si los datos se recopilaron en un entorno grupal en un momento fijo o individualmente en el momento elegido por el encuestado. Se utilizó la escala Visions of Morality (Shelton & McAdams, 1990) y se asignó a los participantes a una de cuatro condiciones: encuesta web en clase, encuesta de papel y lápiz en clase; encuesta web para llevar a casa y encuesta con lápiz y papel para llevar a casa. No se encontraron diferencias significativas en las puntuaciones para ninguna condición; sin embargo, las tasas de respuesta se vieron afectadas por el tipo de encuesta administrada, y el instrumento basado en la web para llevar a casa tuvo la tasa de respuesta más baja. Por lo tanto, los investigadores deben ser conscientes de que los diferentes modos de administración pueden afectar la deserción de los sujetos y, por lo tanto, pueden confundir las investigaciones de otras variables independientes. con el instrumento basado en la web para llevar a casa que tiene la tasa de respuesta más baja. Por lo tanto, los investigadores deben ser conscientes de que los diferentes modos de administración pueden afectar la deserción de los sujetos y, por lo tanto, pueden confundir las investigaciones de otras variables independientes. con el instrumento basado en la web para llevar a casa que tiene la tasa de respuesta más baja. Por lo tanto, los investigadores deben ser conscientes de que los diferentes modos de administración pueden afectar la deserción de los sujetos y, por lo tanto, pueden confundir las investigaciones de otras variables independientes.

¿Papel y lápiz o en línea? Evaluación de los efectos de modo en las medidas de funcionamiento emocional y apego. Fouladi RT, McCarthy CJ, Moller NP. Evaluación. 2002 junio;9(2):204-15.

Se investigó la viabilidad de utilizar la World Wide Web para recopilar datos de tres instrumentos ampliamente utilizados por médicos e investigadores. Los instrumentos fueron el Inventario de Apego Parental y de Pares, la Escala de Regulación del Estado de Ánimo Negativo y la Escala Trait Meta-Mood. Se recopilaron datos de dos grupos comparables de estudiantes universitarios y se documentaron las diferencias en los patrones de respuesta en las versiones de papel y lápiz y de la World Wide Web de las medidas, tanto a nivel de ítem como a nivel de puntaje de escala. Aunque los efectos del modo de administración fueron estadísticamente significativos, la magnitud de los efectos fue en general muy pequeña.

Una comparación de la World-Wide Web y los cuestionarios de personalidad de papel y lápiz. Petit FA. Behav Res Métodos Instrum Comput. 2002 febrero; 34 (1): 50-4.

¿La manifestación de los efectos del conjunto de respuestas en las respuestas al cuestionario de la World-Wide Web (WWW) difiere de la de las respuestas al cuestionario de papel y lápiz (PP)? Dos mil seiscientos cuarenta y nueve voluntarios respondieron a un cuestionario WWW, y 458 voluntarios respondieron a un cuestionario PP que consta de cinco escalas de personalidad. Se examinaron cinco conjuntos de respuestas. Para cuatro de ellos (respuesta aleatoria, no respuesta al ítem, respuesta extrema y respuesta aquiescente) no se encontraron diferencias estadísticamente significativas entre los datos de PP y WWW. La administración de PP provocó un número estadísticamente mayor de errores (respuestas no codificables), aunque eta 2 fue inferior a 0,02. Un análisis de las correlaciones entre ítems e interescalas no diferenció los datos WWW y PP. Los datos de la Escala de Deseabilidad Social de Marlowe-Crowne, la Escala de Autopresentación Perfeccionista y la Escala de Ansiedad Informática no diferenciaron los datos de WWW y PP en términos de fiabilidad de las medias o de la escala. Se concluyó que los datos de WWW pueden ser comparables a los datos de PP y que WWW es una herramienta de recopilación de datos potencialmente útil y válida.

Animaciones fotográficas controladas por el usuario, preguntas basadas en fotografías y cuestionarios: tres instrumentos basados en Internet para medir el comportamiento de riesgo de los conductores. MS Horswill, ME Coster. Behav Res Métodos Instrum Comput. 2001 febrero; 33 (1): 46-58.

Internet se ha explotado con éxito en el pasado como medio para la investigación del comportamiento. Este documento presenta una serie de estudios diseñados para evaluar las medidas basadas en Internet del comportamiento de riesgo de los conductores. En primer lugar, comparamos las respuestas de una muestra de Internet con una muestra tradicional de lápiz y papel utilizando medidas de cuestionario establecidas sobre la asunción de riesgos. No se encontraron diferencias significativas. En segundo lugar, evaluamos la validez de los nuevos instrumentos basados en Internet, que incluyen fotografías y animaciones fotográficas, que miden la velocidad, la aceptación de huecos y los pases. Se encontró que las respuestas reflejaban patrones demográficos conocidos de comportamiento real hasta cierto punto. También, Se llevó a cabo un estudio de las velocidades en las carreteras en los lugares representados en la medida fotográfica del exceso de velocidad y, con ciertas excepciones, las diferencias entre los dos parecían ser constantes. En tercer lugar, se utilizó una manipulación experimental entre sujetos que involucraba la medida de animación fotográfica de aceptación de espacios para demostrar una aplicación de estas técnicas.

Administración basada en la web de un cuestionario de personalidad: comparación con métodos tradicionales. Davis RN. Behav Res Métodos Instrum Comput. 1999 noviembre; 31 (4): 572-7.

La World-Wide Web es muy prometedora como mecanismo para la investigación basada en cuestionarios. Pero, ¿los datos de los cuestionarios basados en la Web son comparables con los datos de los cuestionarios estándar de papel y lápiz? Este estudio evaluó la equivalencia de la Escala de respuestas rumiantes en un formato basado en la web y en un formato de papel y lápiz entre estudiantes de psicología introductoria, psicología de nivel superior y estudiantes que no son de psicología. Los coeficientes de consistencia interna fueron comparables entre los grupos. Los participantes en la muestra web informaron niveles más altos de rumiación centrada en sí mismos que los otros grupos. Las mujeres en la muestra Web reportaron más rumia centrada en sí mismas que las mujeres en los otros grupos. En la muestra web, los resultados no covarían con la ubicación del acceso. Estos resultados sugieren que los hallazgos de la investigación de cuestionarios basados en la Web son comparables con los resultados obtenidos utilizando procedimientos estándar. La interfaz web computarizada también puede facilitar la autorrevelación entre los participantes de la investigación.