Lección

Técnicas cuantitativas de recolección y análisis

🟢 Posgrado  ·  Investigación educativa digital

Un análisis cuantitativo no empieza al abrir el software: empieza cuando decides qué constructo quieres representar, con qué medida, bajo qué estructura de datos y qué incertidumbre aceptarás.

L8 cierra el protocolo convirtiendo la estrategia cuantitativa en variables, instrumentos, estructura analítica y cronograma. El resultado final no será un artículo terminado, sino el protocolo trazable que alimentará el Proyecto integrador de egreso.

🧭 Antes de comenzar

Tu plataforma registra tiempo conectado y quieres estudiar autorregulación. ¿Cuál decisión debe ocurrir antes de elegir una prueba estadística?

Qué lograrás

Objetivo didáctico

Diseñarás la rama cuantitativa y el plan final de análisis del protocolo. Traducirás constructos en variables e indicadores, justificarás instrumentos y calidad de medición, definirás estructura de datos, tratamiento de pérdidas o valores extremos, análisis descriptivo e inferencial y límites de interpretación. Integrarás esta rama con la cualitativa cuando tu estrategia de L5 sea mixta.

Punto de partida

Introducción

Los datos digitales ofrecen volumen y granularidad, pero esas propiedades no garantizan validez. Hase y Kuhl (2024) muestran que los datos de plataformas pueden informar decisiones educativas, aunque el campo todavía necesita evidencia sistemática sobre cómo se interpretan y utilizan. En un protocolo cuantitativo, el primer problema es equivalente: decidir qué representa cada dato y qué afirmación puede sostener.

La validación también es una decisión de investigación, no un trámite posterior. Jia et al. (2025) desarrollaron evidencia de validez y confiabilidad para una herramienta de observación de enseñanza en línea utilizando un modelo Rasch de múltiples facetas, precisamente porque las puntuaciones podían variar por docentes, ítems y evaluadores. El ejemplo muestra que una cifra observada puede contener varias fuentes de variación que el diseño debe reconocer.

💡 Cadena cuantitativa de evidencia
Relación explícita entre constructo, operacionalización, instrumento o fuente de datos, estructura de muestreo, modelo analítico, estimación de incertidumbre e inferencia. Una ruptura en cualquiera de esos eslabones limita lo que puede concluirse.

Decisión de arranque: elige el constructo cuantitativo principal de tu protocolo. Escribe tres columnas: «constructo», «indicador observable» y «lo que el indicador no representa». Si no puedes completar la tercera, revisa la operacionalización.

El contenido

Desarrollo del tema

01

Del constructo a la variable: medir exige una teoría de representación

Una variable es útil cuando existe un argumento sobre por qué sus valores representan diferencias relevantes del constructo. Un número de clics puede medir actividad registrada, pero no necesariamente participación cognitiva. Una calificación puede representar desempeño en una tarea concreta, pero no todo el aprendizaje. Por eso operacionalizar significa definir la relación y sus límites.

Jia et al. (2025) muestran una lógica más exigente: al validar una herramienta de observación, modelaron múltiples facetas de la puntuación y usaron la evidencia para revisar funcionamiento de ítems y evaluadores. La lección para tu protocolo es que confiabilidad y validez dependen de cómo se producen los puntajes, no solo de que el instrumento tenga una escala numérica.

Aplicación: para cada variable principal, escribe la regla que transforma observaciones en valores y una fuente de error o variación que podría alterar esos valores sin que cambie el constructo.

Simulador de estados · El mismo constructo, distintas operacionalizaciones

Cambia de operacionalización y observa cómo se modifica la inferencia posible.

02

La calidad de la medición precede a la significancia estadística

Un resultado estadísticamente preciso sobre una medida débil sigue siendo una inferencia débil. Antes de modelar relaciones, el protocolo debe explicar calidad de instrumentos, consistencia de aplicación, comparabilidad de escalas y manejo de evaluadores cuando intervienen juicios humanos.

El estudio de Jia et al. (2025) es útil porque trata al evaluador como una fuente de variación y no supone que dos observadores producen automáticamente puntuaciones equivalentes. En educación digital, una lógica semejante se aplica a versiones de plataformas, cambios de interfaz, instrumentos adaptados o datos obtenidos bajo condiciones distintas.

Aplicación: construye una lista de tres amenazas a la calidad de tus medidas. Para cada una, decide si la reducirás mediante diseño, la modelarás analíticamente o la conservarás como limitación explícita.

03

El modelo analítico debe corresponder a la estructura del diseño

La elección de análisis depende del tipo de variable, independencia o dependencia entre observaciones, temporalidad, grupos y alcance de la pregunta. Datos repetidos de una misma persona no tienen la misma estructura que observaciones independientes. Grupos preexistentes no producen la misma lógica causal que asignación aleatoria. Registros anidados en estudiantes y cursos contienen niveles de variación distintos.

Un estudio reciente sobre retroalimentación basada en analítica de aprendizaje utilizó un diseño cuasi-experimental y emparejamiento por puntaje de propensión para construir grupos comparables a partir de cohortes no aleatorizadas. El ejemplo ilustra una regla: cuando el diseño contiene una fuente conocida de sesgo, el análisis puede gestionarla parcialmente, pero debe conservarse el límite inferencial.

Aplicación: dibuja la estructura de tus datos: quién aporta observaciones, cuántas veces, en qué grupos y en qué momentos. Después escribe qué supuesto de independencia sería falso si analizaras todas las filas como observaciones equivalentes.

04

Planificar el análisis incluye datos faltantes, decisiones y transparencia

Un plan previo debe especificar qué se considerará una observación válida, cómo se describirán datos faltantes, qué tratamiento recibirán valores extremos y qué análisis responderá cada pregunta. Las decisiones tomadas después de observar resultados necesitan distinguirse de las previstas para evitar presentar exploración como confirmación.

La incertidumbre también debe reportarse. El tamaño de una diferencia, su intervalo de estimación y las condiciones del diseño dicen más sobre la fuerza de una conclusión que una división simple entre «significativo» y «no significativo». En profundidad Crear, el objetivo es diseñar una cadena en la que el lector pueda anticipar cómo se pasará de datos a inferencia antes de que existan resultados.

Aplicación: escribe el esquema de tu tabla de resultados antes de tener datos. Incluye variable, estadístico descriptivo, contraste o modelo previsto, estimación que reportarás y límite de interpretación.

🧭 Control de comprensión

Un análisis muestra una asociación entre frecuencia de acceso y calificación final. ¿Cuál interpretación es metodológicamente defendible si el diseño es observacional?

Revelador secuencial · Del dato a la inferencia

Revisa el plan final como una secuencia de decisiones verificables.

Línea de tiempo del plan cuantitativoLa línea muestra seis fases: constructos, instrumento, pilotaje, recolección, preparación y análisis, seguidas por interpretación e integración. Constructosdefinición Instrumentooperacionalización Pilotajecalidad de medida Recolecciónprotocolo estable Preparaciónfaltantes y calidad Análisisestimación e inferencia Integración con la evidencia cualitativa, si correspondeLa integración se planifica antes de observar resultados.

Figura 8: Fases y cronograma lógico del análisis cuantitativo. Elaboración propia a partir de Jia et al. (2025), Hase y Kuhl (2024) y ejemplos recientes de diseños cuantitativos en educación digital.

Cierre

Conclusión

El análisis cuantitativo del protocolo queda defendible cuando constructo, medida, estructura de datos, modelo e inferencia forman una cadena. El volumen de registros no corrige una operacionalización débil; una técnica avanzada no corrige un diseño que promete más de lo que puede sostener.

Con esta lección se cierra el Protocolo de investigación educativa publicable como producto de la Unidad de aprendizaje. El documento no es todavía el artículo del Proyecto integrador de egreso: es su insumo metodológico trazable, listo para ser revisado y convertido posteriormente en producción académica.

🔭 Para seguir aprendiendo

  • Si tus resultados futuros contradicen la expectativa que motivó el protocolo, ¿tu plan de análisis permite que esa contradicción aparezca o está construido para confirmar una conclusión?
Ahora tú

Actividad de aprendizaje autónoma

Etapa D · Parte 2 — Plan cuantitativo, integración y cierre del protocolo. Retoma todas las etapas anteriores y completa la rama cuantitativa cuando corresponda. Después integra las decisiones cualitativas y cuantitativas según la estrategia definida en L5 y entrega el protocolo completo.

De dónde vienes. Usa la pregunta y problema de Etapa A, el diseño y ética de Etapa B, el método y estado del arte de Etapa C y la rama cualitativa o justificación de exclusión de L7. Debes señalar qué decisiones previas cambian al especificar medición y análisis.

Qué decides. Define constructos, variables, instrumentos o registros, estructura de datos, plan de calidad, análisis descriptivo e inferencial, tratamiento de faltantes y valores extremos, e integración cualitativa-cuantitativa cuando proceda.

Qué documentas. Conserva versiones de instrumentos, reglas de transformación de datos, decisiones previstas antes del análisis y fuentes metodológicas. Si utilizas inteligencia artificial para código, análisis o visualización, registra qué produjo, qué verificaste y qué decisiones interpretativas permanecieron bajo tu responsabilidad.

  1. Justifica si el protocolo necesita una rama cuantitativa; si no, explica la exclusión y su consecuencia inferencial.
  2. Construye la tabla constructo → indicador/variable → instrumento/fuente → límite de medición.
  3. Define estructura de datos, unidades, momentos, grupos y dependencias.
  4. Vincula cada pregunta o hipótesis con el análisis previsto y la estimación que reportarás.
  5. Define tratamiento de datos faltantes, valores extremos y verificaciones de calidad.
  6. Explica cómo se integrará esta evidencia con la cualitativa cuando tu diseño sea mixto.
  7. Ensambla el protocolo completo y registra qué mantuviste, corregiste o descartaste de etapas previas.

Planificador · Cierre del protocolo

Organiza la rama cuantitativa y la integración final antes de ensamblar el producto completo.

Evidencia de logro

Entrega el protocolo integrado: problema y pregunta, diseño, ética, método, estado del arte, instrumentos y plan de análisis cualitativo y/o cuantitativo según lo decidido en L5. La trazabilidad de fuentes, decisiones, revisiones y mediación crítica forma parte del producto.

🤔

¿Podría otra persona reconstruir por qué cada dato de tu protocolo existe, qué decisión metodológica sostiene y qué conclusión no debería extraerse de él?

Referencias bibliográficas

  • Hase, A., & Kuhl, P. (2024). Teachers’ use of data from digital learning platforms for instructional design: A systematic review. Educational Technology Research and Development, 72, 1925–1945. doi:10.1007/s11423-024-10356-y
  • Jia, Y., Spagnolo, A. B., Barrett, N., Murphy, A. A., Basto, P. M., Rothpletz-Puglia, P., & Luther, S. (2025). Validation of a peer observation and evaluation tool for online teaching in the U.S. Educational Technology Research and Development, 73, 615–639. doi:10.1007/s11423-024-10428-z
  • Dayo, N., Said Metwaly, S., & Van Den Noortgate, W. (2024). Evaluating technology enhanced learning by using single-case experimental design: A systematic review. British Journal of Educational Technology, 55, 2457–2477. doi:10.1111/bjet.13468
  • Chen, J. (2024). Effects of learning analytics-based feedback on students’ self-regulated learning and academic achievement in a blended EFL course. System, 124, 103388. doi:10.1016/j.system.2024.103388