El proceso de construcción de las preguntas contenidas en los instrumentos de la ECEP está a cargo de docentes especialistas de cada área, quienes construyen las pruebas que luego son sometidas a procesos de validación como pilotajes y/o juicio de expertos, lo que asegura el cumplimiento de estándares de calidad de este tipo de instrumentos. Asimismo, los contenidos de las pruebas se basan en los temarios publicados para cada proceso, los que se enmarcan en el Marco para la Buena Enseñanza y las bases curriculares de cada nivel evaluado y se someten a una revisión exhaustiva de correspondencia.Todas las pruebas cumplen la distribución de preguntas, de acuerdo con las tablas de especificaciones. Las 60 preguntas seleccionadas en cada prueba definitiva se distribuyen en diferentes niveles de complejidad teórica: 30% de complejidad baja, 40% de complejidad media y 30% de complejidad alta. Además, las pruebas experimentadas mediante prueba de campo (experimentación cuantitativa) cumplen con especificaciones psicométricas en el ensamblaje definitivo:a.- Dificultad (Clásica):

Corresponde al porcentaje de respuestas correctas de cada pregunta. Se ensamblan preguntas de dificultad, alta baja y moderada, en las siguientes proporciones: Las preguntas se ensamblan en las siguientes proporciones: 30% de dificultad alta (15%-39% de respuestas correctas), 40% de dificultad moderada (40%-59% de respuestas correctas) y 30% de dificultad baja (60%-85% de respuestas correctas). La aplicación censal o real de estas preguntas confirma el nivel de dificultad asignado en las pruebas piloto (experimentación), permitiendo reunir evidencia de este parámetro, para reutilizar ítems con evidencia de su porcentaje de dificultad.b.- Discriminación de las preguntas: La discriminación es la capacidad de una pregunta para distinguir entre evaluados con altos y bajos resultados. Una pregunta que “discrimina bien”, en general, debe ser respondida correctamente por los evaluados con resultados más altos y erróneamente por aquellos con bajos resultados. Para contribuir a la validez, se seleccionan preguntas solo de “buena discriminación” para incluir en la prueba final. En la ECEP solo se incluyen preguntas cuya experimentación cuantitativa muestren una correlación biserial igual o superior a 0,2, asegurando la validez del instrumento, es decir, que cada pregunta evalúa lo esperado.d.- Consistencia interna de la prueba: La consistencia interna se entiende como la precisión de la medición. Un instrumento es confiable cuando las mediciones realizadas con éste generan los mismos resultados en diferentes momentos, escenarios y poblaciones, si se aplica en las mismas condiciones. El análisis de la consistencia interna asegura la calidad técnica de la prueba. El índice de confiabilidad o consistencia interna utilizado es el alfa de Cronbach, que determina en una escala de 0 a 1, el límite inferior del coeficiente de confiabilidad del instrumento que se utiliza, siendo los valores más cercanos a 1 los que indican un mayor grado de confiabilidad del instrumento. Estos índices son calculados con la información de la experimentación o pilotaje de las pruebas y confirmados con las aplicaciones censales. Se trabaja con un índice sea igual o superior a 0,8 con el fin de asegurar la precisión de los puntajes. Por lo tanto, esta instancia técnica asegura que todas las preguntas de la ECEP rendida, se relacionan con los contenidos publicados en el temario y cumplen con las condiciones de validez y confiabilidad de un instrumento evaluativo para el Sistema de Reconocimiento y Promoción del Desarrollo Profesional Docente.

La corrección de la Evaluación de Conocimientos Específicos y Pedagógicos (ECEP) es realizada por la Agencia de Calidad de la Educación. Utilizando un lector óptico, se capturan las respuestas de los/as docentes, que luego son procesadas mediante un software especializado.Una vez corregida, la Agencia de Calidad de la Educación entrega los resultados al CPEIP, quien, en conjunto con los resultados del Portafolio y los años de experiencia profesional, asigna el tramo de desarrollo profesional correspondiente.