Indicadores de calidad en educación superior. Jairo Sánchez Quintero
más tiempo. En principio, se hizo énfasis en las citas de “acreditación” y luego en las de “ECAES” para obtener resultados de los objetivos específicos 4 y 5. Luego se asociaron los resultados de los códigos “crucial” e “indicadores” con “acreditación” y “ECAES”, y al final con los indicadores cruciales que resultaron en todos los procesos de cada programa académico para elaborar el esquema del sistema.
13.El trabajo de campo permitió identificar argumentos o apreciaciones que sustentaron, respaldaron y ratificaron la justificación y pertinencia del problema de investigación.
14.Mientras se codificaba, se elaboraron memos sobre reflexiones pertinentes para la identificación de indicadores cruciales y relaciones entre indicadores y sobre categorías emergentes de los datos de las entrevistas. Así se crearon nuevos códigos en la medida en que surgían categorías, factores o conceptos emergentes. Esta nueva codificación se denomina abierta (creación de nuevos códigos del investigador a partir de hallazgos relevantes en citas) o in vivo (por términos atractivos que surgen del word cruncher o de citas). Para escribir memos era necesario hacerse nuevas preguntas sobre posibles indicadores, comparar semejanzas y diferencias, abstraer, reducir y relacionar datos relacionados con citas y códigos. También fue importante tener en cuenta que podrían surgir propiedades sobresalientes de indicadores en las respuestas de las personas entrevistadas.
15.Durante todo el análisis se tuvieron en cuenta las recomendaciones de Denzin y Lincoln (1994) en cuanto a establecer patrones entre los datos y hacer descripciones, comparaciones (incluidas las extremas) y formulaciones de indicadores cruciales y sus interrelaciones o interconexiones. Asimismo, se asumió una actitud de permanente pregunta a los datos (por ejemplo, ¿qué pasa aquí en cada programa?, ¿qué hacen?, ¿cómo varían los factores, códigos o indicadores de cada familia en cada programa (fue necesario saber ir fácilmente a las citas que demuestran tal variación y poder recuperarlas para reportarlas como resultados, evidencias, análisis, discusión y conclusiones)?, ¿bajo qué condiciones ocurrían las variaciones?, ¿qué es esto?, ¿qué aporta esto en mi investigación en relación con la pregunta de investigación “para generar ideas y maneras de mirar los datos”?
También se mantuvo abierta la posibilidad de elaborar, modificar, verificar, aclarar, expandir o descartar hipótesis e identificar cuándo los entrevistados daban hechos fácticos y cuándo daban opiniones, suposiciones o especulaciones. De igual modo, se trató de determinar afirmaciones, opiniones o declaraciones desconcertantes y contradictorias, al tiempo que se examinaron posibles sesgos, parcializaciones, preferencias, suposiciones y perspectivas de las personas entrevistadas. A su vez se buscaron tanto patrones generales como variaciones, y al final se clasificaron y ordenaron citas y códigos.
A estas alturas del proceso se tuvo presente la importancia de pasar de la descripción a la conceptualización y de lo más específico a lo más abstracto. Al preguntarse en qué, dónde y cómo coincidían y diferían los datos se aplicó la técnica de la “voltereta”, que consiste en voltear de adentro para afuera o de arriba para abajo y viceversa, observando los opuestos o los extremos para encontrar indicadores significativos (esto también se hizo con los dos programas con resultados insatisfactorios en las pruebas ECAES 2004-2010). Por otro lado, al tratar de descifrar qué es lo que no se hacía en programas de resultados insatisfactorios que sí se hacía en los de resultados satisfactorios se recurrió a la comparación sistemática de conceptos, factores, indicadores o situaciones de los datos con los de la experiencia del investigador o tomados de la literatura.
Otras preguntas que tuvieron cabida en este paso fueron: ¿qué tan a menudo aparece un concepto y cómo emerge (bajo qué condiciones), con sus respectivas evidencias?, y ¿qué podría pasarle a un programa si algún factor, característica, propiedad o indicador estuviera ausente o cambiara (ejemplo del ave si le falta un ala)? El análisis de propiedades (características) y dimensiones (grados) asociadas a factores, citas, códigos, familias o hipervínculos también tuvo lugar en esta etapa. Finalmente, se crearon subcategorías en el análisis de los procesos que ocurren en un programa académico, preguntándose ¿cuándo?, ¿dónde?, ¿por qué?, y ¿cómo es probable que haya ocurrido algo?, siempre en relación con el objeto de investigación y sus factores asociados (códigos, familias, supercódigos, tablas, redes e hipervínculos).
A partir de esta información recabada y analizada fue posible empezar a comprender modelos y patrones de calidad en programas de pregrado bajo indicadores cruciales con miras a generar una nueva configuración de ideas (teoría sustantiva) sobre un nuevo sistema de indicadores cruciales y prioritarios para evaluar y mejorar la calidad de programas académicos universitarios en administración. De esta manera surgiría una teoría fundamentada, denominada “teoría de la interacción entre indicadores cruciales y prioritarios de calidad en educación superior”, resultante de esta investigación y materializada en la propuesta de sistema de indicadores y en la jerarquización de estos dada por la validación de expertos.
16.Otra consideración transversal al proceso fue la de las operaciones mentales reportadas por diferentes autores: identificación, comparación, análisis, síntesis, clasificación, codificación, decodificación, proyección de relaciones virtuales, diferenciación, representación mental (abstracción), transformación mental, razonamiento divergente, pensamiento convergente, razonamiento hipotético, razonamiento analógico, razonamiento lógico, razonamiento silogístico, razonamiento inferencial, evocación y transferencia. Así pues, cada día, antes de iniciar el análisis de datos, se leían y repasaban las definiciones de cada una de estas operaciones mentales.
Finalmente, debe reiterarse que los principales datos necesarios para realizar la investigación provinieron de fuentes documentales y de la realización de entrevistas. La totalidad de esta información se recolectó directamente por el propio investigador en el periodo 2009-2012, y luego fue integrada para el análisis final mediante el software ATLAS.ti. De esta manera se llegó a construir el sistema de indicadores cruciales con el cual se elaboró el informe final de hallazgos, resultados obtenidos y formulación de teoría sustantiva. En dicho texto general o corpus final (la sumatoria de los hallazgos) de la investigación, se rescató hermenéuticamente la esencia del conocimiento obtenido que permitió responder la pregunta de investigación y demostrar el logro de los objetivos.
Para la validación de los 34 indicadores finales obtenidos en la investigación se utilizó el cuestionario elaborado a partir del corpus de los resultados con base en la revisión y el análisis de antecedentes nacionales e internacionales, así como de la literatura a ambos niveles. De igual modo se estudiaron y jerarquizaron los 183 indicadores del CNA 2006 y se examinaron los indicadores asociados a buenas prácticas de acreditación resultantes de las 24 entrevistas. Asimismo, en otros análisis relevantes se abordaron los indicadores relacionados con resultados satisfactorios en ECAES 2004-2010 resultantes de las 24 entrevistas realizadas y los que se enlazan con procesos o factores claves de los programas académicos de administración, ambos obtenidos también de las entrevistas.
El cuestionario final sobre relevancia de los indicadores fue respondido por 28 expertos, decanos y directores de programas de los más importantes programas de administración de Colombia, quienes aceptaron voluntariamente diligenciarlo, entre cerca de 300 participantes asistentes a la conferencia de Ascolfa de 2013 y del Primer Coloquio en Administración. Este instrumento utilizado puede apreciarse en el anexo A.
En conclusión, desde el punto de vista metodológico, se realizaron los siguientes tipos de análisis derivados de la información obtenida de entrevistas individuales tanto piloto como de contraste (entre programas con resultados opuestos o contrarios), para al final configurar un sistema de indicadores cruciales de calidad:
•Análisis hermenéutico documental.
•Análisis de indicadores del CNA con ATLAS.ti 5.
•Análisis de bases de datos de los resultados de ECAES 2004-2010.
•Análisis de interpretaciones y sentidos rivales.
•Análisis comparativo holístico e integrador en el texto o corpus final.
Adicionalmente, se realizó un análisis temático,