Transcript Dr.-Villavicencio-Universidad-Andina-Simón

Universidad de Cuenca - UDUAL
Encuentro de Acreditación y Evaluación Universitaria
de América Latina y el Caribe
Aspectos formales del proceso de evaluación y
acreditación de las universidades ecuatorianas
Arturo Villavicencio
Profesor de la Universidad Andina Simón Bolívar
Cuenca, noviembre 2014
El Mandato Constituyente No.14
1. Contexto histórico
2. Contexto institucional
3. Enfoque de evaluación
Serias deficiencias de los modelos de evaluación
1. Dudas sobre la coherencia del modelo de evaluación
 Exhaustividad de los criterios
 Exclusividad
 Claridad
2. Insuficiencias metodológicas
 Compensación entre criterios
 Indeterminación
 Ponderaciones
3. Congruencia con leyes y reglamentos
Evaluación: criterio Investigación
1. Producción científica (9%)
• Artículos publicados en revistas de las listas Scimago / ISI
• Valoración de excelencia: de acuerdo al ranking en las listas (FIP)
• Máxima valoración =
1.0: IES que ofertan pregrado y posgrado
1.5: IES que ofertan únicamente posgrado
2. Investigacion regional (2%)
• Artículos publicados en lista Latindex
• Máxima valoración = 2 artículos por año
3. Libros (6%)
• Máxima valoración =
1.0 libro cada tres años para docentes IES posgrado
0.5 libros cada tres años para IES posgrado y pregrado
4. Planificación de la investigación (3%)
Plan de investigacion vinculado al Plan Nacional de Desarrollo
Estándares de Evaluación del Modelo CEAACES
‘Docente ideal’:
• 1 libro cada tres años
• 1.5 artículos publicados en revistas indexadas
• 2 artículos por año en las revistas que figuran en el LATINDEX
‘Producción acumulada’ (30 años de carrera docente):
• diez libros
• más de cien artículos
Problemas
a) Los docentes deben escribir más artículos de los que han leído
b) Limitación de la capacidad editorial para satisfacer la demanda de
publicación de libros
c) Saturación de las revistas indexadas con artículos de docentes
ecuatorianos
Las publicaciones indexadas en la normativa universitaria
a) LOES
•
•
•
•
•
Art. 36: asignación de presupuesto
Art. 49: requisitos para ser rector/a
Art. 51: requisitos para vicerrector/a
Art. 54: requisitos para autoridad académica
Art. 150: requisitos para profesor/a titular principal
b) Reglamento de carrera y escalafón
c) Registro y categorización de investigadores
d) Remuneraciones especiales de autoridades universitarias
por motivos de interés publico: Decreto 247
Factor de Impacto de una Publicación (FIP)
(Ejemplo para determinar el FIP en el año 2014)
A = número de veces que los ítems publicados en la revista en los años
2011 y 2012 fueron citados por revistas indexadas en el año 2013
B = número total de ítems citables publicados por la revista en los
años 2011 y 2012
FIP = A / B
Origen del FIP
1. Indicadores cuantitativos que permitan la selección de publicaciones
para adquisición de las bibliotecas universitarias
Cuales son las revistas y publicaciones necesarias para preparar a los
estudiantes en un trabajo especializado, Teniendo en cuenta el material
necesario para el estimulo Y desarrollo intelectual de la docencia?
2. Sociología de la ciencia: entender cómo los avances científicos son
comunicados; cómo funciona la investigación; cuáles son sus
impactos al interior mismo de las comunidades científicas
El FIP fue ideado para funciones distintas a la evaluación
de la investigación, docentes e instituciones
¿Qué mide en realidad el FIP? (1)
 Auto citaciones
En 2013, 66 revistas fueron eliminadas de la lista del Journal
Impact Factor por exceso de autocitaciones o por exceso de
citaciones entre determinadas revistas.
 Coerción en las citaciones
Presión ejercida por el editor de una revista para que un autor
incluya citaciones espurias a artículos publicados en la revista.
“Alrededor del 20% de autores son sometidos a coerción en las citaciones”
 Falsificación de las citaciones
“Ha leído usted realmente todos los artículos que cita?”
Únicamente alrededor del 20% de las citaciones corresponden a lecturas
de trabajos originales
¿Qué mide en realidad el FIP? (2)
 ‘Reingeniería’ de las publicaciones
Comentarios, revisión de libros, cartas al editor, etc. son incluidos
a conveniencia de la revista
 El Efecto Mateo
“Al que más tiene más se le dará, y al que menos tiene, se le quitará
para dárselo al que más tiene” (Mateo 25, 14)
 Comercialización y marketing
“Grosera manipulación del FIP por parte de editoras transnacionales
para posicionamiento de sus productos en el mercado”
Declaración de San Francisco: evaluar un articulo por sus meritos y no por
revista donde es publicado
R.W. Schekman: romper la tiranía de las revistas de lujo
¿Qué mide en realidad el FIP? (3)
 Sesgo disciplinario
a) Carácter acumulativo de investigacion en ciencias naturales: consenso
en creatividad, avance científico y aporte de las publicaciones
Ciencias sociales: investigacion no acumulativa. Escuelas de pensamiento
(años)
Bibliografía
citada
Tiempo promedio de citación (a
partir de su publicación)
Ciencias naturales
6
2 -3
12 - 14
10
Ciencias sociales
b) Modalidades de publicación
• Ciencias naturales: revistas científicas
• Ciencias sociales y humanidades: amplio rango de formatos
c) Fuentes bibliográficas
• Libros: Sociología: 40%; Economía 25%; Física: 0.9%
• Revistas indexadas: Ciencias sociales y humanidades: 35%; medicina: 94%
El FIP favorece a las ciencias naturales y penaliza a las ciencias sociales
¿Qué mide en realidad el FIP? (4)
 Sesgo lingüístico
• El idioma ingles es un factor inhibidor para la publicación de artículos
de investigadores fuera de la orbita anglófona
• Las revistas científicas en ingles son las mayores beneficiarias de los
índices bibliométricos
• Las diferencias culturales están presentes en la estructura semántica de
un idioma. El ingles limita el potencial cognoscitivo de otros idiomas.
 Pertinencia de las publicaciones
• El FIP implícitamente determina como publicar, donde publicar y que
temas publicar
• Se imponen modelos de observación y paradigmas reflexivos importados
como criterios de validación de la investigación
• Muchos temas de investigación se inclinan hacia lo local y pueden expresarse
y entenderse en la cultura de la que emanan
Publicaciones indexadas y calidad de la enseñanza
Universidad orientada a la
investigación
Universidad orientada a la
docencia
• Volumen de publicaciones
• Tiempo invertido en investigación
• Compromiso personal con
la investigación
• Tiempo dedicado a la enseñanza
• Preocupación por uso de técnicas
activas de aprendizaje
• Compromiso con sentido de
comunidad universitaria
 Conocimiento especializado
 Brecha entre conocimiento especializado
y enseñanza de pregrado
 Jerarquización y rango en la docencia
Mayores posibilidades para inducir
a la reflexión sobre problemas sociales
y ambientales; a la comprensión de
valores y al desarrollo del sentido de
ciudadanía
¿Qué modelo de universidad es preferible para
un mejor aprendizaje y formación?
¿Y el resto de indicadores?
•
•
•
•
•
Número de estudiantes por docente a tiempo completo
Eficiencia terminal
Tasa de retención inicial
Calidad del gasto
...