Criterios de Meta-Valoración de Productividad no Estandarizada Estudios Técnicos N° 03, 07 y 15 www.uchile/ConsejoEvaluacion consejoevaluacion@uchile.cl Seminario Internacional PUCP Lima, Septiembre 2016 v.160831b 2 3 http://www.uchile.cl/portal/presentacion/estructura/8274/organigrama-de-la-universidad-de-chile El Consejo de Evaluación es el organismo colegiado que ejercerá la superintendencia de la función evaluadora, que consiste en examinar, ponderar e informar sobre la calidad y cumplimiento de las tareas universitarias. La función evaluadora se aplica tanto a las estructuras como a los académicos que las integran, mediante normas, procesos y criterios debidamente reglamentados, y resguardando la especificidad, características y diversidad de las actividades. Competerá a dicho organismo impulsar y coordinar los procesos de evaluación, calificación y acreditación a nivel institucional e individual, y la constitución de comisiones generales y locales, conforme a los reglamentos aplicables a los procesos enunciados. Le corresponderá, asimismo, proponer la dictación y modificación de dichos reglamentos, rendir informes periódicos sobre las conclusiones obtenidas de su aplicación […]. Estatuto de la Universidad de Chile Título VI, Artículo 53° 4 Consejo de Evaluación (CEv) Comisión Superior de Evaluación Académica (CSEA) Comisión Superior de Calificación Académica (CSCA) Comisión Superior de Autoevaluación Institucional (CSAI)* Académicos Organismos 1993 1994 Comité 1995 2006 Superintendencia de la función evaluadora (Estatuto UCH, Art. 53°) Criterios Acciones y Requisitos Indicadores Consejo de Evaluación Sistema General de Evaluación y Calidad 5 6 Consejo de Evaluación Sistema General de Evaluación y Calidad A A A A A A A A A CALIFICACIÓN E V A L U A C I Ó N AUTOEVALUACIÓN “La evaluación es un proceso de análisis objetivo, ponderado y con énfasis en lo cualitativo de los antecedentes, debidamente acreditados, de los académicos o postulantes a serlo." (RGCrA, Art 2°, inciso 2°) “La aplicación de los criterios y procedimientos establecidos en este reglamento decide el ingreso, promoción y permanencia de los académicos en cada uno de los rangos de la Carrera Académica Ordinaria y de la Carrera Académica Docente, así como en los rangos de la Categoría Académica Adjunta […].” (RGCrA, Art 3°) “El proceso calificatorio tiene por objeto medir la actividad académica de acuerdo con la jornada contratada y con las exigencias definidas para las distintas jerarquías o categorías académicas por el Reglamento General de Carrera Académica, para decidir sobre la permanencia de los académicos en la Universidad.” (RGCfA, Art 2°) “La Autoevaluación Institucional consiste en un proceso sistemático por el cual la Universidad y cada una de sus unidades académicas se reúnen para analizar y evaluar, en forma participativa, el quehacer universitario. La evaluación se realiza en base a los propósitos declarados en el Estatuto y el Proyecto de Desarrollo Institucional.” (aRGAI, Art. 1°, inciso 1°) Consejo de Evaluación Integrantes Prof. Cecilia Hidalgo Presidenta Prof. Fernando Lund Integrante Prof. Miguel Allende Integrante (S) Pablo Duarte Secretario Ejecutivo Ester Huerta Periodista Bianca Flores Asistente Administrativa Carolina Arias Secretaria Administrativa Daniela Maulén Analista 7 Prof. Manuel Antonio Garretón Integrante Prof. Luis Valladares Vicepresidente Daniel Castillo Analista Omar Alcérreca Analista 8 Encomendar a comisiones ad hoc, si fuere necesario, la definición de criterios que se empleen en los procesos de evaluación y calificación académica, en los procesos de autoevaluación y de acreditación a nivel institucional o en aquellos procesos que sean creados en el marco de la función evaluadora, y aprobar tales criterios (RCEv, Artículo 5°, literal c). Efectuar estudios respecto de la calidad de las funciones y tareas universitarias que le son propias, disponiendo para ello de la información central y actualizada de la Universidad (RCEv, Artículo 5°, literal h). Un informe sobre una materia específica de su incumbencia cuando lo requiera el Rector, el Consejo Universitario o el Senado Universitario (RCEv, Artículo 6°, literal c). Criterios de Meta-Valoración de Productividad no Estandarizada Funciones y Responsabilidades Consejo de Evaluación Estudios Técnicos (2009-2016) 9 2016 ET 28 Propuesta de Elementos Fundamentales para la elaboración de una Nueva Pauta General de Calificación Académica ET 27 Propuesta de Actualización de la Valoración de la Extensión, la Vinculación con el Medio y la Comunicación (EVC) en la Universidad de Chile ET 26 Análisis de la Evolución de la Composición de la Carrera Académica en la Universidad de Chile (2005-2015) ET 25 Análisis comparado de Sistemas de Educación Superior de acuerdo a mecanismos de Financiamiento 2015 ET 24 Encuesta Pluriestamental de Satisfacción de la Universidad de Chile ET 23 Análisis de la Distribución del Conocimiento en la Universidad de Chile ET 22 Análisis Comparado de Tipos de Gobernanza y Rankings Internacionales ET 21 Propuesta de Sistema de Información Académica (SIA) 2014 ET 20 Análisis del Desarrollo de la Carrera Académica en la Universidad de Chile (2002-2012) ET19 Sistema Integrado de Indicadores Ejecutivos para la Gestión Universitaria ET18 Análisis de dedicación general y productividad declarada en Docencia y Libros ET17 Análisis de remuneraciones y composición por género en la Universidad de Chile 2013 ET16 Propuesta de modificaciones al Sistema de Carrera Académica para la Universidad de Chile ET15 Propuesta de Actualización de Criterios de Meta-Valoración Académica de la Creación Artística (CreArt) ET14 Propuesta de Sistema Integrado de Indicadores Estratégicos (SIdI) 2012 ET13 Propuesta de indicadores de Desempeño de la Universidad de Chile ET12 Análisis comparado de la estructura y regulación institucional de la carrera académica 2011 ET11 Análisis del desarrollo de la Universidad de Chile (2006-2010) a partir de los indicadores del Anexo 4 del PDI ET10 Distribución de Jornadas según categoría de la Carrera Académica en la Universidad de Chile ET09 Adecuación Reglamentaria de Departamentos e Institutos de Facultad 2010 ET08 Tendencias de los Profesores Asistentes en la Carrera Académica durante el período 2000-2009 ET07 Análisis y Actualización de la Investigación en las Áreas de Humanidades, Ciencias del Arte, Ciencias Sociales y Ciencias de la Comunicación (iHACS) ET06 Pertinencia y coherencia del Proceso de Calificación Académica ET05 Análisis y actualización de indicadores del Proyecto de Desarrollo Institucional de la Universidad de Chile ET04 Informe de Cierre del Proyecto Mecesup UCH0709 2009 ET03 Movilidad Jerárquica y la Productividad Científica en HACS ET02 Modelo de Evaluación de Procesos Estratégico-Institucionales ET01 Situación de Profesores Asociados y Asistentes de la Carrera Académica Consejo de Evaluación Estudios Técnicos 10 11 Criterios de Meta-Valoración de Productividad no Estandarizada Proyectos 2007 • Solicitud de la Comunidad 2008-2010 • Análisis y Actualización de la Investigación en las Áreas de Humanidades, Ciencias del Arte, Ciencias Sociales y Ciencias de la Comunicación (iHACS) [CEv – Estudios Técnicos N°03 y 07] 2011-2013 • Propuesta de Actualización de Criterios de Meta-Valoración Académica de la Creación Artística (CreArt) [CEv – Estudio Técnico N°15] 12 Criterios de Meta-Valoración de Productividad no Estandarizada Escenario Externo Instituciones Educación Superior Criterios/Indicadores Objetivantes (ISI) Acreditación y Rankings Exigencias en evaluación de resultados Modernización, tecnificación, mercantilización e internacionalización 13 Resistencia institucional a cambios Desconfianza desde disciplinas involucradas hacia evaluaciones interdisciplinares Resistencia a procesos de valoración académica (inconmensurabilidad) Prejuicios desde otras áreas “duras” sobre calidad de producción en disciplinas artísticas Criterios de Meta-Valoración de Productividad no Estandarizada Escenario Interno 14 •Mecanismos de evaluación desde la fase proyectiva. Evaluación Social de Impacto (Vanclay, 1999) •Constitución de una comunidad que participe activamente en todas las fases de un proyecto. Evaluación Empoderadora (Fetterman y Wandersman, 2005) •Participación de involucrados, revisión teórica, re-definición y evaluación permanente. Investigación- Acción Participativa (Kemmis y McTaggart, 2008) •Generación de teoría a partir de los datos en forma inductiva. Teoría Fundada (Giraldo, 2011) Criterios de Meta-Valoración de Productividad no Estandarizada Metodología Comité Directivo Comité Local Comité Local Comité Local Comité Central Comité Asesor Unidad Técnica Autoridades Locales y Académicos/as Demanda Consulta Revisión Validació n 15 Criterios de Meta-Valoración de Productividad no Estandarizada Organización y Proceso Abel Carrizo Alberto Montealegre Alejandra Araya Alejandra Santa Alicia Scherson Amilcar Borges Ana María Tapia Andra Chignoli Andrés Ferrari Andrés Gómez Andrés Grumann Andrés Maupoint Andrés Weintraub Annie Murath Benjamín Sáez Bernardo Amigo Bernardo Subercaseaux Bruce Cassels Camila Barraza Camilo Rossel Carlos Conca Carlos Flores Carlos Ruiz Carolina Larenas Carolina Larraín Carolina Muñoz Catalina Arteaga Catalina Devia Catalina Donoso Cecilia Coddou César Farah Christian Cruz Clara Luz Cárdenas Constanza Acuña Cristián Silva Soura Cristián Undurraga Cristóbal Holzapfel Daniel Ferrera Daniel Wolff David del Pima Eduardo Castillo Eduardo Hamuy Eleonora Coloma Elisa Alsina Emmanuelle Barozet Ennio Vivaldi Enrique Castellón Enrique Matthey Enrique Rivera Enrique Zamudio Eugenia Brito Fabiola Maldonado Fernanda Martin Fernando Shultz Francisco Hervé Francisco Sanfuentes Gabriel Bendersky Germán Droghetti Gonzalo Arqueros Gonzalo Díaz Grínor Rojo Guadalupe Álvarez Guillermo Jarpa Guillermo Machuca Gustavo González Hans Stange Héctor Ponce Hiranio Chávez Humberto Eliash Ignacio Covarrubias, Ignacio Ramos Igor Pacheco Irma Palma Isabel Cartajena Isabel Jara Isabel Piper Iván Méndez Ivan Osnovikoff Jaime Cordero Javier Bello Jenny Pino Jesús Codina Johana Theile Jorge Hidalgo Jorge Iglesis Jorge Pepi José Luis Martínez José Luis Torres Leiva José Ortiz José Rosas Juan Enrique Wilson Juan Guillermo Tejeda Juan José Rivas Juan Manuel Garrido Juan Pablo Dussert Juan Pablo Pinilla Leonora Reyes Lina Nagel Lorenzo Berg Costa Luis Cécéreu Luis Montes Luis Orlandini Luz Alicia Cárdenas Macarena López Marcelo Arnold Marco Espinoza Margarita Schultz María Elena Acuña María Elena Muñoz María Elena Troncoso María Eugenia Góngora María Isabel Flisfich María José López María José Vergara María Olivia Monckeberg María Soledad Ruiz María Teresa Lobos María Torres Mario Marchant Mathias Klotz Mauricio Barría Mauricio Vico Miguel Allende Miguel Ángel Jiménez Miguel O'Ryan Miguel Vélez Miguel Villafurela Mónica Llaña Monserrat Catalá Nury González Osvaldo Muñoz Pablo Cabrera Pablo Duarte Pablo Ferrer Pablo Oyarzún Pablo Rivera Pamela Smith Paola Lagos Paola Moreno Patricio Aceituno Patricio Hernández Patricio Velasco Paula Aros Paula Jirón Paulina Espinoza Paulina Mellado Paulina Osorio Rafael del Villar Raúl Atria Raúl Fernández Rebeca León Rebeca Silva Ricardo Uauy Ricardo Vega Rodrigo Asún Rodrigo Moreno Rodrigo Torres Rodrigo Zúñiga Rolando Carrasco Rolando Cori Roxana Donoso Sergio Jara Sergio Lavandero Sergio Rojas Soledad Ferreiro Soledad Novoa Soledad Santana Sonia Montecino Tiziana Panizza Udo Jacobsen Ulises Faúndez Valeria Quiroz Verónica Canales Verónica Navarro Víctor Cárcamo Víctor Díaz Víctor Fajnzylber Víctor Rondón Viviana Bravo Walter Sánchez Zoltan Paulinyi Criterios de Meta-Valoración de Productividad no Estandarizada Resultados principales Valoración de Pares + Meta- Valoración Diversidad de Productos y Acciones Rúbrica de Valoración 17 Meta-Valoración Extra/Inter-disciplinar Valoración Crítico-Estética Intra-disciplinar 18 Criterios de Meta-Valoración de Productividad no Estandarizada Tipos de Valoración Predominantemente Intra-disciplinar Predominantemente Extra/Inter-disciplinar 19 Comisión Central Comisión Local Comisión Local Comisión Local E V A LU A C IÓ N CAL IFICACIÓN Criterios de Meta-Valoración de Productividad no Estandarizada Tipos de Valoración en Contexto Interno 20 Criterios de Meta-Valoración de Productividad no Estandarizada Productos Artículos no indexados Libros Proyectos Obras Otros 21 FONDOS (Proyectos) Ítems Nivel Descripción N Avanzado Intermedio Inicial Asignación 1 Concursables Asignación Directa Carácter 2 Colectivo Individual Institución (1) 3 Externa Propia Institución (2) 4 Internacional Continental Nacional Regional Local Rol 5 Principal Colaboración Incidental Comité 6 Con Comité de Área Sin Comité de Área Seguimiento 7 Con seguimiento Sin seguimiento REVISTAS (Artículos en) Ítems Nivel Descripción N Avanzado Intermedio Inicial omité Editorial 1 Con Comité Editorial Internacional Con Comité Editorial Continental Con Comité Editorial Nacional Con Comité Editorial Regional/Local Sin Comité Editorial Referato 2 Con Referato ciego Sin Referato ciego Circulación 3 De Circulación Internacional De Circulación Continental De Circulación Nacional De Circulación Regional/Local Sin circulación Indexación 4 Índice Internacional Índice Continental Índice Nacional Índice Regional/Local No indexado LIBROS Ít ms Nivel Descripción N Avanzado Intermedio Inicial o ité Editorial 1 Con Comité Editorial Internacional Con Comité Editorial Continental Con Comité Editorial Nacional Con Comité Editorial Regional/Local Sin o ité Editorial Edición 2 Edición externa Edición propia institución Autoedición Prestigio 3 Editorial prestigio Internacional Editorial prestigio Continental Editorial prestigio Nacional Editorial prestigio Regional/Local Editorial sin prestigio Circulación 4 De Circulación Internacional De Circulación Continental De Circulación Nacional De Circulación Regional/Local Sin circulación Catálogo 5 Con presencia en Catálogo Sin presencia en Catálogo Colección 6 En colección Fuera de colección Extensión 7 Libro completo Edición Capítulo CREACIÓN ARTÍSTICA DIMENSIONES NIVEL Titular Asociado Asistente Instructor Ayudan e Estado Acept do/Adjudicado Postulado/Nominado Dis iplina Interdisciplinario Unidisciplinario Rol Responsable Únic / (Co) Responsable Principal Co-Responsable Colaborador Convocatoria Por Invitación Concursable Por Encar o Automático Con Comité Sin Comité Selección Co Fina ciamiento I stitucional Sin Financiamiento / Autogestión Financiamiento Ámbito Externo Interno Organismos Centrales Unidad Mayor Unidad Menor Internacional Nacional Local Prestigio Lista A Lista B Lista C No Listado Creatividad Liderazgo Reconocimiento Autonomía Formación Criterios de Meta-Valoración de Productividad no Estandarizada Rúbricas 22 Criterios de Meta-Valoración de Productividad no Estandarizada Instancias Genéricas (Creación Artística) Lista A Lista B Lista C 23 4.2.1 Arquitectura Nacionales Bienal Nacional de Arquitectura Comité Editor Revista CA Concurso CAP Concurso de Arquitectura en mandera CCT-CORMA Concurso Proyecto de I+D Aplicada, CORFO Concursos de arquitectura nacional convocados por el CA Fondo concursable de proyectos de investigación Anillos Fondo concursable de proyectos de investigación de Núcleos Milenio Fondo concursable de proyectos de investigación FONDART Fondo concursable de proyectos de investigación FONDECYT Fondo concursable de proyectos de investigación FONDEF Fondo concursable FIC Patentamiento CORFO Proyecto de investigación FAU Muestras Nacionales en el GAM Extranjeros Bienal de Venecia Bienal Iberoamericana de Arquitectura CLAYSS Conferencia en San Luis Potosí, México Feria de Shanghai ISUF (International Seminar on Urban Form) Open Exhibitions Royal Scottish Academy of Arquitecture Programa de Ciencia y Tecnología, CYTED Royal Geographical Society Annual Conference UIA UNESCO World Heritage Fund 4.2.2 Artes Visuales N cionales Centro Cultural Palacio La Moneda FAXXI Feria Ch.ACO FONDART Galería D21 Línea Bicentenario MAC MAVI Premio Altazor, Chile Premio Na ional de Artes MNBA Balmaceda 1215 Centro de Extensión de la Universidad Católica Galería AMS Marlborough Galería Bech Galería Gabriela Mistral Galería Metropolitana Matucana 100 Sala de Arte CCU Sala Gasco Extranjeros Art Rotterdam Bienal de Berlín Bienal de Estambul Bienal de La Habana Bienal de Mercosur Bienal de San Pablo Bienal de Shanghai Bienal de Venecia Centro Pompidou Documenta Kassel London Art Fair MoMA Skulptur Projekte Münster Tate Modern 4.2.3 Creación Audiovisual Nacionales CORFO FONDART Fondo Fomento Audiovisual CNTV Festival Internacional de Cine de Arica Nativa Festival Internacional de Cine del Norte de Chile Festival Iberoamerica de Cine de Atacama Festival Internacional de Cine de Viña del Mar Festival de Cine Social y de Derechos Humanos Cine Otro Festival Internacional de Cine de Santiago, SANFIC Festival Internacional de Documentales de Santiago, FIDOCS Festival Internacional de Cine de Lebu Festival Internacional de Cine Documental de Chillán, Chilereality Festival Internacional de Cine de Valdivia Festival de Documentales de Chiloé, FEDOCHI Festival Internacional de Cine Documental del Sur SURDOCS Festival Internacional de Cine Diversidad de Valparaíso (DIVA FILMS) Extranjeros AFI Fest - Los Ángeles BFI - Festival de Cine de Londres Buenos Aires Festival Internacional de Cine Independiente Camerimage – Lodz Cero Latitud – Quito Chicago International Film festival Chicago Latino Film Festival Cine Latino - Tübingen Cinéma Du Reel É tudo Verdade – Festival Internacional de Documentales Encuentro Latinoamericano de Cine De Lima Festival de Cine Animado De Stutgart Festival de Cine de Biarritz Festival de Cine de Calcuta Festival de Cine de La Habana Festival de Cine de Locarno Festival de Cine de Pusan Festival de Cine de Roma Festival de Cine de Sidney Festival de Cine de Sundance Festival de Cine de Toulouse Festival de Cine de Viena Festival de Cine del Mundo, Montreal 4.2.4 Danza Nacionales Balmaceda Arte Joven Centro Cultural Anandamapu Centro Cultural Estación Mapocho Centro Cultural Gabriela Mistral Centro de Investigación Estudios Coreográficos de Chile Centro Experimental de Arte, Perrera Arte Compacto Festival Concurso de Intérpretes de Danza, Universidad Mayor Escuela de Artes del Cuerpo Espacio Arte Nimiku Festival Antifaz/Fintdaz Festival Corpus Alterno Festival Danzalborde Festival de Danza Contemporánea Junto al Río, Valdivia Festival de Video-Danza, Universidad ARCIS Festival Dias de Danza, Centro Cultural de España Festival Escena 1 Festival Escena Doméstica Festival Internacional de Santiago a Mil Festival Internacional Movimiento 6 Festival Teatro Container Festival Vertientes FONDART Fundación Millas La Vitrina Matucana 100 Parque Cultural Valparaiso Premio Altazor, Chile Premio Ap s Premio del Círculo de Críticos de Arte en Chile Premio Municipal del Arte Red de Danza Independiente Sala El Par Teatro La Memoria Extranjeros Centre national de danse contemporaine Centro de Investigación del IUNA, Instituto Universitario Nacional del Arte COCOA Datei El Ranchito Festiv l Avant Garde Festival Cádiz en Danza Festival Cene sul Danza .2.5 Diseño Nacionales Bienal de Diseño Bienal de Video y Artes Mediales (BVAM) Concurso Matilde Pérez de Arte y Tecnologías Digitales, Fundación Telefónica CONYCIT F stiv l Súdala FONDART FONDECYT FONDEF Fondo VID, Universidad de Chile MAC Premio Altazor, Chile Revista 180 Revista Cátedra de Artes Revista Chilena de Diseño (DDD) Extranjero Bienal Iberoamericana de Diseño (BID) Congreso de Historia del Diseño, Fundación de Historia del Diseño Congreso LASA (Latin American Studies Association) Congreso Sociedad Iberoamericana de Gráfica Digital Design Issues, The MIT Press Journals Design Studi s, ELSEVIER Documenta Kassel F stival EYEO Festival FITC Festival OFFF FILE, Festival Internacional de Lenguajes Electrónicos, Sao Paulo, Brasil Fondo Iberescena ICDHS (Conference of the International Committee for Design History & Design Studies) L.E.V. Festival, Gijón, España Media Lab Prado, Ayuntamiento Madrid, Madrid, España Ponencia en Congreso Internacional de Tipografía de Valencia Premio Ars Electronica, Linz, Austria Premios LAUS, Catalunya Smithsonian's Cooper-Hewitt, National Design Museum, New York TMDG Goethe Institut 4.2.6 Música Nacionales Festival de Música Contemporánea de la Austral Festival de Música Contemporánea de la UC Festival de Música Contemporánea de la ULS Festival de Música Contemporánea de la Universidad de Chile FONMUS Temporada de Conciertos DEMUS Extranjero Festival de Darmstadt Festival de Donaueschingen F stival de SIMC Sala de Conciertos de Madrid Sala de Conciertos de Texas Criterios de Meta-Valoración de Productividad no Estandarizada Instancias Específicas ACTUALIZACIÓN DE CRITERIOS E INSTANCIAS DE VALORACIÓN DESARROLLO DE ACTIVIDAD ACADÉMICA Y APLICACIÓN DE VALORACIONES REVISIÓN Y REFLEXIÓN TEÓRICO-PRÁCTICA Valoradores/as Autoridades Académicos/as Criterios de Meta-Valoración de Productividad no Estandarizada Mejoramiento Continuo 25 Criterios de Meta-Valoración de Productividad no Estandarizada Consensos Participación de Académicos/as, Autoridades y Valoradores Criterios Adecuados para iHACS- CreArt, equiparables a indexaciones Proyección Aplicabilidad de la Rúbrica a otras Tareas e Instituciones Síntesis Criterios de Meta-Valoración de Productividad no Estandarizada Estudios Técnicos N° 03, 07 y 15 www.uchile/ConsejoEvaluacion consejoevaluacion@uchile.cl Seminario Internacional PUCP Lima, Septiembre 2016 v.160831b