Indicadores e procedimentos de monitoramento e avaliação de desempenho complementares aos utilizados pelo sistema de avaliação da Capes : área Ciências Biológicas II

• Ano de defesa: 2019
• Autor(a) principal: Gheno, Ediane Maria
• Orientador(a): Calabró, Luciana
• Tipo de documento: Tese
• Tipo de acesso: Acesso aberto
• Idioma: por
• Palavras-chave em Português: Coordenação de Aperfeiçoamento de Pessoal de Nível Superior; Sistema Nacional de Pós-Graduação (Brasil); Avaliação institucional; Ciências biológicas; Bibliometria; Cientometria
• Palavras-chave em Inglês: Evaluation system of the graduate programs; Monitoring and evaluating the performance; Bibliometrics; Scientometrics; Biochemistry
• Link de acesso: http://hdl.handle.net/10183/203796

Os indicadores aplicados pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) para monitorar e avaliar a qualidade e o desempenho dos Programas de Pós-Graduação brasileiros fornecem importantes informações sobre a produção científica e seu impacto, sobre a formação de recursos humanos e sobre a inserção social. Contudo, constataram-se algumas lacunas do modelo adotado quando se pensa na avaliação da viabilidade e dos impactos de algumas políticas de avaliação e nos seus efeitos na Pós-Graduação. Neste contexto, a questão central que norteou este estudo surgiu da necessidade de ampliar as discussões sobre o atual modelo de avaliação adotado pela CAPES, bem como da averiguação de outras formas de monitorar e avaliar o desempenho dos Programas de Pós-Graduação: quais indicadores e procedimentos os PPGS poderiam adotar para monitorar e avaliar o seu desempenho de modo complementar ao modelo do Sistema de Avaliação da CAPES? Para isso, buscou-se, no conjunto dos quesitos avaliados (Quesitos 1 ao 5 e o atributo adicional Internacionalização/Inserção internacional), aplicar indicadores e procedimentos adicionais para avaliar os impactos e a viabilidade de algumas políticas de avaliação e identificar e analisar os efeitos da avaliação nas atividades científicas e na gestão acadêmica. Método: Trata-se de um estudo de caso, descritivo, com uma abordagem qualitativa e quantitativa. Foi necessária a aplicação de métodos mistos: indicadores Bibliométricos/Cientométricos, Análise Documental e Análise de Conteúdo. Tem como objeto de estudo o Programa de Pós-Graduação em Ciências Biológicas: Bioquímica, da Universidade Federal do Rio Grande do Sul, e a Área Ciências Biológicas II (CBII). O período de abrangência do estudo corresponde de 2007 a 2016. Para atingir os objetivos, apresentam-se: um novo indicador científico, indicadores relativizados e quatro procedimentos. Quanto aos indicadores: 1) Indicador de Coautoria Docente/Discente avaliou o impacto e a viabilidade das Portarias (Portarias dos 8) que recomendam no máximo oito orientandos por orientador e 2) Indicadores relativizados (Coautoria nacional e internacional versus Qualis e Produção científica da Área CBII versus Fator de Impacto dos periódicos). Quanto aos procedimentos: 3) Acompanhamento das atividades profissionais dos egressos; 4) Identificação das medidas corretivas implementadas; 5) Impacto da inserção do PPG na Educação Básica. Resultados dos indicadores aplicados: 1) As políticas de avaliação da CAPES devem ser entendidas dentro de questões funcionais particulares. No desfecho produção científica por discente, não é viável limitar o número de orientandos por orientador; 2) A política de internacionalização/inserção internacional, observada através da coautoria internacional, se constitui como importante estratégia de visibilidade às publicações; As cinco subáreas da Área CBII apresentaram diferenças significativas na distribuição dos índices de Fator de Impacto. As peculiaridades de cada subárea devem ser levadas em conta e é necessário, também, que se compreenda mais detalhadamente as distribuições dos índices de FI que constituíram o estrato Qualis A1, pois os resultados sugerem que, devido a amplitude nos índices de FI ≥4,60, os critérios da avaliação da qualidade da produção científica dos PPGs devem ser reavaliados. Resultados dos procedimentos aplicados: 3) A política de inserção social (nucleação) dos Programas deve ser vista sob uma perspectiva mais ampla, para além dos egressos que são incorporados em Instituições de Ensino Superior, dando atenção a demora na inserção no mercado acadêmico e não acadêmico; 4) O Sistema de Avaliação tem efeitos no contexto das atividades científicas e na gestão acadêmica que induz os Programas de Pós-Graduação à intervenções no âmbito interno; 5) A política de inserção dos Programas de Pós-Graduação na Educação Básica se constitui como ação complementar na formação dos discentes. Observa-se que a gestão de informações dos Programas de Pós-Graduação para atender as demandas da avaliação da CAPES deve, também, ser entendida como um processo de construção de conhecimento científico. Apresenta um modelo que pode ser utilizado para monitorar e avaliar outros Programas de Pós-Graduação, indo ao encontro do novo modelo de avaliação que vem sendo discutido pela CAPES e pela comunidade de pesquisadores dos Programas de Pós-Graduação.