Critérios para avaliação da produtividade científica dos grupos do CISUC

Princípios

Mudar o mínimo essencial. Isto é, o objetivo é atualizar o modelo que temos em vez de propor algo completamente diferente.
Seguir o princípio de que a avaliação da produtividade tem como objetivo induzir mudança (e não recompensar, premiar, distinguir ou glorificar). Consequentemente, as pontuações não são exclusivamente relacionadas com o valor intrínseco de cada resultado, mas correspondem essencialmente à decisão da CC de incentivar o aumento de determinado tipo de resultados (e.g., a pontuação de artigos em revistas A pode ser desproporcionadamente alta, mas isso significa apenas que se pretende aumentar esse tipo de resultados).
A mudança que se pretende induzir não é mais do que a continuada busca do CISUC para mais qualidade e relevância científica. Pretende-se simplesmente que a avaliação da produtividade leve a mais qualidade na produção do CISUC. A ideia não é impedir quantidade, mas sim evitar que a quantidade (de produção pouco relevante) acabe por ter mais peso na avaliação da produtividade do que a produção de alta qualidade.
Os incentivos (financeiros e de exposição interna) associados à avaliação da produtividade de cada grupo são instrumentos de motivação e não objetivos da avaliação de produtividade.
Os critérios e os pesos devem reavaliados de três em três anos, podendo ser revistos no fim de cada triénio, se a CC do CISUC achar que é necessário alterar a mensagem/incentivo dado pela avaliação da produtividade dos grupos.
Os dados são validados. A recolha dos elementos pode ser feita por funcionários ou por processos automáticos, mas os dados têm de ser validados pelos coordenadores dos grupos (e inerentemente pela CC). O processo de recolha de dados do site do CISUC e a validação pelos coordenadores começa imediatamente a partir de 31 de dezembro e têm de estar concluídos até 15 de Janeiro do ano seguinte.
O responsável pela validação da produção em cada grupo é o respetivo coordenador.
A produção do ano deve ser enviada como um documento produzido pelocoordenador.

O que continua igual

Continuar a usar o site do CISUC como fonte para a avaliação da produtividade.
Continuar a integrar as avaliações dos últimos três anos, mantendo os pesos de cadaano (10%, 30%, 60%).
A maioria dos critérios (ver secção ‘critérios e pontuações’) continuam a serconsiderados, sendo alteradas as pontuações.

O que não se considera

Não se consideram resultados de importância excecional, mas cuja probabilidade é muito baixa (e.g., Turing Award, bolsas ERC, prémios de carreira, etc.). Não é considerado pela sua natureza excecional e pelas dificuldades em estabelecer pontuação consistente com o valor da realização.
Projetos financiados (o que já acontecia anteriormente). A determinação dos grupos em conseguir financiamento já é muito forte e não precisa de incentivos extra neste momento.
Citações (o que já acontecia nos últimos anos). Apesar de ser muito fácil considerar as citações usando bases de dados disponíveis (desde que se aceite que as auto-citações são residuais e não alteram o impacto), considera-se ser suficiente o foco nas publicações em revistas e conferências de alto impacto.
Uma enorme quantidade de realizações (e tarefas associadas) que fazem parte inerente da condição de investigador do CISUC e de professor universitário. A título de exemplo referimos revisão de artigos, cargos na organização de eventos não contemplados na secção ‘critérios e pontuações’, arguições de teses de doutoramento em universidades estrangeiras ou portuguesas, avaliação de propostas de projetos, participação em júris nacionais ou internacionais, construção de protótipos e de tecnologia (a menos que seja patenteada), consultoria científica, cargos de gestão científica, etc.

Critérios e pontuações

Patentes

São considerados dois casos:

Autoria de patentes, propriedade da UC.
Autoria de patentes, propriedade de terceiros, i.e., patentes que resultem deinvestigação realizada no CISUC mas que sejam registadas em nome de outras entidades, desde que o registo tenha uma base contratual com a UC e desde que se respeite o Regulamento da Propriedade Intelectual da UC.

Livros

Não devem ser considerados livros com edição nacional.
Só devem ser considerados livros científicos.
Não considerar livros publicados por editoras classificadas como predatórias:https://beallslist.net/
Edição de proceedings não é considerada como edição de livros.

Artigos em Revista

Artigos em revista seguem a classificação da FCTUC que esteja em vigor no momento de classificação dos dados recolhidos, sendo contabilizadas as revistas A ou B.
Um artigo em revista é contabilizado considerando a data de primeira publicação (i.e., a primeira versão online) e não a data de aceitação ou publicação da versão final.
“Outras” revistas não devem contar, visto que se deve desencorajar publicações nas mesmas.
Não considerar revistas de editoras classificadas como predatórias: https://beallslist.net/

Artigos em Conferência

São considerados apenas os full papers (i.e., short papers, fast abstracts, posters não são considerados) em conferências selecionadas (A*, A, H5>30; B, H5>15; ou 2 sem ranking escolhidas até ao fecho da recolha dos dados) e publicados na track de research (e.g., artigos em companion proceedings como a ISSREW, ou DSN-W não contam)
Os artigos são classificados usando o valor mais favorável das seguintes duas fontes:
- O índice CORE mais recente no momento da classificação disponível em:http://portal.core.edu.au/conf-ranks/
- O índice H5 obtido no momento da classificação em: https://scholar.google.com/citations?view_op=top_venues
São considerados artigos premiados (e.g., best paper, distinguished papers) nas conferências selecionadas, mas não são considerados os que foram apenas nomeados para prémio (e não o conseguiram).
Artigos em conferência não devem ser contabilizados como capítulos de livros.

Organização de Eventos

É considerado o organizador do evento principal nas funções de General Chair ou PC- Chair nas conferências selecionadas (A*, A, H5>30; B, H5>15; ou as 2 sem ranking). Funções de organização de tracks dentro do evento principal (e.g, industry track, student forum, doctoral symposium), ou workshops, não são consideradas.

Edição de Revistas

Para o item Edição de Revistas são consideradas apenas as funções de Editor-in-Chief, Associate Editor e Guest Editor nas revistas da lista da FCTUC. De notar que os critérios não contemplam tarefas de Editor em conferências (que envolve identificação de reviewers e escrita de meta-reviews).
É considerado o momento em que encerra o call for papers para determinação do ano em que deve ser considerada a função.

Pontuação em itens partilhados

Quando há participação de grupos diferentes na Organização de Eventos, Autoria de Artigos ou PhDs concluídos, a contabilização é feita de forma simples, sendo calculada individualmente em cada grupo (i.e., sem divisão da pontuação), como fator de estímulo à colaboração entre grupos. Um resultado produzido por vários elementos de um só grupo é contabilizado uma só vez.