Critérios de avaliação

As propostas são pontuadas em três critérios. A EXCELÊNCIA pergunta se o conceito é sólido, ambicioso e está para lá do estado da arte, e se a metodologia o vai mesmo entregar. O IMPACTO pergunta quem fica melhor, quanto, e por que caminho. A IMPLEMENTAÇÃO pergunta se este consórcio, com este plano de trabalhos e este orçamento, consegue fazê-lo.

Cada um é pontuado de 0 a 5 com uma casa decimal, por isso 3.5 e 4.0 são notas claramente diferentes. Meio ponto distribuído por três critérios decide o financiamento num tópico disputado.

É no Impacto que a maioria das propostas perde. Os investigadores escrevem-no como a descrição do que vão publicar e de quem poderá interessar-se, quando o critério pede uma cadeia causal: este resultado, a chegar a estes utilizadores, por este caminho, a produzir esta mudança mensurável, com estas barreiras e estas formas de as ultrapassar. Um impacto modesto e credível pontua mais do que um impacto transformador e implausível.

É na Implementação que a maioria das propostas perde pontos de forma barata e desnecessária. Pacotes de trabalho sem dono claro, um diagrama de Gantt que ignora dependências, uma tabela de riscos que só lista riscos que não vão acontecer, um parceiro com 4 pessoas-mês e sem papel visível, cada um é uma dedução fácil para um avaliador que tem de justificar uma pontuação.

Os critérios têm peso igual numa ação de investigação ou de inovação, mas os empates desfazem-se de forma diferente: numa RIA decide a Excelência e numa IA decide o Impacto. Outros instrumentos alteram os pesos, e o ERC deita dois dos três fora, a sua avaliação é só excelência.