terça-feira, 31 de outubro de 2023

IA generativa - A universidade do Porto continua a decepcionar e a universidade de Coimbra dá um salto em frente



Há quase um mês atrás, divulguei no post de título "IA generativa - A liderança da U.Aveiro e da U.Minho e o desempenho decepcionante da U.Porto e da U.Coimbra", acessível no link acima, resultados do desempenho de várias universidades Portuguesas em termos do número de publicações indexadas na Scopus. Um levantamento efectuado hoje, utilizando os mesmos termos de pesquisa, que foram utilizados nessa altura, revela que de lá para cá, já ocorreram mudanças significativas, nalgumas universidades. A universidade do Minho está agora mais próxima do 1º lugar, que é ocupado pela universidade de Aveiro e a universidade de Coimbra saiu do último lugar, ultrapassando várias universidades, mas está ainda assim bastante longe das universidades mais produtivas.  Ainda mais longe do topo está a universidade do Porto que continua  a evidenciar um desempenho decepcionante. 

Univ de Aveiro........0.90 publicações por centena de docentes doutorados
Univ. do Minho.......0.81
Univ. de Lisboa.......0.40 
Univ. Nova..............0.35
Univ. de Coimbra....0.31
UBI.........................0.31
Univ. do Porto.........0.28
Univ. de Évora........0.22

O desempenho de Portugal em termos internacionais é porém e ainda assim muito pouco brilhante, porque o nosso país possui menos publicações indexadas na área da IA generativa do que a Nigéria, o Paquistão e até do que o Camboja. Faço notar que por exemplo, a Nigéria, produz em termos científicos, a cada ano metade daquilo que é a produção indexada em todas as áreas científicas do que Portugal, porém nesta área particular já produziu o dobro. Mas a comparação mais chocante é com o Camboja, que em toda a sua história não conseguiu produzir uma ínfima parte daquilo que é a produção científica Portuguesa anual (34.000 publicações/ano), mas que agora consegue ter mais publicações na área da IA generativa do que o nosso país. 

É claro que em tese, sempre se podia alegar, que esta é uma área, que interessa especialmente a países pobres, porém não é manifestamente o caso, porque a universidade com a melhor produção indexada a nível mundial na área da IA generativa, é nada menos do que a riquíssima universidade de Stanford, com um orçamento anual superior a 7000 milhões de euros, cujo rácio publicações (indexadas nesta área) por centena de docentes doutorados é mais de 300% superior ao rácio da universidade de Aveiro e 1000% superior ao rácio da universidade do Porto. 

PS - Sobre a supracitada Universidade de Stanford, é importante divulgar, que recentemente investigadores daquela universidade, testaram o modelo ChatGPT-4, face ao conteúdo de milhares de comentários de revisores de artigos científicos, concluindo que ele apresenta um elevado desempenho, o que mostra que no futuro os investigadores poderão utilizar o feedback do ChatGPT-4  para melhorar os artigos antes de os enviarem para as revistas científicas. https://hai.stanford.edu/news/researchers-use-gpt-4-generate-feedback-scientific-manuscripts