Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt
Cinco alumni e logotipo da rubrica

Esta foi a pergunta feita a cinco alumni da Ciências ULisboa durante o mês de maio. A primeira série de lives transmitidas em direto no Instagram também está disponível no canal YouTube da Faculdade. Estas primeiras cinco conversas descontraídas e enriquecedoras contaram com a presença de Eduardo Matos, Dário Hipólito, Ana Prata, Margarida Ribeiro e João Graça Gomes.

Planta de tomate

“O efeito da competição e simbiose na virulência de um parasita de plantas" - um projeto coordenado pelas cientistas Alison Duncan e Sara Magalhães - é um dos quatro projetos vencedores da 1.ª edição do Prémio Tremplin Mariano Gago.

Paisagem antártica na zona de estudo

As alterações climáticas amplificam as ondas de calor no continente antártico. Esta é a conclusão apresentada pelos cientistas Sergi González-Herrero, David Barriopedro, Ricardo M. Trigo, Joan Albert López-Bustins e Marc Oliva num artigo publicado na Communications Earth & Environment.

Alexandre M. Ramos, Francisco S. N. Lobo, Margarida D. Amaral e Sara C. Madeira

Alexandre M. Ramos, Francisco S. N. Lobo, Margarida D. Amaral e Sara C. Madeira são as personalidades da Faculdade distinguidas com os Prémios Científicos ULisboa/Caixa Geral de Depósitos (CGD) 2021. Os seus colegas Cláudio M. Gomes e Francisco Malta Romeiras também são agraciados nesta edição com menções honrosas. A cerimónia de atribuição destes prémios e menções honrosas acontece no próximo dia 28 de junho, no salão nobre da Reitoria da ULisboa.

Fernando Antunes, João Pires da Silva e Fadhil Musa

A Delox, a spin-off do Tec Labs – Centro de Inovação da Ciências ULisboa, acaba de anunciar a angariação de 750 mil euros de financiamento para desenvolver as etapas necessárias até ao início da comercialização do novo sistema de biodescontaminação.

Estrelas

Qual é o nosso lugar no Universo? A resposta a esta e tantas outras questões encontra-se no livro do astrofísico David Sobral, que em 2015 descobriu a galáxia CR7, a mais brilhante do Universo, e que está disponível nas livrarias a partir desta terça-feira e tem lançamento marcado para esta quinta-feira, 19 de maio, pelas 18h30, no campus da Faculdade, no edifício C6, anfiteatro 6.1.36.

grande auditório da Faculddade com pessoas

O livro “ESPRESSO: Uma Aventura no Deserto de Atacama”, da autoria dos cientistas Alexandre Cabral  e Nuno Cardoso Santos, foi apresentado ao público numa cerimónia ocorrida no grande auditório da Faculdade no passado dia 14 de maio. A obra bilingue e gratuita dá a conhecer a aventura tecnológica e humana da construção do ESPRESSO, com fotografias e memórias criadas no deserto mais seco no mundo, no Chile.

logotipo radar

Vigésima terceira rubrica Radar Tec Labs, dedicada às atividades do Centro de Inovação da Faculdade. A empresa em destaque é a NBI – Natural Business Intelligence.

pessoas observam a exposição

“De Lisboa para os Trópicos” é o nome da mais recente exposição da Ciências ULisboa, patente no átrio do edifício C6 desde 21 de abril e que vai estar em exibição até ao próximo dia 21 de junho. A mostra itinerante de fotografias assinala o 2.º aniversário do Colégio Tropical, uma unidade transversal da ULisboa.

Logotipo CHI 2022

A principal conferência internacional dedicada aos fatores humanos em sistemas computacionais distinguiu com a classificação de melhor apresentação 25 papers, destaque para o paper "Investigating the Tradeoffs of Everyday Text-Entry Collection Methods" sobre as vantagens e desvantagens de vários métodos de introdução de texto.

Margarida Amaral

Margarida Duarte Amaral dirigiu o Instituto de Biossistemas e Ciências Integrativas (BioISI) durante oito anos. Esta entrevista é sobre o passado, o presente e o futuro e como “o todo é maior do que a simples soma das suas partes”.

pin sobre palavra credit

Conceição Freitas, presidente do Conselho Científico da Ciências ULisboa, escreve sobre a prestigiante subida da ULisboa no Center for World University Rankings e no SCImago Institutions Rankings.

4 fotografias da envolução do terreno

Life Ribermine é o nome de um projeto ibérico responsável pelo restauro geomorfológico de minas em Portugal e Espanha. A  Associação Centro Ciência Viva do Lousal, da qual Ciências ULisboa é associada fundadora, é o único parceiro português do projeto.

Saco com logotipo da jobshop em destaque

A XII edição da Jobshop Ciências 2022 - a feira anual de emprego da Ciências ULisboa realiza-se nos próximos dias 11 e 12 de maio, no campus da Faculdade, no Campo Grande. Cerca de 80 entidades participam nesta edição e poderão contactar diretamente os estudantes, graduados e pós-graduados da Faculdade em stands, workshops e sessões de recrutamento. Além de empresas, também participam no acontecimento unidades de I&D da Faculdade.

Vários edificos - imagem com duas cores

Com foco na posição de Portugal em comparação com os restantes países europeus, a rubrica "Dados Contados" abordou temas como educação, desigualdade salarial, direitos LGBTQ+, impostos e imigração, entre outros, através de diversos indicadores estatísticos. Durante toda a produção, a autenticidade das fontes e a correta representação dos dados foram as duas principais preocupações.

duas pessoas a fazerem uma experiencia, e um monitor do Dia Aberto ao fundo a observar

Depois de duas edições com atividades online, o Dia Aberto em Ciências regressa este ano às atividades presenciais. A investigação científica e o ensino vão estar no centro da programação, abrangendo todas as áreas científicas. São mais de 70 as atividades disponíveis, entre visitas a laboratórios, atividades científicas, palestras, speed dating com cientistas, visitas ao campus e conversas rápidas sobre os cursos.

Henrique Leitão e Gracinda Gomes

Os cientistas da Faculdade foram eleitos sócios honorários da Sociedade Portuguesa de Matemática (SPM), juntamente com outras quatro personalidades, duas delas da ULisboa. Atualmente a SPM tem nove sócios honorários.

Jaime A. S. Coelho, professor convidado do Departamento de Química e Bioquímica e investigador do polo desta faculdade do Centro de Química Estrutural, foi distinguido pela Sociedade Portuguesa de Química (SPQ) com o Prémio para Melhor Químico Orgânico Jovem 2021.

Alunos na biblioteca do C8

Os artigos da revista Astronomy & Astrophysics (A&A), uma das principais revistas científicas de Astronomia do mundo, já são publicados em acesso aberto, através do subscribe-to-open (S2O), um modelo de ciência aberta por assinatura.

5 quitones

Artigo científico publicado no Journal of Paleontology dá conta da descoberta em Portugal de duas novas espécies de moluscos marinhos do Pliocénico (há cerca de 3,6 Ma) . O cientista Carlos Marques da Silva é um dos autores deste trabalho.

pessoa a ver uma fotografia da exposição

Crónica sobre a exposição “De Lisboa para os Trópicos”, da autoria de Rúben Oliveira e Teresa Vaz, curadores da mostra e que a partir de 21 de abril e até 21 de junho vai estar em exibição no átrio do edifício C6, no campus da Faculdade.

Cinco oradores e vários alunos a assistir

A Matemática une. O tema das comemorações do Dia Internacional da Matemática 2022 reflete o espírito de quem organiza atividades de divulgação científica, na Faculdade e fora dela, e também de quem participa. Fique a par das atividades do IDM, e conheça a opinião de estudantes e professores.

Logotipo das comemorações do Dia da Faculdade

Após dois anos a comemorar um aniversário de forma remota, em 2022, a comunidade da Faculdade volta a reunir-se no grande auditório da Ciências ULisboa para celebrar os 111 anos da instituição, criada por decreto a 19 de abril de 1911. A cerimónia comemorativa acontece no próximo dia 27 de abril, a partir das 14h00.

Logotipo da olimpíadas

A semifinal das Olimpíadas de Química Mais (OQ+) e a semifinal das Olimpíadas de Química (OQ) Júnior acontecem, respetivamente, nos próximos dias 30 de abril e 7 de maio, no campus da Faculdade. Professores e estudantes do Departamento de Química e Bioquímica colaboram em ambos os eventos.

Mercado de Santa Clara

"A sustentabilidade económica e escalabilidade dos sistemas agroecológicos é um objetivo difícil de atingir, mas sem dúvida necessário", escreve Inês Costa Pereira, da equipa da Caravana AgroEcológica, a propósito do 4.ª Dia Aberto de Produtores.

Páginas